lustre/ChangeLog

   1 2003-02-11  Phil Schwan  <phil@clusterfs.com>
   2         * version v0_5_20
   3         * bug fixes
   4          - Fix ldlm_lock_match on the MDS to avoid matching remote locks (592)
   5          - Fix fsfilt_extN_readpage() to read a full page of directory
   6            entries, or fake the remainder if PAGE_SIZE != blocksize (500)
   7          - Avoid extra mdc_getattr() in ll_intent_lock when possible (534, 604)
   8          - Fix imbalanced LOV object allocation and out-of-bound access (469)
   9          - Most intent operations were removed, in favour of a new RPC mode
  10            that does a single RPC to the server and bypasses most of the VFS
  11          - All LDLM resource ID arrays were removed in favour of ldlm_res_id
  12          - Aggressively cancel local locks on DLM servers
  13          - mds_reint_unlink sends EA to the client if it's the last nlink.
  14            client uses that EA to unlink OST objects.
  15          - mds_reint_{rename,unlink,link} were rewritten to take ordered locks
  16          - recursive symlinks were fixed (439)
  17          - fixed NULL deref in DEBUG_REQ
  18          - filter_update_lastobjid no longer calls sync, which annoyed extN
  19          - fixed multi-client small-writes to a single file problem (445)
  20          - fixed mtime updates during file writes (607)
  21          - fixed vector writes on obdfilter causing problems when ENOSPC (670)
  22          - fixed bug in obd_brw_read/write() (under guise of testing 367)
  23          - fixed Linux OST size reporting problem (444, 656)
  24          - OST now updates object mtime with writes or setattr (607, 619)
  25          - client verifies file size before zeroing page past EOF (445)
  26          - OST now writes last allocated objid to disk with allocation (108)
  27          - LOV on echo now works (409)
  28          * protocol changes
  29          - mds_reint_unlink sends a new buffer, with the EA included.  this
  30            buffer is only valid if body->valid & OBD_MD_FLEASIZE, which is only
  31            set if a regular file was being unlinked, and it was the last link
  32          - use PtlGet from the target for bulk writes (315)
  33          - OST now updates object mtime with writes or setattr (607, 619)
  34          - LDLM now has a grant-time callback to revalidate locked items, if
  35            necessary (604)
  36          - Many MDS operations were reorganized to combat race conditions
  37         * other changes
  38          - Merge b_intel branch (updated lprocfs code) - now at /proc/fs/lustre
  39          - configure check to avoid gcc version 2.96 20000731-2.96-98) (606)
  40
  41 2003-01-06  Andreas Dilger  <adilger@clusterfs.com>
  42         * version v0_5_19
  43         * bug fixes
  44          - Fully reactivate OST imports after reconnection (512, others)
  45          - Make sure client sees our -ENOTCONN from mds_handle (513 - partial)
  46          - More graceful error handling for truncating on dead OST (515)
  47          - Don't error out unless we're actually accessing dead stripes (474)
  48          - Fix garbage sizes when stripes are missing (410)
  49          - LRU counters were broken, causing constant lock purge (433, 432)
  50          - garbage on read from stripes with failed OSTs (441)
  51          - mark OSCs as active before reconnecting during recovery (438)
  52          - lov_enqueue and lov_cancel need to handle inactive OSTs (403)
  53          - lfind did not preserve OST order in output (443)
  54          - symlinks cause hung clients, incorrect data (439)
  55          - stop dereferencing request after dropping refcount (457)
  56          - don't LASSERT(spin_is_locked) on non-SMP (455)
  57          - fixes for many rename() bugs
  58          - fstat didn't correctly synchronize attributes (399)
  59          - server must handle lock cancellation during blocking AST prep (487)
  60          - bulk descriptors were free()d too soon (511)
  61          - fix paths in lconf, which would load incorrect modules (451, 507)
  62          - fix confusing lconf 'host not found' error message (386)
  63          - fix lock order deadlock on OST (O/R i_sem before journal ops, 478)
  64          - fix race condition in mdc_blocking_ast() for inode access (526)
  65          - fix lov_unpackmd() unpacking wrong number of stripes (537)
  66          - fix lov_set_osc_active() marking wrong OSC inactive (440)
  67          - fix bad lstripe lov_unpackmd() assertion (fix layering too) (527)
  68          - fix multiple writes of stripe MD to MDS (358, maybe 519)
  69          - fix lstripe in several ways (kernel side) (527)
  70          - fix request leak in ldlm_cli_enqueue (262)
  71          - incorrect OSC was marked inactive after OST failure
  72          - call mds_fs_cleanup before unmounting filesystem (524)
  73          - fix races between taking ns_lock and ldlm_lock_change_resource
  74          - fix races updating LOV export open file list
  75          - fix lov_enqueue error path, avoid decref-ing bad lock handle
  76          - fix recovery NULL deref in ldlm_cli_cancel_unused
  77          - fix some DLM races by using new hash table for lock handles (419)
  78          - permit the client to specify desired inodes, at replay
  79          - duplicate requests when we queue them for replay reintegration
  80          - fix last_rcvd offset calculation
  81          - sync after each recovered transaction, so we always make progress
  82          - never, not always, ERESTART requests without transnos
  83          - store the lov_desc in the MDS, so we don't depend on getlovinfo to
  84            set it
  85          - skip replay if the MDS says that the client is already connected
  86          - don't check for a recovery-enabled export to match lctl's UUID
  87          - don't INC_USE_COUNT for phantom exports
  88          - don't crash when cleaning up phantom exports (567)
  89          - don't double-finish or set replay data for errored mdc_open requests
  90          - abort requests when they time out, so we don't get old replies
  91          - send/receive replies for AST messages again
  92          - if the client says that it doesn't have the lock, cancel it on the
  93            server
  94          - if we timeout during I/O, don't try to cancel an in-use lock; instead
  95            mark it as destroyed, it will all work out when decref is called
  96          - fix module use counts (22, 581)
  97         * protocol changes
  98          - ASTs now expect a reply (server cancels lock on error reply)
  99
 100 2002-12-02  Andreas Dilger  <adilger@clusterfs.com>
 101         * version v0_5_18
 102         * bug fixes
 103           - fix many simultaneous client startup (392)
 104           - fix dentry->d_it clobbering
 105           - credentials weren't being shipped for readdir/getattr operations
 106           - remove invalid assertions triggered during some concurrent MD
 107             updates
 108           - proper Lustre versions added (336, 389)
 109           - fix memory leak for create error case (398)
 110           - fix LOV locking bug that would get cli/srv out of sync
 111           - fix echo client over LOV (409)
 112           - fix dbench 2, extN refcount problem (170, 258, 356, 418)
 113           - fix double-O_EXCL intent crash (424)
 114           - avoid sending multiple lock CANCELs (352)
 115         * Features
 116           - MDS can do multi-client recovery (modulo bugs in new code)
 117         * Documentation
 118           - many updates, edits, cleanups
 119
 120 2002-11-18  Phil Schwan  <phil@clusterfs.com>
 121         * version v0_5_17
 122         * bug fixes
 123           - fix null d_it dereference (346)
 124           - fix full OST/dbench hang (333)
 125           - fix permission problem with file removal (286)
 126           - fix removal of OSCs from LOV when they fail
 127           - fix NULL deref during bulk timeout (214)
 128           - fix problems related to multiple filesystems on one MDS (241)
 129           - fixed serious subtle metadata locking bugs
 130           - free locks on clients when inodes are removed due to memory
 131             pressure (201)
 132           - fix inode pointer in lock data (285)
 133           - partial support for multiple MDS on a single host (241)
 134           - data locks weren't cancelled at clear_inode time (290, 311)
 135           - intent locks could lead to unbounded lock growth (205)
 136           - added a maximum lock count, an LRU list, and a flusher
 137           - fix multiple rename (365)
 138           - properly abstracted the echo client
 139           - OSC locked 1 byte too many; fixed
 140           - rewrote brw callback code:
 141             - fixed recovery bugs related to LOVs (306)
 142             - fixed too-many-pages-in-one-write crash (191)
 143             - fixed (again) crash in sync_io_timeout (214)
 144             - probably fixed callback-related race (385)
 145         * protocol change
 146           - Add capability to MDS protocol
 147           - LDLM cancellations and callbacks on different portals
 148
 149 2002-10-28  Andreas Dilger  <adilger@clusterfs.com>
 150         * version v0_5_16
 151         * bug fixes:
 152           - limit client IOV size to PTL_MD_MAX_IOV (611336, 191)
 153           - defer open object destruction to close time (601981, 138)
 154           - open/close OST file handle in obdo (OBD_MD_FLHANDLE) (601981, 138)
 155           - move LDLM_ENQUEUE/CONVERT back to MDS portal (625069)
 156           - abstract ll_lookup2, fix ll_revalidate2 to use abstraction (256)
 157           - don't call obd_setattr in ll_file_release for destroyed objects
 158         * protocol change to lustre_msg: move |version| and add |flags|
 159         * protocol change to osc_punch: "start" in "o_size", "end" in "o_blocks"
 160         * lock replay: for LDLM_FL_REPLAY trust client to do right thing
 161         * added replay of create, unlink, link and rename operations during
 162           MDS failover; recovery should be much more robust now
 163         * remove failed OSCs from LOVs (only lov_create uses this so far)
 164         * the lustre-HOWTO was brought (more) up to date (582544)
 165
 166 2002-10-23  Phil Schwan  <phil@clusterfs.com>
 167         * version v0_5_15
 168         * bug fixes:
 169           - in-use dentries weren't being reused properly (617851)
 170           - prevent multiple LDLM setup (599178)
 171           - fix LOV size calculations for truncate (617853)
 172           - fix client handling of MDS intent errors (POSIX)
 173           - fix permission bug in lovstripe.c test (624321)
 174           - fix MDS thread deadlock - move LDLM handler to DLM portal (625069)
 175           - truncate past end of file could corrupt data
 176           - proper cleanup after timeouts, crashes, etc (592524, 550815)
 177           - a race in recovery could return ETIMEDOUT to apps (623947)
 178           - building outside the source directory was fixed
 179         * the lustre-HOWTO was brought (more) up to date (582544)
 180         * major progress was made on recovery functionality
 181
 182 2002-10-10  Phil Schwan  <phil@clusterfs.com>
 183         * version v0_5_14
 184         * bug fixes:
 185           - recovery deadlock fix
 186           - rm -rf causes LBUG fix (617817)
 187           - file open by multiple tasks fix (618962)
 188           - directory permissions bugs (602707 and 620007)
 189           - journal_stop fixed with locking (611313)
 190           - O_APPEND failures resolved (618273, perhaps 614459)
 191           - lconf PATH fix (619770)
 192           - IA64 build fix (621450)
 193           - RPC buffer sizes scale with amount of memory
 194
 195 2002-10-01  Phil Schwan  <phil@clusterfs.com>
 196         * version v0_5_13
 197         * bug fixes:
 198           - locks would be cancelled without throwing away data pages,
 199             resulting in inconsistent data (605627)
 200           - inode attributes were not always being refreshed (605627, 612449)
 201           - lconf now continues to cleanup after lctl reports an error
 202           - MDS now enforces user permissions (602707)
 203           - lprocfs cleanup fixed, but not yet enabled (614157)
 204           - fixed infinite server hang, should a client not respond to an AST
 205           - avoid going into recovery if user calls readlink() with a buffer
 206             that's too small (613941)
 207           - AST RPCs no longer require replies (614867) -- this may be changed
 208           - don't crash server if client sends an IOV that's too big (611336)
 209           - fixed lock conversion deadlock (611892)
 210           - fixed the following of symlinks (614622)
 211         * recovery: the server can remove locks from a client that dies, other
 212           clients can make progress
 213         * more extN patch fixes
 214         * compile-time configurable ptlrpc buffer allocations
 215         * documentation
 216           - collaborative read cache document
 217           - Lustre Lite Performance CDR document-in-progress
 218
 219 2002-09-20  Andreas Dilger  <adilger@clusterfs.com>
 220         * version v0_5_12
 221         * bug fix
 222           - fix typo in patch-2.4.18
 223
 224 2002-09-20  Andreas Dilger  <adilger@clusterfs.com>
 225         * version v0_5_11
 226         * bug fixes
 227           - clear ptlrpc request each time in handle_incoming_request()
 228           - unlink of files now destroys the object on the OST
 229
 230 2002-09-19  Peter Braam  <braam@clusterfs.com>
 231         * version 0_5_10
 232         * add hard link support
 233         * change obdfile creation method
 234         * kernel patch changed
 235
 236 2002-09-19  Peter Braam  <braam@clusterfs.com>
 237         * version 0_5_9
 238         * bug fix
 239           - stack overflow bug in extN fixed
 240
 241 2002-09-18  Andreas Dilger  <adilger@clusterfs.com>
 242         * version 0_5_8
 243         * documentation updates
 244           - add man pages for config tools
 245           - update tests/README to describe testing with new config tools
 246           - finish metadata API descriptions
 247         * bug fixes and cleanups
 248           - statfs workaround for 16TB limit
 249           - LOV stripe allocation improved, can stripe on subset of OSTs
 250           - LOV file size/IO offset was wrong for files > 4GB in size
 251           - object EA data was being dropped, caused files to be unreadable
 252           - memory overflow with non-LOV OST caused memory corruption
 253           - fixed regression tests to work with new config tools, obdfilter
 254           - fixed bug when directory size became larger than 1 block
 255           - fixed bug (for single client case) when PWD was deleted
 256           - invalidate local directory pages when doing intent-based ops
 257           - avoid LDLM oops when lock callback contained bad data
 258
 259 2002-09-09  Andreas Dilger  <adilger@clusterfs.com>
 260         * version 0_5_7
 261         * documentation updates
 262         * bug fixes and cleanups
 263           - configuration tools
 264           - LOV
 265           - imports/exports
 266           - 64-bit compile warnings
 267           - 64-bit internal statfs data
 268           - many more
 269         * test_brw on persistent OST devices
 270         * MDS recovery
 271         * lprocfs (disabled)
 272
 273 2002-09-04  Andreas Dilger  <adilger@clusterfs.com>
 274         * version 0_5_6
 275         * documentation updates
 276         * bug fixes and cleanups
 277         * configuration tools
 278
 279 2002-08-30  Peter J. Braam  <braam@clusterfs.com>
 280
 281         * version v0_5_5
 282         * many small fixes to 0_5_4
 283         * io/network handling
 284         * thinkos in MDS operations
 285
 286 2002-08-24  Peter J. Braam  <braam@clusterfs.com>
 287
 288         * version v0_5_4
 289         * crucial basic fixes to 0.5.3
 290         * IOR, Iozone work over Elan
 291         * EOF locks added
 292
 293 2002-08-07  Phil Schwan  <phil@clusterfs.com>
 294         * version 0_5_3, our first alpha
 295         * we use the new Portals iovs
 296         * documentation updates
 297         * bug fixes and cleanups
 298         * small changes in the DLM wire protocol
 299
 300 2002-07-25  Peter J. Braam  <braam@clusterfs.com>
 301         * version 0_5_1 with some initial stability,
 302         * locking on MD and file I/O.
 303         * documentation updates
 304         * several bug fixes since 0.5.0
 305         * small changes in wire protocol
 306
 307 2002-07-18  Phil Schwan  <phil@clusterfs.com>
 308         * version v0_4_5
 309         * delivered as Lustre Light Alpha
 310         * fixed a crash after handling invalid MDS requests
 311         * fixed directory pages for architectures with non-4k pages sizes
 312
 313 2002-07-11  Andreas Dilger  <adilger@clusterfs.com>
 314         * release version v0_4_4
 315         * Moves TCP acceptor to be on port 2432 (unused Coda port) instead
 316           of 1234.
 317         * Fixes a number of interruption problems with OST operations.
 318         * Update documentation for portals header changes
 319         * Move all wire protocol structs/defines to lustre_idl.h
 320         * Fixes symlink length bug.
 321         * Add tcpdump to repository.
 322
 323 2002-07-05  Andreas Dilger  <adilger@clusterfs.com>
 324         * release version v0_4_3
 325         * Fixes statfs for inodes on extN.
 326         * Fixes bug in runtests which would delete /etc/hosts.
 327         * Use 64-bit object IDs wherever possible (not into VFS though)
 328           Remove ost_get_info, which is unused by lustre, and out of date.
 329
 330 2002-07-03  Peter Braam  <braam@clusterfs.com>
 331         * release version v0_4_2   Fixes a lookup error (type not passed)
 332         * move forward to head of Portals
 333         * move forward to latest Lustre kernel
 334
 335 2002-06-25  Peter Braam  <braam@clusterfs.com>
 336         * release version v0_4_1.  Hopefully stable on single node use.