Whamcloud - gitweb
e2e84e3da7ba43b43197922f25e36b717d0e8b3b
[fs/lustre-release.git] / lustre / ChangeLog
1 tbd  Sun Microsystems, Inc.
2        * version 1.8.0
3        * Support for kernels:
4         2.6.16.54-0.2.5 (SLES 10),
5         2.6.18-53.1.14.el5 (RHEL 5),
6         2.6.22.14 vanilla (kernel.org).
7        * Client support for unpatched kernels:
8         (see http://wiki.lustre.org/index.php?title=Patchless_Client)
9         2.6.16 - 2.6.21 vanilla (kernel.org)
10        * Recommended e2fsprogs version: 1.40.7-sun3
11        * Note that reiserfs quotas are disabled on SLES 10 in this kernel.
12        * RHEL 4 and RHEL 5/SLES 10 clients behaves differently on 'cd' to a
13         removed cwd "./" (refer to Bugzilla 14399).
14
15 Severity   : major
16 Bugzilla   : 14134
17 Description: enable MGS and MDT services start separately
18 Details    : add a 'nomgs' option in mount.lustre to enable start a MDT with
19              a co-located MGS without starting the MGS, which is a complement
20              to 'nosvc' mount option.
21
22 Severity   : normal
23 Frequency  : always with o2ib 1.3 and sles10
24 Bugzilla   : 15870
25 Description: fix build with SLES10 and o2ib v3.
26 Details    : sles10 uses diffrent name for Module.symver file but configure
27              assume this file has same name on RHEL/SLES/vanila kernels.
28
29 Severity   : normal
30 Bugzilla   : 14835
31 Frequency  : after recovery
32 Description: precreate to many object's after del orphan.
33 Details    : del orphan st in oscc last_id == next_id and this triger growing
34              count of precreated objects. Set flag LOW to skip increase count
35              of precreated objects.
36
37 Severity   : normal
38 Bugzilla   : 15139
39 Frequency  : rare, on clear nid stats
40 Description: ASSERTION(client_stat->nid_exp_ref_count == 0)
41 Details    : when clean nid stats sometimes try destroy live entry,
42              and this produce panic in free.
43
44 Severity   : major
45 Bugzilla   : 15575
46 Description: Stack overflow during MDS log replay
47  ease stack pressure by using a thread dealing llog_process.
48
49 Severity   : normal
50 Bugzilla   : 15443
51 Description: wait until IO finished before start new when do lock cancel.
52 Details    : VM protocol want old IO finished before start new, in this case
53              need wait until PG_writeback is cleared until check dirty flag and
54              call writepages in lock cancel callback.
55
56 Severity   : enhancement
57 Bugzilla   : 14929
58 Description: using special macro for print time and cleanup in includes.
59
60 Severity   : normal
61 Bugzilla   : 12888
62 Description: mds_mfd_close() ASSERTION(rc == 0) 
63 Details    : In mds_mfd_close(), we need protect inode's writecount change 
64              within its orphan write semaphore to prevent possible races.
65
66 Severity   : minor
67 Bugzilla   : 14929
68 Description: Obsolete CURRENT_SECONDS and use cfs_time_current_sec() instead.
69
70 Severity   : minor
71 Bugzilla   : 14645
72  rare, on shutdown ost
73 Description: don't hit live lock with umount ost.
74 Details    : shrink_dcache_parent can be in long loop with destroy dentries,
75              use shrink_dcache_sb instead.
76
77 Severity   : minor
78 Bugzilla   : 14949
79 Description: don't panic with use echo client
80 Details    : echo client pass NULL as client nid pointer and this produce null
81              pointer dereference.
82
83 Severity   : normal
84 Bugzilla   : 15278
85 Description: fix build on ppc32
86 Details    : compile code with -m64 flag produce wrong object file for ppc32.
87
88 Severity   : normal
89 Bugzilla   : 12191
90 Description: add message levels for liblustreapi
91
92 Severity   : normal
93 Bugzilla   : 13380
94 Description: fix for occasional failure case of -ENOSPC in recovery-small tests 
95 Details    : Move the 'good_osts' check before the 'total_bavail' check.  This 
96              will result in an -EAGAIN and in the exit call path we call 
97              alloc_rr() which will with increasing aggressiveness attempt to 
98              aquire precreated objects on the minimum number of required OSCs.
99
100 Severity   : major
101 Bugzilla   : 14326
102 Description: Use old size assignment to avoid deadlock
103 Details    : This reverts the changes in bugs 2369 and bug 14138 that introduced
104              the scheduling while holding a spinlock.  We do not need locking 
105              for size in ll_update_inode() because size is only updated from 
106              the MDS for directories or files without objects, so there is no 
107              other place to do the update, and concurrent access to such inodes 
108              are protected by the inode lock.
109
110 Severity   : normal
111 Bugzilla   : 14746
112 Description: resolve "_IOWR redefined" build error on SLES10
113
114 Severity   : normal
115 Bugzilla   : 14763
116 Description: dump the memory debugging after all modules are unloaded to
117              suppress false negative in conf_sanity test 39
118
119 Severity   : enhancement
120 Bugzilla   : 15316
121 Description: build kernel-ib packages for OFED 1.3 in our release cycle
122
123 Severity   : minor
124 Bugzilla   : 13969
125 Frequency  : always
126 Description: fix SLES kernel versioning
127 Details    : the kernel version for our SLES 10 kernel did not include a "-"
128              before the "smp" at the end.  while this was not a problem in
129              general, it did mean that software trying to use the kernel
130              version to try to detect a vendor specific kernel would fail.
131              this was most evident by the OFED build scripts.
132
133 Severity   : normal
134 Bugzilla   : 14803
135 Description: Don't update lov_desc members until making sure they are valid
136 Details    : When updating lov_desc members via proc fs, need fix their
137              validities before doing the real update.
138
139 Severity   : normal
140 Bugzilla   : 15069
141 Description: don't put request into delay list while invalidate in flight.
142 Details    : ptlrpc_delay_request sometimes put in delay list while invalidate
143              import in flight. this produce timeout for invalidate and sometimes
144              can cause stale data.
145
146 Severity   : minor
147 Bugzilla   : 14856
148 Frequency  : on ppc only
149 Description: not convert ost objects for directory because it's not exist.
150 Details    : ll_dir_getstripe assume dirrectory has ost objects but this wrong.
151
152 Severity   : normal
153 Bugzilla   : 12652
154 Description: Add FMODE_EXEC file flag for SLES10 SP1 kernel.
155
156 Severity   : enhancement
157 Bugzilla   : 13397
158 Description: Update to support 2.6.22.14 vanilla kernel.
159
160 Severity   : normal
161 Bugzilla   : 14533
162 Frequency  : rare, on recovery
163 Description: read procfs can produce deadlock in some situation
164 Details    : Holding lprocfs lock which send rpc can produce block for destroy
165              obd objects and this also block reconnect with -EALREADY. This isn't
166              fix all lprocfs bugs - but make it rare.
167
168 Severity   : enhancement
169 Bugzilla   : 15152
170 Description: Update kernel to RHEL5 2.6.18-53.1.14.el5.
171
172 Severity   : major
173 Frequency  : frequent on X2 node
174 Bugzilla   : 15010
175 Description: mdc_set_open_replay_data LBUG
176 Details    : Set replay data for requests that are eligible for replay.
177
178 Severity   : normal
179 Bugzilla   : 14321
180 Description: lustre_mgs: operation 101 on unconnected MGS
181 Details    : When MGC is disconnected from MGS long enough, MGS will evict the
182              MGC, and late on MGC cannot successfully connect to MGS and a lot
183              of the error messages complaining that MGS is not connected.
184
185 Severity   : major
186 Bugzilla   : 15027
187 Frequency  : on network error
188 Description: panic with double free request if network error 
189 Details    : mdc_finish_enqueue is finish request if any network error ocuring,
190              but it's true only for synchronus enqueue, for async enqueue 
191              (via ptlrpcd) this incorrect and ptlrpcd want finish request
192              himself.
193
194 Severity   : enhancement
195 Bugzilla   : 11401
196 Description: client-side metadata stat-ahead during readdir(directory readahead)
197 Details    : perform client-side metadata stat-ahead when the client detects
198              readdir and sequential stat of dir entries therein
199
200 Severity   : major
201 Frequency  : on start mds
202 Bugzilla   : 14884
203 Description: Implement get_info(last_id) in obdfilter.
204
205 Severity   : normal
206 Frequency  : occasional
207 Bugzilla   : 13537
208 Description: Correctly check stale fid, not start epoch if ost not support SOM
209 Details    : open with flag O_CREATE need set old fid in op_fid3 because op_fid2
210              overwrited with new generated fid, but mds can anwer with one of these
211              two fids and both is not stale. setattr incorectly start epoch and
212              assume will be called done_writeting, but without SOM done_writing
213              never called.
214
215 Severity   : major
216 Frequency  : rare, depends on device drivers and load
217 Bugzilla   : 14529
218 Description: MDS or OSS nodes crash due to stack overflow
219 Details    : Code changes in 1.8.0 increased the stack usage of some functions.
220              In some cases, in conjunction with device drivers that use a lot
221              of stack the MDS (or possibly OSS) service threads could overflow
222              the stack.  One change which was identified to consume additional
223              stack has been reworked to avoid the extra stack usage.
224
225 Severity   : normal
226 Frequency  : occasional
227 Bugzilla   : 13730
228 Description: Do not fail import if osc_interpret_create gets -EAGAIN
229 Details    : If osc_interpret_create got -EAGAIN it immediately exits and
230              wakeup oscc_waitq.  After wakeup oscc_wait_for_objects call
231              oscc_has_objects and see OSC has no objests and call
232              oscc_internal_create to resend create request.
233
234 Severity   : enhancement
235 Bugzilla   : 14858
236 Description: Update to SLES10 SP1 latest kernel-2.6.16.54-0.2.5.
237
238 Severity   : enhancement
239 Bugzilla   : 14876
240 Description: Update to RHEL5 latest kernel-2.6.18-53.1.13.el5.
241
242 Severity   : normal
243 Frequency  : very rare
244 Bugzilla   : 3462
245 Description: Fix replay if there is an un-replied request and open
246 Details    : In some cases, older replay request will revert the
247              mcd->mcd_last_xid on MDS which is used to record the client's
248              latest sent request.
249
250 Severity   : enhancement
251 Bugzilla   : 14720
252 Description: Update to RHEL5 latest kernel-2.6.18-53.1.6.el5.
253
254 Severity   : enhancement
255 Bugzilla   : 14482
256 Description: Add rhel5 support to HEAD.
257
258 Serverity  : enhancement
259 Bugzilla   : 14793
260 Description: Update RHEL4 kernel to 2.6.9-67.0.4.
261
262 Severity   : minor
263 Frequency  : rare
264 Bugzilla   : 13196
265 Description: Don't allow skipping OSTs if index has been specified.
266 Details    : Don't allow skipping OSTs if index has been specified, make locking
267              in internal create lots better.
268
269 Severity   : normal
270 Bugzilla   : 12228
271 Description: LBUG in ptlrpc_check_set() bad phase ebc0de00
272 Details    : access to bitfield in structure is always rounded to long
273              and this produce problem with not atomic change any bit.
274
275 Severity   : normal
276 Bugzilla   : 13647
277 Description: Lustre make rpms failed.
278 Details    : Remove ldiskfs spec file to avoids rpmbuild be confused when
279              builds Lustre rpms from tarball.
280
281 Severity   : normal
282 Frequency  : rare on shutdown ost
283 Bugzilla   : 14608
284 Description: If llog cancel was not send before clean_exports phase, this can
285              produce deadlock in llog code.
286 Details    : If llog thread has last reference to obd and call class_import_put
287              this produce deadlock because llog_cleanup_commit_master wait when
288              last llog_commit_thread exited, but this never success because was
289              called from llog_commit_thread.
290
291 Severity   : normal
292 Bugzilla   : 9977
293 Description: allow userland application know is lost one of stripes.
294 Details    : fill lvb_blocks with error code on ost and return it to
295              application if error flag found.
296
297 Severity   : normal
298 Bugzilla   : 14607
299 Description: NULL lov_tgts causing MDS oops
300 Details    : more safe checks for NULL lov_tgts for avoid oops.
301
302 Severity   : enhancement
303 Bugzilla   : 14531
304 Description: Update to RHEL4 latest kernel-2.6.9-67.0.1.EL.
305
306 Severity   : normal
307 Bugzilla   : 13375
308 Descriptoin: make lov_create() will not stuck in obd_statfs_rqset()
309 Details    : If an OST is down the MDS will hang indefinitely in
310              obd_statfs_rqset() waiting for the statfs data. While for
311              MDS QOS usage of statfs, it should not stuck in waiting.
312
313 Severity   : enhancement
314 Bugzilla   : 11842
315 Description: remote_acl support
316 Details    : Support ACL-based permission check for remote user.
317              Support setfacl/getfacl for remote user with the utils
318              "lfs {l,r}{s,g}etfacl" which follow the same parameter format as
319              the system "{s,g}etfacl" utils.
320
321 Severity   : enhancement
322 Bugzilla   : 14288
323 Description: Update to RHEL4 U6 kernel-2.6.9-67.EL.
324
325 Severity   : enhancement
326 Bugzilla   : 14368
327 Description: Update to RHEL5 latest kernel-2.6.18-53.1.4.el5.
328
329 Severity   : normal
330 Bugzilla   : 14136
331 Description: make mgs_setparam() handle fsname containing dash
332 Details    : fsname containing a dash does not work with lctl conf_param
333
334 Severity   : enhancement
335 Bugzilla   : 14388
336 Description: Update to SLES10 SP1 latest kernel-2.6.16.54-0.2.3.
337
338 Severity   : enhancement
339 Bugzilla   : 14289
340 Description: Update to RHEL5 Update-1 kernel 2.6.18-53.el5.
341
342 Severity   : major
343 Bugzilla   : 14260
344 Frequency  : rare, at shutdown
345 Description: access already free / zero obd_namespace.
346 Details    : if client_disconnect_export was called without force flag set,
347              and exist connect request in flight, this can produce access to
348              NULL pointer (or already free pointer) when connect_interpret
349              store ocd flags in obd_namespace.
350
351 Severity   : minor
352 Bugzilla   : 14418
353 Frequency  : only at startup
354 Description: not alloc memory with spinlock held.
355 Details    : allocation memory with GFP_KERNEL can produce sleep deadlock,
356              if any spinlock held.
357
358 Severity   : enhancement
359 Bugzilla   : 12211
360 Description: make lustre randomly fail allocating memory
361 Details    : Make lustre randomly failed allocating memory for testing purpose.
362
363 Severity   : enhancement
364 Bugzilla   : 12702
365 Description: lost problems with lov objid file
366 Details    : Fixes some scability and access to not inited memory problems
367              in work with lov objdid file.
368
369 Severity   : major
370 Frequency  : always
371 Bugzilla   : 14270
372 Description: lfs find does not continue on file error
373 Details    : Continue other files processing when a file/dir is absent.
374
375 Severity   : normal
376 Bugzilla   : 11791
377 Description: Inconsistent usage of lustre_pack_reply()
378 Details    : Standardize the usage of lustre_pack_reply() such that it
379              always generate a CERROR on failure.
380
381 Severity   : major
382 Frequency  : occasional
383 Bugzilla   : 13917
384 Description: MDS hang or stay in waiting lock
385 Details    : If client receive lock with CBPENDING flag ldlm need send lock
386              cancel as separate rpc, to avoid situation when cancel request
387              can't processed due all i/o threads stay in wait lock.
388
389 Severity   : normal
390 Bugzilla   : 13969
391 Description: Update to RHEL5 kernel 2.6.18-8.1.15.el5.
392
393 Severity   : normal
394 Bugzilla   : 13874
395 Description: Update to SLES10 SP1 kernel 2.6.16.53-0.16
396
397 Severity   : normal
398 Bugzilla   : 13889
399 Description: Update to SLES9 kernel-2.6.5-7.287.3.
400
401 Severity   : normal
402 Bugzilla   : 14041
403 Description: Update to RHEL4 latest kernel.
404
405 Severity   : enhancement
406 Bugzilla   : 13690
407 Description: Build SLES10 patchless client fails
408 Details    : The configure was broken by run ./configure with
409              --with-linux-obj=.... argument for patchless client. When the
410              configure use --with-linux-obj, the LINUXINCLUDE= -Iinclude
411              can't search header adequately. Use absolute path such as
412              -I($LINUX)/include instead.
413
414 Severity   : normal
415 Bugzilla   : 13888
416 Description: interrupt oig_wait produce painc on resend.
417 Details    : brw_redo_request can be used for resend requests from ptlrpcd and
418              private set, and this produce situation when rq_ptlrpcd_data not
419              copyed to new allocated request and triggered LBUG on assert
420              req->rq_ptlrpcd_data != NULL. But this member used only for wakeup
421              ptlrpcd set if request is changed and can be safety changed to use
422              rq_set directly.
423
424 Severity   : normal
425 Bugzilla   : 13497
426 Description: LASSERT_{REQ,REP}SWAB macros are buggy
427 Details    : If SWAB_PARANOIA is disabled, the LASSERT_REQSWAB and
428              LASSERT_REPSWAB macros become no-ops, which is incorrect. Drop
429              these macros and replace them with their difinitions instead.
430
431 Severity   : normal
432 Bugzilla   : 13521
433 Description: Update kernel patches for SLES10 2.6.16.53-0.8.
434 Details    : Update which_patch & target file for SLES10 latest kernel.
435
436 Bugzilla   : 12411
437 Description: Remove client patches from SLES 10 kernel.
438 Details    : This causes SLES 10 clients to behave as patchless clients
439              even on a Lustre-patched (server) kernel.
440
441 Severity   : enhancement
442 Bugzilla   : 2262
443 Description: self-adjustable client's lru lists
444 Details    : use adaptive algorithm for managing client cached locks lru
445              lists according to current server load, other client's work
446              pattern, memory activities, etc. Both, server and client
447              side namespaces provide number of proc tunables for controlling
448              things
449
450 Severity   : enhancement
451 Bugzilla   : 13641
452 Description: light-weight GSS support
453 Details    : Support krb5n and krb5a mode, which keep Kerberos 5 authentication
454              and reduce performance overhead.
455
456 Severity   : enhancement
457 Bugzilla   : 11832
458 Description: Linux keyring support
459 Details    : Support using service of Linux keyring for Lustre GSS internal
460              context refresh/cache mechanism.
461
462 Severity   : normal
463 Bugzilla   : 12186
464 Description: Fix errors in lfs documentation
465 Details    : Fixes man pages
466
467 Severity   : normal
468 Bugzilla   : 12606
469 Description: don't use GFP_* in generic Lustre code.
470 Details    : Use cfs_alloc_* functions and CFS_* flags for code portability.
471
472 Severity   : normal
473 Bugzilla   : 12333
474 Description: obdclass is limited by single OBD_ALLOC(idarray)
475 Details    : replace OBD_ALLOC/OBD_FREE with OBD_VMALLOC/OBD_VFREE
476
477 Severity   : normal
478 Bugzilla   : 13006
479 Description: warnings with build patchless client with vanila 2.6.19 and up
480 Details    : change old ctl_table style and replace ctl_table/ctl_table_header
481              with cfs_sysctl_table_t/cfs_sysctl_table_header_t
482
483 Severity   : normal
484 Bugzilla   : 13177
485 Frequency  : Only for SLES
486 Description: sanity_quota fail test_1
487 Details    : There are multiple occurences of $TSTUSR in SLES's /etc/group
488              file, which makes TSTID[2] inunique.
489
490 Severity   : normal
491 Bugzilla   : 13249
492 Frequency  : Only for SLES9
493 Description: Kernel patches for SLES9 2.6.5-7.286 kernel
494 Details    : Update target/ChangeLog/which_patch .
495
496 Severity   : normal
497 Bugzilla   : 13170
498 Frequency  : Only for test_10 in sanity-quota.sh
499 Description: a bug in quota test code
500 Details    : checking a test flag in a wrong place
501
502 Severity   : normal
503 Bugzilla   : 13171
504 Frequency  : Only for test_13 in sanity-quota.sh
505 Description: a bug in quota test script
506 Details    : shouldn't check overfull allocated quota
507
508 Severity   : normal
509 Bugzilla   : 12955
510 Description: jbd statistics
511 Details    : Port older jbd statistics patch for sles10
512
513 Severity   : enhancement
514 Bugzilla   : 11721
515 Description: Add printing inode info into message about error in writepage.
516
517 Severity   : normal
518 Bugzilla   : 11974
519 Frequency  : Rare
520 Description: reply_lock_interpret crash due to race with it and lock cancel.
521 Details    : Do not replay locks that are being cancelled. Do not reference
522              locks by their address during replay, just by their handle.
523
524 Severity   : normal
525 Bugzilla   : 13103
526 Frequency  : When flocks are used.
527 Description: assertion failure in ldlm_cli_enquque_fini for non NULL lock.
528 Details    : Flock locks might destroy just granted lock if it could be merged
529              with another existing flock, this is done in completion handler,
530              so teach ldlm_cli_enquque_fini that this is a valid case for
531              flock locks.
532
533 Severity   : minor
534 Bugzilla   : 13276
535 Frequency  : rare
536 Description: Oops in read and write path when failing to allocate lock.
537 Details    : Check if lock allocation failed and return error back.
538
539 Severity   : normal 
540 Bugzilla   : 11679
541 Description: lstripe command fails for valid OST index
542 Details    : The stripe offset is compared to lov->desc.ld_tgt_count
543              instead of lov->desc.ld_active_tgt_count.
544
545 Severity   : normal
546 Bugzilla   : 12584
547 Description: sanity.sh failed test 103
548 Details    : RHEL mis-interpret setfacl "-X" param, so we won't test setfacl
549              with param "-X".
550
551 Severity   : normal
552 Bugzilla   : 12743
553 Description: df doesn't work properly if diskfs blocksize != 4K
554 Details    : Choose biggest blocksize of OST's as the LOV's blocksize.
555
556 Severity   : normal
557 Bugzilla   : 12836
558 Description: lfs find on -1 stripe looping in lsm_lmm_verify_common()
559 Details    : Avoid lov_verify_lmm_common() on directory with -1 stripe count.
560
561 Severity   : major
562 Bugzilla   : 12932
563 Description: obd_health_check_timeout too short
564 Details    : set obd_health_check_timeout as 1.5x of obd_timeout
565
566 Severity   : normal
567 Bugzilla   : 12192
568 Description: llapi_file_create() does not allow some changes
569 Details    : add llapi_file_open() that allows specifying the mode and
570              open flags, and also returns an open file handle.
571
572 Severity   : normal
573 Bugzilla   : 11248
574 Description: merge and cleanup kernel patches.
575 Details    : Remove mnt_lustre_list in vfs_intent-2.6-rhel4.patch.
576
577 Severity   : normal
578 Bugzilla   : 10657
579 Description: Add journal checksum support.(Kernel part)
580 Details    : The journal checksum feature adds two new flags i.e
581              JBD2_FEATURE_INCOMPAT_ASYNC_COMMIT and
582              JBD2_FEATURE_COMPAT_CHECKSUM. JBD2_FEATURE_CHECKSUM flag
583              indicates that the commit block contains the checksum for
584              the blocks described by the descriptor blocks. Now commit
585              record can be sent to disk without waiting for descriptor
586              blocks to be written to disk. This behavior is controlled
587              using JBD2_FEATURE_ASYNC_COMMIT flag.
588
589 Severity   : minor
590 Bugzilla   : 12446
591 Description: OSS needs mutliple precreate threads
592 Details    : Add ability to start more than one create thread per OSS.
593
594 Severity   : normal
595 Bugzilla   : 13362
596 Description: Sanity.sh test_65k failed: setstripe should have succeeded
597 Details    : execute lfs setstripe on client
598
599 Severity   : major
600 Bugzilla   : 12223
601 Description: mds_obd_create error creating tmp object
602 Details    : When the user sets quota on root, llog will be affected and can't
603              create files and write files.
604
605 Severity   : normal
606 Frequency  : Always on ia64 patchless client, and possibly others.
607 Bugzilla   : 12826
608 Description: Add EXPORT_SYMBOL check for node_to_cpumask symbol.
609 Details    : This allows the patchless client to be loaded on architectures
610              without this export.
611
612 Severity   : normal
613 Bugzilla   : 13039
614 Description: RedHat Update kernel for RHEL5
615 Details    : Add the kernel config file for RHEL5.
616
617 Severity   : normal
618 Bugzilla   : 13039
619 Description: RedHat Update kernel for RHEL5
620 Details    : Modify the kernel config file more closer RHEL5.
621
622 Severity   : normal
623 Bugzilla   : 13360
624 Description: Build failure against Centos5 (RHEL5)
625 Details    : Define PAGE_SIZE when it isn't present.
626
627 Severity   : minor
628 Bugzilla   : 13363
629 Description: test_7 on sanity-quota.sh can't be used on separate machines
630 Details    : add facet to handle it
631
632 Severity   : normal
633 Bugzilla   : 13030
634 Description: "ll_intent_file_open()) lock enqueue: err: -13" with nfs
635 Details    : with NFS, the anon dentry's parent was set to itself in
636              d_alloc_anon(), so in MDS, we use rec->ur_fid1 to find the
637              corresponding dentry other than use rec->ur_name.
638
639 Severity   : enhancement
640 Bugzilla   : 12786
641 Description: lfs setstripe enhancement
642 Details    : Make lfs setstripe understand 'k', 'm' and 'g' for stripe size.
643
644 Severity   : normal
645 Bugzilla   : 12398
646 Description: enable data checksumming by default
647 Details    : enable checksum by default, allow --disable-checksum
648              configure option and "-o nochecksum" mount option.  Checksums
649              can also be disabled at runtime via $LPROC/osc/*/checksum_pages.
650
651 Severity   : normal
652 Bugzilla   : 11802
653 Description: lustre support for RHEL5
654 Details    : Add support for RHEL5.
655
656 Severity   : normal
657 Bugzilla   : 12459
658 Description: Client eviction due to failover config
659 Details    : after a connection loss, the lustre client should attempt to
660              reconnect to the last active server first before trying the
661              other potential connections.
662
663 Severity   : minor
664 Bugzilla   : 12588
665 Description: when mds and osts use different quota unit(32bit and 64bit),
666              quota will be released repeatly.
667 Details    : void sending multiple quota reqs to mds, which will keep the
668              status between the reqs.
669
670 Severity   : normal
671 Bugzilla   : 13125
672 Description: osts not allocated evenly to files
673 Details    : change the condition to increase offset_idx
674
675 Severity   : critical
676 Frequency  : Always for filesystems larger than 2TB on 32-bit systems.
677 Bugzilla   : 13547
678 Description: Data corruption for OSTs that are formatted larger than 2TB
679              on 32-bit servers.
680 Details    : When generating the bio request for lustre file writes the
681              sector number would overflow a temporary variable before being
682              used for the IO.  The data reads correctly from Lustre (which
683              will overflow in a similar manner) but other file data or
684              filesystem metadata may be corrupted in some cases.
685
686 Severity   : normal
687 Bugzilla   : 11230
688 Description: Tune the kernel for good SCSI performance.
689 Details    : Set the value of /sys/block/{dev}/queue/max_sectors_kb
690              to the value of /sys/block/{dev}/queue/max_hw_sectors_kb
691              in mount_lustre.
692
693 Severity   : cleanup
694 Bugzilla   : 13532
695 Description: rewrite ext2-derived code in obdclass/uuid.c
696 Details    : rewrite inherited code (uuid parsing code from ext2 utils)
697              from scratch preserving functionality.
698
699 Severity   : normal
700 Bugzilla   : 13600
701 Description: "lfs find -obd UUID" prints directories
702 Details    : "lfs find -obd UUID" will return all directory names instead
703              of just file names. It is incorrect because the directories
704              do not reside on the OSTs.
705
706 Severity   : minor
707 Bugzilla   : 2369
708 Description: use i_size_read and i_size_write in 2.6 port
709 Details    : replace inode->i_size access with i_size_read/write()
710
711 Severity   : normal
712 Frequency  : when removing large files
713 Bugzilla   : 13181
714 Description: scheduling issue during removal of large Lustre files
715 Details    : Don't take the BKL in fsfilt_ext3_setattr() for 2.6 kernels.
716              It causes scheduling issues when removing large files (17TB in the
717              present case).
718
719 Severity   : normal
720 Frequency  : only with liblustre clients on XT3
721 Bugzilla   : 12418
722 Description: evictions taking too long
723 Details    : allow llrd to evict clients directly on OSTs
724
725 Severity   : normal
726 Frequency  : only on ppc
727 Bugzilla   : 12234
728 Description: /proc/fs/lustre/devices broken on ppc
729 Details    : The patch as applied to 1.6.2 doesn't look correct for all arches.
730              We should make sure the type of 'index' is loff_t and then cast
731              explicitly as needed below.  Do not assign an explicitly cast
732              loff_t to an int.
733
734 Severity   : normal
735 Frequency  : only for rhel5
736 Bugzilla   : 13616
737 Description: Kernel patches update for RHEL5 2.6.18-8.1.10.el5.
738 Details    : Modify the target file & which_kernel.
739
740 Severity   : enhancement
741 Bugzilla   : 10786
742 Description: omit set fsid for export NFS
743 Details    : fix set/restore device id for avoid EMFILE error and mark lustre fs
744              as FS_REQUIRES_DEV for avoid problems with generate fsid.
745
746 Severity   : normal
747 Bugzilla   : 13304
748 Frequency  : Always, for kernels after 2.6.16
749 Description: Fix warning idr_remove called for id=.. which is not allocated.
750 Details    : Last kernels save old s_dev before kill super and not allow
751              to restore from callback - restore it before call kill_anon_super.
752
753 Severity   : minor
754 Bugzilla   : 12948
755 Description: buffer overruns could theoretically occur
756 Details    : llapi_semantic_traverse() modifies the "path" argument by
757              appending values to the end of the origin string, and a
758              overrun may occur. Adding buffer overrun check in liblustreapi.
759
760 Severity   : normal
761 Bugzilla   : 13334
762 Description: Fix error on 'ls .' at the top of the Lustre mount.
763 Details    : Don't revalidate dentry if it is a root dentry.
764
765 Severity   : normal
766 Bugzilla   : 13518
767 Description: Kernel patches update for RHEL4 2.6.9-55.0.6.
768 Details    : Modify vm-tunables-rhel4.patch.
769
770 Severity   : normal
771 Bugzilla   : 13452
772 Description: Kernel config for 2.6.18-vanilla.
773 Details    : Modify targets/2.6-vanilla.target.in.
774              Add config file kernel-2.6.18-2.6-vanilla-i686.config.
775              Add config file kernel-2.6.18-2.6-vanilla-i686-smp.config.
776              Add config file kernel-2.6.18-2.6-vanilla-x86_64.config.
777              Add config file kernel-2.6.18-2.6-vanilla-x86_64-smp.config.
778
779 Severity   : major
780 Bugzilla   : 11710
781 Description: improve handling recoverable errors
782 Details    : if request processig with error which can be recoverable on server
783              request should be resend, otherwise page released from cache and
784              marked as error.
785
786 Severity   : critical
787 Bugzilla   : 13751
788 Description: Kernel patches update for RHEL5 2.6.18-8.1.14.el5.
789 Details    : Modify target file & which_patch.
790              A flaw was found in the IA32 system call emulation provided
791              on AMD64 and Intel 64 platforms. An improperly validated 64-bit
792              value could be stored in the %RAX register, which could trigger an
793              out-of-bounds system call table access. An untrusted local user
794              could exploit this flaw to run code in the kernel
795              (ie a root privilege escalation). (CVE-2007-4573).
796
797 Severity   : major
798 Bugzilla   : 13093
799 Description: O_DIRECT bypasses client statistics.
800 Details    : When running with O_DIRECT I/O, neither the client rpc_stats nor
801              read_ahead_stats were updated. copied the stats section from
802              osc_send_oap_rpc() into async_internal().
803
804 Severity   : normal
805 Bugzilla   : 13454
806 Description: Add jbd statistics patch for RHEL5 and 2.6.18-vanilla
807
808 Severity   : minor
809 Bugzilla   : 13732
810 Description: change order of libsysio includes
811 Details    : '#include sysio.h' should always come before '#include xtio.h'
812
813 Severity   : normal
814 Bugzilla   : 11673
815 Description: handle "serious error: objid * already exists" more gracefully
816 Details    : If LAST_ID value on disk is smaller than the objects existing in
817              the O/0/d* directories, it indicates disk corruption and causes an
818              LBUG(). If the object is 0-length, then we should use the existing
819              object. This will help to avoid a full fsck in most cases.
820
821 Severity   : enhancement
822 Bugzilla   : 13207
823 Description: adapt the lustre_config script to support the upgrade case
824 Details    : Add "-u" option for lustre_config script to support upgrading 1.4
825              server targets to 1.6 in parallel.
826
827 Severity   : normal
828 Bugzilla   : 13570
829 Description: To avoid grant space > avaible space when the disk is almost
830              full. Without this patch you might see the error "grant XXXX >
831              available" or some LBUG about grant, when the disk is almost 
832              full.
833 Details    : In filter_check_grant, for non_grant cache write, we should
834              check the left space by  if (*left > ungranted + bytes), instead
835              of (*left > ungranted), because only we are sure the left space 
836              is enough for another "bytes", then the ungrant space should be
837              increase. In client, we should update cl_avail_grant only there
838              is OBD_MD_FLGRANT in the reply.
839
840 Severity   : critical
841 Bugzilla   : 13748
842 Description: Update RHEL 4 kernel to fix local root privilege escalation.
843 Details    : Update to the latest RHEL 4 kernel to fix the vulnerability
844              described in CVE-2007-4573.  This problem could allow untrusted
845              local users to gain root access.
846
847 Severity   : normal
848 Frequency  : when using O_DIRECT and quotas
849 Bugzilla   : 13930
850 Description: Incorrect file ownership on O_DIRECT output files
851 Details    : block usage reported by 'lfs quota' does not take into account
852              files that have been written with O_DIRECT.
853
854 Severity   : normal
855 Frequency  : always
856 Bugzilla   : 13976
857 Description: touch file failed when fs is not full
858 Details    : OST in recovery should not be discarded by MDS in alloc_qos(),
859              otherwise we can get ENOSP while fs is not full.
860
861 Severity   : normal
862 Bugzilla   : 11301
863 Description: parallel lock callbacks
864 Details    : Instead of sending blocking and completion callbacks as separated
865              requests, adding them to a set and sending in parallel.
866
867 Severity   : normal
868 Frequency  : only for Cray XT3
869 Bugzilla   : 12829/13455
870 Description: Changing primary group doesn't change the group lustre assigns to
871              a file
872 Details    : When CRAY_XT3 is defined, the fsgid supplied by the client is
873              overridden with the primary group provided by the group upcall,
874              whereas the supplied fsgid can be trusted if it is in the list of
875              supplementary groups returned by the group upcall.
876
877 Severity   : enhancement
878 Bugzilla   : 14398
879 Description: Allow masking D_WARNING, D_ERROR messages from console
880 Details    : Console messages can now be disabled via lnet.printk.
881
882 Severity   : normal
883 Bugzilla   : 14614
884 Description: User code with malformed file open parameter crashes client node 
885 Details    : Before packing join_file req, all the related reference should be
886              checked carefully in case some malformed flags cause fake
887              join_file req on client.
888
889 Severity   : normal
890 Bugzilla   : 14225
891 Description: LDLM_ENQUEUE races with LDLM_CP_CALLBACK
892 Details    : ldlm_completion_ast() assumes that a lock is granted when the req
893              mode is equal to the granted mode. However, it should also check
894              that LDLM_FL_CP_REQD is not set.
895
896 Severity   : normal
897 Bugzilla   : 14360
898 Description: Heavy nfs access might result in deadlocks
899 Details    : After ELC code landed, it is now improper to enqueue any mds
900              locks under och_sem, because enqueue might want to decide to
901              cancel open locks for same inode we are holding och_sem for.
902
903 Severity   : normal
904 Bugzilla   : 13843
905 Description: Client eviction while running blogbench
906 Details    : A lot of unlink operations with concurrent I/O can lead to a
907              deadlock causing evictions. To address the problem, the number of
908              oustanding OST_DESTROY requests is now throttled to
909              max_rpcs_in_flight per OSC and LDLM_FL_DISCARD_DATA blocking
910              callbacks are processed in priority.
911
912 Severity   : normal
913 Bugzilla   : 13829
914 Description: enable ACLs on MDS by default
915 Details    : ACLs must be enabled on MDS by default.
916
917 Severity   : normal
918 Frequency  : PPC/PPC64 only
919 Bugzilla   : 14845
920 Description: conflicts between asm-ppc64/types.h and lustre_types.h
921 Details    : fix duplicated definitions between asm-ppc64/types.h and
922              lustre_types.h on PPC.
923
924 Severity   : normal
925 Frequency  : PPC/PPC64 only
926 Bugzilla   : 14844
927 Description: asm-ppc/segment.h does not exist
928 Details    : fix compile issue on PPC.
929
930 Severity   : normal
931 Bugzilla   : 14864
932 Description: better handle error messages in extents code
933
934 Severity   : normal
935 Frequency  : RHEL4 only
936 Bugzilla   : 14618
937 Description: mkfs is very slow on IA64/RHEL4
938 Details    : A performance regression has been discovered in the MPT Fusion
939              driver between versions 3.02.73rh and 3.02.99.00rh. As a
940              consequence, we have downgraded the MPT Fusion driver in the RHEL4
941              kernel from 3.02.99.00 to 3.02.73 until this problem is fixed.
942
943 Severity   : enhancement
944 Bugzilla   : 14729
945 Description: SNMP support enhancement
946 Details    : Adding total number of sampled request for an MDS node in snmp
947              support.
948
949 Severity   : enhancement
950 Bugzilla   : 14748
951 Description: Optimize ldlm waiting list processing for PR extent locks
952 Details    : When processing waiting list for read extent lock and meeting read
953              lock that is same or wider to it that is not contended, skip
954              processing rest of the list and immediatelly return current
955              status of conflictness, since we are guaranteed there are no
956              conflicting locks in the rest of the list.
957
958 Severity   : normal
959 Bugzilla   : 14774
960 Description: Time out and refuse to reconnect
961 Details    : When the failover node is the primary node, it is possible
962              to have two identical connections in imp_conn_list. We must
963              compare not conn's pointers but NIDs, otherwise we can defeat
964              connection throttling.
965
966 Severity   : normal
967 Bugzilla   : 13821
968 Description: port llog fixes from b1_6 into HEAD
969 Details    : Port llog reference couting and some llog cleanups from b1_6
970              (bug 10800) into HEAD, for protect from panic and access to already
971              free llog structures.
972
973 Severity   : normal
974 Bugzilla   : 14483
975 Description: Detect stride IO mode in read-ahead
976 Details    : When a client does stride read, read-ahead should detect that and
977              read-ahead pages according to the detected stride pattern.
978
979 Severity   : normal
980 Bugzilla   : 13805
981 Description: data checksumming impacts single node performance
982 Details    : add support for several checksum algorithm. Currently, only CRC32
983              and Adler-32 are supported. The checksum type can be changed on
984              the fly via /proc/fs/lustre/osc/*/checksum_type.
985
986 Severity   : normal
987 Bugzilla   : 14648
988 Description: use adler32 for page checksums
989 Details    : when available, use the Adler-32 algorithm instead of CRC32 for
990              page checksums.
991
992 Severity   : normal
993 Bugzilla   : 15033
994 Description: build for x2 fails
995 Details    : fix compile issue on Cray systems.
996
997 Severity   : normal
998 Bugzilla   : 14379
999 Description: Properly match for duplicate locks
1000 Details    : Due to different lock order from skiplists code, we need to
1001              traverse entire list for now
1002
1003 Severity   : normal
1004 Frequency  : only on PPC/SLES10
1005 Bugzilla   : 14855
1006 Description: "BITS_PER_LONG is not 32 or 64" in linux/idr.h
1007 Details    : On SLES10/PPC, fs.h includes idr.h which requires BITS_PER_LONG to
1008              be defined. Add a hack in mkfs_lustre.c to work around this compile
1009              issue.
1010
1011 Severity   : normal
1012 Bugzilla   : 14257
1013 Description: LASSERT on MDS when client holding flock lock dies
1014 Details    : ldlm pool logic depends on number of granted locks equal to
1015              number of released locks which is not true for flock locks, so 
1016              just exclude such locks from consideration.
1017
1018 Severity   : normal
1019 Bugzilla   : 15188
1020 Description: MDS deadlock with many ll_sync_lov threads and I/O stalled
1021 Details    : Use fsfilt_sync() for both the whole filesystem sync and
1022              individual file sync to eliminate dangerous inode locking
1023              with I_LOCK that can lead to a deadlock.
1024
1025 Severity   : normal
1026 Bugzilla   : 14410
1027 Description: performance in 1.6.3
1028 Details    : Force q->max_phys_segments to MAX_PHYS_SEGMENTS on SLES10 to be
1029              sure that 1MB requests are not fragmented by the block layer.
1030
1031 Severity   : enhancement
1032 Bugzilla   : 11089
1033 Description: organize the server-side client stats on per-nid basis
1034 Details    : Change the structure of stats under obdfilter and mds to
1035              New structure:
1036                 +- exports
1037                         +- nid#1
1038                         |   + stats
1039                         |   + uuids
1040                         +- nid#2...
1041                         +- clear
1042              The "uuid"s file would list the uuids of _active_ exports.
1043              And the clear entry is to clear all stats and stale nids.
1044
1045 Severity   : enhancement
1046 Bugzilla   : 11270
1047 Description: eliminate client locks in face of contention
1048 Details    : file contention detection and lockless i/o implementation
1049              for contended files.
1050
1051 Severity   : normal
1052 Bugzilla   : 15212
1053 Description: Reinitialize optind to 0 so that interactive lfs works in all cases
1054
1055 Severity   : critical
1056 Frequency  : very rare, if additional xattrs are used on kernels >= 2.6.12
1057 Bugzilla   : 15777
1058 Description: MDS may lose file striping (and hence file data) in some cases
1059 Details    : If there are additional extended attributes stored on the MDS,
1060              in particular ACLs, SELinux, or user attributes (if user_xattr
1061              is specified for the client mount options) then there is a risk
1062              of attribute loss.  Additionally, the Lustre file striping
1063              needs to be larger than default (e.g. striped over all OSTs),
1064              and an additional attribute must be stored initially in the
1065              inode and then increase in size enough to be moved to the
1066              external attribute block (e.g. ACL growing in size) for file
1067              data to be lost.
1068
1069 Severity   : normal
1070 Bugzilla   : 15346
1071 Description: skiplist implementation simplification
1072 Details    : skiplists are used to group compatible locks on granted list
1073              that was implemented as tracking first and last lock of each lock group
1074              the patch changes that to using doubly linked lists
1075
1076 --------------------------------------------------------------------------------
1077
1078 2007-08-10         Cluster File Systems, Inc. <info@clusterfs.com>
1079        * version 1.6.1
1080        * Support for kernels:
1081         2.6.5-7.283 (SLES 9),
1082         2.6.9-55.EL (RHEL 4),
1083         2.6.16.46-0.14 (SLES 10),
1084         2.6.18.8 vanilla (kernel.org)
1085        * Client support for unpatched kernels:
1086         (see http://wiki.lustre.org/index.php?title=Patchless_Client)
1087         2.6.16 - 2.6.22 vanilla (kernel.org)
1088        * Due to recently discovered recovery problems, we do not recommend
1089         using patchless RHEL 4 clients with this or any earlier release.
1090        * Recommended e2fsprogs version: 1.39.cfs8
1091        * Note that reiserfs quotas are disabled on SLES 10 in this kernel.
1092        * Starting with this release, the ldiskfs backing filesystem required
1093         by Lustre is now in its own package, lustre-ldiskfs.  This package
1094         should be installed.  It is versioned separately from Lustre and
1095         may be released separately in future.
1096
1097 Severity   : minor
1098 Bugzilla   : 13147
1099 Description: block reactivating mgc import until all deactivates complete
1100 Details    : Fix race when failing back MDT/MGS to itself (testing)
1101
1102 Severity   : minor
1103 Frequency  : at statup only
1104 Bugzilla   : 12860
1105 Description: mds_lov_synchronize race leads to various problems
1106 Details    : simultaneous MDT->OST connections at startup can cause the 
1107              sync to abort, leaving the OSC in a bad state.
1108
1109 Severity   : enhancement
1110 Bugzilla   : 12194
1111 Description: add optional extra BUILD_VERSION info
1112 Details    : add a new environment variable (namely LUSTRE_VERS) which allows
1113              to override the lustre version.
1114
1115 Severity   : normal
1116 Frequency  : 2.6.18 servers only
1117 Bugzilla   : 12546
1118 Description: ll_kern_mount() doesn't release the module reference
1119 Details    : The ldiskfs module reference count never drops down to 0
1120              because ll_kern_mount() doesn't release the module reference.
1121
1122 Severity   : normal
1123 Frequency  : rare
1124 Bugzilla   : 12470
1125 Description: server LBUG when using old ost_num_threads parameter
1126 Details    : Accept the old ost_num_threads parameter but warn that it
1127              is deprecated, and fix an off-by-one error that caused an LBUG.
1128
1129 Severity   : normal
1130 Frequency  : rare
1131 Bugzilla   : 11722
1132 Description: Transient SCSI error results in persistent IO issue
1133 Details    : iobuf->dr_error is not reinitialized to 0 between two
1134              uses.
1135
1136 Severity   : normal
1137 Frequency  : sometimes when underlying device returns I/O errors
1138 Bugzilla   : 11743
1139 Description: OSTs not going read-only during write failures
1140 Details    : OSTs are not remounted read-only when the journal commit threads
1141              get I/O errors because fsfilt_ext3 calls journal_start/stop()
1142              instead of the ext3 wrappers.
1143
1144 Severity   : minor
1145 Bugzilla   : 12364
1146 Description: poor connect scaling with increasing client count
1147 Details    : Don't run filter_grant_sanity_check for more than 100 exports
1148              to improve scaling for large numbers of clients.
1149
1150 Severity   : normal
1151 Frequency  : SLES10 only
1152 Bugzilla   : 12538
1153 Description: sanity-quota.sh quotacheck failed: rc = -22
1154 Details    : Quotas cannot be enabled on SLES10.
1155
1156 Severity   : normal
1157 Frequency  : liblustre clients only
1158 Bugzilla   : 12229
1159 Description: getdirentries does not give error when run on compute nodes
1160 Details    : getdirentries does not fail when the size specified as an argument
1161              is too small to contain at least one entry
1162
1163 Severity   : enhancement
1164 Bugzilla   : 11548
1165 Description: Add LNET router traceability for debug purposes
1166 Details    : If a checksum failure occurs with a router as part of the
1167              IO path, the NID of the last router that forwarded the bulk data
1168              is printed so it can be identified.
1169
1170 Severity   : normal
1171 Frequency  : rare
1172 Bugzilla   : 11315
1173 Description: OST "spontaneously" evicts client; client has imp_pingable == 0
1174 Details    : Due to a race condition, liblustre clients were occasionally
1175              evicted incorrectly.
1176
1177 Severity   : enhancement
1178 Bugzilla   : 10997
1179 Description: lfs setstripe use optional parameters instead of postional
1180              parameters.
1181
1182 Severity   : enhancement
1183 Bugzilla   : 10651
1184 Description: Nanosecond timestamp support for ldiskfs
1185 Details    : The on-disk ldiskfs filesystem has added support for nanosecond
1186              resolution timestamps.  There is not yet support for this at
1187              the Lustre filesystem level.
1188
1189 Severity   : normal
1190 Frequency  : during server recovery
1191 Bugzilla   : 11203
1192 Description: MDS failing to send precreate requests due to OSCC_FLAG_RECOVERING
1193 Details    : request with rq_no_resend flag not awake l_wait_event if they get a
1194              timeout.
1195
1196 Severity   : minor
1197 Frequency  : nfs export on patchless client
1198 Bugzilla   : 11970
1199 Description: connectathon hang when test nfs export over patchless client
1200 Details    : Disconnected dentry cannot be found with lookup, so we do not need
1201              to unhash it or make it invalid
1202
1203 Bugzilla   : 11757
1204 Description: fix llapi_lov_get_uuids() to allow many OSTs to be returned
1205 Details:   : Change llapi_lov_get_uuids() to read the UUIDs from /proc instead
1206              of using an ioctl. This allows lfsck for > 160 OSTs to succeed.
1207
1208 Severity   : minor
1209 Frequency  : rare
1210 Bugzilla   : 11546
1211 Description: open req refcounting wrong on reconnect
1212 Details    : If reconnect happened between getting open reply from server and
1213              call to mdc_set_replay_data in ll_file_open, we will schedule
1214              replay for unreferenced request that we are about to free.
1215              Subsequent close will crash in variety of ways.
1216              Check that request is still eligible for replay in
1217              mdc_set_replay_data().
1218
1219 Severity   : minor
1220 Frequency  : rare
1221 Bugzilla   : 11512
1222 Description: disable writes to filesystem when reading health_check file
1223 Details    : the default for reading the health_check proc file has changed
1224              to NOT do a journal transaction and write to disk, because this
1225              can cause reads of the /proc file to hang and block HA state
1226              checking on a healthy but otherwise heavily loaded system.  It
1227              is possible to return to the previous behaviour during configure
1228              with --enable-health-write.
1229
1230 Severity   : enhancement
1231 Bugzilla   : 10768
1232 Description: 64-bit inode version
1233 Details:   : Add a on-disk 64-bit inode version for ext3 to track changes made
1234              to the inode. This will be required for version-based recovery.
1235
1236 Severity   : normal
1237 Frequency  : rare
1238 Bugzilla   : 11818
1239 Description: MDS fails to start if a duplicate client export is detected
1240 Details    : in some rare cases it was possible for a client to connect to
1241              an MDS multiple times.  Upon recovery the MDS would detect this
1242              and fail during startup.  Handle this more gracefully.
1243
1244 Severity   : enhancement
1245 Bugzilla   : 11563
1246 Description: Add -o localflock option to simulate  old noflock
1247 behaviour.
1248 Details    : This will achieve local-only flock/fcntl locks
1249              coherentness.
1250
1251 Severity   : minor
1252 Frequency  : rare
1253 Bugzilla   : 11658
1254 Description: log_commit_thread vs filter_destroy race leads to crash
1255 Details    : Take import reference before releasing llog record semaphore
1256
1257 Severity   : normal
1258 Frequency  : rare
1259 Bugzilla   : 12477
1260 Description: Wrong request locking in request set processing
1261 Details    : ptlrpc_check_set wrongly uses req->rq_lock for proctect add to
1262              imp_delayed_list, in this place should be used imp_lock.
1263
1264 Severity   : normal
1265 Frequency  : when reconnection
1266 Bugzilla   : 11662
1267 Description: Grant Leak when osc reconnect to OST
1268 Details    : When osc reconnect ost, OST(filter) should check whether it
1269              should grant more space to client by comparing fed_grant and
1270              cl_avail_grant, and return the granted space to client instead
1271              of "new granted" space, because client will call osc_init_grant
1272              to update the client grant space info.
1273
1274 Severity   : normal
1275 Frequency  : when client reconnect to OST 
1276 Bugzilla   : 11662
1277 Description: Grant Leak when osc do resend and replay bulk write
1278 Details    : When osc reconnect to OST, OST(filter)should clear grant info of
1279              bulk write request, because the grant info while be sync between
1280              OSC and OST when reconnect, and we should ignore the grant info
1281              these of resend/replay write req.
1282
1283 Severity   : normal
1284 Frequency  : rare 
1285 Bugzilla   : 11662
1286 Description: Grant space more than avaiable left space sometimes.
1287 Details    : When then OST is about to be full, if two bulk writing from
1288              different clients came to OST. Accord the avaliable space of the
1289              OST, the first req should be permitted, and the second one
1290              should be denied by ENOSPC. But if the seconde arrived before 
1291              the first one is commited. The OST might wrongly permit second
1292              writing, which will cause grant space > avaiable space.
1293
1294 Severity   : normal
1295 Frequency  : when client is evicted 
1296 Bugzilla   : 12371
1297 Description: Grant might be wrongly erased when osc is evicted by OST
1298 Details    : when the import is evicted by server, it will fork another 
1299              thread ptlrpc_invalidate_import_thread to invalidate the 
1300              import, where the grant will be set to 0.  While the original 
1301              thread will update the grant it got when connecting. So if 
1302              the former happened latter, the grant will be wrongly errased 
1303              because of this race.
1304
1305 Severity   : normal
1306 Frequency  : rare 
1307 Bugzilla   : 12401
1308 Description: Checking Stale with correct fid 
1309 Details    : ll_revalidate_it should uses de_inode instead of op_data.fid2 
1310              to check whether it is stale, because sometimes, we want the 
1311              enqueue happened anyway, and op_data.fid2 will not be initialized.
1312
1313 Severity   : enhancement
1314 Bugzilla   : 11647
1315 Description: update patchless client
1316 Details    : Add support for patchless client with 2.6.20, 2.6.21 and RHEL 5
1317
1318 Severity   : normal
1319 Frequency  : only with 2.4 kernel
1320 Bugzilla   : 12134
1321 Description: random memory corruption
1322 Details    : size of struct ll_inode_info is to big for union inode.u and this
1323              can be cause of random memory corruption.
1324
1325 Severity   : normal
1326 Frequency  : rare 
1327 Bugzilla   : 10818
1328 Description: Memory leak in recovery
1329 Details    : Lov_mds_md was not free in an error handler in mds_create_object.
1330              It should also check obd_fail before fsfilt_start, otherwise if 
1331              fsfilt_start return -EROFS,(failover mds during mds recovery).
1332              then the req will return with repmsg->transno = 0 and rc = EROFS. 
1333              and we met hit the assert LASSERT(req->rq_reqmsg->transno ==
1334              req->rq_repmsg->transno) in ptlrpc_replay_interpret.  Fcc should 
1335              be freed no matter whether fsfilt_commit success or not.
1336
1337 Severity   : minor
1338 Frequency  : only with huge count clients
1339 Bugzilla   : 11817
1340 Description: Prevents from taking the superblock lock in llap_from_page for 
1341              a soon died page.
1342 Details    : using LL_ORIGIN_REMOVEPAGE origin flag instead of LL_ORIGIN_UNKNOW 
1343              for llap_from_page call in ll_removepage prevents from taking the 
1344              superblock lock for a soon died page.
1345
1346 Severity   : normal
1347 Frequency  : rare
1348 Bugzilla   : 11935 
1349 Description: Not check open intent error before release open handle
1350 Details    : in some rare cases, the open intent error is not checked before
1351              release open handle, which may cause
1352              ASSERTION(open_req->rq_transno != 0), because it tries to release
1353              the failed open handle.
1354
1355 Severity   : normal
1356 Frequency  : rare
1357 Bugzilla   : 12556 
1358 Description: Set cat log bitmap only after create log success. 
1359 Details    : in some rare cases, the cat log bitmap is set too early. and it 
1360              should be set only after create log success.
1361
1362 Severity   : major
1363 Bugzilla   : 11971
1364 Description: Accessing a block bevice can re-enable I/O when Lustre is
1365              tearing down a device.
1366 Details    : dev_clear_rdonly(bdev) must be called in kill_bdev() instead of
1367              blkdev_put().
1368
1369 Severity   : minor
1370 Bugzilla   : 11706
1371 Description: service threads may hog cpus when there are a lot of requests
1372 Details    : Insert cond_resched to give other threads a chance to use some CPU
1373
1374 Severity   : normal
1375 Frequency  : rare
1376 Bugzilla   : 12086 
1377 Description: the cat log was not initialized in recovery 
1378 Details    : When mds(mgs) do recovery, the tgt_count might be zero, so the
1379              unlink log on mds will not be initialized until mds post
1380              recovery. And also in mds post recovery, the unlink log will 
1381              initialization will be done asynchronausly, so there will be race
1382              between add unlink log and unlink log initialization.
1383
1384 Severity   : normal
1385 Bugzilla   : 12597
1386 Description: brw_stats were being printed incorrectly
1387 Details    : brw_stats were being printed as log2 but all of them were not
1388              recorded as log2. Also remove some code duplication arising from
1389              filter_tally_{read,write}.
1390
1391 Severity   : normal
1392 Bugzilla   : 11674
1393 Frequency  : rare, only in recovery.
1394 Description: ASSERTION(req->rq_type != LI_POISON) failed
1395 Details    : imp_lock should be held while iterating over imp_sending_list for
1396              prevent destroy request after get timeout in ptlrpc_queue_wait.
1397
1398 Severity   : normal
1399 Bugzilla   : 12689
1400 Description: replay-single.sh test 52 fails
1401 Details    : A lock's skiplist need to be cleanup when it being unlinked 
1402              from its resource list.
1403
1404 Severity   : normal
1405 Bugzilla   : 11737
1406 Description: Short directio read returns full requested size rather than
1407              actual amount read.
1408 Details    : Direct I/O operations should return actual amount of bytes
1409              transferred rather than requested size.
1410
1411 Severity   : enhancement
1412 Bugzilla   : 10589
1413 Description: metadata RPC reduction (e.g. for rm performance)
1414 Details    : decrease the amount of synchronous RPC between clients and servers
1415              by canceling conflicing lock before the operation on the client
1416              and packing thier handles into the main operation RPC to server.
1417
1418 Severity   : enhancement
1419 Bugzilla   : 4900
1420 Description: Async OSC create to avoid the blocking unnecessarily.
1421 Details    : If a OST has no remain object, system will block on the creating
1422             when need to create a new object on this OST. Now, ways use
1423             pre-created objects when available, instead of blocking on an
1424             empty osc while others are not empty.  If we must block, we block
1425             for the shortest possible period of time.
1426
1427 Severity   : enhancement
1428 Bugzilla   : 12702
1429 Description: refine locking for avoid write wrong info into lov_objid file
1430 Details    : fix possible races with add new target and write/update data in 
1431              lov_objid file.
1432
1433 --------------------------------------------------------------------------------
1434
1435 2007-05-03  Cluster File Systems, Inc. <info@clusterfs.com>
1436        * version 1.6.0.1
1437        * bug fixes
1438
1439 Severity   : normal
1440 Frequency  : on some architectures
1441 Bugzilla   : 12404
1442 Description: 1.6 client sometimes fails to mount from a 1.4 MDT
1443 Details    : Uninitialized flags sometimes cause configuration commands to
1444              be skipped.
1445
1446 Severity   : normal
1447 Frequency  : patchless clients only
1448 Bugzilla   : 12391
1449 Description: missing __iget() symbol export
1450 Details    : The __iget() symbol export is missing.  To avoid the need for
1451              this on patchless clients the deathrow inode reaper is turned
1452              off, and we depend on the VM to clean up old inodes.  This
1453              dependency was during via the fix for bug 12181.
1454         
1455 --------------------------------------------------------------------------------
1456
1457 2007-04-19  Cluster File Systems, Inc. <info@clusterfs.com>
1458        * version 1.6.0
1459        * CONFIGURATION CHANGE.  This version of Lustre WILL NOT
1460          INTEROPERATE with older versions automatically.  In many cases a
1461          special upgrade step is needed. Please read the
1462          user documentation before upgrading any part of a live system.
1463        * WIRE PROTOCOL CHANGE from previous 1.6 beta versions.  This
1464          version will not interoperate with 1.6 betas before beta5 (1.5.95).  
1465        * WARNING: Lustre configuration and startup changes are required with
1466          this release.  See https://mail.clusterfs.com/wikis/lustre/MountConf
1467          for details.
1468        * bug fixes
1469
1470
1471
1472 Severity   : enhancement
1473 Bugzilla   : 8007
1474 Description: MountConf
1475 Details    : Lustre configuration is now managed via mkfs and mount
1476              commands instead of lmc and lconf.  New obd types (MGS, MGC)
1477              are added for dynamic configuration management.  See
1478              https://mail.clusterfs.com/wikis/lustre/MountConf for
1479              details.
1480
1481 Severity   : enhancement
1482 Bugzilla   : 4482
1483 Description: dynamic OST addition
1484 Details    : OSTs can now be added to a live filesystem
1485
1486 Severity   : enhancement
1487 Bugzilla   : 9851
1488 Description: startup order invariance
1489 Details    : MDTs and OSTs can be started in any order.  Clients only
1490              require the MDT to complete startup.
1491         
1492 Severity   : enhancement
1493 Bugzilla   : 4899
1494 Description: parallel, asynchronous orphan cleanup
1495 Details    : orphan cleanup is now performed in separate threads for each
1496              OST, allowing parallel non-blocking operation.
1497
1498 Severity   : enhancement
1499 Bugzilla   : 9862
1500 Description: optimized stripe assignment
1501 Details    : stripe assignments are now made based on ost space available,
1502              ost previous usage, and OSS previous usage, in order to try
1503              to optimize storage space and networking resources. 
1504         
1505 Severity   : enhancement
1506 Bugzilla   : 4226
1507 Description: Permanently set tunables
1508 Details    : All writable /proc/fs/lustre tunables can now be permanently
1509              set on a per-server basis, at mkfs time or on a live system.
1510         
1511 Severity   : enhancement
1512 Bugzilla   : 10547
1513 Description: Lustre message v2
1514 Details    : Add lustre message format v2.
1515
1516 Severity   : enhancement
1517 Bugzilla   : 9866
1518 Description: client OST exclusion list
1519 Details    : Clients can be started with a list of OSTs that should be
1520              declared "inactive" for known non-responsive OSTs.
1521
1522 Severity   : minor
1523 Bugzilla   : 6062
1524 Description: SPEC SFS validation failure on NFS v2 over lustre.
1525 Details    : Changes the blocksize for regular files to be 2x RPC size,
1526              and not depend on stripe size.
1527         
1528 Severity   : enhancement
1529 Bugzilla   : 9293
1530 Description: Multiple MD RPCs in flight.
1531 Details    : Further unserialise some read-only MDS RPCs - learn about intents.
1532              To avoid overly-overloading MDS, introduce a limit on number of
1533              MDS RPCs in flight for a single client and add /proc controls
1534              to adjust this limit.
1535
1536 Severity   : enhancement
1537 Bugzilla   : 22484
1538 Description: client read/write statistics
1539 Details    : Add client read/write call usage stats for performance
1540              analysis of user processes. 
1541              /proc/fs/lustre/llite/*/offset_stats shows non-sequential
1542              file access. extents_stats shows chunk size distribution.
1543              extents_stats_per_process show chunk size distribution per
1544              user process. 
1545
1546 Severity   : enhancement
1547 Bugzilla   : 22486
1548 Description: mds statistics
1549 Details    : Add detailed mds operations statistics in  
1550              /proc/fs/lustre/mds/*/stats.
1551
1552 Severity   : minor
1553 Bugzilla   : 10667
1554 Description: Failure of copying files with lustre special EAs.
1555 Details    : Client side always return success for setxattr call for lustre
1556              special xattr (currently only "trusted.lov").
1557
1558 Severity   : minor
1559 Frequency  : always
1560 Bugzilla   : 10345
1561 Description: Refcount LNET uuids
1562 Details    : The global LNET uuid list grew linearly with every startup;
1563              refcount repeated list entries instead of always adding to
1564              the list.
1565
1566 Severity   : enhancement
1567 Bugzilla   : 2258
1568 Description: Dynamic service threads
1569 Details    : Within a small range, start extra service threads
1570              automatically when the request queue builds up.
1571
1572 Severity   : major
1573 Frequency  : mixed-endian client/server environments
1574 Bugzilla   : 11214
1575 Description: mixed-endian crashes
1576 Details    : The new msg_v2 system had some failures in mixed-endian
1577              environments.
1578
1579 Severity   : enhancement
1580 Bugzilla   : 11229
1581 Description: Easy OST removal
1582 Details    : OSTs can be permanently deactivated with e.g. 'lctl
1583              conf_param lustre-OST0001.osc.active=0'
1584
1585 Severity   : enhancement
1586 Bugzilla   : 11335
1587 Description: MGS proc entries
1588 Details    : Added basic proc entries for the MGS showing what filesystems
1589              are served.
1590
1591 Severity   : enhancement
1592 Bugzilla   : 10998
1593 Description: provide MGS failover
1594 Details    : Added config lock reacquisition after MGS server failover.
1595
1596 Severity   : enhancement
1597 Bugzilla   : 11461
1598 Description: add Linux 2.4 support
1599 Details    : Added support for RHEL 2.4.21 kernel for 1.6 servers and clients
1600
1601 Severity   : normal
1602 Bugzilla   : 11330
1603 Description: a large application tries to do I/O to the same resource and dies
1604              in the middle of it.
1605 Details    : Check the req->rq_arrival time after the call to
1606              ost_brw_lock_get(), but before we do anything about
1607              processing it & sending the BULK transfer request. This
1608              should help move old stale pending locks off the queue as
1609              quickly as obd_timeout.
1610
1611 Severity   : major
1612 Frequency  : when an incorrect nid is specified during startup
1613 Bugzilla   : 10734
1614 Description: ptlrpc connect to non-existant node causes kernel crash
1615 Details    : LNET can't be re-entered from an event callback, which
1616              happened when we expire a message after the export has been
1617              cleaned up.  Instead, hand the zombie cleanup off to another
1618              thread.
1619
1620 Severity   : enhancement
1621 Bugzilla   : 10902
1622 Description: plain/inodebits lock performance improvement
1623 Details    : Grouping plain/inodebits in granted list by their request modes
1624              and bits policy, thus improving the performance of search through
1625              the granted list.
1626
1627 Severity   : major
1628 Frequency  : only if OST filesystem is corrupted
1629 Bugzilla   : 9829
1630 Description: client incorrectly hits assertion in ptlrpc_replay_req()
1631 Details    : for a short time RPCs with bulk IO are in the replay list,
1632              but replay of bulk IOs is unimplemented.  If the OST filesystem
1633              is corrupted due to disk cache incoherency and then replay is
1634              started it is possible to trip an assertion.  Avoid putting
1635              committed RPCs into the replay list at all to avoid this issue.
1636
1637 Severity   : major
1638 Frequency  : liblustre (e.g. catamount) on a large cluster with >= 8 OSTs/OSS
1639 Bugzilla   : 11684
1640 Description: System hang on startup
1641 Details    : This bug allowed the liblustre (e.g. catamount) client to
1642              return to the app before handling all startup RPCs.  This
1643              could leave the node unresponsive to lustre network traffic
1644              and manifested as a server ptllnd timeout.
1645
1646 Severity   : enhancement
1647 Bugzilla   : 11667
1648 Description: Add "/proc/sys/lustre/debug_peer_on_timeout"
1649 Details    : liblustre envirable: LIBLUSTRE_DEBUG_PEER_ON_TIMEOUT
1650              boolean to control whether to print peer debug info when a
1651              client's RPC times out.
1652
1653 Severity   : minor
1654 Frequency  : only for kernels with patches from Lustre below 1.4.3
1655 Bugzilla   : 11248
1656 Description: Remove old rdonly API
1657 Details    : Remove old rdonly API which unused from at least lustre 1.4.3
1658
1659 Severity   : major
1660 Frequency  : only for devices with external journals
1661 Bugzilla   : 10719
1662 Description: Set external device read-only also
1663 Details    : During a commanded failover stop, we set the disk device
1664              read-only while the server shuts down. We now also set any
1665              external journal device read-only at the same time.
1666
1667 Severity   : minor
1668 Frequency  : when upgrading from 1.4 while trying to change parameters
1669 Bugzilla   : 11692
1670 Description: The wrong (new) MDC name was used when setting parameters for
1671              upgraded MDT's.  Also allows changing of OSC (and MDC)
1672              parameters if --writeconf is specified at tunefs upgrade time.
1673
1674 Severity   : major
1675 Frequency  : when setting specific ost indicies
1676 Bugzilla   : 11149
1677 Description: QOS code breaks on skipped indicies
1678 Details    : Add checks for missing OST indicies in the QOS code, so OSTs
1679              created with --index need not be sequential.
1680
1681 Severity   : enhancement
1682 Bugzilla   : 11264
1683 Description: Add uninit_groups feature to ldiskfs2 to speed up e2fsck
1684 Details    : The uninit_groups feature works in conjunction with the kernel
1685              filesystem code (ldiskfs2 only) and e2fsprogs-1.39-cfs6 to speed
1686              up the pass1 processing of e2fsck.  This is a read-only feature
1687              in ldiskfs2 only, so older kernels and current ldiskfs cannot
1688              mount filesystems that have had this feature enabled.
1689
1690 Severity   : enhancement
1691 Bugzilla   : 10816
1692 Description: Improve multi-block allocation algorithm to avoid fragmentation
1693 Details    : The mballoc3 code (ldiskfs2 only) adds new mechanisms to improve
1694              allocation locality and avoid filesystem fragmentation.
1695
1696 ------------------------------------------------------------------------------
1697
1698 2007-04-01  Cluster File Systems, Inc. <info@clusterfs.com>
1699        * version 1.4.10
1700        * Support for kernels:
1701         2.4.21-47.0.1.EL (RHEL 3)
1702         2.6.5-7.283 (SLES 9)
1703         2.6.9-42.0.10.EL (RHEL 4)
1704         2.6.12.6 vanilla (kernel.org)
1705         2.6.16.27-0.9 (SLES 10)
1706        * Recommended e2fsprogs version: 1.39.cfs5
1707
1708        * Note that reiserfs quotas are disabled on SLES 10 in this kernel
1709        * bug fixes
1710
1711 Severity   : critical
1712 Frequency  : occasional, depends on client load and configuration
1713 Bugzilla   : 12181, 12203
1714 Description: data loss for recently-modified files
1715 Introduced : 1.4.6
1716 Details    : In some cases it is possible that recently written or created
1717              files may not be written to disk in a timely manner (this should
1718              normally be within 30s unless client IO load is very high).
1719              The problem appears as zero-length files or files that are a
1720              multiple of 1MB in size after a client crash or client eviction
1721              that are missing data at the end of the file.
1722
1723              This problem is more likely to be hit on clients where files are
1724              repeatedly created and unlinked in the same directory, clients
1725              have a large amount of RAM, have many CPUs, the filesystem has
1726              many OSTs, the clients are rebooted frequently, and/or the files
1727              are not accessed by other nodes after being written.
1728
1729              The presence of the problem can be detected by looking at
1730              /proc/sys/fs/inode-state.  If the first number (nr_inodes) is
1731              smaller than the second (nr_unused) then dirty files will not
1732              be flushed automatically to disk.  "sync; sleep 10" should be
1733              run several times on the node before unmounting it to update
1734              Lustre (this is also safe to run on nodes without this problem).
1735
1736              There is also a related kernel bug in the RHEL4 4 2.6.9 kernel
1737              that can cause this same problem, so customers using that kernel
1738              also need to update the kernel in addition to Lustre.  In order
1739              to properly fix this bug, the RHEL3 2.4.21 kernel is also updated.
1740
1741              It is normal that files written just before a client crash (less
1742              than 30s) may not yet have been flushed to disk, even for local
1743              filesystems.
1744
1745 Severity   : normal
1746 Frequency  : frequent on thin XT3 nodes
1747 Bugzilla   : 10802
1748 Description: UUID collision on thin XT3 Linux nodes
1749 Details    : UUIDs on Compute Node Linux XT3 nodes were not generated
1750              randomly, since we relied on an insufficiently-seeded PRNG.
1751
1752 Severity   : normal
1753 Frequency  : rare
1754 Bugzilla   : 11693
1755 Description: OSS hangs after "All ost request buffers busy"
1756 Details    : A deadlock between quota and journal operations caused OSS
1757              hangs after printing "All ost request buffers busy."
1758
1759 Severity   : minor
1760 Frequency  : always on liblustre builds
1761 Bugzilla   : 11175
1762 Description: Cleanup compiler warnings on liblustre
1763
1764 Severity   : minor
1765 Frequency  : always on liblustre builds on XT3
1766 Bugzilla   : 12146
1767 Description: LC_CONFIG_CDEBUG don't run while build liblustre on XT3.
1768
1769 Frequency  : always
1770 Bugzilla   : 3244
1771 Description: Addition of EXT3_FEATURE_RO_COMPAT_DIR_NLINKS flag for
1772              > 32000 subdirectories
1773 Details    : Add EXT3_FEATURE_RO_COMPAT_DIR_NLINK flag to
1774              EXT3_FEATURE_RO_COMPAT_SUPP. This flag will be set whenever
1775              subdirectory count crosses 32000. This will aid e2fsck to
1776              correctly handle more than 32000 subdirectories.
1777
1778 Severity   : major
1779 Frequency  : liblustre (e.g. catamount) on a large cluster with >= 8 OSTs/OSS
1780 Bugzilla   : 11684
1781 Description: System hang on startup
1782 Details    : This bug allowed the liblustre (e.g. catamount) client to
1783              return to the app before handling all startup RPCs.  This
1784              could leave the node unresponsive to lustre network traffic
1785              and manifested as a server ptllnd timeout.
1786
1787 Severity   : enhancement
1788 Bugzilla   : 11667
1789 Description: Add "/proc/sys/lustre/debug_peer_on_timeout"
1790              (liblustre envirable: LIBLUSTRE_DEBUG_PEER_ON_TIMEOUT)
1791              boolean to control whether to print peer debug info when a
1792              client's RPC times out.
1793
1794 Severity   : normal
1795 Frequency  : always
1796 Bugzilla   : 10214
1797 Description: make O_SYNC working on 2.6 kernels
1798 Details    : 2.6 kernels use different method for mark pages for write,
1799              so need add a code to lustre for O_SYNC work.
1800
1801 Severity   : minor
1802 Frequency  : always
1803 Bugzilla   : 11110
1804 Description: Failure to close file and release space on NFS
1805 Details    : Put inode details into lock acquired in ll_intent_file_open.
1806              Use mdc_intent_lock in ll_intent_open to properly
1807              detect all kind of errors unhandled by mdc_enqueue.
1808
1809 Severity   : major
1810 Frequency  : rare
1811 Bugzilla   : 10866
1812 Description: proc file read during shutdown sometimes raced obd removal,
1813              causing node crash
1814 Details    : Add lock to prevent obd access after proc file removal.
1815
1816 Severity   : normal
1817 Frequency  : Only for files larger than 4GB on 32-bit clients.
1818 Bugzilla   : 11237
1819 Description: improperly doing page alignment of locks
1820 Details    : Modify lustre core code to use CFS_PAGE_* defines instead of
1821              PAGE_*.  Make CFS_PAGE_MASK a 64-bit mask.
1822
1823 Severity   : normal
1824 Frequency  : rarely
1825 Bugzilla   : 11203
1826 Description: RPCs being resent when they shouldn't be
1827 Details    : Some RPCs that should not be resent are being resent.  This
1828              can cause inconsistencies in the RPC state machine.  Do not
1829              resend such requests.
1830
1831 Severity   : normal
1832 Frequency  : rare, only with NFS export
1833 Bugzilla   : 11669
1834 Description: Crash on NFS re-export node
1835 Details    : under very unusual load conditions an assertion is hit in
1836              ll_intent_file_open()
1837
1838 Severity   : major
1839 Frequency  : only if OST filesystem is corrupted
1840 Bugzilla   : 9829
1841 Description: client incorrectly hits assertion in ptlrpc_replay_req()
1842 Details    : for a short time RPCs with bulk IO are in the replay list,
1843              but replay of bulk IOs is unimplemented.  If the OST filesystem
1844              is corrupted due to disk cache incoherency and then replay is
1845              started it is possible to trip an assertion.  Avoid putting
1846              committed RPCs into the replay list at all to avoid this issue.
1847
1848 Severity   : normal
1849 Frequency  : always
1850 Bugzilla   : 10901
1851 Description: large O_DIRECT requests fail under memory pressure/fragmentation
1852 Details    : Large single O_DIRECT read and write calls can fail to allocate
1853              a sufficiently large buffer to process the request.  In case of
1854              allocation failure the allocation is retried with a smaller
1855              buffer and broken into smaller requests.
1856
1857 Severity   : enhancement
1858 Bugzilla   : 11563
1859 Description: Add -o localflock option to simulate  old noflock behaviour.
1860 Details    : This will achieve local-only flock/fcntl locks coherentness.
1861
1862 Severity   : normal
1863 Frequency  : always
1864 Bugzilla   : 11090
1865 Description: versioning check is incomplete
1866 Details    : Checking the version difference of client vs. server, report
1867              error if the gap is too big.
1868
1869 Severity   : major
1870 Bugzilla   : 11710
1871 Frequency  : always
1872 Description: add support PG_writeback bit
1873 Details    : add support for PG_writeback bit for Lustre, for more carefull
1874              work with page cache in 2.6 kernel. This also fix some deadlocks
1875              and remove hack for work O_SYNC with 2.6 kernel.
1876
1877 Severity   : enhancement
1878 Bugzilla   : 11264
1879 Description: Add uninit_groups feature to ldiskfs2 to speed up e2fsck
1880 Details    : The uninit_groups feature works in conjunction with the kernel
1881              filesystem code (ldiskfs2 only) and e2fsprogs-1.39-cfs6 to speed
1882              up the pass1 processing of e2fsck.  This is a read-only feature
1883              in ldiskfs2 only, so older kernels and current ldiskfs cannot
1884              mount filesystems that have had this feature enabled.
1885
1886 Severity   : enhancement
1887 Bugzilla   : 10816
1888 Description: Improve multi-block allocation algorithm to avoid fragmentation
1889 Details    : The mballoc3 code (ldiskfs2 only) adds new mechanisms to improve
1890              allocation locality and avoid filesystem fragmentation.
1891
1892 ------------------------------------------------------------------------------
1893
1894 2007-02-09  Cluster File Systems, Inc. <info@clusterfs.com>
1895        * version 1.4.9
1896        * Support for kernels:
1897         2.6.9-42.0.3.EL (RHEL 4)
1898         2.6.5-7.276 (SLES 9)
1899         2.4.21-47.0.1.EL (RHEL 3)
1900         2.6.12.6 vanilla (kernel.org)
1901         2.6.16.21-0.8 (SLES10)
1902        * Recommended e2fsprogs version: 1.39.cfs2-0
1903
1904        * The backwards-compatible /proc/sys/portals symlink has been removed
1905          in this release.  Before upgrading, please ensure that you change
1906          any configuration scripts or /etc/sysctl.conf files that access
1907          /proc/sys/portals/* or sysctl portals.* to use the corresponding
1908          entry in /proc/sys/lnet or sysctl lnet.*.  This change can be made
1909          in advance of the upgrade on any system running Lustre 1.4.6 or
1910          newer, since /proc/sys/lnet was added in that version.
1911        * Note that reiserfs quotas are disabled on SLES 10 in this kernel
1912        * bug fixes
1913
1914 Severity   : minor
1915 Frequency  : only when quota is used
1916 Bugzilla   : 11286
1917 Description: avoid scanning export list for quota master
1918 Details    : Change the algorithms to avoid scanning export list in order
1919              to improve the efficiency.
1920
1921 Severity   : critical
1922 Frequency  : MDS failover only, very rarely
1923 Bugzilla   : 11125
1924 Description: "went back in time" messages on mds failover
1925 Details    : The greatest transno may be lost when the current operation
1926              finishes with an error (transno==0) and the client's last_rcvd
1927              record is over-written. Save the greatest transno in the
1928              mds_last_transno for this case.
1929
1930 Severity   : minor
1931 Frequency  : always for specific kernels and striping counts
1932 Bugzilla   : 11042
1933 Description: client may get "Matching packet too big" without ACL support
1934 Details    : Clients compiled without CONFIG_FS_POSIX_ACL get an error message
1935              when trying to access files in certain configurations.  The
1936              clients should in fact be denied when mounting because they do
1937              not understand ACLs.
1938
1939 Severity   : major
1940 Frequency  : Cray XT3 with more than 4000 clients and multiple jobs
1941 Bugzilla   : 10906
1942 Description: many clients connecting with IO in progress causes connect timeouts
1943 Details    : Avoid synchronous journal commits to avoid delays caused by many
1944              clients connecting/disconnecting when bulk IO is in progress.
1945              Queue liblustre connect requests on OST_REQUEST_PORTAL instead of
1946              OST_IO_PORTAL to avoid delays behind potentially many pending
1947              slow IO requests.
1948
1949 Severity   : normal
1950 Frequency  : occasionally with multiple writers to a single file
1951 Bugzilla   : 11081
1952 Description: shared writes to file may result in wrong size reported by stat()
1953 Details    : Allow growing of kms when extent lock is cancelled
1954
1955 Severity   : minor
1956 Frequency  : always with random mmap IO to multi-striped file
1957 Bugzilla   : 10919
1958 Description: mmap write might be lost if we are writing to a 'hole' in stripe
1959 Details    : Only if the hole is at the end of OST object so that kms is too
1960              small. Fix is to increase kms accordingly in ll_nopage.
1961
1962 Severity   : normal
1963 Frequency  : rare, only if OST filesystem is inconsistent with MDS filesystem
1964 Bugzilla   : 11211
1965 Description: writes to a missing object would leak memory on the OST
1966 Details    : If there is an inconsistency between the MDS and OST filesystems,
1967              such that the MDS references an object that doesn't exist, writes
1968              to that object will leak memory due to incorrect cleanup in the
1969              error handling path, eventually running out of memory on the OST.
1970
1971 Severity   : minor
1972 Frequency  : rare
1973 Bugzilla   : 11040
1974 Description: Creating too long symlink causes lustre errors
1975 Details    : Check symlink and name lengths before sending requests to MDS.
1976
1977 Severity   : normal
1978 Frequency  : only if flock is enabled (not on by default)
1979 Bugzilla   : 11415
1980 Description: posix locks not released on fd closure on 2.6.9+
1981 Details    : We failed to add posix locks to list of inode locks on 2.6.9+
1982              kernels, this caused such locks not to be released on fd close and
1983              then assertions on fs unmount about still used locks.
1984
1985 Severity   : minor
1986 Frequency  : MDS failover only, very rarely
1987 Bugzilla   : 11277
1988 Description: clients may get ASSERTION(granted_lock != NULL)
1989 Details    : When request was taking a long time, and a client was resending
1990              a getattr by name lock request. The were multiple lock requests
1991              with the same client lock handle and
1992              mds_getattr_name->fixup_handle_for_resent_request found one of the
1993              lock handles but later failed with ASSERTION(granted_lock != NULL).
1994
1995 Severity   : major
1996 Frequency  : rare
1997 Bugzilla   : 10891
1998 Description: handle->h_buffer_credits > 0, assertion failure
1999 Details    : h_buffer_credits is zero after truncate, causing assertion
2000              failure.  This patch extends the transaction or creates a new
2001              one after truncate.
2002
2003 Severity   : normal
2004 Frequency  : NFS re-export or patchless client
2005 Bugzilla   : 11179, 10796
2006 Description: Crash on NFS re-export node (__d_move)
2007 Details    : We do not want to hash the dentry if we don't have a lock.
2008              But if this dentry is later used in d_move, we'd hit uninitialised
2009              list head d_hash, so we just do this to init d_hash field but
2010              leave dentry unhashed.
2011
2012 Severity   : normal
2013 Frequency  : NFS re-export or patchless client
2014 Bugzilla   : 11135
2015 Description: NFS exports has problem with symbolic link
2016 Details    : lustre client didn't properly install dentry when re-exported
2017              to NFS or running patchless client.
2018
2019 Severity   : normal
2020 Frequency  : NFS re-export or patchless client
2021 Bugzilla   : 10796
2022 Description: Various nfs/patchless fixes.
2023 Details    : fixes reuse disconected alias for lookup process - this fixes
2024              warning "find_exported_dentry: npd != pd",
2025              fix permission error with open files at nfs.
2026              fix apply umask when do revalidate.
2027
2028 Severity   : normal
2029 Frequency  : occasional
2030 Bugzilla   : 11191
2031 Description: Crash on NFS re-export node
2032 Details    : calling clear_page() on the wrong pointer triggered oops in
2033              generic_mapping_read().
2034
2035 Severity   : normal
2036 Frequency  : rarely, using O_DIRECT IO
2037 Bugzilla   : 10903
2038 Description: unaligned directio crashes client with LASSERT
2039 Details    : check for unaligned buffers before trying any requests.
2040
2041 Severity   : major
2042 Frequency  : rarely, using CFS RAID5 patches in non-standard kernel series
2043 Bugzilla   : 11313
2044 Description: stale data returned from RAID cache
2045 Details    : If only a small amount of IO is done to the RAID device before
2046              reading it again it is possible to get stale data from the RAID
2047              cache instead of reading it from disk.
2048
2049 Severity   : normal
2050 Frequency  : always for sles10 kernel
2051 Bugzilla   : 10947
2052 Description: sles10 support
2053 Details    : ll_follow_link: compile fixes and using of nd_set_link
2054              under newer kernels.
2055
2056 Severity   : major
2057 Frequency  : depends on arch, kernel and compiler version, always on sles10
2058              kernel and x86_64
2059 Bugzilla   : 11562
2060 Description: recursive or deep enough symlinks cause stack overflow
2061 Details    : getting rid of large stack-allocated variable in
2062              __vfs_follow_link
2063
2064 Severity   : minor
2065 Frequency  : depends on hardware
2066 Bugzilla   : 11540
2067 Description: lustre write performance loss in the SLES10 kernel
2068 Details    : the performance loss is caused by using of write barriers in the
2069              ext3 code. The SLES10 kernel turns barrier support on by
2070              default. The fix is to undo that change for ldiskfs.
2071
2072 ------------------------------------------------------------------------------
2073
2074 2006-12-09  Cluster File Systems, Inc. <info@clusterfs.com>
2075        * version 1.4.8
2076        * Support for kernels:
2077         2.6.9-42.0.3EL (RHEL 4)
2078         2.6.5-7.276 (SLES 9)
2079         2.4.21-47.0.1.EL (RHEL 3)
2080         2.6.12.6 vanilla (kernel.org)
2081        * bug fixes
2082
2083 Severity   : major
2084 Frequency  : quota enabled and large files being deleted
2085 Bugzilla   : 10707
2086 Description: releasing more than 4GB of quota at once hangs OST
2087 Details    : If a user deletes more than 4GB of files on a single OST it
2088              will cause the OST to spin in an infinite loop.  Release
2089              quota in < 4GB chunks, or use a 64-bit value for 1.4.7.1+.
2090
2091 Severity   : minor
2092 Frequency  : rare
2093 Bugzilla   : 10845
2094 Description: statfs data retrieved from /proc may be stale or zero
2095 Details    : When reading per-device statfs data from /proc, in the
2096              {kbytes,files}_{total,free,avail} files, it may appear
2097              as zero or be out of date.
2098
2099 Severity   : minor
2100 Frequency  : systems with MD RAID1 external journal devices
2101 Bugzilla   : 10832
2102 Description: lconf's call to blkid is confused by RAID1 journal devices
2103 Details    : Use the "blkid -l" flag to locate the MD RAID device instead
2104              of returning all block devices that match the journal UUID.
2105
2106 Severity   : normal
2107 Frequency  : always, for aggregate stripe size over 4GB
2108 Bugzilla   : 10725
2109 Description: "lfs setstripe" fails assertion when setting 4GB+ stripe width
2110 Details    : Using "lfs setstripe" to set stripe size * stripe count over 4GB
2111              will fail the kernel with "ASSERTION(lsm->lsm_xfersize != 0)"
2112
2113 Severity   : minor
2114 Frequency  : always if "lfs find" used on a local file/directory
2115 Bugzilla   : 10864
2116 Description: "lfs find" segfaults if used on a local file/directory
2117 Details    : The case where a directory component was not specified wasn't
2118              handled correctly.  Handle this properly.
2119
2120 Severity   : normal
2121 Frequency  : always on ppc64
2122 Bugzilla   : 10634
2123 Description: the write to an ext3 filesystem mounted with mballoc got stuck
2124 Details    : ext3_mb_generate_buddy() uses find_next_bit() which does not
2125              perform endianness conversion.
2126
2127 Severity   : major
2128 Frequency  : rarely (truncate to non-zero file size after write under load)
2129 Bugzilla   : 10730, 10687
2130 Description: Files padded with zeros to next 4K multiple
2131 Details    : With filesystems mounted using the "extents" option (2.6 kernels)
2132              it is possible that files that are truncated to a non-zero size
2133              immediately after being written are filled with zero bytes beyond
2134              the truncated size.  No file data is lost.
2135
2136 Severity   : enhancement
2137 Bugzilla   : 10452
2138 Description: Allow recovery/failover for liblustre clients.
2139 Details    : liblustre clients were unaware of failover configurations until
2140              now.
2141
2142 Severity   : enhancement
2143 Bugzilla   : 10743
2144 Description: user file locks should fail when not mounting with flock option
2145 Details    : Set up an error-returning stub in ll_file_operations.lock field
2146              to prevent incorrect behaviour when client is mounted without
2147              flock option. Also, set up properly f_op->flock field for
2148              RHEL4 kernels.
2149
2150 Severity   : minor
2151 Frequency  : always on ia64
2152 Bugzilla   : 10905
2153 Description: "lfs df" loops on printing out MDS statfs information
2154 Details    : The obd_ioctl_data was not initialized and in some systems
2155              this caused a failure during the ioctl that did not return
2156              an error.  Initialize the struct and return an error on failure.
2157
2158 Severity   : minor
2159 Frequency  : SLES 9 only
2160 Bugzilla   : 10667
2161 Description: Error of copying files with lustre special EAs as root
2162 Details    : Client side always return success for setxattr call for lustre
2163              special xattr (currently only "trusted.lov").
2164
2165 Severity   : normal
2166 Frequency  : rarely on clusters with both ia64+i386 clients
2167 Bugzilla   : 10672
2168 Description: ia64+i686 clients doing shared IO on the same file may LBUG
2169 Details    : In rare cases when both ia64+i686 (or other mixed-PAGE_SIZE)
2170              clients are doing concurrent writes to the same file it is
2171              possible that the ia64 clients may LASSERT because the OST
2172              extent locks are not PAGE_SIZE aligned.  Ensure that grown
2173              locks are always aligned on the request boundary.
2174
2175 Severity   : normal
2176 Frequency  : specific use, occasional
2177 Bugzilla   : 7040
2178 Description: Overwriting in use executable truncates on-disk binary image
2179 Details    : If one node attempts to overwrite an executable in use by
2180              another node, we now correctly return ETXTBSY instead of
2181              truncating the file.
2182
2183 Severity   : enhancement
2184 Bugzilla   : 4900
2185 Description: Async OSC create to avoid the blocking unnecessarily.
2186 Details    : If a OST has no remain object, system will block on the creating
2187              when need to create a new object on this OST. Now, ways use
2188              pre-created objects when available, instead of blocking on an
2189              empty osc while others are not empty.  If we must block, we block
2190              for the shortest possible period of time.
2191
2192 Severity   : normal
2193 Frequency  : rare
2194 Bugzilla   : 2707
2195 Description: chmod on Lustre root is propagated to other clients
2196 Details    : Re-validate root's dentry in ll_lookup_it to avoid having it
2197              invalid by the follow_mount time.
2198
2199 Severity   : minor
2200 Frequency  : liblustre clients only
2201 Bugzilla   : 10883
2202 Description: Race in 'instant cancel' lock handling could lead to such locks
2203              never to be granted in case of SMP MDS
2204 Details    : Do not destroy not yet granted but cbpending locks in
2205              handle_enqueue
2206
2207 Severity   : minor
2208 Frequency  : replay/resend of open
2209 Bugzilla   : 10991
2210 Description: non null lock assetion failure in mds_intent_policy
2211 Details    : Trying to replay/resend lockless open requests resulted in
2212              mds_open() returning 0 with no lock.  Now it sets a flag if
2213              a lock is going to be returned.
2214
2215 Severity   : enhancement
2216 Bugzilla   : 10889
2217 Description: Checksum enhancements
2218 Details    : New checksum enhancements allow for resending RPCs that failed
2219              checksum checks.
2220
2221 Severity   : enhancement
2222 Bugzilla   : 7376
2223 Description: Tunables on number of dirty pages in cacche
2224 Details    : Allow to set limit on number of dirty pages cached.
2225
2226 Severity   : normal
2227 Frequency  : rare
2228 Bugzilla   : 10643
2229 Description: client crash on unmount - lock still has references
2230 Details    : In some error handling cases it was possible to leak a lock
2231              reference on a client while accessing a file.  This was not
2232              harmful to the client during operation, but would cause the
2233              client to crash when the filesystem is unmounted.
2234
2235 Severity   : normal
2236 Frequency  : specific case, rare
2237 Bugzilla   : 10921
2238 Description: ETXTBSY on mds though file not in use by client
2239 Details    : ETXTBSY is no longer incorrectly returned when attempting to
2240              chmod or chown a directory that the user previously tried to
2241              execute or a currently-executing binary.
2242
2243 Severity   : major
2244 Frequency  : extremely rare except on liblustre-based clients
2245 Bugzilla   : 10480
2246 Description: Lustre space not freed when files are deleted
2247 Details    : Clean up open-unlinked files after client eviction.  Previously
2248              the unlink was skipped and the files remained as orphans.
2249
2250 Severity   : normal
2251 Frequency  : rare
2252 Bugzilla   : 10999
2253 Description: OST failure "would be an LBUG" in waiting_locks_callback()
2254 Details    : In some cases it was possible to send a blocking callback to
2255              a client doing a glimpse, even though that client didn't get
2256              a lock granted.  When the glimpse lock is cancelled on the OST
2257              the freed lock is left on the waiting list and corrupted the list.
2258
2259 Severity   : major
2260 Frequency  : all core dumps
2261 Bugzilla   : 11103
2262 Description: Broke core dumps to lustre
2263 Details    : Negative dentry may be unhashed if parent does not have UPDATE
2264              lock, but some callers, e.g. do_coredump, expect dentry to be
2265              hashed after successful create, hash it in ll_create_it.
2266
2267 ------------------------------------------------------------------------------
2268
2269 2006-09-13  Cluster File Systems, Inc. <info@clusterfs.com>
2270        * version 1.4.7.1
2271        * Support for kernels:
2272         2.6.9-42.0.2.EL (RHEL 4)
2273         2.6.5-7.276 (SLES 9)
2274         2.4.21-40.EL (RHEL 3)
2275         2.6.12.6 vanilla (kernel.org)
2276       * bug fix
2277
2278 Severity   : major
2279 Frequency  : always on RHEL 3
2280 Bugzilla   : 10867
2281 Description: Number of open files grows over time
2282 Details    : The number of open files grows over time, whether or not
2283              Lustre is started.  This was due to a filp leak introduced
2284              by one of our kernel patches.
2285
2286 ------------------------------------------------------------------------------
2287
2288 08-20-2006  Cluster File Systems, Inc. <info@clusterfs.com>
2289        * version 1.4.7
2290        * Support for kernels:
2291         2.6.9-42.EL (RHEL 4)
2292         2.6.5-7.276 (SLES 9)
2293         2.4.21-40.EL (RHEL 3)
2294         2.6.12.6 vanilla (kernel.org)
2295        * bug fixes
2296
2297 Severity   : major
2298 Frequency  : rare
2299 Bugzilla   : 5719, 9635, 9792, 9684
2300 Description: OST (or MDS) trips assertions in (re)connection under heavy load
2301 Details    : If a server is under heavy load and cannot reply to new
2302              connection requests before the client resends the (re)connect,
2303              the connection handling code can behave badly if two service
2304              threads are concurrently handing separate (re)connections from
2305              the same client.  Add better locking to the connection handling
2306              code, and ensure that only a single connection will be processed
2307              for a given client UUID, even if the lock is dropped.
2308
2309 Severity   : enhancement
2310 Bugzilla   : 3627
2311 Description: add TCP zero-copy support to kernel
2312 Details    : Add support to the kernel TCP stack to allow zero-copy bulk
2313              sends if the hardware supports scatter-gather and checksumming.
2314              This allows socklnd to do client-write and server-read more
2315              efficiently and reduce CPU utilization from skbuf copying.
2316
2317 Severity   : minor
2318 Frequency  : only if NFS exporting from client
2319 Bugzilla   : 10258
2320 Description: NULL pointer deref in ll_iocontrol() if chattr mknod file
2321 Details    : If setting attributes on a file created under NFS that had
2322              never been opened it would be possible to oops the client
2323              if the file had no objects.
2324
2325 Severity   : minor
2326 Frequency  : always for liblustre
2327 Bugzilla   : 10290
2328 Description: liblustre client does MDS+OSTs setattr RPC for each write
2329 Details    : When doing a write from a liblustre client, the client
2330              incorrectly issued an RPC to the MDS and each OST the file was
2331              striped over in order to update the timestamps.  When writing
2332              with small chunks and many clients this could overwhelm the MDS
2333              with RPCs.  In all cases it would slow down the write because
2334              these RPCs are unnecessary.
2335
2336 Severity   : enhancement
2337 Bugzilla   : 9340
2338 Description: allow number of MDS service threads to be changed at module load
2339 Details    : It is now possible to change the number of MDS service threads
2340              running.  Adding "options mds mds_num_threads={N}" to the MDS's
2341              /etc/modprobe.conf will set the number of threads for the next
2342              time Lustre is restarted (assuming the "mds" module is also
2343              reloaded at that time).  The default number of threads will
2344              stay the same, 32 for most systems.
2345
2346 Severity   : major
2347 Frequency  : rare
2348 Bugzilla   : 10300
2349 Description: OST crash if filesystem is unformatted or corrupt
2350 Details    : If an OST is started on a device that has never been formatted
2351              or if the filesystem is corrupt and cannot even mount then the
2352              error handling cleanup routines would dereference a NULL pointer.
2353
2354 Severity   : medium
2355 Frequency  : rare
2356 Bugzilla   : 10047
2357 Description: NULL pointer deref in llap_from_page.
2358 Details    : get_cache_page_nowait can return a page with NULL (or otherwise
2359              incorrect) mapping if the page was truncated/reclaimed while it was
2360              searched for. Check for this condition and skip such pages when
2361              doing readahead. Introduce extra check to llap_from_page() to
2362              verify page->mapping->host is non-NULL (so page is not anonymous).
2363
2364 Severity   : minor
2365 Frequency  : Sometimes when using sys_sendfile
2366 Bugzilla   : 7020
2367 Description: "page not covered by a lock" warnings from ll_readpage
2368 Details    : sendfile called ll_readpage without right page locks present.
2369              Now we introduced ll_file_sendfile that does necessary locking
2370              around call to generic_file_sendfile() much like we do in
2371              ll_file_read().
2372
2373 Severity   : medium
2374 Frequency  : with certain MDS communication failures at client mount time
2375 Bugzilla   : 10268
2376 Description: NULL pointer deref after failed client mount
2377 Details    : a client connection request may delayed by the network layer
2378              and not be sent until after the PTLRPC layer has timed out the
2379              request.  If the client fails the mount immediately it will try
2380              to clean up before the network times out the request.  Add a
2381              reference from the request import to the obd device and delay
2382              the cleanup until the network drops the request.
2383
2384 Severity   : medium
2385 Frequency  : occasionally during client (re)connect
2386 Bugzilla   : 9387
2387 Description: assertion failure during client (re)connect
2388 Details    : processing a client connection request may be delayed by the
2389              client or server longer than the client connect timeout.  This
2390              causes the client to resend the connection request.  If the
2391              original connection request is replied in this interval, the
2392              client may trip an assertion failure in ptlrpc_connect_interpret()
2393              which thought it would be the only running connect process.
2394
2395 Severity   : medium
2396 Frequency  : only with obd_echo servers and clients that are rebooted
2397 Bugzilla   : 10140
2398 Description: kernel BUG accessing uninitialized data structure
2399 Details    : When running an obd_echo server it did not start the ping_evictor
2400              thread, and when a client was evicted an uninitialized data
2401              structure was accessed.  Start the ping_evictor in the RPC
2402              service startup instead of the OBD startup.
2403
2404 Severity   : enhancement
2405 Bugzilla   : 10193 (patchless)
2406 Description: Remove dependency on various unexported kernel interfaces.
2407 Details    : No longer need reparent_to_init, exit_mm, exit_files,
2408              sock_getsockopt, filemap_populate, FMODE_EXEC, put_filp.
2409
2410 Severity   : minor
2411 Frequency  : rare (only users of deprecated and unsupported LDAP config)
2412 Bugzilla   : 9337
2413 Description: write_conf for zeroconf mount queried LDAP incorrectly for client
2414 Details    : LDAP apparently contains 'lustreName' attributes instead of
2415              'name'.  A simple remapping of the name is sufficient.
2416
2417 Severity   : major
2418 Frequency  : rare (only with non-default dump_on_timeout debug enabled)
2419 Bugzilla   : 10397
2420 Description: waiting_locks_callback trips kernel BUG if client is evicted
2421 Details    : Running with the dump_on_timeout debug flag turned on makes
2422              it possible that the waiting_locks_callback() can try to dump
2423              the Lustre kernel debug logs from an interrupt handler.  Defer
2424              this log dumping to the expired_lock_main() thread.
2425
2426 Severity   : enhancement
2427 Bugzilla   : 10420
2428 Description: Support NFS exporting on 2.6 kernels.
2429 Details    : Implement non-rawops metadata methods for NFS server to use without
2430              changing NFS server code.
2431
2432 Severity   : medium
2433 Frequency  : very rare (synthetic metadata workload only)
2434 Bugzilla   : 9974
2435 Description: two racing renames might cause an MDS thread to deadlock
2436 Details    : Running the "racer" program may cause one MDS thread to rename
2437              a file from being the source of a rename to being the target of
2438              a rename at exactly the same time that another thread is doing
2439              so, and the second thread has already enqueued these locks after
2440              doing a lookup of the target and is trying to relock them in
2441              order.  Ensure that we don't try to re-lock the same resource.
2442
2443 Severity   : major
2444 Frequency  : only very large systems with liblustre clients
2445 Bugzilla   : 7304
2446 Description: slow eviction of liblustre clients with the "evict_by_nid" RPC
2447 Details    : Use asynchronous set_info RPCs to send the "evict_by_nid" to
2448              all OSTs in parallel.  This allows the eviction of stale liblustre
2449              clients to proceed much faster than if they were done in series,
2450              and also offers similar improvements for other set_info RPCs.
2451
2452 Severity   : minor
2453 Frequency  : common
2454 Bugzilla   : 10265
2455 Description: excessive CPU usage during initial read phase on client
2456 Details    : During the initial read phase on a client, it would agressively
2457              retry readahead on the file, consuming too much CPU and impacting
2458              performance (since 1.4.5.8).  Improve the readahead algorithm
2459              to avoid this, and also improve some other common cases (read
2460              of small files in particular, where "small" is files smaller than
2461              /proc/fs/lustre/llite/*/max_read_ahead_whole_mb, 2MB by default).
2462
2463 Severity   : minor
2464 Frequency  : rare
2465 Bugzilla   : 10450
2466 Description: MDS crash when receiving packet with unknown intent.
2467 Details    : Do not LBUG in unknown intent case, just return -EFAULT
2468
2469 Severity   : enhancement
2470 Bugzilla   : 9293, 9385
2471 Description: MDS RPCs are serialised on client. This is unnecessary for some.
2472 Details    : Do not serialize getattr (non-intent version) and statfs.
2473
2474 Severity   : minor
2475 Frequency  : occasional, when OST network is overloaded/intermittent
2476 Bugzilla   : 10416
2477 Description: client evicted by OST after bulk IO timeout
2478 Details    : If a client sends a bulk IO request (read or write) the OST
2479              may evict the client if it is unresposive to its data GET/PUT
2480              request.  This is incorrect if the network is overloaded (takes
2481              too long to transfer the RPC data) or dropped the OST GET/PUT
2482              request.  There is no need to evict the client at all, since
2483              the pinger and/or lock callbacks will handle this, and the
2484              client can restart the bulk request.
2485
2486 Severity   : minor
2487 Frequency  : Always when mmapping file with no objects
2488 Bugzilla   : 10438
2489 Description: client crashes when mmapping file with no objects
2490 Details    : Check that we actually have objects in a file before doing any
2491              operations on objects in ll_vm_open, ll_vm_close and
2492              ll_glimpse_size.
2493
2494 Severity   : minor
2495 Frequency  : Rare
2496 Bugzilla   : 10484
2497 Description: Request leak when working with deleted CWD
2498 Details    : Introduce advanced request refcount tracking for requests
2499              referenced from lustre intent.
2500
2501 Severity   : Enhancement
2502 Bugzilla   : 10482
2503 Description: Cache open file handles on client.
2504 Details    : MDS now will return special lock along with openhandle, if
2505              requested and client is allowed to hold openhandle, even if unused,
2506              until such a lock is revoked. Helps NFS a lot, since NFS is opening
2507              closing files for every read/write openration.
2508
2509 Severity   : Enhancement
2510 Bugzilla   : 9291
2511 Description: Cache open negative dentries on client when possible.
2512 Details    : Guard negative dentries with UPDATE lock on parent dir, drop
2513              negative dentries on lock revocation.
2514
2515 Severity   : minor
2516 Frequency  : Always
2517 Bugzilla   : 10510
2518 Description: Remounting a client read-only wasn't possible with a zconf mount
2519 Details    : It wasn't possible to remount a client read-only with llmount.
2520
2521 Severity   : enhancement
2522 Description: Include MPICH 1.2.6 Lustre ADIO interface patch
2523 Details    : In lustre/contrib/ or /usr/share/lustre in RPM a patch for
2524              MPICH is included to add Lustre-specific ADIO interfaces.
2525              This is based closely on the UFS ADIO layer and only differs
2526              in file creation, in order to allow the OST striping to be set.
2527              This is user-contributed code and not supported by CFS.
2528
2529 Severity   : minor
2530 Frequency  : Always
2531 Bugzilla   : 9486
2532 Description: extended inode attributes (immutable, append-only) work improperly
2533              when 2.4 and 2.6 kernels are used on client/server or vice versa
2534 Details    : Introduce kernel-independent values for these flags.
2535
2536 Severity   : enhancement
2537 Frequency  : Always
2538 Bugzilla   : 10248
2539 Description: Allow fractional MB tunings for lustre in /proc/ filesystem.
2540 Details    : Many of the /proc/ tunables can only be tuned at a megabyte
2541              granularity. Now, Fractional MB granularity is be supported,
2542              this is very useful for low memory system.
2543
2544 Severity   : enhancement
2545 Bugzilla   : 9292
2546 Description: Getattr by fid
2547 Details    : Getting a file attributes by its fid, obtaining UPDATE|LOOKUP
2548              locks, avoids extra getattr rpc requests to MDS, allows '/' to
2549              have locks and avoids getattr rpc requests for it on every stat.
2550
2551 Severity   : major
2552 Frequency  : Always, for filesystems larger than 2TB
2553 Bugzilla   : 6191
2554 Description: ldiskfs crash at mount for filesystem larger than 2TB with mballoc
2555 Details    : Kenrel kmalloc limits allocations to 128kB and this prevents
2556              filesystems larger than 2TB to be mounted with mballoc enabled.
2557
2558 Severity   : critical
2559 Frequency  : Always, for 32-bit kernel without CONFIG_LBD and filesystem > 2TB
2560 Bugzilla   : 6191
2561 Description: ldiskfs crash at mount for filesystem larger than 2TB with mballoc
2562 Details    : If a 32-bit kernel is compiled without CONFIG_LBD enabled and a
2563              filesystems larger than 2TB is mounted then the kernel will
2564              silently corrupt the start of the filesystem.  CONFIG_LBD is
2565              enabled for all CFS-supported kernels, but the possibility of
2566              this happening with a modified kernel config exists.
2567
2568 Severity   : enhancement
2569 Bugzilla   : 10462
2570 Description: add client O_DIRECT support for 2.6 kernels
2571 Details    : It is now possible to do O_DIRECT reads and writes to files
2572              in the Lustre client mountpoint on 2.6 kernel clients.
2573
2574 Severity   : enhancement
2575 Bugzilla   : 10446
2576 Description: parallel glimpse, setattr, statfs, punch, destroy requests
2577 Details    : Sends glimpse, setattr, statfs, punch, destroy requests to OSTs in
2578              parallel, not waiting for response from every OST before sending
2579              a rpc to the next OST.
2580
2581 Severity   : minor
2582 Frequency  : rare
2583 Bugzilla   : 10150
2584 Description: setattr vs write race when updating file timestamps
2585 Details    : Client processes that update a file timestamp into the past
2586              right after writing to the file (e.g. tar) it is possible that
2587              the updated file modification time can be reset to the current
2588              time due to a race between processing the setattr and write RPC.
2589
2590 Severity   : enhancement
2591 Bugzilla   : 10318
2592 Description: Bring 'lfs find' closer in line with regular Linux find.
2593 Details    : lfs find util supports -atime, -mtime, -ctime, -maxdepth, -print,
2594              -print0 options and obtains all the needed info through the lustre
2595              ioctls.
2596
2597 Severity   : enhancement
2598 Bugzilla   : 6221
2599 Description: support up to 1024 configured devices on one node
2600 Details    : change obd_dev array from statically allocated to dynamically
2601              allocated structs as they are first used to reduce memory usage
2602
2603 Severity   : minor
2604 Frequency  : rare
2605 Bugzilla   : 10437
2606 Description: Flush dirty partially truncated pages during truncate
2607 Details    : Immediatelly flush partially truncated pages in filter_setattr,
2608              this way we completely avoid having any pages in page cache on OST
2609              and can retire ugly workarounds during writes to flush such pages.
2610
2611 Severity   : minor
2612 Frequency  : rare
2613 Bugzilla   : 10409
2614 Description: i_sem vs transaction deadlock in mds_obd_destroy during unlink.
2615 Details    : protect inode from truncation within vfs_unlink() context
2616              just take a reference before calling vfs_unlink() and release it
2617              when parent's i_sem is free.
2618
2619 Severity   : major
2620 Frequency  : rare
2621 Bugzilla   : 4778
2622 Description: last_id value checked outside lock on OST caused LASSERT failure
2623 Details    : If there were multiple MDS->OST object precreate requests in
2624              flight, it was possible that the OST's last object id was checked
2625              outside a lock and incorrectly tripped an assertion.  Move checks
2626              inside locks, and discard old precreate requests.
2627
2628 Severity   : minor
2629 Frequency  : always, if extents are used on OSTs
2630 Bugzilla   : 10703
2631 Description: index ei_leaf_hi (48-bit extension) is not zeroed in extent index
2632 Details    : OSTs using the extents format would not zero the high 16 bits of
2633              the index physical block number.  This is not a problem for any
2634              OST filesystems smaller than 16TB, and no kernels support ext3
2635              filesystems larger than 16TB yet.  This is fixed in 1.4.7 (all
2636              new/modified files) and can be fixed for existing filesystems
2637              with e2fsprogs-1.39-cfs1.
2638
2639 Severity   : minor
2640 Frequency  : rare
2641 Bugzilla   : 9387
2642 Description: import connection selection may be incorrect if timer wraps
2643 Details    : Using a 32-bit jiffies timer with HZ=1000 may cause backup
2644              import connections to be ignored if the 32-bit jiffies counter
2645              wraps.  Use a 64-bit jiffies counter.
2646
2647 Severity   : minor
2648 Frequency  : very large clusters immediately after boot
2649 Bugzilla   : 10083
2650 Description: LNET request buffers exhausted under heavy short-term load
2651 Details    : If a large number of client requests are generated on a service
2652              that has previously never seen so many requests it is possible
2653              that the request buffer growth cannot keep up with the spike in
2654              demand.  Instead of dropping incoming requests, they are held in
2655              the LND until the RPC service can accept more requests.
2656
2657 Severity   : minor
2658 Frequency  : Sometimes during replay
2659 Bugzilla   : 9314
2660 Description: Assertion failure in ll_local_open after replay.
2661 Details    : If replay happened on an open request reply before we were able
2662              to set replay handler, reply will become not swabbed tripping the
2663              assertion in ll_local_open. Now we set the handler right after
2664              recognising of open request
2665
2666 Severity   : trivial
2667 Frequency  : very rare
2668 Bugzilla   : 10584
2669 Description: kernel reports "badness in vsnprintf"
2670 Details    : Reading from the "recovery_status" /proc file in small chunks
2671              may cause a negative length in lprocfs_obd_rd_recovery_status()
2672              call to vsnprintf() (which is otherwise harmless).  Exit early
2673              if there is no more space in the output buffer.
2674
2675 Severity   : enhancement
2676 Bugzilla   : 2259
2677 Description: clear OBD RPC statistics by writing to them
2678 Details    : It is now possible to clear the OBD RPC statistics by writing
2679              to the "stats" file.
2680
2681 Severity   : minor
2682 Frequency  : rare
2683 Bugzilla   : 10641
2684 Description: Client mtime is not the same on different clients after utimes
2685 Details    : In some cases, the client was using the utimes() syscall on
2686              a file cached on another node.  The clients now validate the
2687              ctime from the MDS + OSTs to determine which one is right.
2688
2689 Severity   : minor
2690 Frequency  : always
2691 Bugzilla   : 10611
2692 Description: Inability to activate failout mode
2693 Details    : lconf script incorrectly assumed that in pythong string's numeric
2694              value is used in comparisons.
2695
2696 Severity   : minor
2697 Frequency  : always with multiple stripes per file
2698 Bugzilla   : 10671
2699 Description: Inefficient object allocation for mutli-stripe files
2700 Details    : When selecting which OSTs to stripe files over, for files with
2701              a stripe count that divides evenly into the number of OSTs,
2702              the MDS is always picking the same starting OST for each file.
2703              Return the OST selection heuristic to the original design.
2704
2705 Severity   : trivial
2706 Frequency  : rare
2707 Bugzilla   : 10673
2708 Description: mount failures may take full timeout to return an error
2709 Details    : Under some heavy load conditions it is possible that a
2710              failed mount can wait for the full obd_timeout interval,
2711              possibly several minutes, before reporting an error.
2712              Instead return an error as soon as the status is known.
2713 Severity   : major
2714 Frequency  : quota enabled and large files being deleted
2715 Bugzilla   : 10707
2716 Description: releasing more than 4GB of quota at once hangs OST
2717 Details    : If a user deletes more than 4GB of files on a single OST it
2718              will cause the OST to spin in an infinite loop.  Release
2719              quota in < 4GB chunks, or use a 64-bit value for 1.4.7.1+.
2720
2721 Severity   : trivial
2722 Frequency  : rare
2723 Bugzilla   : 10845
2724 Description: statfs data retrieved from /proc may be stale or zero
2725 Details    : When reading per-device statfs data from /proc, in the
2726              {kbytes,files}_{total,free,avail} files, it may appear
2727              as zero or be out of date.
2728
2729 Severity   : trivial
2730 Frequency  : systems with MD RAID1 external journal devices
2731 Bugzilla   : 10832
2732 Description: lconf's call to blkid is confused by RAID1 journal devices
2733 Details    : Use the "blkid -l" flag to locate the MD RAID device instead
2734              of returning all block devices that match the journal UUID.
2735
2736 Severity   : normal
2737 Frequency  : always, for aggregate stripe size over 4GB
2738 Bugzilla   : 10725
2739 Description: assertion fails when trying to use 4GB stripe size
2740 Details    : Use "setstripe" to set stripe size over 4GB will fail the kernel,
2741              complaining "ASSERTION(lsm->lsm_xfersize != 0)"
2742
2743 Severity   : normal
2744 Frequency  : always on ppc64
2745 Bugzilla   : 10634
2746 Description: the first write on an ext3 filesystem with mballoc got stuck
2747 Details    : ext3_mb_generate_buddy() uses find_next_bit() which does not
2748              perform endianness conversion.
2749
2750 ------------------------------------------------------------------------------
2751
2752 02-14-2006  Cluster File Systems, Inc. <info@clusterfs.com>
2753        * version 1.4.6
2754        * WIRE PROTOCOL CHANGE.  This version of Lustre networking WILL NOT
2755          INTEROPERATE with older versions automatically.  Please read the
2756          user documentation before upgrading any part of a live system.
2757        * WARNING: Lustre networking configuration changes are required with
2758          this release.  See https://bugzilla.clusterfs.com/show_bug.cgi?id=10052
2759          for details.
2760        * bug fixes
2761        * Support for kernels:
2762         2.6.9-22.0.2.EL (RHEL 4)
2763         2.6.5-7.244 (SLES 9)
2764         2.6.12.6 vanilla (kernel.org)
2765
2766
2767 Severity   : enhancement
2768 Bugzilla   : 7981/8208
2769 Description: Introduced Lustre Networking (LNET)
2770 Details    : LNET is new networking infrastructure for Lustre, it includes
2771              a reorganized network configuration mode (see the user
2772              documentation for full details) as well as support for routing
2773              between different network fabrics.  Lustre Networking Devices
2774              (LNDs) for the supported network fabrics have also been
2775              created for this new infrastructure.
2776
2777 Severity   : enhancement
2778 Description: Introduced Access control lists
2779 Details    : clients can set ACLs on files and directories in order to have
2780              more fine-grained permissions than the standard Unix UGO+RWX.
2781              The MDS must be started with the "-o acl" mount option.
2782
2783 Severity   : enhancement
2784 Description: Introduced filesystem quotas
2785 Details    : Administrators may now establish per-user quotas on the
2786              filesystem.
2787
2788 Severity   : enhancement
2789 Bugzilla   : 7982
2790 Description: Configuration change for the XT3
2791              The PTLLND is now used to run Lustre over Portals on the XT3
2792              The configure option(s) --with-cray-portals are no longer used.
2793              Rather --with-portals=<path-to-portals-includes> is used to
2794              enable building on the XT3.  In addition to enable XT3 specific
2795              features the option --enable-cray-xt3 must be used.
2796         
2797 Severity   : major
2798 Frequency  : rare
2799 Bugzilla   : 7407
2800 Description: Running on many-way SMP OSTs can trigger oops in llcd_send()
2801 Details    : A race between allocating a new llcd and re-getting the llcd_lock
2802              allowed another thread to grab newly-allocated llcd.
2803
2804 Severity   : enhancement
2805 Bugzilla   : 7116
2806 Description: 2.6 OST async journal commit and locking fix to improve performance
2807 Details    : The filter_direct_io()+filter_commitrw_write() journal commits for
2808              2.6 kernels are now async as they already were in 2.4 kernels so
2809              that they can commit concurrently with the network bulk transfer.
2810              For block-allocated files the filter allocation semaphore is held
2811              to avoid filesystem fragmentation during allocation.  BKL lock
2812              removed for 2.6 xattr operations where it is no longer needed.
2813
2814 Severity   : minor
2815 Frequency  : rare
2816 Bugzilla   : 8320
2817 Description: lconf incorrectly determined whether two IP networks could talk
2818 Details    : In some more complicated routing and multiple-network
2819              configurations, lconf will avoid trying to make a network
2820              connection to a disjoint part of the IP space.  It was doing the
2821              math incorrectly for one set of cases.
2822
2823 Severity   : major
2824 Frequency  : rare
2825 Bugzilla   : 7359
2826 Description: Fix for potential infinite loop processing records in an llog.
2827 Details    : If an llog record is corrupted/zeroed, it is possible to loop
2828              forever in llog_process().  Validate the llog record length
2829              and skip the remainder of the block on error.
2830
2831 Severity   : minor
2832 Frequency  : occasional (liblustre only)
2833 Bugzilla   : 6363
2834 Description: liblustre could not open files whose last component is a symlink
2835 Details    : sysio_path_walk() would incorrectly pass the open intent to
2836              intermediate path components.
2837
2838 Severity   : minor
2839 Frequency  : rare (liblustre only with non-standard tuning)
2840 Bugzilla   : 7201 (7350)
2841 Description: Tuning the MDC DLM LRU size to zero triggers client LASSERT
2842 Details    : llu_lookup_finish_locks() tries to set lock data on a lock
2843              after it has been released, only do this for referenced locks
2844
2845 Severity   : enhancement
2846 Bugzilla   : 7328
2847 Description: specifying an (invalid) directory default stripe_size of -1
2848              would reset the directory default striping
2849 Details    : stripe_size -1 was used internally to signal directory stripe
2850              removal, now use "all default" to signal dir stripe removal
2851              as a directory striping of "all default" is not useful
2852
2853 Severity   : minor
2854 Frequency  : common for large clusters running liblustre clients
2855 Bugzilla   : 7198
2856 Description: doing an ls when liblustre clients are running is slow
2857 Details    : sending a glimpse AST to a liblustre client waits for every AST
2858              to time out, as liblustre clients will not respond.  Since they
2859              cannot cache data we refresh the OST lock LVB from disk instead.
2860
2861 Severity   : enhancement
2862 Bugzilla   : 7198
2863 Description: doing an ls at the same time as file IO can be slow
2864 Details    : enqueue and other "small" requests can be blocked behind many
2865              large IO requests.  Create a new OST IO portal for non-IO
2866              requests so they can be processed faster.
2867
2868 Severity   : minor
2869 Frequency  : rare (only HPUX clients mounting unsupported re-exported NFS vol)
2870 Bugzilla   : 5781
2871 Description: an HPUX NFS client would get -EACCESS when ftruncate()ing a newly
2872              created file with mode 000
2873 Details    : the Linux NFS server relies on an MDS_OPEN_OWNEROVERRIDE hack to
2874              allow an ftruncate() as a non-root user to a file with mode 000.
2875              Lustre now respects this flag to disable mode checks when
2876              truncating a file owned by the user
2877
2878 Severity   : minor
2879 Frequency  : liblustre-only, when liblustre client dies unexpectedly or becomes
2880              busy
2881 Bugzilla   : 7313
2882 Description: Revoking locks from clients that went dead or catatonic might take
2883              a lot of time.
2884 Details    : New lock flags FL_CANCEL_ON_BLOCK used by liblustre makes
2885              cancellation of such locks instant on servers without waiting for
2886              any reply from clients. Clients drops these locks when cancel
2887              notification from server is received without replying.
2888
2889 Severity   : minor
2890 Frequency  : liblustre-only, when liblustre client dies or becomes busy
2891 Bugzilla   : 7311
2892 Description: Doing ls on Linux clients can take a long time with active
2893              liblustre clients
2894 Details    : Liblustre client cannot handle ASTs in timely manner, so avoid
2895              granting such locks to it in the first place if possible.  Locks
2896              are taken by proxy on the OST during the read or write and
2897              dropped immediately afterward.  Add connect flags handling, do
2898              not grant locks to liblustre clients for glimpse ASTs.
2899
2900 Severity   : enhancement
2901 Bugzilla   : 6252
2902 Description: Improve read-ahead algorithm to avoid excessive IO for random reads
2903 Details    : Existing read-ahead algorithm is tuned for the case of streamlined
2904              sequential reads and behaves badly with applications doing random
2905              reads.  Improve it by reading ahead at least read region, and
2906              avoiding excessive large RPC for small reads.
2907
2908 Severity   : enhancement
2909 Bugzilla   : 8330
2910 Description: Creating more than 1000 files for a single job may cause a load
2911              imbalance on the OSTs if there are also a large number of OSTs.
2912 Details    : qos_prep_create() uses an OST index reseed value that is an
2913              even multiple of the number of available OSTs so that if the
2914              reseed happens in the middle of the object allocation it will
2915              still utilize the OSTs as uniformly as possible.
2916
2917 Severity   : major
2918 Frequency  : rare
2919 Bugzilla   : 8322
2920 Description: OST or MDS may oops in ping_evictor_main()
2921 Details    : ping_evictor_main() drops obd_dev_lock if deleting a stale export
2922              but doesn't restart at beginning of obd_exports_timed list
2923              afterward.
2924
2925 Severity   : enhancement
2926 Bugzilla   : 7304
2927 Description: improve by-nid export eviction on the MDS and OST
2928 Details    : allow multiple exports with the same NID to be evicted at one
2929              time without re-searching the exports list.
2930
2931 Severity   : major
2932 Frequency  : rare, only with supplementary groups enabled on SMP 2.6 kernels
2933 Bugzilla   : 7273
2934 Description: MDS may oops in groups_free()
2935 Details    : in rare race conditions a newly allocated group_info struct is
2936              freed again, and this can be NULL.  The 2.4 compatibility code
2937              for groups_free() checked for a NULL pointer, but 2.6 did not.
2938
2939 Severity   : minor
2940 Frequency  : common for liblustre clients doing little filesystem IO
2941 Bugzilla   : 9352, 7313
2942 Description: server may evict liblustre clients accessing contended locks
2943 Details    : if a client is granted a lock or receives a completion AST
2944              with a blocking AST already set it would not reply to the AST
2945              for LDLM_FL_CANCEL_ON_BLOCK locks.  It now replies to such ASTs.
2946
2947 Severity   : minor
2948 Frequency  : lfs setstripe, only systems with more than 160 OSTs
2949 Bugzilla   : 9440
2950 Description: unable to set striping with a starting offset beyond OST 160
2951 Details    : llapi_create_file() incorrectly limited the starting stripe
2952              index to the maximum single-file stripe count.
2953
2954 Severity   : minor
2955 Frequency  : LDAP users only
2956 Bugzilla   : 6163
2957 Description: lconf did not handle in-kernel recovery with LDAP properly
2958 Details    : lconf/LustreDB get_refs() is searching the wrong namespace
2959
2960 Severity   : enhancement
2961 Bugzilla   : 7342
2962 Description: bind OST threads to NUMA nodes to improve performance
2963 Details    : all OST threads are uniformly bound to CPUs on a single NUMA
2964              node and do their allocations there to localize memory access
2965
2966 Severity   : enhancement
2967 Bugzilla   : 7979
2968 Description: llmount can determine client NID directly from Myrinet (GM)
2969 Details    : the client NID code from gmnalnid was moved directly into
2970              llmount, removing the need to use this or specifying the
2971              client NID explicitly when mounting GM clients with zeroconf
2972
2973 Severity   : minor
2974 Frequency  : if client is started with down MDS
2975 Bugzilla   : 7184
2976 Description: if client is started with down MDS mount hangs in ptlrpc_queue_wait
2977 Details    : Having an LWI_INTR() wait event (interruptible, but no timeout)
2978              will wait indefinitely in ptlrpc_queue_wait->l_wait_event() after
2979              ptlrpc_import_delayed_req() because we didn't check if the
2980              request was interrupted, and we also didn't break out of the
2981              event loop if there was no timeout
2982
2983 Severity   : major
2984 Frequency  : rare
2985 Bugzilla   : 5047
2986 Description: data loss during non-page-aligned writes to a single file from
2987              both multiple nodes and multiple threads on one node at same time
2988 Details    : updates to KMS and lsm weren't protected by common lock. Resulting
2989              inconsistency led to false short-reads, that were cached and later
2990              used by ->prepare_write() to fill in partially written page,
2991              leading to data loss.
2992
2993 Severity   : minor
2994 Frequency  : always, if lconf --abort_recovery used
2995 Bugzilla   : 7047
2996 Description: lconf --abort_recovery fails with 'Operation not supported'
2997 Details    : lconf was attempting to abort recovery on the MDT device and not
2998              the MDS device
2999
3000 Severity   : enhancement
3001 Bugzilla   : 9445
3002 Description: remove cleanup logs
3003 Details    : replace lconf-generated cleanup logs with lustre internal
3004              cleanup routines.  Eliminates the need for client-cleanup and
3005              mds-cleanup logs.
3006
3007 Severity   : enhancement
3008 Bugzilla   : 8592
3009 Description: add support for EAs (user and system) on lustre filesystems
3010 Details    : it is now possible to store extended attributes in the Lustre
3011              client filesystem, and with the user_xattr mount option it
3012              is possible to allow users to store EAs on their files also
3013
3014 Severity   : enhancement
3015 Bugzilla   : 7293
3016 Description: Add possibility (config option) to show minimal available OST free
3017              space.
3018 Details    : When compiled with --enable-mindf configure option, statfs(2)
3019              (and so, df) will return least minimal free space available from
3020              all OSTs as amount of free space on FS, instead of summary of
3021              free spaces of all OSTs.
3022
3023 Severity   : enhancement
3024 Bugzilla   : 7311
3025 Description: do not expand extent locks acquired on OST-side
3026 Details    : Modify ldlm_extent_policy() to not expand local locks, acquired
3027              by server: they are not cached anyway.
3028
3029 Severity   : major
3030 Frequency  : when mmap is used/binaries executed from Lustre
3031 Bugzilla   : 9482
3032 Description: Unmmap pages before throwing them away from read cache.
3033 Details    : llap_shrink cache now attempts to unmap pages before discarding
3034              them (if unmapping failed - do not discard).  SLES9 kernel has
3035              extra checks that trigger if this unmapping is not done first.
3036
3037 Severity   : minor
3038 Frequency  : rare
3039 Bugzilla   : 6034
3040 Description: lconf didn't resolve symlinks before checking to see whether a
3041              given mountpoint was already in use
3042
3043 Severity   : minor
3044 Frequency  : when migrating failover services
3045 Bugzilla   : 6395, 9514
3046 Description: When migrating a subset of services from a node (e.g. failback
3047              from a failover service node) the remaining services would
3048              time out and evict clients.
3049 Details    : lconf --force (implied by --failover) sets the global obd_timeout
3050              to 5 seconds in order to quickly disconnect, but this caused
3051              other RPCs to time out too quickly.  Do not change the global
3052              obd_timeout for force cleanup, only set it for DISCONNECT RPCs.
3053
3054 Severity   : enhancement
3055 Frequency  : if MDS is started with down OST
3056 Bugzilla   : 9439,5706
3057 Description: Allow startup/shutdown of an MDS without depending on the
3058              availability of the OSTs.
3059 Details    : Asynchronously call mds_lov_synchronize during MDS startup.
3060              Add appropriate locking and lov-osc refcounts for safe
3061              cleaning.  Add osc abort_inflight calls in case the
3062              synchronize never started.
3063
3064 Severity   : minor
3065 Frequency  : occasional (Cray XT3 only)
3066 Bugzilla   : 7305
3067 Description: root not authorized to access files in CRAY_PORTALS environment
3068 Details    : The client process capabilities were not honoured on the MDS in
3069              a CRAY_PORTALS/CRAY_XT3 environment.  If the file had previously
3070              been accessed by an authorized user then root was able to access
3071              the file on the local client also.  The root user capabilities
3072              are now allowed on the MDS, as this environment has secure UID.
3073
3074 Severity   : minor
3075 Frequency  : occasional
3076 Bugzilla   : 6449
3077 Description: ldiskfs "too long searching" message happens too often
3078 Details    : A debugging message (otherwise harmless) prints too often on
3079              the OST console.  This has been reduced to only happen when
3080              there are fragmentation problems on the filesystem.
3081
3082 Severity   : minor
3083 Frequency  : rare
3084 Bugzilla   : 9598
3085 Description: Division by zero in statfs when all OSCs are inactive
3086 Details    : lov_get_stripecnt() returns zero due to incorrect order of checks,
3087              lov_statfs divides by value returned by lov_get_stripecnt().
3088
3089 Severity   : minor
3090 Frequency  : common
3091 Bugzilla   : 9489, 3273
3092 Description: First write from each client to each OST was only 4kB in size,
3093              to initialize client writeback cache, which caused sub-optimal
3094              RPCs and poor layout on disk for the first writen file.
3095 Details    : Clients now request an initial cache grant at (re)connect time
3096              and so that they can start streaming writes to the cache right
3097              away and always do full-sized RPCs if there is enough data.
3098              If the OST is rebooted the client also re-establishes its grant
3099              so that client cached writes will be honoured under the grant.
3100
3101 Severity   : minor
3102 Frequency  : common
3103 Bugzilla   : 7198
3104 Description: Slow ls (and stat(2) syscall) on files residing on IO-loaded OSTs
3105 Details    : Now I/O RPCs go to different portal number and (presumably) fast
3106              lock requests (and glimses) and other RPCs get their own service
3107              threads pool that should be able to service those RPCs
3108              immediatelly.
3109
3110 Severity   : enhancement
3111 Bugzilla   : 7417
3112 Description: Ability to exchange lustre version between client and servers and
3113              issue warnings at client side if client is too old. Also for
3114              liblustre clients there is ability to refuse connection of too old
3115              clients.
3116 Details    : New 'version' field is added to connect data structure that is
3117              filled with version info. That info is later checked by server and
3118              by client.
3119
3120 Severity   : minor
3121 Frequency  : rare, liblustre only.
3122 Bugzilla   : 9296, 9581
3123 Description: Two simultaneous writes from liblustre at offset within same page
3124              might proceed at the same time overwriting eachother with stale
3125              data.
3126 Details    : I/O lock withing llu_file_prwv was released too early, before data
3127              actually was hitting the wire. Extended lock-holding time until
3128              server acknowledges receiving data.
3129
3130 Severity   : minor
3131 Frequency  : extremely rare. Never observed in practice.
3132 Bugzilla   : 9652
3133 Description: avoid generating lustre_handle cookie of 0.
3134 Details    : class_handle_hash() generates handle cookies by incrementing
3135              global counter, and can hit 0 occasionaly (this is unlikely, but
3136              not impossible, because initial value of cookie counter is
3137              selected randonly). Value of 0 is used as a sentinel meaning
3138              "unassigned handle" --- avoid it. Also coalesce two critical
3139              sections in this function into one.
3140
3141 Severity   : enhancement
3142 Bugzilla   : 9528
3143 Description: allow liblustre clients to delegate truncate locking to OST
3144 Details    : To avoid overhead of locking, liblustre client instructs OST to
3145              take extent lock in ost_punch() on client's behalf. New connection
3146              flag is added to handle backward compatibility.
3147
3148 Severity   : enhancement
3149 Bugzilla   : 4928, 7341, 9758
3150 Description: allow number of OST service threads to be specified
3151 Details    : a module parameter allows the number of OST service threads
3152              to be specified via "options ost ost_num_threads={N}" in the
3153              OSS's /etc/modules.conf or /etc/modprobe.conf.
3154
3155 Severity   : major
3156 Frequency  : rare
3157 Bugzilla   : 6146, 9635, 9895
3158 Description: servers crash with bad pointer in target_handle_connect()
3159 Details    : In rare cases when a client is reconnecting it was possible that
3160              the connection request was the last reference for that export.
3161              We would temporarily drop the export reference and get a new
3162              one, but this may have been the last reference and the export
3163              was just destroyed.  Get new reference before dropping old one.
3164
3165 Severity   : enhancement
3166 Frequency  : if client is started with failover MDS
3167 Bugzilla   : 9818
3168 Description: Allow multiple MDS hostnames in the mount command
3169 Details    : Try to read the configuration from all specified MDS
3170              hostnames during a client mount in case the "primary"
3171              MDS is down.
3172
3173 Severity   : enhancement
3174 Bugzilla   : 9297
3175 Description: Stop sending data to evicted clients as soon as possible.
3176 Details    : Check if the client we are about to send or are sending data to
3177              was evicted already. (Check is done every second of waiting,
3178              for which l_wait_event interface was extended to allow checking
3179              of exit condition at specified intervals).
3180
3181 Severity   : minor
3182 Frequency  : rare, normally only when NFS exporting is done from client
3183 Bugzilla   : 9301
3184 Description: 'bad disk LOV MAGIC: 0x00000000' error when chown'ing files
3185              without objects
3186 Details    : Make mds_get_md() recognise empty md case and set lmm size to 0.
3187
3188 Severity   : minor
3189 Frequency  : always, if srand() is called before liblustre initialization
3190 Bugzilla   : 9794
3191 Description: Liblustre uses system PRNG disturbing its usage by user application
3192 Details    : Introduce internal to lustre fast and high-quality PRNG for
3193              lustre usage and make liblustre and some other places in generic
3194              lustre code to use it.
3195
3196 Severity   : enhancement
3197 Bugzilla   : 9477, 9557, 9870
3198 Description: Verify that the MDS configuration logs are updated when xml is
3199 Details    : Check if the .xml configuration logs are newer than the config
3200              logs stored on the MDS and report an error if this is the case.
3201              Request --write-conf, or allow starting with --old_conf.
3202
3203 Severity   : enhancement
3204 Bugzilla   : 6034
3205 Description: Handle symlinks in the path when checking if Lustre is mounted.
3206 Details    : Resolve intermediate symlinks when checking if a client has
3207              mounted a filesystem to avoid duplicate client mounts.
3208
3209 Severity   : minor
3210 Frequency  : rare
3211 Bugzilla   : 9309
3212 Description: lconf can hit an error exception but still return success.
3213 Details    : The lconf command catches the Command error exception at the top
3214              level script context and will exit with the associated exit
3215              status, but doesn't ensure that this exit status is non-zero.
3216
3217 Severity   : minor
3218 Frequency  : rare
3219 Bugzilla   : 9493
3220 Description: failure of ptlrpc thread startup can cause oops
3221 Details    : Starting a ptlrpc service thread can fail if there are a large
3222              number of threads or the server memory is very fragmented.
3223              Handle this without oopsing.
3224
3225 Severity   : minor
3226 Frequency  : always, only if liblustre and non-default acceptor port was used
3227 Bugzilla   : 9933
3228 Description: liblustre cannot connect to servers with non-default acceptor port
3229 Details    : tcpnal_set_default_params() was not called and was therefore
3230              ignoring the environment varaible TCPNAL_PORT, as well as other
3231              TCPNAL_ environment variables
3232
3233 Severity   : minor
3234 Frequency  : rare
3235 Bugzilla   : 9923
3236 Description: two objects could be created on the same OST for a single file
3237 Details    : If an OST is down, in some cases it was possible to create two
3238              objects on a single OST for a single file.  No problems other
3239              than potential performance impact and spurious error messages.
3240
3241 Severity   : minor
3242 Frequency  : rare
3243 Bugzilla   : 5681, 9562
3244 Description: Client may oops in ll_unhash_aliases
3245 Details    : Client dcache may become inconsistent in race condition.
3246              In some cases "getcwd" can fail if the current directory is
3247              modified.
3248
3249 Severity   : minor
3250 Frequency  : always
3251 Bugzilla   : 9942
3252 Description: Inode refcounting problems in NFS export code
3253 Details    : link_raw functions used to call d_instantiate without obtaining
3254              extra inode reference first.
3255
3256 Severity   : minor
3257 Frequency  : rare
3258 Bugzilla   : 9942, 9903
3259 Description: Referencing freed requests leading to crash, memleaks with NFS.
3260 Details    : We used to require that call to ll_revalidate_it was always
3261              followed by ll_lookup_it. Also with revalidate_special() it is
3262              possible to call ll_revalidate_it() twice for the same dentry
3263              even if first occurence returned success. This fix changes semantic
3264              between DISP_ENQ_COMPLETE disposition flag to mean there is extra
3265              reference on a request referred from the intent.
3266              ll_intent_release() then releases such a request.
3267
3268 Severity   : minor
3269 Frequency  : rare, normally benchmark loads only
3270 Bugzilla   : 1443
3271 Description: unlinked inodes were kept in memory on the client
3272 Details    : If a client is repeatedly creating and unlinking files it
3273              can accumulate a lot of stale inodes in the inode slab cache.
3274              If there is no other client load running this can cause the
3275              client node to run out of memory.  Instead flush old inodes
3276              from client cache that have the same inode number as a new inode.
3277
3278 Severity   : minor
3279 Frequency  : SLES9 2.6.5 kernel and long filenames only
3280 Bugzilla   : 9969, 10379
3281 Description: utime reports stale NFS file handle
3282 Details    : SLES9 uses out-of-dentry names in some cases, which confused
3283              the lustre dentry revalidation.  Change it to always use the
3284              in-dentry qstr.
3285
3286 Severity   : major
3287 Frequency  : rare, unless heavy write-truncate concurrency is continuous
3288 Bugzilla   : 4180, 6984, 7171, 9963, 9331
3289 Description: OST becomes very slow and/or deadlocked during object unlink
3290 Details    : filter_destroy() was holding onto the parent directory lock
3291              while truncating+unlinking objects.  For very large objects this
3292              may block other threads for a long time and slow overall OST
3293              responsiveness.  It may also be possible to get a lock ordering
3294              deadlock in this case, or run out of journal credits because of
3295              the combined truncate+unlink.  Solution is to do object truncate
3296              first in one transaction without parent lock, and then do the
3297              final unlink in a new transaction with the parent lock.  This
3298              reduces the lock hold time dramatically.
3299
3300 Severity   : major
3301 Frequency  : rare, 2.4 kernels only
3302 Bugzilla   : 9967
3303 Description: MDS or OST cleanup may trip kernel BUG when dropping kernel lock
3304 Details    : mds_cleanup() and filter_cleanup() need to drop the kernel lock
3305              before unmounting their filesystem in order to avoid deadlock.
3306              The kernel_locked() function in 2.4 kernels only checks whether
3307              the kernel lock is held, not whether it is this process that is
3308              holding it as 2.6 kernels do.
3309
3310 Severity   : major
3311 Frequency  : rare
3312 Bugzilla   : 9635
3313 Description: MDS or OST may oops/LBUG if a client is connecting multiple times
3314 Details    : The client ptlrpc code may be trying to reconnect to a down
3315              server before a previous connection attempt has timed out.
3316              Increase the reconnect interval to be longer than the connection
3317              timeout interval to avoid sending duplicate connections to
3318              servers.
3319
3320 Severity   : minor
3321 Frequency  : echo_client brw_test command
3322 Bugzilla   : 9919
3323 Description: fix echo_client to work with OST preallocated code
3324 Details    : OST preallocation code (5137) didn't take echo_client IO path
3325              into account: echo_client calls filter methods outside of any
3326              OST thread and, hence, there is no per-thread preallocated
3327              pages and buffers to use. Solution: hijack pga pages for IO. As
3328              a byproduct, this avoids unnecessary data copying.
3329
3330 Severity   : minor
3331 Frequency  : rare
3332 Bugzilla   : 3555, 5962, 6025, 6155, 6296, 9574
3333 Description: Client can oops in mdc_commit_close() after open replay
3334 Details    : It was possible for the MDS to return an open request with no
3335              transaction number in mds_finish_transno() if the client was
3336              evicted, but without actually returning an error.  Clients
3337              would later try to replay that open and may trip an assertion
3338              Simplify the client close codepath, and always return an error
3339              from the MDS in case the open is not successful.
3340
3341 Severity   : major
3342 Frequency  : rare, 2.6 OSTs only
3343 Bugzilla   : 10076
3344 Description: OST may deadlock under high load on fragmented files
3345 Details    : If there was a heavy load and highly-fragmented OST filesystems
3346              it was possible to have all the OST threads deadlock waiting on
3347              allocation of biovecs, because the biovecs were not released
3348              until the entire RPC IO was completed.  Instead, release biovecs
3349              as soon as they are complete to ensure forward IO progress.
3350
3351 Severity   : enhancement
3352 Bugzilla   : 9578
3353 Description: Support for specifying external journal device at mount
3354 Details    : If an OST or MDS device is formatted with an external journal
3355              device, this device major/minor is stored in the ext3 superblock
3356              and may not be valid for failover.  Allow detecting and
3357              specifying the external journal at mount time.
3358
3359 Severity   : major
3360 Frequency  : rare
3361 Bugzilla   : 10235
3362 Description: Mounting an MDS with pending unlinked files may cause oops
3363 Details    : target_finish_recovery() calls mds_postrecov() which returned
3364              the number of orphans unlinked. mds_lov_connect->mds_postsetup()
3365              considers this an error and immediately begins cleaning up the
3366              lov, just after starting the mds_lov process
3367
3368 Severity   : enhancement
3369 Bugzilla   : 9461
3370 Description: Implement 'lfs df' to report actual free space on per-OST basis
3371 Details    : Add sub-command 'df' on 'lfs' to report the disk space usage of
3372              MDS/OSDs. Usage: lfs df [-i][-h]. Command Options: '-i' to report
3373              usage of objects; '-h' to report in human readable format.
3374
3375 ------------------------------------------------------------------------------
3376
3377 08-26-2005  Cluster File Systems, Inc. <info@clusterfs.com>
3378        * version 1.4.5
3379        * bug fixes
3380
3381 Severity   : major
3382 Frequency  : rare
3383 Bugzilla   : 7264
3384 Description: Mounting an ldiskfs file system with mballoc may crash OST node.
3385 Details    : ldiskfs mballoc code may reference an uninitialized buddy struct
3386              at startup during orphan unlinking.  Instead, skip buddy update
3387              before setup, as it will be regenerated after recovery is complete.
3388
3389 Severity   : minor
3390 Frequency  : rare
3391 Bugzilla   : 7039
3392 Description: If an OST is inactive, its locks might reference stale inodes.
3393 Details    : lov_change_cbdata() must iterate over all namespaces, even if
3394              they are inactive to clear inode references from the lock.
3395
3396 Severity   : enhancement
3397 Frequency  : occasional, if non-standard max_dirty_mb used
3398 Bugzilla   : 7138
3399 Description: Client will block write RPCs if not enough grant
3400 Details    : If a client has max_dirty_mb smaller than max_rpcs_in_flight,
3401              then the client will block writes while waiting for another RPC
3402              to complete instead of consuming its dirty limit.  With change
3403              we get improved performance when max_dirty_mb is small.
3404
3405 Severity   : enhancement
3406 Bugzilla   : 3389, 6253
3407 Description: Add support for supplementary groups on the MDS.
3408 Details    : The MDS has an upcall /proc/fs/lustre/mds/{mds}/group_upcall
3409              (set to /usr/sbin/l_getgroups if enabled) which will do MDS-side
3410              lookups for user supplementary groups into a cache.
3411
3412 Severity   : minor
3413 Bugzilla   : 7278
3414 Description: O_CREAT|O_EXCL open flags in liblustre always return -EEXIST
3415 Details    : Make libsysio to not enforce O_EXCL by clearing the flag,
3416              for liblustre O_EXCL is enforced by MDS.
3417
3418 Severity   : minor
3419 Bugzilla   : 6455
3420 Description: readdir never returns NULL in liblustre.
3421 Details    : Corrected llu_iop_getdirentries logic, to return offset of next
3422              dentry in struct dirent.
3423
3424 Severity   : minor
3425 Bugzilla   : 7137
3426 Frequency  : liblustre only, depends on application IO pattern
3427 Description: liblustre clients evicted if not contacting servers
3428 Details    : Don't put liblustre clients into the ping_evictor list, so
3429              they will not be evicted by the pinger ever.
3430
3431 Severity   : enhancement
3432 Bugzilla   : 6902
3433 Description: Add ability to evict clients by NID from MDS.
3434 Details    : By echoing "nid:$NID" string into
3435              /proc/fs/lustre/mds/.../evict_client client with nid that equals to
3436              $NID would be instantly evicted from this MDS and from all active
3437              OSTs connected to it.
3438
3439 Severity   : minor
3440 Bugzilla   : 7198
3441 Description: Do not query file size twice, somewhat slowing stat(2) calls.
3442 Details    : lookup_it_finish() used to query file size from OSTs that was not
3443              needed.
3444
3445 Severity   : minor
3446 Bugzilla   : 6237
3447 Description: service threads change working directory to that of init
3448 Details    : Starting lustre service threads may pin the working directory
3449              of the parent thread, making that filesystem busy.  Threads
3450              now change to the working directory of init to avoid this.
3451
3452 Severity   : minor
3453 Bugzilla   : 6827
3454 Frequency  : during shutdown only
3455 Description: shutdown with a failed MDS or OST can cause unmount to hang
3456 Details    : Don't resend DISCONNECT messages in ptlrpc_disconnect_import()
3457              if server is down.
3458
3459 Severity   : minor
3460 Bugzilla   : 7331
3461 Frequency  : 2.6 only
3462 Description: chmod/chown may include an extra supplementary group
3463 Details    : ll{,u}_mdc_pack_op_data() does not properly initialize the
3464              supplementary group and if none is specified this is used.
3465
3466 Severity   : minor
3467 Bugzilla   : 5479 (6816)
3468 Frequency  : rare
3469 Description: Racing open + rm can assert client in mdc_set_open_replay_data()
3470 Details    : If lookup is in progress on a file that is unlinked we might try
3471              to revalidate the inode and fail in revalidate after lookup is
3472              complete and ll_file_open() enqueues the open again but
3473              it_open_error() was not checking DISP_OPEN_OPEN errors correctly.
3474
3475 Severity   : minor
3476 Frequency  : always, if lconf --abort_recovery used
3477 Bugzilla   : 7047
3478 Description: lconf --abort_recovery fails with 'Operation not supported'
3479 Details    : lconf was attempting to abort recovery on the MDT device and not
3480              the MDS device
3481
3482 ------------------------------------------------------------------------------
3483
3484 2005-08-08  Cluster File Systems, Inc. <info@clusterfs.com>
3485        * version 1.4.4
3486        * bug fixes
3487
3488 Severity   : major
3489 Frequency  : rare (only unsupported configurations with a node running as an
3490              OST and a client)
3491 Bugzilla   : 6514, 5137
3492 Description: Mounting a Lustre file system on a node running as an OST could
3493              lead to deadlocks
3494 Details    : OSTs now preallocates memory needed to write out data at
3495              startup, instead of when needed, to avoid having to
3496              allocate memory in possibly low memory situations.
3497              Specifically, if the file system is mounted on on OST,
3498              memory pressure could force it to try to write out data,
3499              which it needed to allocate memory to do.  Due to the low
3500              memory, it would be unable to do so and the node would
3501              become unresponsive.
3502
3503 Severity   : enhancement
3504 Bugzilla   : 7015
3505 Description: Addition of lconf --service command line option
3506 Details    : lconf now accepts a '--service <arg>' option, which is
3507              shorthand for 'lconf --group <arg> --select <arg>=<hostname>'
3508
3509 Severity   : enhancement
3510 Bugzilla   : 6101
3511 Description: Failover mode is now the default for OSTs.
3512 Details    : By default, OSTs will now run in failover mode.  To return to
3513              the old behaviour, add '--failout' to the lmc line for OSTs.
3514
3515 Severity   : enhancement
3516 Bugzilla   : 1693
3517 Description: Health checks are now provided for MDS and OSTs
3518 Details    : Additional detailed health check information on MSD and OSTs
3519              is now provided through the procfs health_check value.
3520
3521 Severity   : minor
3522 Frequency  : occasional, depends on IO load
3523 Bugzilla   : 4466
3524 Description: Disk fragmentation on the OSTs could eventually cause slowdowns
3525              after numerous create/delete cycles
3526 Details    : The ext3 inode allocation policy would not allocate new inodes
3527              very well on the OSTs because there are no new directories
3528              being created.  Instead we look for groups with free space if
3529              the parent directories are nearly full.
3530
3531 Severity   : major
3532 Bugzilla   : 6302
3533 Frequency  : rare
3534 Description: Network or server problems during mount may cause partially
3535              mounted clients instead of returning an error.
3536 Details    : The config llog parsing code may overwrite the error return
3537              code during mount error handling, returning success instead
3538              of an error.
3539
3540 Severity   : minor
3541 Bugzilla   : 6422
3542 Frequency  : rare
3543 Description: MDS can fail to allocate large reply buffers
3544 Details    : After long uptimes the MDS can fail to allocate large reply
3545              buffers (e.g. zconf client mount config records) due to memory
3546              fragmentation or consumption by the buffer cache.  Preallocate
3547              some large reply buffers so that these replies can be sent even
3548              under memory pressure.
3549
3550 Severity   : minor
3551 Bugzilla   : 6266
3552 Frequency  : rare (liblustre)
3553 Description: fsx running with liblustre complained that using truncate() to
3554              extend the file doesn't work.  This patch corrects that issue.
3555 Details    : This is the liblustre equivalent of the fix for bug 6196.  Fixes
3556              ATTR_SIZE and lsm use in llu_setattr_raw.
3557
3558 Severity   : critical
3559 Bugzilla   : 6866
3560 Frequency  : rare, only 2.6 kernels
3561 Description: Unusual file access patterns on the MDS may result in inode
3562              data being lost in very rare circumstances.
3563 Details    : Bad interaction between the ea-in-inode patch and the "no-read"
3564              code in the 2.6 kernel caused the inode and/or EA data not to
3565              be read from disk, causing single-file corruption.
3566
3567 Severity   : critical
3568 Bugzilla   : 6998
3569 Frequency  : rare, only 2.6 filesystems using extents
3570 Description: Heavy concurrent write and delete load may cause data corruption.
3571 Details    : It was possible under high-load situations to have an extent
3572              metadata block in the block device cache from a just-unlinked
3573              file overwrite a newly-allocated data block.  We now unmap any
3574              metadata buffers that alias just-allocated data blocks.
3575
3576 Severity   : minor
3577 Bugzilla   : 7241
3578 Frequency  : filesystems with default stripe_count larger than 77
3579 Description: lconf+mke2fs fail when formatting filesystem with > 77 stripes
3580 Details    : lconf specifies an inode size of 4096 bytes when the default
3581              stripe_count is larger than 77.  This conflicts with the default
3582              inode density of 1 per 4096 bytes.  Allocate smaller inodes in
3583              this case to avoid pinning too much memory for large EAs.
3584
3585 ------------------------------------------------------------------------------
3586
3587 2005-07-07  Cluster File Systems, Inc. <info@clusterfs.com>
3588        * version 1.4.3
3589        * bug fixes
3590
3591 Severity   : minor
3592 Frequency  : rare (extremely heavy IO load with hundreds of clients)
3593 Bugzilla   : 6172
3594 Description: Client is evicted, gets IO error writing to file
3595 Details    : lock ordering changes for bug 5492 reintroduced bug 3267 and
3596              caused clients to be evicted for AST timeouts.  The fixes in
3597              bug 5192 mean we no longer need to have such short AST timeouts
3598              so ldlm_timeout has been increased.
3599
3600 Severity   : major
3601 Frequency  : occasional during --force or --failover shutdown under load
3602 Bugzilla   : 5949, 4834
3603 Description: Server oops/LBUG if stopped with --force or --failover under load
3604 Details    : a collection of import/export refcount and cleanup ordering
3605              issues fixed for safer force cleanup
3606
3607 Severity   : major
3608 Frequency  : only filesystems larger than 120 OSTs
3609 Bugzilla   : 5990, 6223
3610 Description: lfs getstripe would oops on a very large filesystem
3611 Details    : lov_getconfig used kfree on vmalloc'd memory
3612
3613 Severity   : minor
3614 Frequency  : only filesystems exporting via NFS to Solaris 10 clients
3615 Bugzilla   : 6242, 6243
3616 Description: reading from files that had been truncated to a non-zero size
3617              but never opened returned no data
3618 Details    : ll_file_read() reads zeros from no-object files to EOF
3619
3620 Severity   : major
3621 Frequency  : rare
3622 Bugzilla   : 6200
3623 Description: A bug in MDS/OSS recovery could cause the OSS to fail an assertion
3624 Details    : There's little harm in aborting MDS/OSS recovery and letting it
3625              try again, so I removed the LASSERT and return an error instead.
3626
3627 Severity   : enhancement
3628 Bugzilla   : 5902
3629 Description: New debugging infrastructure for tracking down data corruption
3630 Details    : The I/O checksum code was replaced to: (a) control it at runtime,
3631              (b) cover more of the client-side code path, and (c) try to narrow
3632              down where problems occurred
3633
3634 Severity   : major
3635 Frequency  : rare
3636 Bugzilla   : 3819, 4364, 4397, 6313
3637 Description: Racing close and eviction MDS could cause assertion in mds_close
3638 Details    : It was possible to get multiple mfd references during close and
3639              client eviction, leading to one thread referencing a freed mfd.
3640
3641 Severity:  : enhancement
3642 Bugzilla   : 3262, 6359
3643 Description: Attempts to reconnect to servers are now more aggressive.
3644 Details    : This builds on the enhanced upcall-less recovery that was added
3645              in 1.4.2.  When trying to reconnect to servers, clients will
3646              now try each server in the failover group every 10 seconds.  By
3647              default, clients would previously try one server every 25 seconds.
3648
3649 Severity   : major
3650 Frequency  : rare
3651 Bugzilla   : 6371
3652 Description: After recovery, certain operations trigger a failed
3653              assertion on a client.
3654 Details    : Failing over an mds, using lconf -d --failover, while a
3655              client was doing a readdir() call would cause the client to
3656              LBUG after recovery completed and the readdir() was resent.
3657
3658 Severity   : enhancement
3659 Bugzilla   : 6296
3660 Description: Default groups are now added by lconf
3661 Details    : You can now run lconf --group <servicename> without having to
3662              manually add groups with lmc.
3663
3664 Severity   : major
3665 Frequency  : occasional
3666 Bugzilla   : 6412
3667 Description: Nodes with an elan id of 0 trigger a failed assertion
3668
3669 Severity   : minor
3670 Frequency  : always when accessing e.g. tty/console device nodes
3671 Bugzilla   : 3790
3672 Description: tty and some other devices nodes cannot be used on lustre
3673 Details    : file's private_data field is used by device data and lustre
3674              values in there got lost. New field was added to struct file to
3675              store fs-specific private data.
3676
3677 Severity   : minor
3678 Frequency  : when exporting Lustre via NFS
3679 Bugzilla   : 5275
3680 Description: NFSD failed occasionally when looking up a path component
3681 Details    : NFSD is looking up ".." which was broken in ext3 directories
3682              that had grown large enough to become hashed.
3683
3684 Severity   : minor
3685 Frequency  : Clusters with multiple interfaces not on the same subnet
3686 Bugzilla   : 5541
3687 Description: Nodes will repeatedly try to reconnect to an interface which it
3688              cannot reach and report an error to the log.
3689 Details    : Extra peer list entries will be created by lconf with some peers
3690              unreachable.  lconf now validates the peer before adding it.
3691
3692 Severity   : major
3693 Frequency  : Only if a default stripe is set on the filesystem root.
3694 Bugzilla   : 6367
3695 Description: Setting a default stripe on the filesystem root prevented the
3696              filesystem from being remounted.
3697 Details    : The client was sending extra request flags in the root getattr
3698              request and did not allocate a reply buffer for the dir EA.
3699
3700 Severity   : major
3701 Frequency  : occasional, higher if lots of files are accessed by one client
3702 Bugzilla   : 6159, 6097
3703 Description: Client trips assertion regarding lsm mismatch/magic
3704 Details    : While revalidating inodes the VFS looks up inodes with ifind()
3705              and in rare cases can find an inode that is being freed.
3706              The ll_test_inode() code will free the lsm during ifind()
3707              when it finds an existing inode and then the VFS later attaches
3708              this free lsm to a new inode.
3709
3710 Severity   : major
3711 Frequency  : rare
3712 Bugzilla   : 6422, 7030
3713 Description: MDS deadlock between mkdir and client eviction
3714 Details    : Creating a new file via mkdir or mknod (starting a transaction
3715              and getting the ns lock) can deadlock with client eviction
3716              (gets ns lock and trying to finish a synchronous transaction).
3717
3718 Severity   : minor
3719 Frequency  : occasional
3720 Description: While starting a server, the fsfilt_ext3 module could not be
3721              loaded.
3722 Details    : CFS's improved ext3 filesystem is named ldiskfs for 2.6
3723              kernels.  Previously, lconf would still use the ext3 name
3724              when trying to load modules.  Now, it will correctly use
3725              ext3 on 2.4 and ldiskfs on 2.6.
3726
3727 Severity   : enhancement
3728 Description: The default stripe count has been changed to 1
3729 Details    : The interpretation of the default stripe count (0, to lfs
3730              or lmc) has been changed to mean striping across a single
3731              OST, rather than all available.  For general usage we have
3732              found a stripe count of 1 or 2 works best.
3733
3734 Severity   : enhancement
3735 Description: Add support for compiling against Cray portals.
3736 Details    : Conditional compiling for some areas that are different
3737              on Cray Portals.
3738
3739 Severity   : major
3740 Frequency  : occasional
3741 Bugzilla   : 6409, 6834
3742 Description: Creating files with an explicit stripe count may lead to
3743              a failed assertion on the MDS
3744 Details    : If some OSTs are full or unavailable, creating files may
3745              trigger a failed assertion on the MDS.  Now, Lustre will
3746              try to use other servers or return an error to the
3747              client.
3748
3749 Severity   : minor
3750 Frequency  : occasional
3751 Bugzilla   : 6469
3752 Description: Multiple concurrent overlapping read+write on multiple SMP nodes
3753              caused lock timeout during readahead (since 1.4.2).
3754 Details    : Processes doing readahead might match a lock that hasn't been
3755              granted yet if there are overlapping and conflicting lock
3756              requests.  The readahead process waits on ungranted lock
3757              (original lock is CBPENDING), while OST waits for that process
3758              to cancel CBPENDING read lock and eventually evicts client.
3759
3760 Severity   : enhancement
3761 Bugzilla   : 6931
3762 Description: Initial enabling of flock support for clients
3763 Details    : Implements fcntl advisory locking and file status functions.
3764              This feature is provided as an optional mount flag (default
3765              off), and is NOT CURRENTLY SUPPORTED.  Not all types of record
3766              locking are implemented yet, and those that are are not guaranteed
3767              to be completely correct in production environments.
3768              mount -t lustre -o [flock|noflock] ...
3769
3770 Severity   : major
3771 Frequency  : occasional
3772 Bugzilla   : 6198
3773 Description: OSTs running 2.4 kernels but with extents enabled might trip an
3774              assertion in the ext3 JBD (journaling) layer.
3775 Details    : The b_committed_data struct is protected by the big kernel lock
3776              in 2.4 kernels, serializing journal_commit_transaction() and
3777              ext3_get_block_handle->ext3_new_block->find_next_usable_block()
3778              access to this struct.  In 2.6 kernels there is finer grained
3779              locking to improve SMP performance of the JBD layer.
3780
3781 Severity   : minor
3782 Bugzilla   : 6147
3783 Description: Changes the "SCSI I/O Stats" kernel patch to default to "enabled"
3784
3785 Severity   : Minor
3786 Frequency  : Rare
3787 Bugzilla   : 11248
3788 Description: merge and cleanup kernel patches.
3789 Details    : 
3790
3791 -----------------------------------------------------------------------------
3792
3793 2005-05-05  Cluster File Systems, Inc. <info@clusterfs.com>
3794        * version 1.4.2
3795        NOTE: Lustre 1.4.2 uses an incompatible network protocol than previous
3796              versions of Lustre.  Please update all servers and clients to
3797              version 1.4.2 or later at the same time.  You must also run
3798              "lconf --write-conf {config}.xml" on the MDS while it is stopped
3799              to update the configuration logs.
3800        * bug fixes
3801         - fix for HPUX NFS client breakage when NFS exporting Lustre (5781)
3802         - mdc_enqueue does not need max_mds_easize request buffer on send (5707)
3803         - swab llog records of type '0' so we get proper header size/idx (5861)
3804         - send llog cancel req to DLM cancel portal instead of cb portal (5515)
3805         - fix rename of one directory over another leaking an inode (5953)
3806         - avoid SetPageDirty on 2.6 (5981)
3807         - don't re-add just-being-destroyed locks to the waiting list (5653)
3808         - when creating new directories, inherit the parent's custom
3809           striping settings if present parent (3048)
3810         - flush buffers from cache before direct IO in 2.6 obdfilter (4982)
3811         - don't hold i_size_sem in ll_nopage() and ll_ap_refresh_count (6077)
3812         - don't hold client locks on temporary worklist from l_lru (5666)
3813         - handle IO errors in 2.6 obdfilter bio completion routine (6046)
3814         - automatically evict dead clients (5921)
3815         - Update file size properly in create+truncate+fstat case (6196)
3816         - Do not unhash mountpoint dentries, do not allow removal of
3817           mountpoints (5907)
3818         - Avoid lock ordering deadlock issue with write/truncate (6203,5654)
3819         - reserve enough journal credits in fsfilt_start_log for setattr (4554)
3820         - ldlm_enqueue freed-export error path would always LBUG (6149,6184)
3821         - don't reference lr_lvb_data until after we hold lr_lvb_sem (6170)
3822         - don't overwrite last_rcvd if there is a *_client_add() error (6086)
3823         - Correctly handle reads of files with no objects (6243)
3824         - lctl recover will also mark a device active if deactivate used (5933)
3825         * miscellania
3826         - by default create 1 inode per 4kB space on MDS, per 16kB on OSTs
3827         - allow --write-conf on an MDS with different nettype than client (5619)
3828         - don't write config llogs to MDS for mounts not from that MDS (5617)
3829         - lconf should create multiple TCP connections from a client (5201)
3830         - init scripts are now turned off by default; run chkconfig --on
3831           lustre and chkconfig --on lustrefs to use them
3832         - upcalls are no longer needed for clients to recover to failover
3833           servers (3262)
3834         - add --abort-recovery option to lconf to abort recovery on device
3835           startup (6017)
3836         - add support for an arbitrary number of OSTs (3026)
3837         - Quota support protocol changes.
3838         - forward compatibility changes to wire structs (6007)
3839         - rmmod NALs that might be loaded because of /etc/modules.conf (6133)
3840         - support for mountfsoptions and clientoptions to the Lustre LDAP (5873)
3841         - improved "lustre status" script
3842         - initialize blocksize for non-regular files (6062)
3843         - added --disable-server and --disable-client configure options (5782)
3844         - introduce a lookup cache for lconf to avoid repeated DB scans (6204)
3845         - Vanilla 2.4.29 support
3846         - increase maximum number of obd devices to 520 (6242)
3847         - remove the tcp-zero-copy patch from the suse-2.4 series (5902)
3848         - Quadrics Elan drivers are now included for the RHEL 3 2.4.21 and
3849           SLES 9 2.6.5 kernels
3850         - limit stripes per file to 160 (the maximum EA size) (6093)
3851
3852 2005-03-22  Cluster File Systems, Inc. <info@clusterfs.com>
3853        * version 1.4.1
3854        * bug fixes
3855         - don't LASSERT in ll_release on NULL lld with NFS export (4655, 5760)
3856         - hold NS lock when calling handle_ast_error->del_waiting_lock (5746)
3857         - fix setattr mtime regression from lovcleanup merge (4829, 5669)
3858         - workaround for 2.6 crash in ll_unhash_aliases (5687, 5210)
3859         - small ext3 extents cleanups and fixes (5733)
3860         - improved mballoc code, several small races and bugs fixed (5733, 5638)
3861         - kernel version 43 - fix remove_suid bugs in both 2.4 and 2.6 (5695)
3862         - avoid needless client->OST connect, fix handle mismatch (5317)
3863         - fix DLM error path that led to out-of-sync client, long delays (5779)
3864         - support common vfs-enforced mount options (nodev,nosuid,noexec) (5637)
3865         - fix several locking issues related to i_size (5492,5624,5654,5672)
3866         - don't move pending lock onto export if it is already evicted (5683)
3867         - fix kernel oops when creating .foo in unlinked directory (5548)
3868         - fix deadlock in obdfilter statistics vs. object create (5811)
3869         - use time_{before,after} to avoid timer jiffies wrap (5882)
3870         - shutdown --force/--failover stability (3607,3651,4797,5203,4834)
3871         - Do not leak request if server was not able to process it (5154)
3872         - If mds_open unable to find parent dir, make that negative lookup(5154)
3873         - don't create new directories with extent-mapping (5909, 5936)
3874        * miscellania
3875         - fix lustre/lustrefs init scripts for SuSE (patch from Scali, 5702)
3876         - don't hold the pinger_sem in ptlrpc_pinger_sending_on_import
3877         - change obd_increase_kms to obd_adjust_kms (up or down) (5654)
3878         - lconf, lmc search both /usr/lib and /usr/lib64 for Python libs (5800)
3879         - support for RHEL4 kernel on i686 (5773)
3880         - provide error messages when incompatible logs are encountered (5898)
3881
3882 2005-02-18  Cluster File Systems, Inc. <info@clusterfs.com>
3883        * version 1.4.0.10 (1.4.1 release candidate 1)
3884        * bug fixes
3885         - don't keep a lock reference when lock is not granted (4238)
3886         - unsafe list practices (rarely) led to infinite eviction loop (4908)
3887         - add per-fs limit of Lustre pages in page cache, avoid OOM (4699)
3888         - drop import inflight refcount on signal_completed_replay error (5255)
3889         - unlock page after async write error during send (3677)
3890         - handle missing objects in filter_preprw_read properly (5265)
3891         - no transno return for symlink open, don't save no-trasno open (3440)
3892         - don't try to complete elan receive that already failed (4012)
3893         - free RPC server reply state on error (5406)
3894         - clean up thread from ptlrpc_start_thread() on error (5160)
3895         - readahead could read extra page into cache that wasn't ejected (5388)
3896         - prevent races in class_attach/setup/cleanup/detach (5260)
3897         - don't dereference de->d_inode after l_dput of de (5458)
3898         - use "int" for stripe value returned from lock_to_stripe (5544)
3899         - mballoc allocation and error-checking fixes in 2.6 (5504)
3900         - block device patches to fix I/O request sizes in 2.6 (5482)
3901         - look up hostnames for IB nals (5602)
3902         - 2.6 changed lock ordering of 2 semaphores, caused deadlock (5654)
3903         - don't start multiple acceptors for the same port (5277)
3904         - fix incorrect LASSERT in mds_getattr_name (5635)
3905         - export a proc file for general "ping" checking (5628)
3906         - fix "lfs check" to not block when the MDS is down (5628)
3907        * miscellania
3908         - service request history (4965)
3909         - put {ll,lov,osc}_async_page structs in a single slab (4699)
3910         - create an "evict_client" /proc entry on OSTs, like the MDS has
3911         - fix mount usage message, return errors per mount(8) (5168)
3912         - change grep [] to grep "[]" in tests so they work in more UMLs
3913         - fix ppc64/x86_64 spec to use %{_libdir} instead of /usr/lib (5389)
3914         - remove ancient LOV_MAGIC_V0 EA support (5047)
3915         - add "disk I/Os in flight" and "I/O req time" stats in obdfilter
3916         - align r/w RPCs to PTLRPC_MAX_BRW_SIZE boundary for performance (3451)
3917         - allow readahead allocations to fail when low on memory (5383)
3918         - mmap locking landed again, after considerable improvement (2828)
3919         - add get_hostaddr() to lustreDB.py for LDAP support (5459)
3920
3921 2004-11-23  Cluster File Systems, Inc. <info@clusterfs.com>
3922        * version 1.4.0
3923        * bug fixes
3924         - send OST transaction number in read/write reply to free req (4966)
3925         - don't ASSERT in ptl_send_rpc() if we run out of memory (5119)
3926         - lock /proc/sys/portals/routes internal state, avoiding oops (4827)
3927         - the watchdog thread now runs as interruptible (5246)
3928         - flock/lockf fixes (but it's still disabled, pending 5135)
3929         - don't use EXT3 constants in llite code (5094)
3930         - memory shortage at startup could cause assertion (5176)
3931        * miscellania
3932         - reorganization of lov code
3933         - single portals codebase
3934         - Infiniband NAL
3935         - add extents/mballoc support (5025)
3936         - direct I/O reads in the obdfilter (4048)
3937         - kernel patches from LNXI for 2.6 (bluesmoke, perfctr, mtd, kexec)
3938
3939 tbd         Cluster File Systems, Inc. <info@clusterfs.com>
3940        * version 1.2.9
3941        * bug fixes
3942         - send OST transaction number in read/write reply to free req (4966)
3943         - don't ASSERT in ptl_send_rpc() if we run out of memory (5119)
3944         - lock /proc/sys/portals/routes internal state, avoiding oops (4827)
3945         - the watchdog thread now runs as interruptible (5246)
3946         - handle missing objects in filter_preprw_read properly (5265)
3947         - unsafe list practices (rarely) led to infinite eviction loop (4908)
3948         - drop import inflight refcount on signal_completed_replay error (5255)
3949         - unlock page after async write error during send (3677)
3950         - return original error code on reconstructed replies (3761)
3951         - no transno return for symlink open, don't save no-trasno open (3440)
3952        * miscellania
3953         - add pid to ldlm debugging output (4922)
3954         - bump the watchdog timeouts -- we can't handle 30sec yet
3955         - extra debugging for orphan dentry/inode bug (5259)
3956
3957 2004-11-16  Cluster File Systems, Inc. <info@clusterfs.com>
3958        * version 1.2.8
3959        * bug fixes
3960         - fix TCP_NODELAY bug, which caused extreme perf regression (5134)
3961         - allocate qswnal tx descriptors singly to avoid fragmentation (4504)
3962         - don't LBUG on obdo_alloc() failure, use OBD_SLAB_ALLOC() (4800)
3963         - fix NULL dereference in /proc/sys/portals/routes (4827)
3964         - allow failed mdc_close() operations to be interrupted (4561)
3965         - stop precreate on OST before MDS would time out on it (4778)
3966         - don't send partial-page writes before EOF from client (4410)
3967         - discard client grant for sub-page writes on large-page clients (4520)
3968         - don't free dentries not owned by NFS code, check generation (4806)
3969         - fix lsm leak if mds_create_objects() fails (4801)
3970         - limit debug_daemon file size, always print CERROR messages (4789)
3971         - use transno after validating reply (3892)
3972         - process timed out requests if import state changes (3754)
3973         - update mtime on OST during writes, return in glimpse (4829)
3974         - add mkfsoptions to LDAP (4679)
3975         - use ->max_readahead method instead of zapping global ra (5039)
3976         - don't interrupt __l_wait_event() during strace
3977        * miscellania
3978         - add software watchdogs to catch hung threads quickly (4941)
3979         - make lustrefs init script start after nfs is mounted
3980         - fix CWARN/ERROR duplication (4930)
3981         - return async write errors to application if possible (2248)
3982         - add /proc/sys/portal/memused (bytes allocated by PORTALS_ALLOC)
3983         - print NAL number in %x format (4645)
3984         - update barely-supported suse-2.4.21-171 series (4842)
3985         - support for sles 9 %post scripts
3986         - support for building 2.6 kernel-source packages
3987         - support for sles km_* packages
3988
3989 2004-10-07  Cluster File Systems, Inc. <info@clusterfs.com>
3990        * version 1.2.7
3991        * bug fixes
3992         - ignore -ENOENT errors in osc_destroy (3639)
3993         - notify osc create thread that OSC is being cleaned up (4600)
3994         - add nettype argument for llmount in #5d in conf-sanity.sh (3936)
3995         - reconstruct ost_hand