Branch:b_new_cmd
Init cat log for mds when add ost in recoverying, to make sure all unlink log can
be initialized after config log is processed. This could avoid race beween unlink
and llog init postrecovery, which should be the reason of b11218.
b:11218

try smaller bh lru size.

- call md_clear_open_replay_data() right before freeing och instead of doing
  that before ll_done_writing(). This fix prevents possible handle loss when
replay happens between open/close and done_writting.

sabdwich hash.

another return value fix.

2.6-rhel series: increase BH_LRU_SIZE.

log_do_checkpoint(): fix return value.

remove obsolete debugging.

Fix BUG for mount permission:
(1) if client failed to identification, it should not reconnect endlessly.
(2) client should check the connection error and return the value correctly.

fix the create mode bug

Branch:b_new_cmd
add evict_client proc for mdt

- bug in lustre_msg_clear_flags(). For version 2 it clears ALL flags instead of
  passed as parameter. b1_5 is affected too.

branch: b_new_cmd
port from b1_8_gss: add a gss sanity test for enlarge_reqbuf().

fix for LASSERT(*start <= hash) bug.

fix a memleak @lustre_md->mea in ll_prep_inode().

(1) Fix setxid permission check order according to the upcall result packed order.
(2) More detail comment.

(1)Add more rules for setxid.conf, permit to enable/disable setxid permission explicitly.
(2)Fix bug in cmd3-53 for local client setgrp permission out-of-control.
(3)More detail comment.

- make split size 128K to ensure that no split happens in recovery but still happens in perf. tests.

- fix recovery issue with SOM. The setattr/done_writting use mfd on server but
  can't find the correct one during replay because mfd handle is changed.
Current fix add old_handle field in mfd so during replay it is possible to find
it comparing old handle.

Branch b_new_cmd
b=22564

cancel all the locks on umount before shutting down the close thread
to flush all the dirty cache and send needed Size-on-MDS updates on MDS.

Branch b_new_cmd
b=22564,11103

check if unhashed and rehash under the dcache lock.
print epoch to be closed properly.

Branch:b_new_cmd
remove useless debug info after 11123 is fixed

Fix test script for local acl operation.

Branch:b_new_cmd
if ost failed is detected in lfs find, only return 0 to make tranverse continue
for cmd3-test18

- some cleanups in lmv.

branch: b_new_cmd
the part missing from last commit: don't taint passed-in obj until we
know everything is fine.

lmv: 0. more fid correctness checks, 1. fix wrong mea_hash_segment calculation.

this fix a bug in Lustre over NFS. But this flag is temparory as the patch said.

- cleanups in lmv:
  - removed not needed @body initializatiion;
  - added assert that body field in reply should be swabbed in mdc before using it in lmv.

Branch: b_new_cmd
We should try to retrieve the MEA from MDS anyway in getattr

Add ASSERT for filename validity check.

branch: b_new_cmd
back port from b1_8_gss:
 - don't taint passed-in obj until we know everything is fine.
 - multi-process client gss daemon, to prevent one unresponsive server
   block other context negotiation. nfs-utils patch not updated though.
 - fix regression of exporting context of des3-hmac-sha1 on old kerberos.

osd: disable back expensive fid_is_local() assertion.

lmv/iam: new "scalable" readdir.

fid: factor common function out.

liblustre: add hash_long() from linux/hash.c.

Do NOT count the terminating '\0' of filename for length.

remote operation should set MDS_CROSS_REF flag.

More sanity check for filename length.

fix a typo and clear out the fid.

more precise debugging code.

Branch: b_new_cmd
miss kunmap for those reset offset page. found by umka

More sanity check for nlink of file.

jbd-checkpoint-on-commit: fix locking.

- fix recovery issue. dropping obd_recovering flag before notify() cause loosing
  the objects on OST due to orphan destroying. The obd_recovering should be
  zeroed after notify()

- make sure there is transno for close/done_write() to keep them in replay queue

- count -EAGAIN during close() as valid answer

- fix objid update call. It should be done before transaction stop. Separate it
  from freeing lov_create data.
- encapsulate checking no_lov_create flag inside mdd_lov_create

add debug code to catch b11241

let export Lustre over NFS work.
basic test works now. More tests needed.

fix oops while accessing NULL pointer

(1) Drop unnecessary permission check for name_{insert,remove}.
(2) Do local permission check for name_{insert,remove} before remote ops.
(3) Add some comment.

Add symlink target length check.

iam: revert changes to IAM_LOOKUP_LAST that might caused spurious -ENOENT.

lu: ultimately hash function that works(tm)... famous last words.

add per-thread debugging flags. Use then to control CDEBUG().

lu/mdt: more site stats.

The sixth field in the csv entry is "fsname", so just move fsname option to its position.

(1) For remote create, only continue when lookup return ENOENT
(2) For mdd_lookup, do NOT return ENOENT when parent is dead obj.
    ENOENT means child does not exist.

Miss to set spec->u.sp_ea.fid for remote object_create with DEFAULT_ACL before.

(1) do not return any entry to client for a dead directory;
(2) add nlink overflow checking for mkdir. more checking will be added soon.

Change the key for objects to their name.
Support "--lmv <lmvname>" for CMD.  Using --lmv is how LMVs were built with
lmc in 1.4 and since we are trying to source lmc, we should simply use the
same syntax.
find_obj()->find_objs() now returns all objects that match.
So callers need to expect lists and deal with them.  In a lot of cases a
caller can *know* that the list returned will be only one item if the lmc
file is contructed correctly.
Support specification of multiple MDTs on the same MDS using different
devices.
For this, the mountpoint of the MDT needs to use the fsname to make it
unique.
The MDTs and OSTs also need to be created with fsnames.
Use the --node <name> from the lmc mtpt object as the fsname.

branch: b_new_cmd
more fix to gss module loading: waiting init channel be opened in gss
module itself.

__find_get_block_slow-scale.patch: attempt to reduce contention on bd_mapping->private_lock.

iam: 1. more correctness checks, 2. fixes to readdir locking.

branch: b_new_cmd
gss daemon debugging message.

- in cmm_split_check() passed to OBD_FREE correct size (though this is not bug, as size does not matter in linux memory manager);

- cleanups in mdd_lov.c

lu: now that we have larger hash table, switch to the simpler hash.

iam: remove wrong assertion introduced by previous commit.

iam: 0. do not unlock leaf while advancing index part. 1. avoid binary search when possible.

lu/mdt: more stat stats.

- simplify and optimize lmv_placement_policy(). By now it does not do additional raw_name2idx()

Branch: b_new_cmd
add debug_info in ll_file_read for test36

lu: use vmalloc() to allocate hash table.

log_do_checkpoint(): fix return value.

(1) use hash value 0xfffffffeUL to mark end of a directory instead of -1;
(2) add a TODO to handle readdir from removed dir. mdd_object is set to be dead when its nlink drops to zero.

iam fixes:

 - defect: iam: split_index_node(): adjust ->curidx of split frame (45).

 - defect: iam: ipd was shared in iam-uapi (240).

 - defect: iam: dx_check_full_path(): renew ->at (60).

jbd-checkpoint-on-commit: dix possible deadlock.

 add 'exist' info in lu_object_header_print()

debug for failed object

use nr_free_buffer_pages() to calculate hash table size. It has to be exported.

- led_lock is correct here

- wrong lock was used to protect namespace operation

fix possible deadlock in jbd-checkpoint-on-commit.

iam: remove unreliable correctness check.

mdt/lu: add lu_site statistics at /proc/fs/lustre/mdt/*/site_stats

- more debug

- raw_lookup() is not intent operation, no need to handle disposion
- add debug

Branch: b_new_cmd
add this assert for debuging b11123

branch: b_new_cmd
in case of gss module newly loaded, gss service upcall might be issued
before channel be opened by gss daemon, nfsv4 cache will directly drop
the upcall. workaround it by sleep after module loaded; and in gss daemon
try to keep channel always open.

- in lmv_placement_policy() add missed lmv_object_put()

obd: use ({ ... }) instead of do { ... } while (0) in OBD macros.

lu: make site hash table dynamically adjustable.

- fixed one more race in LMV which made it posssible to exist cross-ref files.

Branch b_new_cmd
b=11224

let dentry to be already hashed at the time of ll_create_it

Fix about remote acl operation:
(1) push_ctxt can not switch user space context (uid / gid),
    do not use it any more.
(2) ship user info (uid / gid) as argv[] to user space by upcall,
    switch user by setuid / setgid in user space.
(3) do not cache for remote acl upcall,
    do not use fid as key for remote acl upcall,
    it maybe cause wrong result when concurrent remote acl operations.
(4) remove unused code.

For change file time operation (utime),
file owner and CAP_FOWNER privilege are preferential.

Branch b_new_cmd
b=11103

Do not let dentry to be unhashed after create,
some callers, e.g. do_coredump, expect it to be hashed.

Do UCRED_OLD authentication when gss disabled.

(1) Remove fs privilege (CAP_FS_MASK) for non-root user, it can result in
    invalid authorization.
(2) Do UCRED_OLD authentication for inter-mdt ops and for the case that
    client and mdt on the same node. (gss can not distinguish the two cases)
(3) Fix Bug of authority promote for inter-mdt ops.