cancel export locks during disconnect

- fixes about lock fixup, replace and some resent issues.

Branch b_new_cmd
b=22564

perform done_write for pending inodes on shutdown
mark inode as having attributes changed on sync write.

- added resent support for getatr_name.

Branch: b_new_cmd
put the iam_it anyway

Branch: b_new
we should put iam_it anyway

Branch: b_new_cmd
merge llog group support from HEAD and some fixes.

- do not store server ctx to any structs, ctx is only valid in its thread;

- "more sophisticated" fix for recovery-small.sh test_3. By now client and server about getattr* RPCs always wait/send 4 fields even if some of them have zero size;

- adjust maxrep size for seq and fld services. Values are oriented on case of using mds_v1 which is bigger.

reserve some memory for MDS_GETATTR_NAME. This is ugly. So, maybe removed later.

last_commit transno is needed in any request

(1) fix open re-construct: re-construct if create error; otherwise, do as regular open;
(2) fix some pointers initialization in md_attr in mdt;
(3) add some EXCEPT in replay-single.sh

Branch: b_new_cmd
some fixes about cmm

- use 'last_received' name for last_rcvd file
- use journalled data mode on mds

- add mode field in mdt_rec_rename. used for cross-ref request
- copy lmm and unlink cookie from cross-ref unlink to the initial reply buffers

- get also la_flags attr in cmm_mode_get() to track append|immutable flags later
  in mdd_rename.

- assign ma_lmm and ma_cookie before the calling cross-ref mo_ref_del()

branch: b_new_cmd
revert configure change which accidentally checked in.

branch: b_new_cmd
fix according to nikita's suggestion:
 - rename ptlrpc_flavor_t => ptlrpc_sec_flavor_t
 - use OBD_ALLOC_PTR/OBD_FREE_PTR
 - use "=" to assign structure instead of memcpy()

Branch b_new_cmd
b=22564

Size-on-MDS bugfixes for:
- using in ll_done_writing not pinned inode;
- queuing done_writing before close completes;
- memleak in ll_setattr_raw

- rename locking + CMD aware is_subdir() check.

- move mode get code to the cmm_mode_get() function, use it also in cmr_rename()

fix typo

remove duplicate shrink in mdt_rename_tgt()

sanity test 24 fixes in CMD setup:
- get attributes after remote operation
- make index_delete(target_name) unconditionally in mdd_rename

(1) shrink rename reply;
(2) add abort_recovery ioctl support for mdt.

new MDS_CLOSE request format: now, we have mdt_epoch & mdt_setattr_rec instead of mdt_body.

fix cross-ref rename issues

- fix issue with mdd_sobj. it can be remote object.

- fix for sanity test 48a in CMD. lock can be lost in case of -ESTALE

put object in mdd_rename and cml_rename.

small fix about RQF_MDT_EPOCH: check buffer len first.

Branch: b_new_cmd
some fixes about readdir and split dir

- remove wrong assert from mdt_cross_open
- add mdc_attr_get() to retrieve attr for remote object while rename
- cmm changes to prepare src object type before processing with rename
- mdd don't use mdd_object for src while rename, because it can be remote
  object, instead of that it uses its fid and type to do operations and checks

- removed not used variable.

Branch b_new_cmd
b=22564

cache file size on mds

- take a lock for cross-ref object while open as lmv required
- separate the lock fixup after intent handling into the mdt_intent_lock_replace() method

(1) don't create object as required;
(2) shrink unlink reply message;

small fixes

- add cmm_thread_info key to the context,
- fix sgid issue with cros-ref case (sanity 6g)
- fix NULL md_attr while cml_rename()

Branch: b_new_cmd
some fixes about splitting dir

use xxxxx-MDTXXXX-mdtlov as mdt lov name to modify lov param

- update from 1_5

Branch: b_new_cmd
the page should be lock when truncate it

- make all "getters" name correspond to naming paradigm module-object-action.

(1) call mdt_shrink_reply() whenever possaible;
(2) fix a bug in mdc_xxx_pack(): 32 bit integer to __u64 convertion

call mds_postrecv() by pointer, not directly.

branch: b_new_cmd
add a empty sec context handler on mdt.

osd: check that transaction handle is supplied

- root_get and conf_get renamed to get_root and get_conf to be coherent with other "getters";
- fixes in headers of fld and seq-mgr;
- fixed getattr_by_fid (Vitaly's original patch);

- save connect data from server to tgts data array in LMV, set LMV exp->exp_connect_flags in
lmv_notify (needed for fixing getattr_by_fid issue found by Vitaly). Fixes in lmv_notify about
setting targets active/inactive;

- some cleanups in fid/*.[ch];
- ->ls_client_exp renamed to ls_control_exp to show that it is export to MDT0 in cluster;
- in mdc call observer notify for OCD data event;
- fixes in lmv/*.[ch] about using lustre_idl.h;
- committed some parts of rename locking in mdt, using ls_control_exp to requst BFL from MDT0.

- add flag no_lov_create in create_spec
- update mdd lov related code to handle no_lov_create and don't try to create
  objects during replay open|create
- call ldo_recovery_complete() at the end of mdt_init0()
- set mdd obd to recovering state initially and reset recovering flag from
  mdd_recovery_complete()

fix issues from last commit.

Branch: b_new_cmd
a lot fixes about splitting dir

Replace comma with whitespace in params' string.

Update after codeinsp
- client adding/removal in last_rcvd is updated
- pass credits to the trans_start() instead of using hardcoded value
- protect bitmap operation with lock
- separate client_add() and client_new()
- fix using the uninitializated variable in filter.c

branch: b_new_cmd
PKG_CHECK_MODULES require automake >= 1.7.9, and mountain has its own
tricks of building system which not easily be upgraded. So disable GSSAPI
checking for now, until the building env sorted out on mountain.

(1) fix a bug about transaction credit;
(2) fix some typo;

(1) fix error handling in mdd_create_data();
(2) do not assert in mdt_recovery().

(1) fix a bug in write mcd: about memcpy argument;
(2) add some debug code for read & write last_rcvd record;
(3) rmmod manually.

branch: b_new_cmd
fix make dist for gss subdir.

update after codeinsp

branch: b_new_cmd
land gss/krb5. but for now gss is disabled by default.

branch: b_new_cmd
add lustre_sec.h into EXTRA_DIST list.

branch: b_new_cmd
land the first part of secure ptlrpc support.

handle NULL parent in open replay.

small fixes

fix a memleak.

- fixed typo

- trivial cleanup in arguments order;
- fixed bug in seq-mgr recovery code, @in should be taken from client, not from server.

add defects inspired by removing local fld connection.
- cmm_tgt_count is 1 less than total MDS number
- fld_server_lookup() stores mds number in wrong variable because it is
  rewritten later.

kgdb patch: adjust to match sles9 version

style: use enum instead of #define

set ma->ma_lmm_size and ma->ma_cookie_size.

(1) add some debug code for last_rcvd;
(2) allocate memory for d_attr(->lmm,cookie) which is passed into mdt_mfd_close()

- fix defect in mdt_postrecov() with calling wrong lu_device operation
- fix fini order for ldlm_namespace_free() in mdt_fini()

remove unused RQF_MDS_WRITEPAGE

some code cleapup about read & write last_rcvd record.

fix some small bugs related to recovery.

- separate objid handling into sub-functions
- add mdd_lov_create_finish() to update/free objids right before transaction
  stop to avoid writting the objids in error case
- free objids immediately in case of error in mdd_lov_create()

- don't try to get mdt if self_export is destroyed
- small fixes

add o_postrecov method to the mdt

- fixed ctx using in fld_client (bug found by Tom). In few words, ctx cannot be saved in fld_client struct as it is per-thread;

- fixes in split code, after allocating fid in new seq, caller should also setup FLD for it.

Branch: b_new_cmd
some fixes about split dir

Branch: b_new_cmd
add mdd_txn callback to write objids in mds to fix runtests bugs

the offset should not be modified; so use a temporay variable.

force unloading the ..._test modules

- MSG_RESENT support in FLD.

fix memleak

fix several memleaks and small issues

- some be_cpu, etc., convetions.

- a little bit more noise about read/write seq-mgr data to store.

- fixes in reading store by seq-mgr;
- cleanups about le_cpu, etc., functions.

Branch: b_new_cmd
in cmd, group should start from 1

- change debug level for object init/fini messages
- do osd_sync() in osd_device_fini()
- add debug message in assert for lu_device refcount

(1) support mdt reconnection from client;
(2) fix a bug in open replay: it should be fid2;

Branch: b_new_cmd
remove unused RQF_MDS_WRITEPAGE

avoid hard-coded sizes of reply-size arrays

- recovery support in seq-mgr.

Branch: b_new_cmd
fix set mds_conn bugs to make o_id cache work for each group in ost

Branch: b_new_cmd
oops, just forget a file in the last commit