Land b_hd_capa onto HEAD (20050809_1942)

- put fill fid in a punch request

Branch: b_hd_crypto
some fixes about crypto api
1)some debug info fix
2)reorganize the code for mds_set_gskey

- add mountoptions argument to lmv.sh

- let's learn where uninitialized objects come from

b=7277

dentry is used before initialization.

b=4268

 - additional debug info

- add second mountpoint in the config

- landed b_hd_mdref (mostly WB cache fixes)

Branch: HEAD
some minor fixes about sanity-crypto test scripts

- another issue from landing day

- root fid is 2 not 1
- remove unneeded debug

*   Incorporated latest GMNAL updates from HP.
    Compiled but not run yet.

Branch: HEAD
some minor fixes about mks crypto

split dir after setting id in ea (in lfs dirstripe case)
-b 7265

needn't get rootid while reconstruct pathname

- mds_validate_size() vs. mds_reint_unlink() race is absolutely legal

b=7267,7034

 - dedicated threads for serving OST_DESTROY and MDS_CLOSE

- don't mix var declarations and code

- throw needless debugging bits away

- couple minor optimizations

- don't pass pid in case of slave creation.
  checking for non-zero fid is a wrong practice

b=7264

 - mballoc must not be used during orphan cleanup

- small fixes after landing

- show n_link to learn the race

- minor fixes after landing day

- show correct id in debug line

- return back original OST/MDS sizes

- test 19 should take one more internal ea into account (parent fid)

- missing back slash caused flood of complains from portals_debug_msg()

- one more merging mess

- typo from merging

- minor cleanups in that patch, quilt pop was claiming about old version

landing b_hd_sec, b6818, b7244

- b_hd_audit landing

- minor correction

- return right path back

- some versions of python don't eat single member set w/o comma

b=7039

 - lov_change_cbdata() must iterate over all namespaces regardless activeness

- track time recovery took and dump a log if it took >obd_timeout * 2
  (to simplify debugging tests 11 and 17)

- additional debug in ldlm_lock_decref()

- during last landing old version of the patch was checked in. fixed

- code duplicate we got during landing b_hd_crypto

Add missing file from distribution.

- repair lmv.sh - it was broken for months

comment for ll_readahead_state and assertion in osc_send_oap_request() from b1_4

Branch: HEAD
typo fix after land

Branch: HEAD
land crypto api

- warn about the race in filter_intent_policy(), just to make sure it
  relates to errors mds gets sometimes

b=7039

 - don't skip locks on inactive imports

b=7039

 - dump additional debug info

- missing \n

b=7039

 - check for llite inode magic

- no more flooding

b=7039

 - more debugging info

b=7049

 - remove needless debugging checks

give a warnning if somebody don't pass lustre id to ost, it should be
error assertion in future.

Fix of careless (miss ;;)

store lustre id in ost object's EA.

CFLAGS for compiling in Tiger

b=7049

 - try to unmap buffers from bd-mapping

b=7049

 - it's enough to check for block number

b=7049

 - it's better to unmap buffers holding no truncate sem
   note: unmap_underlying_metadata() is commented out to see whether
         a race happens at all

b=7049

 - check for aliases in bd-mapping for writes only

b=7049

 - let's check whether dirty pages/buffers in bd-mapping

b=7237

 - missed wake_up() has been returned
 - few CDEBUG() have changed their level to D_ERROR to simplify debugging

Merge b1_4_bug3389 from b1_4 (20050729_0312)
Description: Mounting a Lustre file system on a node running as an OST could
             lead to deadlocks
Details    : OSTs now allocate memory needed to write out data at
             startup, instead of when needed, to avoid having to
             allocate memory in possibly low memory situations.
             Specifically, if the file system is mounted on on OST,
             memory pressure could force it to try to write out data,
             which it needed to allocate memory to do.  Due to the low
             memory, it would be unable to do so and the node would
             become unresponsive.
b=6514, b=5137

Description: Addition of lconf --service command line option
Details    : lconf now accepts a '--service <arg>' option, which is
             shorthand for 'lconf --group <arg> --select <arg>=<hostname>'
b=7015

Description: Failover mode is now the default for OSTs.
Details    : By default, OSTs will now run in failover mode.  To return to
             the old behaviour, add '--failout' to the lmc line for OSTs.
b=6101

Description: Health checks are now provided for MDS and OSTs
Details    : Additional detailed health check information on MSD and OSTs
             is now provided through the procfs health_check value.
b=1693

Description: Disk fragmentation on the OSTs could eventually cause slowdowns
             after numerous create/delete cycles
Details    : The ext3 inode allocation policy would not allocate new inodes
             very well on the OSTs because there are no new directories
             being created.  Instead we look for groups with free space if
             the parent directories are nearly full.
b=4466

Description: Network or server problems during mount may cause partially
             mounted clients instead of returning an error.
Details    : The config llog parsing code may overwrite the error return
             code during mount error handling, returning success instead
             of an error.
b=6302

b=3984

 - a reference on resource must be taked under spinlock

b=7039

 - concurrent lock cancelling might find inode dead while it's not yet

b=7231

 - asynchronous commit in obdfilter/2.6

b=7231

 - wait on bio's completion after commit. to evaluate performance impact

b=7039

 - stop progress and dump a log for debugging purposes

- b_size_on_mds landed on HEAD:

  5984 - oops in mdc_set_lock_data
         we must drop lookup lock in ll_clear_inode()
  7216 - abort due to missed clients
 replay already committed (open/close rpcs) requests
 even if some clients haven't connected in time and
 got evicted
  7057 - sanity: test_66: /mnt/lustre/f66 blocks 0 < 8
         send close rpc only when all dirty pages are written
 (otherwise i_blocks isn't valid)
  6817 - don't update attrs. on mds if the client hasn't modified file
         using openhandle being closed

land b_hd_remote_acl: support get/set ACL from remote client.

update patches and scripts for SLES 9 SP2

Branch: b_hd_crypto
minor fixes about crypto api

land minor fixes from b_hd_sec:
 * "EA" is used for lustre internal metadata ea. so change user ea's name to
   "XATTR", including ACLs.
 * remove a unnecessary param from md_getattr().
 * various more fixes.

add missing entry for bug 6993

b=7200

 - protect lock->l_resource from concurrent ldlm_lock_change_resource()

Branch b1_4_bug3389
Fix portals_nid2str() to print something reasonable for Cray NALs.
b=6902
r=bogl

b=5210
r=phil(actual patch)

A workaround for the crash in ll_unhash_aliases on 2.6.
The 2.6 lookup code is now lockless (thanks to the RCU machinations), which
allows it to race with the unhashing in ll_unhash_aliases. The 2.6 __d_drop
doesn't leave the list head ->pprev in a safe state, so the next pass through
this loop (which tries to re-hash it after we lose the dput race), would crash.
For the record, it looks like the kernel's own d_prune_aliases is broken in
the very same way, except that instead of crashing immediately, it just leaves
the d_hash pointers poisoned for someone else to crash on.

Branch:b_hd_crypto
update crypto api code

b=7017

 - atomic_dec_and_test() with subsequent spin_lock() against the list
   is racy. atomic_dec_and_lock() must be used. otherwise other cpu
   can hit the race window, increment refcount, drop it again and we
   get to the situation when both cpus are freeing the structure

some env (cnbuild) can't build without explicitly include
errno.h

land b_hd_pag: rudiment support for PAG.

Copyright is now License in RPM spec files.

quiet

Should allow the uml_switch to be used if wanted.

Branch: HEAD
remove redundant set_md in mds_reint_create and cmobd_reint_create

Branch: HEAD
add setxattr kml post hook for reint set md to master mds.

Branch: HEAD
should reset mcd_last_close_xid to 0 when reconnect.
b:6102
r:alex

- need couple routines to be accessible from modules for size-on-mds feature

Branch: HEAD
add kernel-2.6.10-suse-opteron.config for opteron arch

i stand corrected

this is the fix i intended

r=adilger,nic

stage() should return 0 if $STAGEDIR is not set, not 1.

Branch: HEAD
add fid and group in kml for cmobd test

move AC_SUBST into lustre-build.m4 (b=7126)

add --stage option to lbuild

revert a broken change from an earlier fix