Merge changes from fsfilt_extN.c into fsfilt_ext3.c

Final fixes to get new changes to comple cleanly...  Now to test it.

- fixes for compiles

Get things to compiling at least.

- compile fixes.

At Peter's request, a work-in-progress check-in of the fix for bug 478 and
108.  Breaks everything, doesn't even compile.

The intention is to move the MDS fs interface methods so they can be used
by obdfilter also, for creating compound transactions, last_rcvd callbacks,
etc.

Hopefully I'll have it in shape in a couple of hours.

*  Added some checking to sanity.sh + new utility checkstat (-h for usage)

This commit was manufactured by cvs2svn to create branch 'unlabeled-1.1.2'.

- remove the README file Zach wrote.  I placed it on the project wiki
- add two initial patches for 2.5 as in use with 2.5.44
 - these require breaking up in components etc as Zach suggests

- bring in akpm's patch management scripts and a first cut at
  patch-2.4.18-14 and patch-2.4.18-um against 2.4.18-17.8.0.  the README
  should hopefully make it clear how these are intended to be used.  email
  to follow.

merge IA-64 patch change into b_md

Update the IA-64 patch

merge b_md into HEAD:
 - lfind did not preserve OST order in output (443)
 - symlinks cause hung clients, incorrect data (439)
 - stop dereferencing request after dropping refcount (457)
 - don't LASSERT(spin_is_locked) on non-SMP (455)
 - fixes for many rename() bugs

Removed all files in this tree, I goofed on the import

This commit was generated by cvs2svn to compensate for changes in r5101,
which included commits to RCS files with non-trunk default branches.

First checkin of auto-test buffalo scripts

- validation test for #225

- fix for #399 (inode synchronization through fstat)
- reduce MDS/OST sizes a bit to avoid all the llmount failures
- fix up the beginning of sanity.sh with systematic checks on all
  results (which introduce other system calls...)
- fix sudo test 19 in sanity.sh to create files as other user

- test program for inode synchronization through fstat & revalidate_inode
- remove setuid.c (sudo will do)

file multifstat.c was initially added on branch b_md.

Added PNNL ia64 kernel patch

file patch-2.4.18-hp1_pnnl18.2.8qsnet was initially added on branch b_md.

- small but subtle changes
 - kernel patch changed to deal with rename issues
 - remove old rename cruft from dcache.c
 - save second intent for RENAME and LINK not the first
- add 10 rename tests to sanity.sh
- add non root user test to sanity.sh
- add 4 tests to sanityN.sh for multimount point tests
- allow reiserfs OST's to be used.  They actually appear to work!

land b_md onto HEAD:
 - LRU counters were broken, causing constant lock purge (433, 432)
 - the first part of the fixes for the ldlm_handle2lock race (419)
 - cleanup unused ll_inode_info field (442)
 - keep ioctl semaphore from serializing test_getattr/brw

- add tools and beginning of multi mount point sanity test.

file local2-hack.xml was initially added on branch b_md.

file llmount2-hackcleanup.sh was initially added on branch b_md.

file sanityN.sh was initially added on branch b_md.

Landing b_recovery.

b=441: garbage on read from stripes with failed OSTs.
b=438: mark OSCs as active before reconnecting during recovery.
b=403: lov_enqueue and lov_cancel need to handle inactive OSTs

This is a Lustre LDAP related utility and ment for generating the XML file from LDAP server and
load the XML file into LDAP server.

file genXml was initially added on branch b_ravi_devel.

b=442
Remove lli_intent_lock_handle that none of us seem to have an explanation for.

Fix typo in acceptance-small.sh

Update for new release

Merge of b_md to HEAD:
- fixes of many metadata bugs:
  - multiple client file opens
  - missing/extra intent releases
  - symlink fixes
- OST/MDS server threads clobbering each other
  - dbench 2 works mostly
- many others too numerous to mention here (ChangeLog is a good record)

Remove this .xml file yet one more time.

Ignore all generated .xml files.

Fix ba-mount.sh so that it saves the config in $config instead of config.
Remove explicit port number.

Fix compile warnings (hopefully nothing else is missing...)

Landing b_lock_replay so that Phil can use my ldlm iterators and whatnot for his
upcoming locking work.

Highlights:
 - lock replay infrastructure (needs much more testing, but didn't regress
   anything outside recovery)
 - b=421: ldlm iterators
 - b=348: imports now have service levels, replacing connections' c_level
 - replace c_delayed_head with imp_delayed_list
 - split imp_request_list into imp_replay_list for retained requests and
   imp_sending_list for inflight reqs
 - as a side-effect, clean up rq_refcount story materially
 - client-side recovery is now dispatched via a per-import handler function,
   for better layering and modularity
 - wire imports up to recovery before attempting mounts, for better handling of
   mount-time failures

Landing of b_recovery (at last).

Highlights:
  - b=324: MDS recovery must replay transactions in strict transno sequence
  - b=325: getattr after OST failure returns -EIO
  - b=326: unlink after OST failure returns -EIO
  - b=400: new client can't join cluster after OST failure
  - b=403: multi-client access failure when OST fails
  - b=410: After an OST failure, lfind incorrectly displays file information
  - b=417: Freeing unreplayable requests twice (aed's fix from b_md)
  - b=402: (partial) give error for lstripe request that exceeds configured OSTs
  - much better support for reconnecting to MDS after network partition
    (still some lock-repeating issues to be resolved for some requests)
  - better support for connecting to multiple MDSes on one host (xid and
    transno and request_list are all per-import now)
  - track disconnecting clients in last_rcvd, for more reliable recovery
  - also, sync last_rcvd after connect/disconnect
  - reduced syslog/CERROR output for recovery (hi, Terry!)
  - server (DLM) timeout is half the system-wide timeout, to avoid cascading
    failure in the face of a dead client
  - don't wait for recovery to finish in order to send disconnect messages
  - removal of c_dying_head
  - don't wait for timeout to trigger recovery after ptl_send_rpc error
  - strict MDS transno ordering via mds_transno_sem (non-optimal, but correct)
  - many !handle -> IS_ERR(handle) fixes around mds_fs_start callers.
  - turn on client-eviction for bulk-timeouts in OST and MDS

- hacked up script for easy testing of two mdc two mountpoints.

file llmountcleanup2-hack.sh was initially added on branch b_md.

file llmount2-hack.sh was initially added on branch b_md.

- symbolic link fixes related to intent smashing
- fixes Kevin Harlan's symbolic link bug

file setuid.c was initially added on branch b_md.

Whitespace.

Added sanity.sh & rundbench tests to Makefile.am EXTRA_DIST

merge b_md onto HEAD.  as best as I can remember:
- fix dentry->d_it clobbering
- credentials weren't being shipped for readdir/getattr operations
- remove invalid assertions triggered during some concurrent MD updates
- many, many updates to llanalyse

Don't dump bogus locks, we can deref null pointers therein.

Include the portal request/reply number so we know the source of the bad
export data.

Fixed time stamp bug

update

Fix the many client simultaneous startup bug (b=392).

We just ignore exports with NULL mcd, since they are just being set up.
The clients have a semaphore to prevent multiple setups there.  We could
alternately have a semaphore on the MDS instead of the current spinlock.

Print more information when we get a callback with a bogus export.
Also, try to see if we can proceed--maybe the rest of the packet is OK.

use correct name for toenal_ni

* add cleanup code for toenal

Change over to new echo client like runregression-net.sh

Build version script and patched Makefile.am, class_obd.c to display the build_version

file version_tag.pl was initially added on branch b_phil.

Remove generated file.

Remove bogus LBUG and error return code.  This was triggered by a non-root
user trying to create a file and getting -EACCES from lookup_one_len().

teach runregression-net.sh about echo_client

Omission in checkin.

Fix bad awk in mcr-routed-config.sh, which grabbed every OST UUID instead
of just the one we wanted.

Remove PORT specification, so we get the (correct) default if it changes
(and people haven't copied the fixed port number to dozens of configs
like I did.

Sadly, CVS doesn't handle adding/removing/moving files very well from
branch merges.

Modified against Pter review comments

Modified against robert and peter review comments

This is a MDS failover script in python.It uses the LDAP server to get the failover network uuid.

file ha_assist2 was initially added on branch b_ravi_devel.

This a python library file and used by rest of lustre configuration python scripts.

file lutils.py was initially added on branch b_ravi_devel.

b=191
b=214
b=306
b=385
landing b_brw, which _includes_ all fixes from b_lov.

Roughly, this fixes bugs in 3 general areas:

- OSC was locking one byte too many; fixed.

- several LOV bug fixes, to support adding LOVs and striping over fewer
  than the maximum number

- the brw code was rewritten

See the bugs listed above for more details.  This will be immediately
tagged as 0.5.17.

b=306
the echo client has moved out of obdclass, and into obdecho

file echo_client.c was initially added on branch b_brw.

Don't dereference last_xid and last_committed in a request we just freed.

Revert buffalization of acceptance-small.sh in HEAD, that lives in ltest.

Extra debugging in the MD storage path.
Some comments on usage of ll_lov_{set,get}stripe().
Fixes from Don Milos for LOV striping where #stripes != #OSTs

Modified to report to buffalo (Buffalized)

Decrement the LOV module use count on connect errors.

Bug Fix for Bug #369

Update acceptance-small.sh from b_lov branch.  Allows fully specifying
LOV/non-lov configs and/or not running one of those configs, and which of
runtests, sanity, bonnie, dbench NOT to run (by default everything is run).

It could probably just be set up to take a list of configs as command-line
arguments to test instead.  We currently ignore the entire issue of mutli-
client setup.

bring changes from HEAD to b_lustre_ba

rcsid/revision tags make phil weep tears of blood.  also, they cause lots
of conflicts.

Allow the iozone record size to be specified.

Add bonnie to the mix, and allow not running parts of the test (this should
automatically detect whether bonnie and dbench are installed and complain
verbosely if not.

Add a start on the bare-bones acceptance test for CVS HEAD merges, which
I'm now running against the HEAD to see that it actually passes.

- Updated changelog
- Better errors when the LDLM service can't be started
- Remove unnecessary flag from OSC lock cancellation in clear_inode
- If lov_enqueue fails to allocate a lock, zero the handle, so that we don't
  try to decref a bad handle (and LBUG) later

Comment out variable only used in commented-out code.
Whitespace.

Add some extra comments and sample configs.

Change configs to use port 988 instead of 2432.

 Bug #357, no more gratituous new line..., or typecasting

Name changes to make all file system statistics names common
across the /proc/lustre hierarchy. See comment in Bug #320

Bug #364: Approver - Robert Reed: Update lustre init script to use lconf.

1. Bug fix for Bug #320, also needs repair of lconf, since it tries
   to insert two devices with the same ID in a router configuration.
2. Added LDLM counters into /proc/lustre hierarchy
3. Fixes for Andreas's comments in Bug #357.
4. Bug #332 fixed, num_devices replaced with num_refs
5. Removed file proc_lustre.c, which was dead code.

Remove debugging from pack/unpack.

Fix a few straggling bugs in the new LOV MD packing code.

Widesweeping change to support different-sized LOV MD data (b=307,345, and
partially 314).  The goal is to remove all knowledge of MD data from llite
and the MDS, and keep it solely inside OSC and LOV.  The change is not
entirely complete (for enh 314) in that we still pass "struct lov_stripe_md"
and "struct lov_mds_md" structs around, but that was mostly for sanity to
avoid getting the two screwed up during this large amount of change.

OSC passes runtests, and LOV has a _huge_ bug in it that dies after a
single file copy+cleanup, so that's why it's on a branch.

This adds two new OBD API methods (I'm not totally stuck on the names yet):
- o_packmd to alloc/pack/free data for wire transport and storage on disk
- o_unpackmd to alloc/pack/free data for in-memory and storage on disk

There are helper functions obd_{alloc,size,free}_{mem,wire}md() which call
the above two OBD API methods with the correct parameters to just allocate
or size or free an MD.  This totally isolates anything outside LOV/OSC from
knowing anything of the internals of the MD data struct, and lays the
groundwork for LOV stacking in the future.

The user-space LOV striping setup has also changed slightly to use the
"MDS/wire/disk" MD format for communication instead of the in-memory
MD format, and the lovstripe.c test, utils/lfind.c and new utils/lstripe.c
program (formerly makestripe.c from Kevin Harlan) have been updated to use
this new interface.  The lstripe.c utility allows easy creation of files
with a specific striping pattern.

file lstripe.c was initially added on branch b_lov.