Add new patches for Kernel 2.5.44

Just update from the HEAD on 14, Dec

This commit was manufactured by cvs2svn to create branch 'unlabeled-1.1.2'.

add patch fixups for Red Hat 2.4.18-18.8.0 kernel

as Zach's pointed out, fix the potential deadlock, use
wait_event() to sync between threads when liod start/stop.

llvisualize is a tool that will parse debug logs (from CDEBUG output)
and provide a graphical representation of the call graph.
Useful as a debug aid for developers.
To invoke, provide the log file as input to llvisualize.
Currently, no fancy color scheme, just the ordered call graph(on a single node)
by process ID.
Visual controls allow user to go arbitarily deep.
All fields of the CDEBUG log are available, some have been omitted from
the visual display.

To invoke:

perl llvisualize.pl < /tmp/lustre-debuglog

file llparser.pm was initially added on branch b_intel.

Add two kernel patches of uml2.5.44 for making lustre mount on the uml

file lustre-2.5-from811-812.patch was initially added on branch b_lin25.

file lustre-2.5-from809-812.patch was initially added on branch b_lin25.

initial checking of b_io branch.
- mark page/inode dirty when ll_commit_write
- sync dirty pages in ll_call_back
- start kernel thread 'liod' during mounting
- quit liod when umount

TODO
- find a way to sense memory pressure
- do actual sync work in liod
- do things according memory pressure in ll_commit_write

file iod.c was initially added on branch b_io.

Add a new fsfilt method which reserved blocks for multiple bulk I/O operations.
Fix lock ordering in filter_preprw() so we get O/R i_sem before journal ops.
Move obdfilter to using the journal methods in fsfilt.
Change fsfilt_statfs() to take struct obd_statfs as a parameter.
Add some comments in fsfilt_extN_start() where we fall through on cases.

Doh!  This belongs in the OBD setup, and it's already there...

Look for the fsfilt modules in obdclass/ and not mds/

In Python 1.5 the string type does not have a find() method, so string.find
is probably preferable.  In this case, a find isn't needed at all.

yanhao:
fix bug 461 wrong paths in lconf
fix bug 386 lconf error message confusing

backout #2

Merging to head, BUG#405

yanhao: check in again for bug 461 wrong path in lconf

Back out yanhao's configure.in change -- this broke the build, and belongs
on a branch, please be more careful.

yanhao: fix the bug 461 wrong paths in lconf
        fix the bug 386 lconf error message confusing

yanhao: fix the bug 461 wrong paths in lconf
        fix the bug 386 lconf error message confusing

file lconf.in was initially added on branch b_md.

* fixed tests in sanity.sh
  -- sudo test didn't pass #4711 correctly + added check for ownership
  -- test 24-R4 was incorrectly using R3
  -- test 24-R9 added extra checks
  -- test 24-R10 mv wasn't actually attempting the rename; changed to perl
  -- NB perl -e never appears to return an error status

* added uid/gid checks to checkstat.

Needed more fixes to path

Fixed the file name

Now enough fixes to get it actually working...

Merge changes from fsfilt_extN.c into fsfilt_ext3.c

Final fixes to get new changes to comple cleanly...  Now to test it.

- fixes for compiles

Get things to compiling at least.

- compile fixes.

At Peter's request, a work-in-progress check-in of the fix for bug 478 and
108.  Breaks everything, doesn't even compile.

The intention is to move the MDS fs interface methods so they can be used
by obdfilter also, for creating compound transactions, last_rcvd callbacks,
etc.

Hopefully I'll have it in shape in a couple of hours.

file lustre_fsfilt.h was initially added on branch b_md.

file fsfilt_extN.c was initially added on branch b_md.

file fsfilt_ext3.c was initially added on branch b_md.

file fsfilt.c was initially added on branch b_md.

fix the pathnames in the patch

*  Added some checking to sanity.sh + new utility checkstat (-h for usage)

This commit was manufactured by cvs2svn to create branch 'unlabeled-1.1.2'.

file checkstat.c was initially added on branch b_md.

- remove the README file Zach wrote.  I placed it on the project wiki
- add two initial patches for 2.5 as in use with 2.5.44
 - these require breaking up in components etc as Zach suggests

- bring in akpm's patch management scripts and a first cut at
  patch-2.4.18-14 and patch-2.4.18-um against 2.4.18-17.8.0.  the README
  should hopefully make it clear how these are intended to be used.  email
  to follow.

merge IA-64 patch change into b_md

Update the IA-64 patch

merge b_md into HEAD:
 - lfind did not preserve OST order in output (443)
 - symlinks cause hung clients, incorrect data (439)
 - stop dereferencing request after dropping refcount (457)
 - don't LASSERT(spin_is_locked) on non-SMP (455)
 - fixes for many rename() bugs

Removed all files in this tree, I goofed on the import

This commit was generated by cvs2svn to compensate for changes in r5101,
which included commits to RCS files with non-trunk default branches.

First checkin of auto-test buffalo scripts

- validation test for #225

- fix for #399 (inode synchronization through fstat)
- reduce MDS/OST sizes a bit to avoid all the llmount failures
- fix up the beginning of sanity.sh with systematic checks on all
  results (which introduce other system calls...)
- fix sudo test 19 in sanity.sh to create files as other user

- test program for inode synchronization through fstat & revalidate_inode
- remove setuid.c (sudo will do)

file multifstat.c was initially added on branch b_md.

Added PNNL ia64 kernel patch

file patch-2.4.18-hp1_pnnl18.2.8qsnet was initially added on branch b_md.

- small but subtle changes
 - kernel patch changed to deal with rename issues
 - remove old rename cruft from dcache.c
 - save second intent for RENAME and LINK not the first
- add 10 rename tests to sanity.sh
- add non root user test to sanity.sh
- add 4 tests to sanityN.sh for multimount point tests
- allow reiserfs OST's to be used.  They actually appear to work!

land b_md onto HEAD:
 - LRU counters were broken, causing constant lock purge (433, 432)
 - the first part of the fixes for the ldlm_handle2lock race (419)
 - cleanup unused ll_inode_info field (442)
 - keep ioctl semaphore from serializing test_getattr/brw

- add tools and beginning of multi mount point sanity test.

file local2-hack.xml was initially added on branch b_md.

file llmount2-hackcleanup.sh was initially added on branch b_md.

file sanityN.sh was initially added on branch b_md.

Landing b_recovery.

b=441: garbage on read from stripes with failed OSTs.
b=438: mark OSCs as active before reconnecting during recovery.
b=403: lov_enqueue and lov_cancel need to handle inactive OSTs

This is a Lustre LDAP related utility and ment for generating the XML file from LDAP server and
load the XML file into LDAP server.

file genXml was initially added on branch b_ravi_devel.

b=442
Remove lli_intent_lock_handle that none of us seem to have an explanation for.

Fix typo in acceptance-small.sh

Update for new release

Merge of b_md to HEAD:
- fixes of many metadata bugs:
  - multiple client file opens
  - missing/extra intent releases
  - symlink fixes
- OST/MDS server threads clobbering each other
  - dbench 2 works mostly
- many others too numerous to mention here (ChangeLog is a good record)

Remove this .xml file yet one more time.

Ignore all generated .xml files.

Fix ba-mount.sh so that it saves the config in $config instead of config.
Remove explicit port number.

Fix compile warnings (hopefully nothing else is missing...)

Landing b_lock_replay so that Phil can use my ldlm iterators and whatnot for his
upcoming locking work.

Highlights:
 - lock replay infrastructure (needs much more testing, but didn't regress
   anything outside recovery)
 - b=421: ldlm iterators
 - b=348: imports now have service levels, replacing connections' c_level
 - replace c_delayed_head with imp_delayed_list
 - split imp_request_list into imp_replay_list for retained requests and
   imp_sending_list for inflight reqs
 - as a side-effect, clean up rq_refcount story materially
 - client-side recovery is now dispatched via a per-import handler function,
   for better layering and modularity
 - wire imports up to recovery before attempting mounts, for better handling of
   mount-time failures

Landing of b_recovery (at last).

Highlights:
  - b=324: MDS recovery must replay transactions in strict transno sequence
  - b=325: getattr after OST failure returns -EIO
  - b=326: unlink after OST failure returns -EIO
  - b=400: new client can't join cluster after OST failure
  - b=403: multi-client access failure when OST fails
  - b=410: After an OST failure, lfind incorrectly displays file information
  - b=417: Freeing unreplayable requests twice (aed's fix from b_md)
  - b=402: (partial) give error for lstripe request that exceeds configured OSTs
  - much better support for reconnecting to MDS after network partition
    (still some lock-repeating issues to be resolved for some requests)
  - better support for connecting to multiple MDSes on one host (xid and
    transno and request_list are all per-import now)
  - track disconnecting clients in last_rcvd, for more reliable recovery
  - also, sync last_rcvd after connect/disconnect
  - reduced syslog/CERROR output for recovery (hi, Terry!)
  - server (DLM) timeout is half the system-wide timeout, to avoid cascading
    failure in the face of a dead client
  - don't wait for recovery to finish in order to send disconnect messages
  - removal of c_dying_head
  - don't wait for timeout to trigger recovery after ptl_send_rpc error
  - strict MDS transno ordering via mds_transno_sem (non-optimal, but correct)
  - many !handle -> IS_ERR(handle) fixes around mds_fs_start callers.
  - turn on client-eviction for bulk-timeouts in OST and MDS

- hacked up script for easy testing of two mdc two mountpoints.

file llmountcleanup2-hack.sh was initially added on branch b_md.

file llmount2-hack.sh was initially added on branch b_md.

- symbolic link fixes related to intent smashing
- fixes Kevin Harlan's symbolic link bug

file setuid.c was initially added on branch b_md.

Whitespace.

Added sanity.sh & rundbench tests to Makefile.am EXTRA_DIST

merge b_md onto HEAD.  as best as I can remember:
- fix dentry->d_it clobbering
- credentials weren't being shipped for readdir/getattr operations
- remove invalid assertions triggered during some concurrent MD updates
- many, many updates to llanalyse

Don't dump bogus locks, we can deref null pointers therein.

Include the portal request/reply number so we know the source of the bad
export data.

Fixed time stamp bug

update

Fix the many client simultaneous startup bug (b=392).

We just ignore exports with NULL mcd, since they are just being set up.
The clients have a semaphore to prevent multiple setups there.  We could
alternately have a semaphore on the MDS instead of the current spinlock.

Print more information when we get a callback with a bogus export.
Also, try to see if we can proceed--maybe the rest of the packet is OK.

use correct name for toenal_ni

* add cleanup code for toenal

Change over to new echo client like runregression-net.sh

Build version script and patched Makefile.am, class_obd.c to display the build_version

file version_tag.pl was initially added on branch b_phil.

Remove generated file.

Remove bogus LBUG and error return code.  This was triggered by a non-root
user trying to create a file and getting -EACCES from lookup_one_len().

teach runregression-net.sh about echo_client

Omission in checkin.

Fix bad awk in mcr-routed-config.sh, which grabbed every OST UUID instead
of just the one we wanted.

Remove PORT specification, so we get the (correct) default if it changes
(and people haven't copied the fixed port number to dozens of configs
like I did.