Merge from posix_stable.

Merge from posix_stable.

Merge new failure test points from posix_stable.

Merge from posix_stable.

Merge posix_stable to the head.

Add ll_pack to the head.

Merge from posix_stable branch.

- bring the chaos patch forward to where user mode linux one is.

htree patch fix for the head.

Bring stock kernel 2.4.18 intent patch up to date.
 - with this patch the intent-test passes on user mode linux

Remove debugging from htree patch, sync with branch.

file ll_pack.c was initially added on branch posix_stable.

Another attempted DLM deadlock fixup

- Fixed a DLM deadlock bug
- Added the leak finding script

- Add more DLM threads
- Fix unlink() of nonexistant file

- Fixed some screwy ldlm resource refcount issues

Many dlm and intent lock fixes.

 - initial unlink support
 - a DLM trace mode for debugging
 - serious DLM concurrency bugfixes
 - removed vestigial ``local callback'' code from ldlm
 - the beginnings of multi-RPC infrastructure

updated patch to current CVS head of Lustre code.

Makefile fix for libxml2 headers.

Simple example XML file for new obdctl --xml option.

Barebones XML support added to obdctl via the --xml option.  Validation of
the XML should be performed against the lustre.dtd (but isn't yet).  Also
of note we now need the libxml2 library to be installed.

Barebones XML support added to obdctl via the --xml option.  Validation of
the XML should be performed against the lustre.dtd (but isn't yet).  Also
of note we now need the libxml2 library to be installed.

WMM - Restored difftime use of doubles.

Move some variable setup to a common function that can be called at cleanup
in addition to setup--this (I think) fixes the problem with del_uuid being
called with different arguments from the original add_uuid

- Fixed serious LDLM bugs, including mistaking the lock _type_ for the lock
_mode_ in llight's file data lock conversion
- Fixed delayed-create-on-open bug
- prepare_write was zeroing out way too much of the page.  fixed.
- when mdc locks are revoked, don't invalidate a non-directory inode's pages
- increase timeouts to 100

Chaos patch is now good.

Now the patch applies too...

Add slab patches to chaos patch.

This has a kernel patch for handle validation.  All that is missing
now for secure pointers is:
 - the random numbers in the handles
 - careful management of when handles are freed

Instead of making two 128k request buffers, make ten 64k buffers.  Each thread
can currently pin at most one request buffer, and with six OST threads it was
trivial to pin both request buffers and exhaust our RPC handling ability.

Start six ost threads at startup instead of two

the ost was doing commitrw in a callback, which runs in interrupt context
in the new elan NAL.  Now we delay the commitrw until all pages have been
received, and hold up the ost handler thread to perform the commitrw there.

Increase RPC timeouts

Back out bad kunmap "fix"

- Fix two leaks
- Fix mknod regression
- Fixed one connection leak

fix broken doc makefile

- Fixed remote dlm lock conversion
- More intent lock progress

- clear dentry->d_it in intent_release
- new patches to fix open() crash

- We allow the intent policy function to abort lock enqueue
- Return -ENOENT from getattr, not -EEXIST
- add page.c to obdfilter build
- new kernel patches

Landing the mds_lock_devel branch on the trunk.  Notables:

- Considerable intent locking infrastructure, but it's not working perfectly
  yet.
- Updated documentation
- Many bugs.  Hold on.
- Test script changes to allow multiple mounts

I'll leave the branch around for a day or two in case we somehow missed
anything, then it will die.

Fix a crash in the POSIX test.

Another part of the statfs story, disabled.

Probable fix for storing 64-bit objids on the MDS for ext3.  Probably needs
to be revised to fit the new LOV format (if there is enough space for it).

Create the filesystem ROOT directory with 0755 permissions (the same as a
normal filesystem).

add intent related update to NFS server.

- Update md intent locking for chaos and lum patches to latest
  version.  Nothing terribly new apart from a first, failed, shot at
  handling renames.
- Slightly improved locking documentation

- Added the obdo inline code to the OSC, for the non-lov-using case
- use extN MDS
- fixups to the EA code that I broke earlier

- Fixes obdecho
- Fixes server-side write leaks
- removes ext2 and ext3 MDS module insertion from common.sh

WARNING: This commit breaks everything.  It will be back in shape within 12
hours, we hope, but update at your own (extreme) risk.

- Adds more unfinished LOV functionality
- Changes MDS EAs to contain LOV data
- Adds new brw callbacks
- Fixes to work with the Portals tip

Do kunmap() on pages kmapp()ed in echo_preprw().

Don't override MDS return code with transaction close code on error.

Don't open files (i.e. directories) on the MDS with O_DIRECT.

Make sure we clean up all the generated extN files on "make distclean"

Commented-out mdc_statfs method.  Not sure of how to set up all the portals
stuff, but it should be close.

Minor cleanups.
Add commented-out call to mdc_statfs() for ll_statfs() - it isn't complete.

Part of the O_DIRECT fix.  The page indices  iobuf->maplist[i]->index
do not appear to contain valid offsets into the file.  Use the "blocknr"
value per generic_direct_IO instead.

Whitespace cleanup

Don't dereference niobuf_local page if it is not set in debug code.

Add fsx binary to list of ignored files

Remove typo file.

common.sh: tell us when we are mounting
runiozone: allow the size parameter to be given on the command-line

Check the f_mode field instead of the f_flags field when using FMODE_ masks.

Merge changes made in portals/linux/utils/parser.c into lustre/utils/parser.c

Clean up the right portals network type if it is set (default tcp).

Remove compiler warning for fsx on linux.

Add connid and xid to timeout messages.

Same fix for lustre_get_page_write().

Don't kmap() a this page twice.  We kunmap() in lustre_put_page() so we
do the kmap() in all cases.

Add prototypes for the debug code in lib/debug.c.

Dump ->addr as a pointer instead of a long long.

Use OBD_ALLOC for BRW vector test code.

Turn device name error into a debug message to avoid confusion.

Add fsx test.

Move VM stuff into lib/page.c.

Exit out if there are setup errors.

Save filesystem context before writing to last_rcvd file.

Major fixups for multi-page I/Os in filterobd.
A few stubs for statfs on the filesystem.

Fix some minor llite bugs.  Should fix fsx problems.

Make obdctl return the error code from the most recently executed command
in interactive mode.  This allows scripts using HERE documents to abort
properly during setup.

Transcription error.

Updated patch to remove extraneous changes.

Don't stop checking for operations to commit if we hit an operation
with reqno == 0.

Peter - the question remains why we aren't already skipping these
open operations because of the PTL_RPC_FL_REPLAY flag?  Is it because
they are closes or something?

Subtract the OBD_FREE'd memory from the total before printing it.

- add more handling of intents (for chmod style functions)
- update to the head

Rename "bulk" to "desc" to avoid confusion with the local "bulk" variable.

Change paths to use Lustre pathname instead of obd

Bring Makefile.am forward to move extN before mds.

We weren't freeing local_nb in ost_brw_read().  This becomes obvious if you
run test_brw with larger vector sizes and large numbers of iterations.

Remove ___wait_on_page entirely.  If we ever need it again, it will be
different anyways.

Get rid of local definition of ___wait_on_page.  It existed at least as far
back as 2.4.0-prerelease and all 2.4.0-test kernels.  It also breaks with
current RH RMAP kernels as well.

- fix Marcus' bug.  Will move t_last_stable forward.

Change the cleanup scripts to use the debug_kernel instead of get_debug.

Move ioctl values out of the way of standard ext2/ext3 ioctl numbers.

Add llite file flag to allow skipping the locking for file read/write ops.

The ioctl LL_IOC_SETFLAGS and LL_IOC_CLRFLAGS can be used to set and clear
the LL_FILE_IGNORE_LOCK flag on a file, and LL_IOC_GETFLAGS can be used to
retrieve the current flags value.  These values are defined in lustre_lite.h.

Also add a small optimization - we do not update the file atime on reads if
it would not change the actual atime value (i.e. do not update this field
more often than once per second).  We also avoid updating the atime on R/O
mounted filesystems or if the "noatime" mount option is used.

Replace usage of "page" with "bulk" where "page" was actually a "struct
ptlrpc_bulk_page" to avoid (mental) confusion with the kernel "struct page".

Change object "refcounts" to be dgets instead of igets, where possible,
because igets are not only more expensive (need to lock the inode, etc),
but you need to do the dentry lookup to find the inode in the first place.

Also cleaned up access to atomic counters to use "atomic_read(count)"
instead of count.value.  Purely cosmetic, since we don't really need
the atomicness of the counters for debug output.

Fix block leak on truncate - we weren't setting the correct mode on the
file and that was causing the truncate to be skipped.

Fix the RH-chaos kernel oops.  This was caused by trying to enable slab
poisoning (in order to catch errors where we dereference freed objects).
Sadly, the slab.c code checks for "invalid" flags and BUGs if any are set
(only doing so at runtime) rather than just not defining them and catching
the error at compile time or just ignoring it entirely.

Fix minor typo in chaos1 patch.

Remove debugging that slipped into checkin.

Check RPC reply status for both MDC and OSC.  This allows us to return
errors "properly" from the MDS and OST to the filesystem/kernel/application.
This finally appears to handle out-of-space errors on the MDS and OST
reasonably well.

Still to do at some point: OS agnostic error value encoding/decoding.