Clean up bulk descriptor refcounting now that we do not have both
callback and non-callback cases.  Fix comments to reflect current reality.

Added a chaos12 patch, with all updates

Miscellaneous minor changes as a result of code audit.
- write lastino to disk in little-endian format (still needs to be written
  to disk for each update, so we don't try to re-allocate existing objects,
  see bug #594147).
- don't call class_conn2export() just to check "conn" validity, and then call
  class_conn2obd() to get the obd - just use obd to determine conn validity.

Add an echo_cleanup, for the namespace

- James Newsome's dlm stress test
- Small warning fix in filter.c

b=585183
We weren't telling the MDS what kind of unlink we were doing (unlink vs.
rmdir), so, for example, if you called rmdir() on a file, the MDS would
remove it and then the client VFS would return -ENODIR.  Not so good.

We send a 'mode' flag along with the unlink request now, that must be one of
S_IFDIR or S_IFREG.

I also fixed some unaligned structures in the MDS protocol, so if you update
one node you must UPDATE THEM ALL.

Minutiae:
- in the intent policy function, if mds_reint returns EISDIR or ENOTDIR, still
  go ahead and send back the file attributes
- in mds_reint_unlink, use the mode sent over the wire instead of the actual
  inode mode to determine which vfs unlink function to call

I know, let's actually set the desc field, since we're going to use it later.

First steps at getting recovery back off the ground:
* make the callback data parameter to brw functions be strongly typed as
  cb_io_data.  LOV and other non-OSC users of these facilities should
  "inherit" from this struct, see lov_callback_data for an example.
* replace l_wait_event_killable and some wait_event calls with
  l_wait_event, an all-singing, all-dancing timeout- and interrupt-handling
  event waiting macro.  More such replacement to come.
* interrupt and timeout handling of bulk data will probably crash at present,
  but it didn't really work before either -- I'll fix it up ASAP.

New patches for 2.4.18 and 2.4.18-um (2.4.18-chaos to follow):
- Fixes, or at least makes no worse, a race condition in open()
- Fixes a handful of lookup_intent initialization bugs that eventually lead
  to LBUGs trying to free nonexistent locks (b=593739)

More documentation:
 - object API
 - first three flow charts
 - lock api

- change I/O to use a pagearray
- implement remaining striping function in LOV:
  - read/write
  - locking
  - truncate
- minor protocol cleanup for MDS
- change documentation to include design / architecture / manual /
  appendix parts
- add design documents:
   - managmennt api
   - network format
-

Silence remaining 4 warnings.

Back out for a different solution.

Clean up extN patch and dist rules.

Commit prototype changes in headers.

Another list_add() abuse.

Do proper setup/cleanup of MDS exports and client data.

This also changes the behaviour of MDS connections so that the export
and client data is set up immediately at connect time, rather than at
"getinfo" time.  I am ASSUMING that at recovery time the client does
another connect to the MDS, or that some other mechanism is in place
so that it will get the correct export back (it looks like this is
correct, but I didn't follow the whole code path through for recovery).

I was torn on whether to zap the on-disk MDS client record in the case
where it does a proper disconnect.  In the end I decided against it,
because it was too difficult to pass a parameter to the mds_disconnect()
call telling whether we should zap or not.  We don't want to change the
disk if there is some error in restarting after a failure or if we are
forcibly shutting down the MDS, but only on a clean disconnect by the
client.

So far, the only potential harm that comes from not doing the zapping
of the client record is that we get an (empty) export for each client
that shut down cleanly (and was not overwritten) on the last MDS incarnation.
On the following MDS incarnation this client export will be dropped
because the incarnation number is too low (assuming it remains unused).

Another thing of note is that we pass "struct file *" back to the client
upon open, and dereference this at close time.  We need to move this
into the export struct and pass a cookie to the client (and validate
the cookie) instead of (or in addition to) passing the pointer directly.
This is needed for recovery of the client open state anyways...

Fix LDLM namespace leak in client_obd_connect() if there is an error
connecting (i.e. bad UUID given for the target).

Fix semaphore imbalance in client_obd_disconnect() if we try to disconnect
an already disconnected device.

Use list_heads properly.  In a few places we were using them incorrectly:

BAD:  list_add(&list_item, list_head.prev);  Overwrites the adjacent field.
GOOD: list_add_tail(&list_item, list_head);

While the following usage is technically correct, it does encourage people
to use the above (incorrect) usage pattern, so it should be avoided:

BAD:  list_add(&list_item, list_head.next);
GOOD: list_add_tail(&list_item, &list_head);

Just FYI - list_add() is like a queue, while list_add_tail() is like a stack,
when iterating over items via list_for_each().

Make the UUIDs more unique by appending the hostname, otherwise the MDS
gets confused about exports when there are multiple clients.

Robert - the same thing (or better) needs to be done for lctl also.

- update sample uml.xml

- support mounting osc or lov

- ensure lovconfig returns 0 on success

Remove lctl.h from distribution.

Changebar support for lustre.pdf.  Check out the old doc directory into doc/doc.old, then run `make chbar' to produce lustre-chbar.pdf.

It would be nice to properly type obd_enqueue() to avoid future bugs of this
nature, but the header dependency problem is tricky.

Fix stupid deadlock-causing mistake in llite file locking callback

My work goes more smoothly when I think.

more export cleanup

in ldlm_lock_dump, show the lock holder's nid and the remote lock handle

add dump_ldlm command from obdctl

- lctl seems to exit immediately if we try to 'mynid' on elan in the scripts,
so don't do that.
- kqswnal is safe to unload now

Add obdctl.h to dist list

- Don't shutdown the LDLM if other modules still have namespaces
- force cleanup of open MDS exports
- added class_disconnect_all() to that end

Remove silly LBUG

- More lctl-related common.sh fixes
- It's a little late to be fixing llmountcleanup, but I did it anyways

Fixes to use lctl instead of obdctl/ptlctl/debugctl

Enable htree directories.

new file

- remove old errro

- speedups and cleanups

- new xml format, generated by lmc

- configure lov on mds
- mds is configured with a name

Many updates to the howto
b=591845

Update README to say more about lustre-HOWTO.

- add --mdc option

- reorganize so same functions are used by both obdctl and lctl
- obdctl functions moved to obd.c
- removed libxml2 dependency

* Pass the connecting client's UUID (NB: not the _connection_'s UUID, the
  _client_'s) through the various obd connection functions.
* Use this newfound UUID to match up the exports conjured up from reading
  last_rcvd with reattaching clients.

- Updated changelog and spec file
- Changed 'obdctl' to 'lctl' in common.sh, since we don't include obdctl in
  the RPM, and it Just Works

- the xml format used by lconf has changed considerably
  - profile is embeded in node
  - list of osc's on client come from lov
  - other changes
- lmc generates proper configs, except mdc_ref missing on servers.
- at the top of lmc is a comment with a sample use of lmc

Fix request leaks for failed intent operations.

- very close to functional
- lconf needs to be updated to work with new style config files

- refactor code in attempt to make it clearer and simpler

- Fixed an unaligned structure that I introduced yesterday
- Change a harmless lock message from CERROR to CDEBUG

Tell us which locks are still outstanding at shutdown time.

- added buffer params to connect call

- support non-tcp network types
- initial support for tcp buffer sizes

Return the real error code to the caller from ll_lookup2.

Don't have spaces in process names.

- patch for alpha arch

- use rqswnal

- auto-naming is now smarter
- most basic features implemented, except for profile

- Grammatical, LDLM updates to network.lyx
- dlm cleanups, bugfixes
- there are now two totally separate DLM callback packets and functions
- beginnings of ldlm /proc bits
- the lock server can now change the lock mode, in addition to the resource
- fix one part of the open() object creation race by adding a semaphore that's
  taken in ll_file_open
- some cleanup in obdclass/proc_lustre.c; much more is needed

* Change mds_client_info to mds_export_data and embed it in obd_export.
* Curtail some excessive include cycles.
* Create "phantom" exports from last_rcvd data, suitable for later (soon!)
  hooking up in mds_connect.
* Add class_new_export utility function for use by class_connect and
  mds_read_last_rcvd.
* Fix last_mount/last_rcvd recovery-eligibility test in mds_read_last_rcvd.
* Force common.sh's DEBUG_WAIT read to use /dev/tty, so it works from scripts
  like runtests.  (lconf, take me away!)

Use rqswnal instead of qswnal.

One more obdctl remnant removed.

Also comment out obdctl_SOURCES, otherwise it will fail to configure.

- send client UUID over in the connect calls

- lmc refactored for impending enhancments
- now uses the PrettyPrint in PyXML

- disable obdctl from being built; use lctl now

- remove check for libxml2, since it is soon going away and the check
 appears to be failing

 - new config

Landing random changes that were somehow never committed: a warning about an
unused variable, the finished OST netfailure script, a couple LBUGs to catch
bad API usage

Ignore generated include files.

Ignore munlink binary.

Still do lustre setup if portals is loaded, but no NAL is...

Include failed operation for the RPC failures.

- Set valid flags in llite and not OSC.  It does not make sense for the OSC
  layer to be needed for llite->OBD operations to work properly.
- Set LOV EA size in mds_reint_unlink, so we use the EA data to unlink object.
- Remove extNisms from MDS code (mds_fs_get_md()) will return status if
  there is an available EA, and what size it is.
- Handle error on open intent, to avoid spurious actions on non-existent file.
- Rename OBD_MD_FLOBJID to OBD_MD_FLEASIZE to more accurately name it.

Add munlink tool which unlinks files without stat first (unlike GNU rm).

- move the peter branch changes to the head

Zero the intent for new dentries.

file mds-failover.xml was initially added on branch peter.

Always return a valid pointer or an error code from mds_*2locked_dentry().

- change auto detect for readline to explicit args

- delete llxmlsetup.sh

- deleted

- use ncurses when looking for readline

fix readline

Set OST/DLM variables even if portals already set up.
Hide extraneous error message.

Distribute obdfs, put modules in /lib/modules//kernel/fs/lustre.

Use modprobe to load modules in non-testing mode.

Include test data in distribution.

Don't try to remove kqswnal module, it oopses the kernel.

Add test scripts to distribution.

- add --get url option to lconf
- bug fixes

- new xml config for a 3 uml setup
- use modules.cfg with llmodules

Updated patch for chaos11 (same as chaos10)

Update HOWTO version block.
> Move master.bib to lustre.bib to be consistent.

lustre.pdf depends on lustre-HOWTO.lyx

Insert header comments so RPM doesn't get confused.