- temporarily disable building some dirs when cray portals are in use
- revert the overly aggressive migration of portals/list.h
- make sure all builds see -DCRAY_PORTALS.  this is gross.
- protect the libcfs ioctl registration with __KERNEL__
- avoid portals_nid2str() as it breaks the compiler

- more progress in moving towards building against cray's external
  portals includes.  This is a work in progress as I ran into
  internal compiler errors.  All builds are probably broken.

*  Merged HEAD

*  Cray compatibility fixes.

   - Added #if CRAY_PORTALS for compiling against cray portals.

   - PTLRPC_MTU, PTLRPC_MAX_IOV derived from PTL_MTU, PTL_MAX_IOV if
     defined.

   - PTLRPC_MAX_BRW_PAGES, PTLRPC_MAX_IOV defined consistently from
     PTLRPC_MTU, PTLRPC_MAX_IOV, and are the constants used by the OSC.

   - Changed bulk descriptors to merge contiguous fragments.  Bulk I/O only
     uses iovs/kiovs if # frags > 1.

     If compiling with cray kernel portals, PTL_MD_PHYS is expected to be
     defined and bulk descriptors contain struct iovec with physical
     addresses.  NB. Cray requested this method, rather than the ptl_kiov_t
     our portals uses.  If they can't use physical addresses (we can always
     turn PTLRPC_MAX_BRW_PAGES down to 1 until they can handle multiple
     frags), we have a problem, since we'll have to re-write the old
     kmap/kunmap code.

   - Added PtlSnprintHandle(char *str, int str_len, ptl_handle_any_t handle)
     to keep handles opaque but provide useful debug messages.

   - Implemented PtlEQPoll(), and PtlEQGet()/PtlEQWait() in terms of it.
     Fixed tcpnal non-busy wait hack by changing nal::yield() to take a
     timeout and do the right locking, and cb_callback() to schedule
     waiting processes.

     Implemented non-busy wait for socknal and qswnal as programming
     examples (we don't actually drain event queues in the kernel) and
     cleaned up tcpnal to only schedule when required.

   - Conformed to the portals spec on...

     . PTL_TIME_FOREVER
     . PTL_EQ_HANDLER_NONE
     . PTL_NI_OK
     . event field names
     . PTL_MD_MAX_SIZE usage

   - Defined PTL_EVENT_XXX_{START,END}.  We don't actually implement START
     events, but rather LASSERT() our callers have disabled them.

   - Added liblustre/cray callback handling.

   - #define PTLRPC_MD_OPTIONS as lustre's MD options.  Includes the "Hello
      Cray portals; lustre calling" flag and disables start events.

   - Removed PTL_MD_AUTO_UNLINK; it's specified in the 'unlink' parameter
     of PtlMDBind/Attach() etc.

*  Other fixes/cleanups

   - Removed 'struct lustre_peer'

   - Added liblustre/tests/.cvsignore

   - Removed PtlNIBarrier() and some cruddy portals globals.

   - Fixed lib_msg_alloc() to allocate ATOMIC if necessary (NB socknal
     never needs ATOMIC here, neither does qswnal if EKC is tuned
     properly).

   - Fixed lib_finalize() to only unlink if the MD was created with
     PTL_UNLINK (lustre always does, so we never noticed this before).

   - Cleaned up our asynchronous PtlMDUnlink()....>PTL_EVENT_UNLINK to
     invalidate the MD handle immediately on the unlink (manual and
     automatic).

   - factored some common code in lib-move.c

merge devel zcfg

This merge broke config llog, so this branch doesn't mount right now:

llog_write_rec()) ASSERTION((buflen %% LLOG_MIN_REC_SIZE) == 0)

This commit was manufactured by cvs2svn to create branch
'unlabeled-1.1.4.3.6'.

- bug fixed: variable was used being uninitialized

- minor changes in order to get 2.6-compatibility

NOTE: kdev_t and dev_t issue need to be investigated in depth

- ext3-wantedi patch against 2.6.0-test5

- ext3-raw-lookup.patch added into the pdirops series

re-committing on b_devel:
b=1997
r=alex
My previous fix for truncate/write lock inversion was close, but badly
flawed. I failed to remember that truncate will internally restart
the transaction -- start a new one, for all intents and purposes -- so
the ordering was backwards. "i_sem before transaction" is the
cardinal rule.

I tried to avoid that because I didn't want to hold the i_sem across
the entire disk I/O in filter_commitrw_write. After some discussion
with Alex, however, we decided that the i_sem need only be held for
the block allocation, and that the BKL suffices for updating i_size.
So the ordering in the write path is now: take i_sem, start transaction,
call filter_direct_io, f_d_io does block alloc, drops i_sem, does I/O.

b=1955
export rpc stats from the osc so that sanity's 42 tests can test for write
rpcs leaving the osc rather than arriving at the ost.  sanity 42s should
pass on nodes without osts.

- assert condition have been changed a bit

- chaos-2.4.18-pdirops series uses ext3-htree.patch instead of ext-2.4-patch*

- few patches from chaos-2.4.18-pdirops series are updated due to ext3-htree.patch

- needless assert have been removed

b=1825
copying code refactored (ll_prep_inode) in b_devel to b_llp_hp and for nfs
(-Niu's changes)

Land latest b_llp_hp changes onto b_flock.

b=1825
moving lustre related changes for to single file, llite_nfs.c

- few bugs fixed
- additional asserts added

NOTE: those fixes need to be pushed in the another series

updating from parent branch(b_llp_hp) to b_nfsllphp

- land b_log on b_devel

* use records that have a tail for the simple record tests.
* change verify_handle to scan the bitmap to deterime the correct
last_idx and active rec count.
* test 4 now uses verify_handle, and fails the last_idx check after
writing one rec.

* run-llog.sh now tells lctl to ignore_errors, so it can cleanup
after a failed test.

* add another loop to test 3 to write some records with a 16 byte
buf. Test now fails after 3c:

3c: handle->last_idx is 1012, expected 1011 after write:(llog_test.c:45:verify_handle() 773 | 9178+2020)

* moved all the code that verifies the handle against the
expected record count to verfiy_handle().

- the log processing function appears to work (test added to llog_test).

- a variety of log fixes to the catalog system
  - can now create catalog entries and secondary logs
  - some obdo is not being cleaned up.

- merge b_devel into b_llog

b=1825
changes to make NFS export of lustre compatible with nfsv2
and fixes in access mode flag

Discard lock-associated data (dirty pages, at present) when cancelling locks
due to an eviction or OST fail-out.

b=1902.

Expose an API for callers which are themselves called with the imp_lock held to
safely drop a possibly-final request reference.

b=1890.

b=1825
sending appropriate  error return value

b=1825
mds_create_objects() checks for FMODE_WRITE mode in rec->ur_flags,
embeding the appropriate mode in flags

b=1825
temporary flag setting in mds for mds_create_objects removed(Done in a better way from NFSD)
Some error code cleanup dione as per review comments

- minor cleanups in order to get chaos-2.4.18-pdirops series working

- ext3_prep_san_write() and ext3_map_inode_page() call
  ext3_get_block_wrap() instead of ext3_get_block_handle() for
  extents to be used

- raw lookup patch added into chaos-2.4.18 series

- lstripe code for b_devel
  - error handling is not complete yet (sanity 27f fails)
  - lfind interaction (27g 34's) untested

- extents initialization routine is called upon mount now

NOTE: tested on 2.4.18-67chaos (dual P3) with dbench/fsx/etc for
      several hours

remove kernel.spec.in

- make passing lmm's into open enqueue's possible
  - also removed erroneous passing of target.
  - lstripe should be easy from here.
- 1525 appears fixed (probably because of yesterdays fix)
- a new bug (oops with rmdir . ; ls .) was fixed
- recheck 1381 and closed it.

- ext3_writepage_trans_blocks() accounts that page may need several blocks.
  thus we need not account it twice

- fix agaist bug #1322 'clients looping in revalidate after recovery failure'

b=1825
fix minor bug during rename

- i_filterdata added into struct inode

b=1807
- backport oscc_create rewrite from b_llp_hp
- send osc_creates to a new OST thread, so that time-sensitive
  creations will not have to compete with billions of read/write requests

ll_setattr not supported in b_llp_hp

b=1792: Fix iopen_connect_dentry to properly rehash the __iopen__ dentry when
        coverting it into a real, "connected" dentry.

Bringing NFS export code uptodate with b_llp_hp

merge b_devel -> b_eq: 20030909
only kernel pass sanity, liblustre still broken

Fix for missing open flags for vfs_intent-2.4.20-rh kernel patch.
This change was also needed for the vfs_intent-2.4.20-hp patch.  b=1877
Also add bug 1344 revalidate loop fixes to some of the vfs_intent patches.

The diff is fairly large, so that the files in the 2.4.20-rh patch are
in the same order as in all of the other vfs_intent patches to make
comparison and maintenance easier.  Some other minor changes are made to
keep the patches consistent.

There is still a difference between vfs_intent-2.4.20-vanilla and -rh
in follow_down, but I don't know which one is the "keeper".

land b_llog on b_devel:
reorganization and API update of the logging infrastructure. minimal
changes to the other code.

merge b_llpmd into b_devel.  the major highlights:
- new I/O backend
- new client page cache and llite/lov/osc plumbing
- pre-creation of OST objects
- most of the OBD protocol now revolves around exports, not obd_devices

- export llog_cat_put
- disable the get/put_catalog bits, until they're a little more cooked

- clear 'rc' if rc == LLOG_EMPTY in llog_init_handle, so we don't free
  the header and return an error that our caller doesn't expect
- don't call llog_lvfs_pad if left == reclen, only if 0 < left < reclen
- fix the uuid magic in llog_test
- call llog_init_handle in the right places, and don't forget to close
  the log if one of the 1a checks fail

- make catalog api's available again, now based on the other layers.

- If the first user command isn't ENQUEUE, postsetup would be run too
  late, which causes the 'sanity' 1a hang that coop sees.  Fixed by
  running postsetup if any of the non-setup RPCs arrives.
- Remove overwriting of lgh_last_idx in llog_init_handle
- init the handle from the test code (not quite right yet)
- #if 0 out the filter catalog functions until they build

- new abstraction in the llog_* function wrappers
- fix double-allocation of handle headers
- added llog_read_header()
- more llog tests

- initialize handles

- unify llog_open and llog_create

- set the mds's and ost's obd_logops
- initial oa to null in llog_lvfs_create, avoids crashing
- in llog test 1a, don't try to close if the open failed
- 'lctl modules' hook for llog_test

- steal from the reserved bits instead of the bitmap bits, another
  piece of sage Andreas advice
- add an llh_flags field to the header
- rename confusing lgh_index to lgh_last_idx
- if the log is marked ZAP_WHEN_EMPTY, the log is full, and all of the
  records are cancelled, call llog_destroy from llog_cancel_rec
- extend llog_open to also support reopen-by-name
- add llog_vfs_read_blob and llog_vfs_read_header
- removed a bunch of unnecessary EXPORT_SYMBOLs
- add llog_lvfs_open()

- pad llog_* body structures correctly (thanks Andreas)
- countless build fixes

- few compile fixes

- next steps towards a working llogging api

- remove obd_run_ctxt from obd->u.mds and obd->u.filter; put it in the
  obd_device
- add lvfs_callback_ops, and the first one, the l_fid2dentry
- add callback ops to obd_run_ctxt
- change the 100 uses of mds->mds_ctxt and filter->fo_ctxt
- add a handful of llog tests

- fixes to the api's

Fix a few build errors

- the same llog reorg again, now on the right branch...

Fixups to checkstack target (get diffs in right order, show top 30 abusers).
Don't show more functions with less than 200 bytes stack on ia64.

Update checkstack program, to output more useful "stack_usage function name".

Add a "make checkstack" target which shows the current "worst offenders" list
of stack users, or the difference in this list since the last time that target
was run.

There is also a "make checkstack-clean" tarket which resets the "saved" stack
values so that the stack usage diff doesn't show old items.

merge b_devel into b_llpmd

Add jbd-* fixes to some of the series files where I know they apply:
- vanilla-2.4.20 and hp-pnnl-2.4.20 need all three
- chaos-2.4.18 doesn't need the flushtime patch (it is in their tree already)

I'm not sure whether chaos-2.4.20 and rh-2.4.20 need them or not (patches
were originally from RH kernels, so they may already be in rh-2.4.20).

revert the last fix for cygwin, which make ogdb-uml always null.

add kgdb over udp patch

[portals]: in handler of SIGALRM, we must reenable SIGALRM before longjmp,
because it's automatically disabled when entering handler.

[tcpnal]: use passed-in port number to start listening socket.

[portals]:
  PtlEQWait_timeout(): if left_over is 0, don't call alarm with it,
  otherwise we'll not got timeout notification.

merge b_devel into b_llpio, including v24 kernel patch

This commit was manufactured by cvs2svn to create branch 'unlabeled-1.1.4'.

fix socknal build on vanilla kernels by adding socket exports
bumped the kernel patch version to 23, but really only vanilla-2.4.20 changed

merge b_devel -> b_eq: 20030822

file Makefile.am was initially added on branch b_devel.

b=1803
r=shaver

New import state machine, as documented on the lustre wiki in
ImportStates.

A new function, ptlrpc_connect_import, performs all import connects
and moves the import from the DISCON state to either FULL, EVICTED,
REPLAY, or RECOVER, depending on the situation. Unlike the levels, the
states are now exact, and the request->rq_send_state much match the
import state to be sent.

Passes recovery/01, replay-small, and replay-dual.

file import.c was initially added on branch b_devel.

LiuKai's another Cygwin fix for data alignment, add #pragma

[tcpnal]: service socket listening on port 988

[tcpnal]: merge LiuKai's cygwin patch

[tcpnal]: enlarge iov array in tcpnal_send().

[tcpnal]:
 - don't consider pid when doing connection search, it's conform to the
   ksocknal behavior.

[tcpnal]:
  - protect tcpnal internal data structure

[tcpnal]:
  - add nal_cb locking, fix define of state_lock in user space.

[tcpnal}:
  temporarily work around for nal thread endless waiting problem.

file nfs_export_kernel-2.4.20.pc was initially added on branch b_nfsdevel.

[tcpnal]: rewrite the data out path.
  Get rid of pipe as a bridge between user threads and nal threads, which
  is not so efficient and don't work well in Cygwin. Now user thread might
  directly call into portals lib via lib_dispatch.

  2 issues remain:
  - sometimes during startup low level nal threads could run into endless
    waiting.
  - need more sycronous facilities to prevent race.

file LLNL_Changelog was initially added on branch b_llnl_stable.

merge b_multinet into HEAD

b=1505
Disable some console messages from failed statfs(), reconnect

[liblustre]: merge LiuKai's cygwin patch
 - add portals/include/cygwin-ioctl.h
 - don't compile accepter.c in liblustre
 - add missing le-cpu convert macro
 - use windows API directly at some places

file cygwin-ioctl.h was initially added on branch b_eq.

file uml_2.6.0_test3 was initially added on branch b_llpmd.