- Added an 'xid' field to struct niobuf
- Fixed bug in OST/OSC bulk handling by using this new field
- fixed double free in OST

- tiny fix to ost_request.c

- minor fixes to get mdc_readpage working over again.

Merged branch 'peter' with the tip.  Pre-merge tag is 't_20020302_networking'.
Avert your eyes.

new files - restructure RPC further

- added rq_type field to ptlrpc_request
- this field must be one of PTLRPC_REQUEST, PTLRPC_REPLY, PTLRPC_BULK
- mdc_request now waits for directory pages to be sent via the bulk portal
- change MDS bulk waitq to the new style
- ptl_send_buf no longer takes the 'is_request' argument; this is encoded in
  the rq_type mentioned above
- added ptl_abort_rpc() to tear down reply structures for aborted requests.
- refactored ptl_send_buf code to rid ourselves of some of the more gross
  bulklen hacks

-small is better for now

- barrier for potential cache problems

mds/handler.c: init the waitqueue before we call ptl_send_buf()

yet more tracking of lost packets

- add open and close to MDC interface (not used yet)
- very defensive logging to track our lost packet

- fix connection find on OST

- bug fix to unload modules with safe wait functions
- rewrite of ptlrpc client system
  - pivot around ptlrpc_client
  - mdc client & lustre_light uses generic routines
  - osc can do the same (tomorrow)
- different event queues in rpc.c freeing packets & getting replies
- every unexpected event or PtlError is now a BUG in rpc.c
- change gdb script output to allow reloading everything

- New style waitqueues in ost and mds main

New style waitqueues for OSC

- Don't set request->rq_repbuf until the reply has actually come in

Fix the waitqueue race in the mdc, I hope.

- llmount.sh creates for you a /tmp/ogdb in the hostfs, and waits for you to
press enter before it continues.  This lets you set breakpoints and debug
the mount/startup process.
- Run 'mynid localhost' instead of 'mynid'

Add many debug messages to the RPC path

Added paths to obdctl's 'modules' command, making it immediately useful:

/r/usr/src/obd/utils/obdctl modules > /r/root/ogdb

- wrong offset in commit page

Wrong object id sent to obd - fixed

- uninitialized error code
- uninitialized mode of data objects
both fixed

minor changes to debug prepw and prepare page
remove some debug crud from the OST handler

- add the truncate obd call

Getting rid of tabs makes me happy, just humour me.

- minor debugging fixes
- write event BEFORE calling callback

The most tedious patch in history.  Changes almost all of the 'printk's to
'CERROR's.  Also contains a lot of cleanup, removing things like __FUNCTION__
from CDEBUG and CERROR statements which already display that information.

- Added DEBUG_SUBSYSTEMs
- started using CERROR, which goes both to the console and the ringbuffer,
  instead of printk

Added a ``modules [path]'' command to obdctl, which is complete modulo the
fact that our directory names do not currently match our module names.

The best part?  I did it with zero lines of kernel code and a function that
fits on one page.

slightly more debugging in rpc.c - something is wrong there.

- Converted lots of debugging printks to CDEBUGs
- Removed duplicated debug macros and defines; they live in portals now

- All of OBD's debug information now lives in the Portals debug buffer.
Use 'ptlctl get_debug' to view the buffer.  The buffer's size is currently
hardcoded at 1 megabyte in module.c, but that's easy enough to change to a
module argument.

 MDS wasn't handling refcount on vfsmount's correctly,
 resulting in oops.

- I had set the rpc buffer size down to 4k to ease testing, the smaller
  buffer size accidentally got commited with the other changes.  This
  change just resets it to the original 64k size.

- Added some fields for rpc double buffering
- Added a NEXT_INDEX() macro
- Adjusted mds/handler.c and ost/ost_handler.c to notify
  the rpc layer when finished processing an event, this
  ensures the buffers are recycled.
- Added support for double buffering

Pass 1 of debugging and leak cleanup:

- use OBD_ALLOC/OBD_FREE everywhere
- fixed a few leaks
- cleaned up a few macros
- load obdclass.o before ptlrpc.o now, since obdclass exports the memory counter
- fixed broken strdup()
- made llmount.sh a little more robust

*** empty log message ***

- elimininate the system calls from filter obd
- use module_init macros not old style init_module functions
- remove unused crud from lustre_light.h use the good stuff more
- move directory readpage operations to dir.c
- cleanup rw.c significantly; it's actually understandable now.
- attribute handling: indicate to setattr to call truncate on OBD or not
- add osc destroy
- fix mds_reint_unlink (checked mode wrongly)
- add ll_delete_inode (to also go to the OST to remove data object)
- add truncate.c test program to tests
- avoid using ambigous READ/WRITE constants

Updated 2.4.17 obd kernel patch.

*** empty log message ***

This adds most of the metadata infrastructure: I think that all commands
(mkdir, link, symlink, rm, rmdir, mknod, mv etc) now work.  Probably the
server code is not multithread safe (particularly for renames, the others
might be OK).   I expect other fragilities and perhaps some errors with
setting {a,m,c}times, owners etc.

- add the beginning of an obd command that prints the information
  for UML gdb (class/class_obd.c)
- try to ignore errors on creating symbolic links in Makefiles
- the patch is 2.4.17 again for ext2obd, ghees, let's fix that.
- to avoid confusion, null out the buffer of result nio's in prepw
- add other reintegration functions.

Oops; I added the wrong page.c

- changed back to using no optimization for UML modules, and no -g2
- set inode operations in object create
- s/WRITE/OBD_BRW_WRITE/ where applicable
- added much of the infrastructure for page reads/writes
- update inode->i_size on the MDS if extending the file
- removed extra mntget() which hung the loop device
- misc bugfixes
- changed notify_change to i_op->setattr; otherwise we get the mtime and ctime
  from the mds
- set reply lengths (or your replies get dropped!)

class/class_obd.c: small OBD_ATTACHED sanity cleanup; OBD_SET_UP fix.
include/linux/lustre_net.h: set the LUSTRE_NAL back to socknal
include/linux/class_obd.h: added full license boilerplate, #define cleanup
include/linux/obd_osc: there was some confusion with obd_ost; fixed.

- added bits to structures for ost_request
- added OSC/OST portals communication
- added osc_setattr()
- added rpc_unregister_service in an attempt to get a handle on cleanup
- brought tests/ostreq.sh into the 1990s
- fixed a trivial obdctl setattr bug

- set_page_dirty ifdef for kernels on either side of 2.4.10

Minor fixes to
 - setup scripts to do Elan stuff
 - a few changes to page cache stuff for 2.4.9 (we finally know how to #if it)
 - the usual battle the ext2obd patch
 - removed aclocal.m4 (enhances immunity from automake versions)

New scripts to aid in testing; on one machine you should be able to run

sh tests/llmount-server.sh

and on another machine:

sh tests/llmount-client.sh
mount -t lustre_light -o device=3 none /mnt/obd

and do things like:

ls -ld /mnt/obd
chmod 777 /mnt/obd

This works now--even over the socknal, on an SMP kernel (although I haven't
tested it on an SMP machine)

You'll need to edit the SERVER variable in llmount-client.sh.  If you want
to get really fancy, you'll make it a command-line option.

Minor cleanups and debugging statements added.

- zero out the request structure after allocation
- do readpage via portals
- added bulk moving functionality to rpc.c
- cleaned up one small MD leak

lllocalmount: startup and mount a lustre lite FS with no networking
llmountcleanup: indeed.

Minor bugfix to allow multiple networked operations:
- small fix to avoid crash in getattr
- properly unlink MDs and MEs after we send buffers
- fixups to the test scripts

- new RPC infrastructure:
 - struct service with callback functions, buffers and Portals support
 - services are Portal aware, but the old null transport may still work.
 - lustre peer moved to Portals, as was all connection management
 -
- fixed ptl entry constants for incoming REQUESTS, REPLIES for MDS, OST etc.
- all rpc's now have a peer destination (which can be NULL)
- replies are now pre-allocated
- the XID's are used to number transactions _and_ as match entries
- packet movement differentiates Portals and non-portals case.
- reception of packets uses the new Portals callbacks
- module initialization finds peer's by UUID.  For now "mds" is a UUID.
- callbacks are used for (1) incoming requests (2) freeing outgoing packets
(3) incomding reply.  Code reuse was possible.
- adapted all the test scripts (mdc and llmount)

- and the new files

Changes to request processing:

- all requests are now ptlrpc requests.
- better packing/unpacking once more
- new directory with Portals RPC infrastructure.
- wait and restart hooks event handlers

Changes for file creation and small fixes.

- more systematic unpacking/packing and handling of update records
- create working on MDS (needs some refinements to store data object id)

Add missing files, cleanup .cvsignore's

It's been a good day: chmod/chown and friends now work for Lustre Light.
 - most of the changes are in the packing.  It will take a little
   bit more time before this completely settles I think, but we have
   a pretty efficient system now.
 - added initial infrastructure for MDS update records.
 - the MDS server has a new routine to change the attributes: the associated
   RPC call is MDS_REINT.
 - Lustre Light is simpler than OBDFS since it doesn't have to
   change inodes when it creates them: that's part of the MDS transactions we
   send over -- removed many "change inode" and "setattr" variants.

 assorted bug fixes and a working directory readpage routine
 for Lustre Light.

Nasty cflag confusion in configure.ac.

defaults back to format

small fix.

fix the obdfssetup script to use obdext2 (not filter) for now
patch - revision one: pagecache_lock was missing. What else is missing?

cleanups coming from the new functions/macros

Fix a broken macro.

this minimal patch might actually work.
filter obd won't work: we don't need it now.

Small fixes to get lustre_light mount working over the request handling
infrastructure.

A few missing files...

Small fixes to the request processing.
Split off the metadata client into a separate module, probably easier
to test  things that way.

Fix small typos in ost/osc

omitted test script

forgotten two files

Small bug fixes.  OSC/OST almost working.

it _compiles_ finally on 7.1 and 7.2, but the solution is not great.

Lustre light client request module

Most of the code for the OST target.

 lib/obd_pack.c - routines for packing/unpacking of OST requests
 lib/mds_pack.c - fixes (should be 64bit safe now)
 autogen.sh - no more Makefile.in in CVS
 tests/testreq.c tests/umreq.sh tests of the RPC infrastructure

- fixes to the MDS: it now answers requests from the request test
  program.
- beginning of OST client/server code - needs work.

A solid part of the MDS request processing infrastructure.
  - packing/unpacking and definition of requests
  - a server daemon
  - getattr call coded

Lustre idl file created:
  - move all interface definitions here
  - that's ioctl's, mds requests/replies & obd requests/replies

Makefiles:
  - configure.in can handle user mode linux now

utils:
  - fixed the obdctl library to support old version of readline.

small changes and fixes to get the filter OBD working fully.
It seems to work well under ext2, XFS and Reiser at the moment.

- obd filter works over ext2, but bonnie++ is buggie
- obd filter doesn't work over reiser
- obdctl now works and is taking over from obdcontrol

Numerous changes:
  - new control utility  - no Perl
  - filter obd halfway coded ; requires new patches to kernel
  - big cleanup in the class driver with better packed ioctls
  - macros to pack other things, like network packets

Two small changes to support large files.
 - internally open files with O_LARGEFILE
 - s_maxbytesize set to 64G (should do info for that).

large file printk cleanups

fix minor kmap/kunmap mismatch.

Minor compilation fixes for RedHat 2.4.9
Fix reference decreasing bug in namei.c

minor fix to the patch

created

If you free a string ... it can cost a lot of time.

many changes: seems ok on 2.4.9

Back out size/blocks changes.

Segregate block and size counting between obdfs and obdext2.

Remove debugging clutter.

Another very major cleanup:
 - new lookup/new_inode code based on iget4 (saves RPC's)
 - reorganized the layout of ext2_obd.c
 - the bonnie++ bug can be fixed by patching the 2.4.3 kernel.

Again, only use loop device for testing.

This fixes a race between killing inodes in obdfs and in ext2obd.

When files are kept open in obdfs it is important not to propagate
the 0 link count to ext2obd since that would delete the inode prematurely.

This one seems to run dbench 50 ok.

fairly massive change to remove write_inode methods and switch
to setattr everywhere -- dbench 50 completes, so does bonnie++.

fix statfs bug and a truncation issue.

fix setattr bug; check in symlink changes

Don't use printk unconditionally.

Add code to help debug the rmmod hang.