Re-add lgd_len in case it is needed at some point (conflict resolution error).
b=1821

- remove reference to lgd_len, which has disappeared

Interoperability for different PAGE_SIZE/wordsize machines.  Tested on ia64
and i386 separately, and with ia64 client + i386 MDS/OST.

Mostly aligning structs to have 64-bit fields aligned on 64-bit boundaries.
Remove some VFS constants and replace them with Lustre constants on the wire.
Since the MDS doesn't really open files itself, we don't need to convert from
the wire constants back to local flags at all.

Frobbing of niobufs on the targets to split them into PAGE_SIZE chunks (this
may be a problem on large PAGE_SIZE servers with small PAGE_SIZE clients,
not sure yet).

I have tested and this appears to be compatible with old filesystems.
At worst we should only need another --write_conf on the MDS.

b=686, b=1821, b=1343, b=2042

Use PTL_MD_MAX_PAGES instead of PTL_MD_MAX_IOV where needed, so we send the
right number of pages over the wire for ia64/i386 interoperability.
b=1821

liblustre: update lrun script.

liblustre:
  add more test items into replay_single.

liblustre: add more test in replay_single, and some other adjustment.

I touched one thing in lustre_mds.h, and I was dismayed to see the
entire source tree rebuild!

It took just a few minutes to remove a number of #includes which
violated all manner of abstraction boundary.  ericm assures me that I
have not broken anything major in liblustre.

Also, I moved a good chunk of inline functions into llite_internal.h
(which is where I secretly believe that most of lustre_lite.h will end up),
and renamed ll_ino2fid (which no longer takes an inode) to mdc_pack_fid.

- fix del_route

- update this patch to apply against vanilla-2.4.22

Silence most of the warnings in the x86_64 build, and kill some Real Bugs in
the process.  (sanity checked in an x86 uml build, as well)

- include linux/init.h from some modules that use __init and company
- x86_64 has 64 bit longs but uses 'long long' for u64 in the kernel.  we
  add its own specific section to LP*64 definitions.  Sadly, there are still
  a huge number of warnings from this gcc when we try to LP*64 print uint64_t
  obdo arguments.
- use min_t in some defines to avoid the duplicate const prefacing that comes
  with nesting min()
- LPX64 printing -1UL doesn't work so well
- i_nlink can be any of unsigned short, int, or long.  when printing cast
  to unsigned long.
- kern_addr_valid takes a 'unsigned long' argument and shifts it.. sigh.
- don't #define EXPORT_SYMTAB in the source, that's the job of the kernel
  makefiles
- x86_64/suse has THREAD_SIZE defined in userspace
- s/long flags/unsigned long flags/.  Again.
- va_list ap = NULL; is not legal, as far as I know.  it doesn't seem
  to actually do anything in this code path either.
- x86_64 passes CONFIG_X86 but had thread->rsp as the stack pointer.  this
  code is going away eventually anyway.
- print a pointer with %p, not %x
- some portals callback pointer definitions used size_t while some nal's
  functions used ptl_size_t in the function defintions.  I switched the
  functions over to avoid pushing changes on all the nals.

- ide_end_request() was used wrong way: fixed

NOTE: tested on the all related series

- kmem_cache_validate patch has been removed from all the series

NOTE: all the supported series still build

liblustre: zconf adjustment for recovery_small and replay_single.

liblustre:
 - adjust the way of zeroconf
 - bring lltest/recovery_small to zeroconf

  b:2215 - OSTs fetch unlink llog records from MDS post replay

     1. add lop_connect and lop_precleanup to llog_operations
     2. rename llog_obd_ctxt to llog_ctxt; llog_commit_data to llog_canceld_ctxt
     3. split out llog functions in llog_client.c and llog_server.c and remove llogd.c
     4. add one test-59 to sanity.sh to verify cancellation of llog records async
     5. fix calling of mds_cleanup_orphans, add test-34 to replay-single.sh
     6. fix some codes about llog

- return replay-ost-single to runable state
  now just need to pass

- commonize the zconf mount/umount

Fix ia64 compile warnings.  Please folks, use LPU64 instead of %llu.

- enable KMOD

(CONFIG_MODE_TT=y is added by make oldconfig)

sample modules.conf for zeroconf

Remove kmem_cache_validate_hp from hp-pnnl-2.4.20 series.

b=2244
r=shaver

Pass force flag to ldlm_cleanup.

- fix set_route

- add kptlrouter to list of modules

Add process pid into console log messages.

liblustre: support zeroconf.
but current existed tests still use dumpfile, switch to zconf later.

b=2134
r=shaver
add a test case of unix domain socket test to sanity.sh (test case 54)

liblustre: add missing lib for shared so creation.

Don't have a separate (inconsistent) MTU define for portals routers.
Print out portals router messages with nicely formatted NIDs.

- add /sbin/mount.lustre to rpm

cleanup replay-single.sh

b=2243
fix router config breakage.  Now that the router config commands are
NAL_CMDs, need to add a gw_nal to pcfg.

create ibnal/Makefile

Quiet warnings.

Add new "lustre" fs type which supports only zeroconf mounts.
 - old zeroconf client code removed from lustre-lite, and the lconf
   --zeroconf option deleted
 - common code factored out for ll/lustre fill_super and put_super
 - lconf still uses lustre_lite (but not for long)

llmount will be used by mount for lustre filesystems if copied to
/sbin/mount.lustre:

  mount -t lustre mds_host:/mds_servicee/profile  /mnt/lustre

Multiple mounts of the same filesystem are supported.

Remove unused mds and filter nspath code.

*   fixed kportal_router_cmd() to return -EINVAL on unrecognised command

update netconsole-2.4.20-rh.patch

liblustre:
 - support llog facilities
 - remove unused wait_for_completion/completion pairs

- we don't have an arch/x86_64 for kmem_cache_validate(), but the code
  doesn't use it anymore, so we just won't include it in the series.

- async deletion for suse kernels

- suse series update

- remove ptlrpc_lib.c.  The remaining functions there were moved to
ldlm_lib.c when b_zcfg landed.

b_2075
make portals_debug_dumpstack() also can be used for vanilla-2.4.20 serie on
i386 host

b=2005
r=Peter

Add a check for current->fsuid == 0, to protect portals device from non-root usage.

- the ancient fstat/fstat64 wart does not warrant a #warning

Up MAXARGS to 512, so that we can have > 95 OSTs visible to lov_setup.

- set default timeout at 10, so I can run this without timing out on UML

- remove use of "lctl device_list" from lconf, now using
    /proc/fs/lustre/devices

b=2225 fix obd_self_export issues

- convert the IOC_*_ROUTE constants to to NAL_CMDs so they are now
just integers and 64bit safe.

Bump kernel version to 30 because of portals_debug_dumpstack() kernel patch.
Put workaround in place until l30 kernels are available so we can work.

Add define of LCONF LMC LCTL in replay-dual.sh replay-single.sh replay-ost-single.sh test-framework.sh

fix the malform error in kernel_patches/patches/kernel_text_address-2.4.20-vanilla.patch of my previous patch for b_2075

romve the reduntant/useless modifications in kernel_patches/patches/kernel_text_address-2.4.20-rh.patch on my bugfix 2075

b_2075
print out the call stack

*   Added .cvsignore

*   Fixed typo in Makefile.am

- change NETWORKTYPE to NETTYPE, and make sure it can be overridden.

b=2004

There is enough zeroconf infrastructure in place to enable replay-dual
to be used. It fails the first test, though.

r=2152

replay-single.sh now supports multiple nodes. The script must be run
on the client, but the mds, mdsfailover, and ost can all be different
nodes. If mdsfailover_HOST is set, then the MDS service  will be
failed between the two mds nodes.

uml1# PDSH="pdsh -w" mds_HOST=uml2 ost_HOST=uml3 mdsfailover_HOST=uml4
  ./replay-single.sh

It still runs on a single node as before.

liblustre: minor fix to shared lib creation.

b=1028
The totally non-controversial parts of my outstanding mds epoch code.

- add I/O epoch fields to the mds_body, mds_obd, and ll_inode_info
- store the epoch in the LLI after a successful open
- add a data structure, which will go into an MDS inode's i_filterdata

*   Addid portals/knals/ibnal

*   Removed dead code

liblustre: improve the makefile. and generation of shared libs.

add two -ETXTBSY tests, and a pre-creation OST vs. MDS test

I hope sanity.sh is not expected to work on multi-node setups?

- vanilla-2.4.22 series

Don't do setattr after transaction handle has been committed.
Combine size and timestamp setattrs, and update size under i_sem.
Use client timestamps instead of server timestamps for files.

Print a more useful error if we have problems cleaning up the portals slabs.
I don't know why this would fail (we check refcounts above), but it did.

*    Stale socknal connections culled when a rebooted node reconnects
     (Bug 2062)

*    Removed all userspace HELLO handshake (== nid exchange) code.  It's
     all done by 1 procedure in the kernel now.

*    Portals protocol version up: 0.3

liblustre:
 - support rename() & related sanity test
 - fixes in getattr, according to libsysio changes

liblustre:
 - support hard link()
 - fix memory leak in getattr()

liblustre: follow the libsysio changes

land zcfg on devel

- includes changes from b_llogging

- the MDS -> LOV connection is created using the MDS config log, so the
  log must exist. Lconf will create the log automatically when
  --reformat is used. To create the config logs on an existing
  filesystem, run lconf on the MDS with --write_conf. This only needs to
  be done on the MDS.

- LOV does not connect to the MDS during setup.  Instead, the MDS and
  MDC use obd_get_info("lovdesc") to get the stripe info. The LOVDESC
  and LOVTGTS files on the MDS are no longer used (and not created
  on new filesystems.)

- Zeroconf clients are new support by lconf --zeroconf, and
  replay-single.sh uses this to mount the client.  The exact arguments
  needed for zeroconf will be changing quickly, so don't use
  lconf --zeroconf in other scripts yet.  Instead, once the dust
  clears, lconf will be changed to always do zeroconf mounts, and
  eventually when don't need lconf anymore is when we start changing
  the test scripts.

add crash support and fix some bugs in netconsole

add lov-sanity.sh for extra EA test

Print out all failures in wiretest instead of just the first one.
Don't automatically build wiretest.c (it should only be rebuilt rarely).
b=1343,1821

Added a new manpage for lwizard.

This file contains few generic functions and used by lhealth and lconf.
find_prog moved to this file, so lhealth and lconf are using the same.

Add find_irq_function, so we do not need add any ethernet driver patch

add netconsole patch for rh-2.4.20

add netconsole 2.4.20-rh patch

- put it more consistent debug message that track pages through llite.
  Hopefully it will shed some light on bug 2192.

- ext3-inode-reuse patch agaist all the supported series (bug 2185)

NOTE: still under testing. therefore they aren't included in series

- Suse series introduced

NOTE: it builds, but isn't tested yet

Added a manpage for lfs and some formatting changes to the lctl manpage.

Commit wiretest.c as built on i386 for use on other platforms, instead of
(duh) building it on each platform.
b=1343

*   Cleaned up ptl_hdr_t definition; removed unused fields and moved the
    common length field into the common part of the header.

*   Socknal connection handshake no longer optional (it was --nid_exchange
    in lconf, the 'x' option to lclt::[auto_]connect, the -x option in
    acceptor etc).

*   Added 'uname -a' output and gcc version info in a comment to the output
    of portals wirecheck.

*   Bumped up the portals protocol version number.

*   Added "typed" socknal connections to establish either a single
    connection...

 'A'    bidirectional control + bulk

    ...or 3 connections...

         'C'    bidirection control
         'I'    bulk in
         'O'    bulk out

    Individual connections can be created using the relevent flag in
    lctl::connect.

    Autoconnect defaults to creating three CIO connections, but can create
    a single A connection if /proc/sys/socknal/typed is zero when the
    connection is established (CAVEAT EMPTOR this also causes ALL existing
    connections to be driven bi-directionally).

    Note that connections types are determined by the initiator.  The
    connection handshake tells the acceptor what type of connection she has
    just accepted, and she tells her socknal.

*   /proc/sys/socknal/eager_ack is now a bitmap of socket types to do eager
    ack on....

          1    enable on 'A' connections
          2    enable on 'C' connections
          4    enable on 'I' connections
          8    enable on 'O' connections (if any messages are ever received)

    Default: 0

    I doubt this facility will be of much use...

*   /proc/sys/socknal/min_bulk controls the size at which messages are
    considered 'bulk' and preferrential sent on 'C' rather than 'O'
    connections.

*   Changed error handling on connections so that when an error is detected
    on a connection...

       (a) ALL connections to the same NID at the same IP are removed.

       (b) The autoconnect route that generated the connection becomes the
           least favourite so that the next autoconnect attempt will use a
           different IP if redundant autoconnect routes have been
           specified.

Manpage for lctl.

Man pages for lmc and lconf.

b=2200: perform delorphan recovery when an OST is reintegrated.
        - use generic per-obd notification system
- relay LOV's notifications to MDS
- support running delorphan on only one OST, if an OST
  UUID is specified
- suppress CERRORs and refailing for -EIO in interpret_create,
  because we handle it more gracefully now

r=phik.

liblustre fixes during the last merge

b_2036
formats nids for readability, from "nid" to "nid (format)"
nid    : using LPX64 everywhere
format : "%u:%d.%d.%d.%d" for IP NIDS (leading part iscluster ID)
         "%u:%u" for non-IP NIDs (leading part is cluster ID)

Add wiretest program to do struct size/alignment testing in userspace.
b=1343

Update wirecheck.c with new structs, fields.  Put some of the constants with
the structs that use those constants.
b=1343

some changes related to llogging, and now it can compile with enable-orphans on

Include lustre_user.h for user-space interface, and put that in the install
package instead of the (deprecated for apps) lustre_lite.h and lustre_idl.h.

Have local-large-inode.sh just call local.sh with options instead of
duplicating code.  The former didn't work for acc-sm previously anyways,
as it didn't build local-large-inode.xml but rather only local.xml.

Add new LOV EA format which gives us fields for features needed in the post
1.0 stage (e.g. RAID, OST migration/replacement) as well as more efficient
storage than the current layout when there are few stripes on lots of OSTs.
As well, we will now be able to back up/restore/manipulate EA data via the
"getfattr" and "setfattr" tools (attr RPM) that are part of EA tools from
the "trusted.lov" attribute (only accessible to root/priviledged users).

Also contains code to transparently migrate from old EA format to new one
the first time the EA is accessed.  Note that there is no going back to old
code on the same filesystem once the EAs have been updated.  EA conversion
is (hopefully) "fail safe" in that an error during conversion just means
that the on-disk EA is kept in old format (clients understand both because of
common code).

Some of the "compat" code can be removed once we hit 1.0 and users have
migrated, but the infrastructure itself should probably remain for the
next time we need to change the EA format.

This also adds "lustre_user.h" which was in b_llp_hp and has existed in
b_llnl for some time, but alas the user EA format had to change in order
to allow specification of striping format.  A recompile should fix it.

Some minor warts remain:
- mds_objids_from_lmm() knows too much about lmm format.  It had an existing
  bug (looping to ld_tgt_count vs lmm_ost_count) and caused another bug for
  me because it does its own unpacking of the lmm) and it would be nice to
  just get rid of it and use obd_unpackmd(lmm) to get an lsm instead and use
  that instead of "ids"
- need to fix up endianness from ll_lov_setstripe() because this is now not
  done on the same host any more (object creation is done on MDS now)
- liblustreapi() should not be doing the printing of structs, but should
  instead just return structs to user-space and/or using a callback function
  supplied by the caller (e.g. for lfind iterating over filesystem).  The
  lov_dump_user_lmm* functions should probably be exported from the library
  and be used as default print functions as a starting point.
b=2097
r=braam

Add mdc_llog_setup and mdc_llog_cleanup methods.

- all obd operations should return int
- in the process capture a double free in a prep_async_page error case
  in rw.c
- remove unused logging code
- add a mini fix from Tian to not fail in llog_obd_setup when
  re-entering it.

- local-large-inode conf added in acceptance-small.sh
- lmc & lconf changed a bit to support mkfsoptions attribute/option