landing b_cmobd_merge on HEAD

b_cmobd_merge should not be used for any further development or testing!

- mds->lmv->mdc propagate lower timeout down to import
  we need this becase client's timeout should be longer then inter-mds recovery may take
- few ugly hacks that allow client to reconnect with old (before failure took place) UUID
- mds_preprw() and mds_preprw() should use l_dput() instead of f_dput()
- SOCKNAL_IO_TIMEOUT has been set to 20 seconds to make discovery of
  stale connection faster
- lconf generates persisten UUIDs for LMV clients
  it each new LMV uses fresh UUID, then each recovered MDS looks like
  new client (target MDS doesn't recognize it's old because of new UUID).
  if target MDS gets restarted, then it'll find more clients in LAST_RCVD
  then it actually had

file export-zap-page-range.patch was initially added on branch b_mmap.

file mmap_sanity.c was initially added on branch b_mmap.

file ext3-htree-rename_fix.patch was initially added on branch b1_2.

b=2950

landed on HEAD

b=3063

- lmv_getattr_name() recognizes cross-node name and repeats getattr to proper
  MDS node with gotten ino/generation couple
- warning for cross-node rename in lmv_rename(). it isn't implemented yet.
  hence, we'd like to know when we hit this path
- mdc_getattr_name() accepts empty name in order to support getattr by fid request
- mds_get_parent_child_locked() forces MDS_INODELOCK_LOOKUP to be used
  if found dentry points to another MDS node
- mea_name2idx() and raw_name2idx() checks for last not to be zero and warns if it's

NOTE: this should fix the cause of the test #5 failure

- bugs in fsfilt_ext3_add_dir_entry() and fsfilt_ext3_del_dir_entryI() fixed:
  JBD routines must be called under BKL on 2.4

- ll_update_inode() puts number of MDS holding inode to inode->i_dev. this
  fix the problem some apps confuses on: they see the same inode number for
  different objects. thanks to Andreas for the idea.

- mdt_obj_create() understands a request which is part of cross-node mkdir()
  recovery and looks for given ino/generation first. if no ino/generation are
  given then it simple recreates new object and returns ino/generation back
  to MDS holding a name. leaked inode is subject to rollback mechanism that
  is to be implemented yet
- when mds_reint_create() is asked to replay cross-node mkdir() it signals
  this to MDS holding dir inode and sends ino/generation couple if possible

NOTE: now cross-node mkdir() survives failure on any MDS node: holding the
      name and holding the inode

- extN-wantedi accepts generation as well as ino to create an inode with
  given ino/generation. we need this for cross-node mkdir() which creates
  inode on remote MDS and adds dir entry then. after that remote MDS may
  fail and primary MDS will have to recreate inode with already gotten
  ino and generation numbers
- export refcounting bug in lmv fixed
- mdc_obj_create() stores just received ino/generation back to request.
  if request replay will happen mdt_obj_create() will use stored numbers
  to recreate lost inode
- mds_filter_recovery_request() accepts OST_CREATE request. need to be
  discussed though
- mdt_obj_create() rewritten to support recovery phase
- needless mds_lmv_disconnect() in mds_fs_cleanup() removed
- possible bug in retrieve_generation_numbers() fixed: it should understand
  cross-node dir entries and put proper mdsnum's

NOTE: please, re-apply extN-wantedi patch

- workaround for name collision in mdt_obj_create() + debug CERROR there
- mds_commitrw() should use l_dput() instead of f_dput()
- removed needless CERROR() from mds_create_local_dentry()

- pdirops patches against vanilla-2.4.20 series

NOTE: vanilla-2.4.20 runs CMD now

- new routine lmv_get_mea_and_update_object() to be called for
  MDS's reply with -ERESTART which notifies directory got splitted
- lmv_intent_open() recognizes a dir gets splitted during request,
  retrieves mea and repeats the request using proper MDS
- lmv_create() recognizes a dir gets splitted during request,
  retrieves mea and repeats the request using proper MDS
- bug fixed in lmv_getattr_name(): it passed wrong namelen to raw_name2idx()
- lmv_obd_create() sets OBD_MD_FLID to flag MDSs to mark created object
  unsplittable. we have to differ two possible requests: 1) to create
  remote inode for cross-node mkdir(); 2) to create slave objects. last
  ones must not be splitted recursively
- mdt_obj_create() has been rewritten to comply just described rules.
  also, it takes a lock on newly created inode. this is needed for recovery
- bug fixed in scan_and_distribute(): it tried to open an inode using decimal
  number and this caused iopen_lookup() to find alias dentries
- mds_get_lmv_attr() should return right mea size for given conf. in any case
- minor cleanups

- lmv_packmd() and lmv_unpackmd() need not be real connected

file md_path_lookup-2.6-suse.patch was initially added on branch b1_4_smallfix.

file rename_many.c was initially added on branch b1_2.

- name var was used being uninitialized

- raw_name2idx declaration to avoid warnings
- ldlm_cli_enqueue() takes 2nd number from resource name into account
  to recognize that returned lock changed. we need this because MDS
  may return LOOKUP lock with the same ino, but another generation.
  the case is very simple mkdir a; then touch a/b; remount; lookup a/b;
  a and b my live on different MDSs and have the same ino
- lmv_handle_remote_inode() changes intent from IT_LOOKUP to IT_GETATTR:
  caller expect to find attributes in reply
- lmv_intent_lookup() chooses right MDS to revalidate the name
- lmv_create() chooses right MDS where to forward request to
- lmv_link() chooses right mds where to forward request to
- lmv_unlink() chooses right mds where to forward request to
- lmv_readpage() removes . and .. from all the pages, but ones that come
  from master MDS for given directory
- lmv_obd_create_single() requests creation of single directory on given MDS
- mdt_obj_create() creates a directory for new mkdir() semantic
- each time new llite connects to MDS, the latter try to connect to own LMV
- mds_pack_inode2body() returns nlink=1 for directories
- mds_lmv_postsetup() pass valid cookiesize to lmv and down to the stack
- mds_reint_create() distributes new dir's inodes over the cluster
- bug in mds_create_local_dentry() fixed: rmdir may cause FIDS/ removal
- mds_get_parents_childer_lock() recognizes cross-ref dentries

file ext3-extents-asyncdel-2.4.20-rh.patch was initially added on branch b1_4_mballoc.

file ext3-extents-asyncdel-2.4.24.patch was initially added on branch b1_4_mballoc.

smash the HEAD with the contents of b_cmd.  HEAD_PRE_CMD_SMASH and
cMD_PRE_CMD_SMASH are the relevant tags.

The pre-smashing contents of HEAD will be committed by yury into b_cmd as a
merge of the two branches.  These will be stabilized on b_cmd and eventually
landed onto HEAD.

file loop-sync-2.4.21-suse.patch was initially added on branch b1_2_smallfix.

b=2657
Added group lock tests. Those are not built by default.

Land b_smallfix onto HEAD (20040512_1806)
b=2094, b=3138, b=3335, b=3274, b=3293, b=2862, b=3147, b=2350, b=3313
b=3265, b=3315, b=3301, b=3325, b=3329, b=3125, b=3098

file .cvsignore was initially added on branch b_openib.

file openibnal_cb.c was initially added on branch b_openib.

file openibnal.h was initially added on branch b_openib.

file openibnal.c was initially added on branch b_openib.

file autoMakefile.am was initially added on branch b_openib.

file Makefile.in was initially added on branch b_openib.

a small fix on lmc to update its reference and description

removing patch for 2.6.5 as i have moved on.

New files for vanilla 2.6.6 linux kernel.  also a new ldiskfs for 2.6.6

Default mount options stuff.

b=2693
r=Robert

Update the regex of conf-sanity.sh test 13 to parse mds uuid from xml file properly.

- tagging RC_CURRENT

file llite_mmap.c was initially added on branch b_mmap.

- trivial fox for llog compile warning

Small fix on the description of some lctl commands.

a small fix to the reference beyond the buffer

Correct the description and usage of "lctl conn_list".

- tagging RC_CURRENT

minor fix for build on amd64.

Adding patch set for vanilla 2.6.5, had to port over one of the suse patched from bitkeeper for o_direct so that the suse patches would go in a little cleaner.

landing smfs.

- tagging RC_CURRENT

b=3119

Assert when page->private isn't what we expect.

- derive graph colors from rpc names.  this gets hard to look at with
  many rpcs, but at least it works.
- also raise the graph a bit to account for lots more types of rpcs.
  need to get rid of a lot of the whitespace between bars..

- tagging RC_CURRENT

fixup LASSERTF for liblustre

- tagging RC_CURRENT

- updated tinderbox config info for rh series on x86

- use sles8 iopen patch

re-add files that were erroneously deleted on HEAD

Land b_smallfix onto HEAD (20040428_2142)
b=3284, b=3285, b=3043, b=3236, revert liblustre group changes

file ext3-extents-2.4.20-rh.patch was initially added on branch b_cmobd.

fix smfs_lookup, and add LASSERT to llog_lvfs_create

fix endian mixup from previous patches

- more consistently get the opc when graphing rpcs

- re-add cvs datestamp functionality (enabled by default), but allow it to be overridden by using the --disable-datestamp flag

- original patch applies fine against most recent chaos kernel (87). Reverting.

- use $() for execing
- ignore errors

- chaos kernel only needs half of the old inode-max-readahead patch, so added a new patch just for chaos-2.4.18
- updated series file for chaos-2.4.18
- updated tinderbox info for chaos-2.4.18
- lbuild: removed '-D' option to cvs which was tanking builds on most clusters, cascading check for rpmbuild and rpm as the method to make rpms

remove the scimac NAL

- tagging RC_CURRENT

liblustre: b=2862
 - use real uid/gid instead of simply be as root
 - set group info
 - set capability info

b=3119
r=zab

clear page->private before handing to FS

b=3291

Stop fsx segfaults from re-using va_list arguments across two printf calls.
Also harden some of the fancy footwork involved in sizing an output buffer.
Also add some printf format checking and fix up some bugs it found.

handle case where quadrics headers are in an odd location

- have graph-rpcs exit if it doesn't find RPCs in the log

Land b_smallfix onto HEAD (20040423_1603)
b=3043, b=3258, b=3219, b=2410

Check if the autolustre RPMs are already installed, and suggest changing
the PATH, so I (and other users) don't have to remember where they are.

- tagging RC_CURRENT

- new flag '--ssh <ssh_cmd>' for replay_single and recovery-small: still defaults to ssh, but allows us to run tests on clusters where ssh-equiv isn't setup (e.g. mdev)
- use safe_strncpy where applicable
- replace hard-coded string lengths with some defines

- tagging RC_CURRENT

 - ldiskfs is ext3

- shut up, shut up, shut up, shut up!

 - keep selinux-enabled kernels from truncating our mount data.

fixes -EINVAL I got over the weekend.

Fix this bug, not sure why my CVS didn't show this as a diff.
b=3222

- use different delimiter for CONFIGURE_FLAGS replacement, so that backslashes in the variable don't make it lose it's mind

*    Landed b_cray_portals_merge (3148, 3158)

- tagging RC_CURRENT

- target and config files for recent chaos kernels (for tinderbox)

- fix syntax error

Don't try to put a hyphen into the Lustre RPM release version.

This is HEAD.

Fix --disable-modules build.

- add a cute script that uses 'ploticus' to graph the rpcs from a D_RPCTRACE
  log.  the script should be easy to use and has pointers to ploticus.

http://tetsuo.zabbo.net/~zab/rpc-graph.ps

is an example.

- tagging RC_CURRENT

Land b_smallfix onto HEAD (20040416_1638) (more 2.6 build fixes)
b=2912/2922, b=3145 too

- tagging RC_CURRENT

Land b_smallfix onto HEAD (20040414_1359)
b=3116, b=3064, b=3107, b=3122, b=1519, 2.6 kernel fixes, group lock fixes

fix compiler warning

- tagging RC_CURRENT

- tagging RC_CURRENT

*   Landed b_cray_portals_merge.

    Superbug 2871:
    Sub-bugs fixed 2869 2870 3034 3036 3037 3035 3038 3135

land b_inodebits

Point people at the autolustre rpms, too