re-vert komaln 1.42.10.76.2.2 t-f changes unrelated to 14471

b=15870
i=adilger

Forgot to remove the ChangeLog entry when I backed this patch out.

re-vert shadow b1_6 1.42.10.80 (robert.read 1.42.10.76.2.4 merge)
and 1.42.10.76.2.5 commits:
move debug code && sync to appropriate place

Branch b1_8
b=14480
o=green
i=shadow, bobijam

Description: LBUG during stress test
Details    : Need properly lock accesses the flock deadlock detection list.

b=16090
i=Deen
move export ${facet}_svc from start fn to mount_facet fn

branch: b1_8
don't report service est. for MSG_ERR during recovery.
b=15815
r=rread
r=nathan

revert typo.

fix oops in page fault handler.
b=15837
i=nikita
i=green

Branch b1_8
b=15592
i=oleg, johann

Correctly handle the FS_RENAME_DOES_D_MOVE flag for Lustre.

Branch b1_8
b=14693
r=nathan

Don't return an error for conf_param processing failures

Branch b1_8
b=13285
r=adilger, deen

not to fail the import when -EFBIG is returned

Merge b1_8 from b1_6 (20080613_1435)

Branch b1_8
b=14134
i=johann

minor fix handling '/etc/mtab' issue.

Branch b1_8
b=15345
o=johann
i=nathan, bobijam

check --writeconf flag when forcing the index.

b=14384
i=Adilger
test_9, test_10a fixes: do not break DIR value

Cleanup wrong mount_facet message
(introduced by deen rev 1.42.10.74 b1_6)

Branch b1_8
b=15667
i=johann, andrew

Remove useless function echo_client_ubrw();

timeout and assert in invalidate import.
b=15716
i=rread
i=johann

b=14471
i=adilger
 replace /proc/fs/lustre access with lctl {get,set}_param in test-framework.sh

b=16019
i=Maxim.Patlasov

get rid of quotation in "options lnet"

b=15711
i=Tappro

insanity uses local cfg now; remove obsolete insanity-local cfg

b=15711
i=Tappro

t-f and insanity fix to work properly with FAILURE_MODE=HARD

b=15226
r=nikita,shadow
- fixes access to freed ns and pool on behalf of comming rpcs in finalization time;
- cleanups, comments.

add racer scripts on b1_8

Branch b1_8
b=15741
i=joahnn, zhenyu.xu

Update to RHEL5 kernel-2.6.18-53.1.19.el5.

Branch b1_8
b=15742
i=johann, zhenyu.xu

Update to RHEL4 kernel-2.6.9-67.0.15.

b=15440
r=shadow,nikita
- fixes missed CFS_INIT_LIST_HEAD(&ns->ns_list_chain); in ldlm_namespace_new();
- cleanups about names and ns list work;
- remove ns from list before waiting to refc == 0.

Branch b1_8
delete compatibility for 32bit qdata
b=15933
i=zhenyu.xu
i=johann

b=14471
i=nathan, andreas
To add -N option in lctl get_param which will print only path names.

Updated entry to support development of b1_8 branch (lustre 1.8.0).

Updated file to start development on new branch b1_8 based on b1_6.

This commit was manufactured by cvs2svn to create branch 'b1_8'.

Branch b1_6
b=14134
i=nathan, johann

Description: enable MGS and MDT services start separately
Details    : add a 'nomgs' option in mount.lustre to enable start a MDT with
             a co-located MGS without starting the MGS, which is a complement
             to 'nosvc' mount option.

Branch b1_6
b=15904
i=shadow
i=wangdi

clean log_commit_master properly at cleanup in llog_commit_thread()

cleanup in ptlrpc code, related to ppc platform
avoid twice swabing one msg buffer
fix get LOV_GET_INFO on ppc platform.
b=14856
i=nikita
i=adilger

Branch b1_6
b=13310
o=eeb
i=joahnn, nikita

The bug is that target_send_reply_msg() calls ptlrpc_error() if 'rc != 0', but
"difficult" replies may not be passed to rpc_error().

b=15346
i=green,shadow,vitaly

skiplists are used to group compatible locks on granted list
that was implemented as tracking first and last lock of each lock group
the patch changes that to using doubly linked lists

b=15876
i=Adilger

skip LFSCK test for remote MDS also

b=14773
i=Adilger

rename subtests to skipping mechanism works properly

branch: b1_6
a better way to fix the script.
b=13659

b=15908
i=johann
i=zhenyu.xu:

Small message correction.

branch: b1_6
fix test script: at_start return correct value.
b=13659
r=grev

b=14471
r=Andreas
 to replace the sysctl lustre.* and lnet.* instances with lctl {get,set}_param

Upstream fix for memory leak when verifying checksums in the journal.

branch: b1_6
do not drop replay according to msg flags, instead we check the
per-export recovery request queue for duplication of transno.
b=15756
r=adilger
r=rread

b=15255
i=Adilger

config for several remote clients; replay-single test_70a, test_70b

Branch b1_6
b=15649
i=oleg, shadow

Enable debug options in vanilla kernel config file.

b=15874
i=Adilger

skip test_32a, test_32b for NETTYPE != tcp

Branch b1_6
b=14443

Branch b1_6
b=13915

Branch b1_6
Update which_patch to indicate support for 2.6.22 patchless.

Update e2fsprogs version to 1.40.7-sun3

fix liblustre build. use OBD_BRW macros instead of linux specific.
b=14010
i=green

Branch b1_6
b=15759
r=rread, green

Don't consider -EMFILE (too many threads) a fatal startup error

Branch b1_6

b=15501
i=eric.mei
i=rread

Nathan's early margin debug patch.

fix build lustre with o2ib and SLES10.
b=15870
i=walter

Branch b1_6
b=14010
i=shadow
i=zam

Fast-blocking read case

don't create too many objects after del orphan.
b=14835
i=tappro
i=deen

b=14471
r=Andreas

to remove instances of /proc/sys in sanity.sh by using either sysctl or lctl {get,set}_param

In reconstruct_* functions, LASSERTs on both the data supplied by
a client, and the data on disk are dangerous and incorrect. Change
them with client eviction.

b=15574
i=adilger
i=shadow

Branch b1_6
b=13285

Reverting rest of script libexedir patch to fix rpm build.

add entries for quota patches.

Branch b1_6
Quiet build warnings when building MPI test programs.

Branch b1_6
b=15406
i=adilger
i=h.huang

replacing "ext2_xxx" in llite module.

b=15776
r=shadow,vitaly

Prevent locks stalls on glimpse races

Branch b1_6
b=13285
r=green, bobijam

use the libexec convention for scripts

Branch b1_6
b=13285
r=adilger, deen

1. updated ext3-mballoc3-core.patch and added ext3-max-dir-size.patch to limit the maximum size of a directory;
2. updated other ldiskfs patches to resolve patch conflicts caused by the above two new patches;
3. added a test case in sanity.sh.

b=14471
r=andrew.perepechko, johann

Patch by Adilger to replace /proc/fs/lustre access with lctl set_param in sanity-quota.sh

fix ASSERTION(client_stat->nid_exp_ref_count == 0) during
run acc-small.
b=15139
i=tappro
i=komal

b=14471
r=Adilger

Changed replay-single.sh to use 'lctl {get,set}_param'

Branch b1_6
b=15828
i=adilger
i=umka

return "-EIO" when write to read only proc interface which "write_proc" is NULL.

Branch b1_6
b=15575
i=wangdi, johann, green, shadow

Description: Stack overflow during MDS log replay
Details    : ease stack pressure by using a thread dealing llog_process.

Branch b1_6
b=13285

revert the libexec patch since it hasn't got permissions yet.

Branch b1_6
b=13285
r=green, bobijam (libexec)
r=johann, deen (gcc)

1. Use the common libexec convention;
2. Quiet remaining gcc warnings.

Branch b1_6
b=13380
r=green, bwzhou

Mountpoint references were being leaked during open reply reconstruction after
an MDS restart. Drop mountpoint reference in reconstruct_open() and free dentry
reference also.

VM protocol want old IO finished before start new, in this case
need wait until PG_writeback is cleared until check dirty flag and
call writepages in lock cancel callback.
b=15443
i=nikita
i=zam

b=15660
i=adilger

disable LIBLUSTRE test for NETTYPE != tcp && NETTYPE != ptl

Branch b1_6
Ignore compiled file.

Branch b1_6
Description: MDS may lose file striping (and hence file data) in some cases
Details    : If there are additional extended attributes stored on the MDS,
     in particular ACLs, SELinux, or user attributes (if user_xattr
     is specified for the client mount options) then there is a risk
     of attribute loss.  Additionally, the Lustre file striping
     needs to be larger than default (e.g. striped over all OSTs),
     and an additional attribute must be stored initially in the
     inode and then increase in size enough to be moved to the
     external attribute block (e.g. ACL growing in size) for file
     data to be lost.
i=kalpak.shah
i=alex.zhuravlev
b=15777

Sync ChangeLog from b_release_1_6_5.

Refactor start to encapsulate facet specific data.

b=12375
i=deen
i=grev

Branch b1_6
Merge ChangeLog entries from b_release_1_6_5 to b1_6.

b=15738
i=Adilger

sanity test_118* fixes; set fail loc on all oss nodes

Branch b1_6
b=15238
i=shadow
i=tianzy

refactoring of quota code

Branch b1_6
b=14740
r=adilger, bobijam

break a single big chunk of memory allocation for lprocfs_stats into separately
allocated small chunks to prevent kmalloc failure in a huge cluster

Branch b1_6
b=12888
i=johann, green

Description: mds_mfd_close() ASSERTION(rc == 0)
Details    : In mds_mfd_close(), we need protect inode's writecount change
             within its orphan write semaphore to prevent possible races.

b=15745
i=Adilger

the minor cleanup of the previous fix:
-- after we get rid of $tdir we do not need to create $tmpdir, because
   unzip -d <dir> does not need <dir> exists, it needs the parent directory
   of <dir> exists; unzip creates <dir> if it does not exists.

Branch b1_6
b=14790
i=Johann
i=ZhiYong

additional test. check if setting limits twice doesn't break oplimits.

Reinitialize optind to 0 on each lfs_* call, in case lfs is being used interactively.  Most lfs_* functions do this already, but a few (find, setstripe, quotachown) do not.
 b=15212
 i=rupesh
 i=johann

Branch b1_6
change the time of ost informing osc out of quota in order to get more
accurate quota
b=14909
i=johann, andrew

Branch b1_6
Fix typo in error message.

Branch b1_6
b=15521
r=adilger, grev

the test case for bug 15521

b=15732
i=walter

Land andreas' fix for catamount build errors

b=15732
i=adilger

fix build warnings which are treated as errors
during Cray XT3 catamount build

Branch b1_6
b=14034
r=johann, bobijam

error handling for ENOMEM case when allocating a ldlm resource

don't hit live lock with umount ost.
b=14645
i=johan
i=alex

b=15745
i=Adilger

conf-sanity test_32a, test_32b: create tmp dir correctly

b=15660
i=Adilger

disable LIBLUSTRE test for NETTYPE != tcp

rollback bug 15575, because at any run acc-sm i hit
LustreError: 29518:0:(lvfs_linux.c:194:pop_ctxt()) ASSERTION(current->fs->pwd == new_ctx->pwd)
after run-tests.

don't panic with use echo client
b=14949
i=johan
i=deen

b=11270
i=vitaly.vertman
i=oleg.drokin

Lockless i/o code fixes and improvements:
 (1) lockless truncate checks for OBD_CONNECT_TRUNCLOCK and ll_file_punch
     sets OBD_FL_TRUNCLOCK correctly.
 (2) an lproc control for lockless truncate,
     lproc statistics for lockless truncate.
 (3) sanityN tests for lockless code