Revert "b=15692 statahead should hold parent dir's i_mutex..."

This reverts most of e99ff8c12711281dc7e7e6bfd02c96eb956e4a33. The #ifdef
DCACHE_LUSTRE_INVALID changes remain, but everything else is reverted. This also
normalizes the ll_lookup_lock.

o=ericm
i=rread

b=21448 send recovery rpc ASAP

1) send recovery rpc ASAP.
2) add more diagnostic information for RPC failure.

i=robert.read
i=tappro

b=21716 Reduce memory consumptions in directio utility

use one memory mapped file buffer in directio.c instead of two.

i=tappro
i=andrew.perepechko

b=21709 do not trigger quota processing for SOM operation

Do not trigger quota processing for SOM operation.

i=robert.read
i=vitaly.fertman

b=18790 Add config check to avoid type conflict.

i=panda
i=yangsheng

b=20758 Update SLES10 kernel to 2.6.16.60-0.42.8(only patchless).

i=johann

b=19673 Add ldiskfs maxdirsize mount option

i=girish.shilamkar
i=johann

b=19720 use min_t() to force comparison to unsigned

In older kernels num_online_cpus() is an int, and in newer
kernels it is an unsigned so force the comparison to unsigned
so that it's portable to both new and old kernels.

i=panda
i=whitebear

b=21671 Eliminate a warning for the ldiskfs module

o=Yang Sheng
i=Andrew Perepechko
i=Rahul Deshmukh

b=21489 fix several write+utimes race conditions

Disable mtime updates on write and serialize fmd_mactime_xid checks in order to
avoid certain write(2)+utimes(2) race conditions on OSS

i=Johann Lombardi
i=Vitaly Fertman

b=15864 insanity test_6 : use stat -f instead of df for determining the recovery status

i=Jian.Yu

b=19702 fix COUNT to work properly

i=Andrew.Perepechko

b=17167 libcfs: ensure all libcfs exported symbols to have cfs_ prefix

i=Andreas Dilger

b=21670 use int instead of char to hold getopt rc in accordance with its prototype

i=Brian Murrell

b=21670 use int instead of char to hold getopt rc in accordance with its prototype

i=Brian Murrell

b=21670 use the correct fmt specifier for *printf in check_cur_qunit

i=Dmitry Zogin
i=Sheng Yang

b=21586 More stderr/stdout redirections

Just a few more redirections to get some commands' output into the
appropriate log files.

We should actually return the 255, not just assign it to a unused variable.

i=yangsheng
i=wangyb

b=21670 revert new version of find_linux_devel_paths

i=Andrew Perepechko
o=Brian Murrell

b=21586 further build message cleanups

i=Yibin Wang
i=Sheng Yang

b=21759 Miscellaneous build fixes

The message string given to fatal() cannot be slit with line continuations
as you would strings elsewhere -- for whatever reason.  So let's just un-
split them for now.
Coding style fixups.
Adds a "--set-var" option to lbuild to set/override an environment variable.
This is mainly meant for lbuild testers.
Fix missing - from tar so that the --exclude parameters will be honoured.
Some stderr->stdout redirections to get output into the correct log.

b=20645 fix potential stale-read.

Due to race between read and truncate, read may populate cache pages outside
of the file size range, then next truncate-expand will see the stale page.
To fix this, we do a second vmtruncate at the end of truncation.

i=jay
i=robert

b=21656 Quiet dirty_max CERROR

The atomic_read() allowing the atomic_inc() are not covered
 by a lock. Thus they may safely race and trip this CERROR()
 unless we add in a small fudge factor (+1).

 i=adilger
 i=dmitry.zogin

b=19556 Ignore broken cancel_dirty_page() in OFED 1.4.1

OFED 1.4.1 had a broken implementation of cancel_dirty_page for SLES10.
This patch detects that and ignores the function if found.

i=johann
i=yangsheng

b=20301 Fix mkfs.lustre for 16TB+ LUNs

Mounting 16TB LUNs failed due to three bugs in mkfs.lustre. This patch
fixes this.

Patch by James Simmons.

a=simmonsja@ornl.gov
i=adilger
i=girish

Prepare for Build 34

      - Increment build number.

Revert "b=19808 2.6.29-fc11 patchless client support"

Causing kernel BUG in my testing, see bug 19808.

This reverts commit 95dbd166988cf0a2912c51305572c78a9aa2d324.

b=21519 fix race between ldlm_pools_thread and ldlm_space_free

After ldlm_space_free dropped the refcount of a namespace to 0, it
may start to cleanup data structures in the namespace, while the
ldlm_pools_thread can still pick up the freeing namespace. This patch
is to instruct ldlm_pools_thread to skip namespace which is being
freed.

i=oleg
i=wangdi

b=21551 Ensure visible pages are sane.

Revise the page initialization path so that if the page is able to be seen by
osc, it must be sane.

i=wangdi
i=eric.mei

b=19808 2.6.29-fc11 patchless client support

Changes required to support fc11 patchless client on HEAD.

i=oleg.drokin
i=tappro

b=21433 Add debug information for quota_setdq/quota_chkdq.

i=vitaly.fertman
i=tianzy

b=20591 fix race on obd_device::md_stats

call lprocfs_free_per_client_stats() before mdt_procfs_fini() frees
all the lprocfs data

i=liuying
i=wangdi
o=vitaly

b=21547 Move cascading_rw.c to correct location.

b=21547 add cascading_rw into lustre mpi tests

o=James Simmons
i=Johann
i=grev
i=Robert Read

b=21670 output format specifiers fixes in LQS_DEBUG

i=Andreas Dilger

b=19808 : 2.6.29-fc11 patchless client support

Changes need to fix to compile on gcc 4.4 (fc11)

i=tappro
i=vladimir.saveliev

b=20583 Do not create more than pre-created objects for sanity_27y

i=robert.read
i=tom.wang

b=21454 Disable cl_page_in_io check for append write.

This is because for append write, it's difficult to pass the uptodate file size to subio.

i=wangdi
i=eric.mei

b=18630 avoid the race of acquiring/releasing quota

Before this patch, checking and computing the info of lqs
are located in two different functions(check_cur_qunit()
and schedule_dqacq()). It is racy. With this patch, they
will all happen in one function(check_cur_qunit()).

i=johann
i=panda

Revert "b=21547 add cascading_rw into lustre mpi tests"

Build failure in cascade_rw.c.

This reverts commit f91373a85ceb65cb1ea8558b1da242a1770fc2a3.

Prepare for Build 33

  - Update lustre/ChangeLog.
  - Update which_patch with correct kernels.
  - Increment build number.

b=21600 Fix unitialized pointer

gcc warns that ctx may be used prior to assignment, so initialize it
at declaration

b=21547 add cascading_rw into lustre mpi tests

o=James Simmons
 i=Johann
 i=grev

b=21544 t-f: support the dynamic switching GSS flavor

i=Eric.Mei

b=19964 server-side extent lock for getattr

extend server-side locking used for punch only to other operations, getattr here

i=green
i=zam

b=19964 SOM EA

SOM stores proper size, blocks, IOEpoch and mountid in EA

b=19964 SOM cleanups, part2

SOM cleanups, comments and some bugfixes

i=zam
i=vs

b=19964 SOM cleanups, part1

SOM cleanups, comments and some bugfixes

i=tappro
i=vs

b=20098 mod use after free

add a refcount to md_open_data to control its usage in open-close and setattr-done-writing

i=green
i=tappro

b=20607 Use refcount on lov_request_set to prevent memory corruption.

Correct the refcount of lov_request_set to make sure the set will only
be freed after all the references have been released.

i=adilger
i=ericm

b=15692 statahead should hold parent dir's i_mutex to synchronize with other operations from VFS layer when inserting dentry to dcache

1) statahead should hold parent dir's i_mutex to synchronize with other operations from VFS layer when inserting dentry to dcache
2) drop unused ll_lookup_lock
3) drop unused DCACHE_LUSTRE_INVALID definition checking
4) more debug information
5) other code cleanup

i=robert.read
i=eric.mei

b=15977 Disable test 39 until it is fixed.

This test produces are large number false positives because it is possible
for debug logs on some cpus being filled faster than other cpus. A alloc
message might appear on one cpu, but the freed message might be lost on the
second.

b=20722 Fix watchdog timer messages to be more clear.

i=adilger

Revert "b=19325 Adjust waiting extent locks on first enqeue."

This reverts commit 6ded7c96c486ebcb069e9125d4fe94c1efddbf60.

Reverting because of issues with lock expansion.

Revert "b=20645 Call vmtruncate again after truncate."

This reverts commit 3bbe90f2827dd972dfb9bb5ca52bd3b60b553069.

Just hit the new assertion in racer, so backing this out for now.
http://buffalo.lustre.org:8080/display_report.pl?report_id=450093

b=17682 limit performance impact of rpctrace, dlmtrace & quota

Performance improvements for debug messages with
    D_RPCTRACE, D_LDLM, D_QUOTA

    i=alexey.lyashkov
    i=andrew.perepechko
    i=johann

b=21571 stacksize and locking fixes for loadgen patch from umka

i=adilger
i=nathan

b=16890 CERROR cleanups

a whole lot of CERROR/CDEBUG cleanups

b=16186 Enable peer health detect for ksocklnd and ko2iblnd. i=isaac

b=21586 clarify lbuild error reporting

clarify the reporting of build errors by:
- disabling xtrace during the stack trace printing
- moving the ccache statistics printing exit trap so that it's only
  installed if ccache has been enabled
- remove some useless $() constructs around function calls
- only send the untrapped error debuggery to me

i=wangyb
i=yangsheng

b=17545 control DCACHE_LUSTRE_INVALID flag with MDS_INODELOCK_LOOKUP lock

1) "DCACHE_LUSTRE_INVALID" is controlled by "MDS_INODELOCK_LOOKUP" which is corresponding to "IT_LOOKUP", do not skip invalidate for other intent.
2) cleanup locks from former test cases for replay-single test_53d.

i=robert.read
i=jinshan.xiong

b=21593 sanityN test_33 print jbd stat fix [ext3|ext4]

i=Alex.Zhuravlev

b=20591 fix race on obd_device::md_stats

move md_stats out of export_stats_init() and cleanup mdt/mgs
procfs init/fini.

i=wangdi
i=liangzhen

Revert "b=21527 Use %configure in the RPM SPEC file"

Reverting due to build failure.

This reverts commit 98fd9942abbc7503fc9f1885e58b88887daa6e73.

b=21527 Use %configure in the RPM SPEC file

use the %configure macro defined by the RPM installation so that the
vendor's filesystem hierarchy preferences are observered

i=wangyb
i=yangsheng

b=16890 Reorder tests 29 and 30

Put tests 29 and 30 in natural order

b=20645 Call vmtruncate again after truncate.

Due to race between read and truncate, read may populate cache pages outside of the file size range, then next truncate-expand will see the stale page. To fix this, we do a second vmtruncate at the end of truncation.

r=jay
r=rread

b=16466 add the support for journaled admin quota file

i=tianzy
i=johann

b=21600 Fix unitialized pointer

gcc warns that ctx may be used prior to assignment, so initialize it
at declaration

i=rread

Remove lustrecvs.  Not needed for git

Introduce .gitignore files.

The top level .gitignore file is new and is an attempt at
pulling in some of the common items that you might get for
free (by default)with CVS.  The other subdir/.gitignore files
are translated versions of their corresponding .cvsignore
file.  Because CVS does not descend into a subdir when
applying a ingore rule we have to prepend a "/" to
the pathname to get git to behave the same way.

Add ldiskfs/build symlink

Branch HEAD

Another test commit to ensure cvs is back to normal.

Branch HEAD

Test commit to ensure cvs  is back to normal.

Branch HEAD

Updating ChangeLog supported kernel section.

Updated for 2.0 build 32.

 Branch HEAD
 b=21259
 i=andrew.perepechko
 i=alexey.lyashkov
----------------------------------------------------------------------
 Modified Files:
  lustre/ChangeLog lustre/obdclass/linux/linux-module.c
----------------------------------------------------------------------
Description: Allow non-root access for "lfs check".
Details    : Added a check in obd_class_ioctl() for OBD_IOC_PING_TARGET.

b=19689
i=adilger
i=bobijam
i=nathan
o=Jim Garlick

Change tunefs.lustre and mkfs.lustre --mountfsoptions so that
exactly the specified mount options are used.
Leaving off any "mandatory" mount options is an error.
Leaving off any default mount options causes a warning, but is allowed.
Change errors=remount-ro from mandatory to default.
Sanitize the mount string before storing it.
Update man pages accordingly.

This hopefully makes two awkward situations less so:
- making errors=panic the default (before we had to append errors=remount-ro
  and hope ldiskfs parsing caused the last option to override the first)
- setting other mount options on the OST's dropped mballoc,extents
  without warning.

b=20237
i=Robert.Read
more tests gather logs changes

b=21115
i=Robert.Read
mount the same config on all clients

b=21115
i=Robert.Read
mount the same config on all clients

Branch HEAD
When a reply is wrong, lquota will try to remove the qunit in order
to avoid other threads hanging on it.
b=21372
i=yong.fan

b=20853,i=isaac:
- Mark portal 63 as reserved for Cray DVS.

b=20580
i=Johann
skip test 78 for local OST

b=21142
i=Andrew.Perepechko
test_cascading_rw: return if skip

-  update mxlnd to upstream revision r224.

b=21128
i=rread
i=adilger
get stack dump on stack usage overflow.

b=20655
i=sheng.yang

- Fixed the patchless client build failure for ext4 on HEAD.

- And ldiskfs will be ext4 by default on HEAD for RHEL5.

b=21224
i=johann
i=yong.fan

Ported the quotacheck improvement patch to HEAD.

b=21348
i=Mike Pershin
i=Alexander Zarochentsev

adding proper maintainance of the evictor list

b=20953

debug patch for sanity-quota test_30

Branch HEAD
b=18357
i=adilger
i=rread
o=simmonsja@ornl.gov

Make newer versions of gcc happy.

Branch HEAD
b=21314
i=alexey.lyashkov
i=alexander.zarochentsev

keep lock reference when class_export_lock_put accesses the lock.

b=21530
i=wangyb
i=yangsheng

Don't build RDAC for (patchless) clients.

i=maxim,i=chris,b=21459:
- should update lp_alive for non-router peers.

b=21079
i=rread
i=liang
Sanity test_215 is rewritten to eliminate too optimistic assumptions
about values LNET exports to /proc/sys/lnet/*. Also, rewritten test
reflects latest modifications of /proc/sys/lnet/routers and
/proc/sys/lnet/nis (made in the scope of bug #20171).

 Branch HEAD
 b=21513
 i=alexey.lyashkov
 i=johann
 ----------------------------------------------------------------------
 Modified Files:
  lustre/ChangeLog lustre/ptlrpc/import.c
 ----------------------------------------------------------------------
Description: Clear imp_force_reconnect correctly in ptlrpc_connect_interpret()

b=21460
r=wangdi,eric.mei

- in ll_prepare_write, it initialises an env, but not hold a refcount against it, so it would have been freed in up-coming ll_commit_write.
- remove cui_oneshot

b=21514
i=wangyb
i=yangsheng

If lbuild is interrupted (i.e. LBATS "Cancel") then it should not call
the ccache -s exit trap action because experience has shown that the
ccache binary is gone by the time lbuild gets to calling it.

Also, extend the API for the delete_exit_trap() to handle multiple
action handles in a single call.  This makes it easy to create a stack
of actions and then delete them all in a single command.

What would be even nicer would be (shell and pdsh style) glob handling
so that one could do delete_exit_trap foo[1-10], assuming one pushed 10
actions on a stack to be unwound during an operation that is supposed to
be atomic.  Or more simply delete_exit_trap foo*.

b=19616
o=Walter.Poxon
i=grev
read the list of tests to except from the file if it exist

b=21041
i=dmitry.zogin
i=johann

On RHEL5 at least, the sg_set_page autoconf macro needs the addition of
<asm/types.h> in order to properly work.