recommit the patch for bug 5498.

b=13716
typo

b=13537
i=adilger
limit connection switch max to obd_timeout,
don't ignore the req timeout of the first reconnecting client

b=5498
* reverting broken commit (b1_6 does not build with this commit)

b=11673
i=andreas, green

If LAST_ID value on disk is smaller than the objects existing in the O/0/d* directories, it indicates disk corruption and causes an LBUG(). If the object is 0-length, then we should use the existing object. This will help to avoid a full fsck in most cases.

b=13454
r=bzzz, kalpak

jbd-stats patch for rhel5 and 2.6.18.8-vanilla

not revalidate dentry if it root dentry.
b=13334
i=green
i=johann

Branch b1_6
b=12207

add parentheses to eliminate compiling warnings in the original patch

Branch b1_6
Quiet overly verbose messages when trying to set block device tunables.
There are many reasons why these might fail (e.g. LVM, older kernel, etc).
b=11230
i=nathan

Branch b1_6
b=12207
i=johann
i=shadow

hide trusted.lov to the users and export it internally as lustre.lov

restore this file. wrongly uploaded just now.

b=5498
r=andreas,wangdi
w
Add support for lustre loop device emulator.

b=13541
Reverting broken commit.

Branch b1_6
b=12840
i=green
i=johann

prevent self-evicting through procfs

Branch b1_6
b=12948
i= wangdi, johann

Description: buffer overruns could theoretically occur
Details    : llapi_semantic_traverse() modifies the "path" argument by
             appending values to the end of the origin string, and a buffer
             overrun may occur. Adding buffer overrun check in liblustreapi.

Branch b1_6
b=13720
i=johann

check for existence of $LUSTRE/utils/l_getgroups before using it as group upcall

b=13716
i=adilger
i=green
clear invalid exp ref, take real references in ptlrpc_at_send_early_reply

bz-13541

Branch b1_6
Move patches that landed for 1.6.3 after branching into 1.6.3 section.
Remove entry for reverted patch b=10657.
Move 11270 out of 1.6.3 section.

ll_setattr_raw/truncate: there should be no
ll_extent_lock after a successful obd_match.
b=11270
i=vitaly
i=green

b=13696
r=adilger,nathan
- adds "lruresize" and "nolruresize" mount options;
- adds lru resize performance test.

b=2262
r=adilger,nathan
- fixed possible divide by zero in ldlm_pools_shrink();
- in ldlm_cancel_lru_local() cancel not more than requested locks in case count is specified (not lru resize case, proc one).

b=13557
i=Adilger

set stripecount correctly

Branch b1_6
Remove ancient tag file.

Branch b1_6
Move $RUNAS initialization until after cfg parsing so that $RUNAS_ID can
be set in the cfg file.  Use "error" instead of "echo".
b=12609

Branch b1_6
Description: e2fsck reports "invalid unused inodes count"
Details    : If a new ldiskfs filesystem is created with the "uninit_groups"
     feature and only a single inode is created in a group then the
     "bg_unused_inodes" count is incorrectly updated.  Creating a
     second inode in that group would update it correctly.
i=behlendorf
i=valerie

bz-13516

convert uint64_t to __u64

b=13504
i=Nathan

give multiop chan��e to start before umount client.

Branch b1_6
b=13685
b=11401
i=adilger
i=tappro

fix race condition in stopping statahead thread.

Branch b1_6
b=13653
b=11401
i=adilger
i=green

dir entry may have been removed before statahead starts.

b=13537
b=3055
in some cases we wouldn't schedule at ptlrpc_invalidate_import
cap reconnect ping interval
use simple reconnect backoff instead of "drain"

Branch b1_6
b=12609
i=johann
i=tianzy

set l_getgroups as the default group upcall for MDS;
a minor fix on sanity.sh

Branch b1_6
b=13616
i=johann
i=scjody

Modify target file & which_kernel for RHEL5 2.6.18-8.1.10.el5 kernel.

b=13669
i=adilger
i=green
send early replies even after we've packed the final reply.

b=2262
r=vitaly,nikita
- slv recalc fixes and cleanups in ldlm_pool.c;
- fixes and cleanups in lru resize sanity test 124.

b=13632
r=adilger, nikita
- Do not take namespace list lock while doing pool shrink or recalc, so that locks cancel may be done without ns list lock.

Branch b1_6
b=11401
i=shadow
i=tappro

- use cfs_* macros and functions instead of linux primitives (a=12609)
- cast fixing (a=12706)

b=13664
r=adilger, nathan
- use cancel_lru_locks in replay-ost-single.sh test_4 to cancel cached locks instead of using buggy echo -n clear > $i/lru_size

Branch b1_6
b=12234
i=adilger
i=johann
correct the cast of 'index' in obd_device_list_seq_show()

b=13499
i=Adilger

Wait recovery complete before AFTERUSED is checked.

b=13587
i=Scjody

set stripe count over all OSTs; calculate SIZE based on min kbytesfree.

b=13628
i=Adilger
i=Nathan

do not create recursive dirs

b=12613
i=Nathan

remove 18 from A_E list

b=12613
i=Adilger
i=Nathan

test_18 MDS_MKFS_OPTS fix; cfg/local.sh MKFSOPT fix.

b=10825
i=Adilger

make ALWAYS_EXCEPT usage more consistent.

b=13078

new 1.4 image from Andreas.

b=13078
i=Adilger
b=13649
i=Nathan

SAVE_PWD fix; 32a, 32b 35 fixes: disk1_4 correct path, correct FSNAME.

corrention patch for the lockless i/o code addesses the following problems:
. "false conflicts" may cause file contention and switching to lockless i/o
. compilation warning on a 64-bit platform
. contention reports are recorded as lustre errors
. llap_from_page complains about wrong llap_checksums for lockless pages
. assertions needed to be sure that ll_releasepage is called on pages with
  locks only
. NS_DEFAULT_CONTENDED_LOCKS=0 was considered as wrong default value

and, the lockless read/write is disabled by default now.

b=11270
i=green
i=adilger

Branch b1_6
b=13358
i=nikita

add regression test.

Branch b1_6
b=13358
i=nikita
i=bobijam

Don't LASSERT correctness of data obtained through the network.

b=12900
i=Adilger

export DIR2 tdir

Branch b1_6
Add OBD_CONNECT_MDS_MDS and OBD_CONNECT_REAL from HEAD so we don't get any
conflicts in the future.

Branch b1_6
Add OBD_CONNECT_MDS_MDS and OBD_CONNECT_REAL from HEAD so we don't get any
conflicts in the future.

- fixed arguments order in ldlm_dump_all_namespaces().

b=13610

Fix typo in last commit.

b=13610
i=andreas, johann

The changed prototype of ext_prepare_callback will be used in lustre if HAVE_EXT_PREPARE_CB_EXTENT is declared.

b=13553
i=adilger
df after clearing fail_loc

Branch b1_6
Disable client page cache checksumming by default. This does not affect
the wire checksumming, and only adds a lot of CPU overhead that is mostly
useful only for debugging rare client memory corruption vs. the more
common network transfer corruption. It can be enabled at runtime via
"echo 1 > $LPROC/llite/*/checksum_pages".
b=13579
i=scjody
i=nathan

Branch b1_6
b=13547, b=13627
Description: Data corruption for OSTs that are formatted larger than 2TB
             on 32-bit servers.
Details    : When generating the bio request for lustre file writes the
     sector number would overflow a temporary variable before being
     used for the IO.  The data reads correctly from Lustre (which
     will overflow in a similar manner) but other file data or
     filesystem metadata may be corrupted in some cases.

b=13394
i=Nathan

get rid of "./"

fix small typo in last commit.
b=13304

b=13457
i=nathan
i=brian

fixes option syntax for lfs

Branch b1_6
b=13563
i=adilger
i=green

1) cancel lru locks in ldlm_cli_cancel() and send 1 batched cancel RPC;
2) pass the whole list of canceled locks to the async blocking thread, not
lock-by-lock, and send cancels in batched cancel RPCs.

b=13595,13608
r=nathan,adilger,shadow,green

- separates client and server namespaces. Each "side" has own list and own lock;
- separate pool shrinker to client and server shrinkers which work each with own list. This is needed to avoid mixing up server and client pool cached resources which are too different. Client's locks may be canceled in sync manner and we can return to VM number of still cached resources. And server resources (locks) are not removed in sync way,  we just change SLV and expect that client will cancel something. To VM we return 0 as number of canceled locks;

- in ldlm_pools_shrink() use down_trylock() to avoid locking ns sem when it is already locked. This fixes hang up in test 116 if memory pressure comes. This issue is due to deadlock bewteen shrinker and pool thread if client and server run on same host;

- move lru add stuff into separate func;
- change l_last_used and move lock to tail of lru for case of FL_TEST_LOCK to make sure that it will still hang for some time in lru afer that. So that, if we looked for look even with FL_TEST_LOCK this means that we may need its resourse yet some time and better to stay lock in cache.

Branch b1_6
b=13358
i=wangdi
i=nikita

Impossible (EPROTO is returned) to access a directory that has a
non-default striping and ACLs.

Branch b1_6
b=13181
i=alex
i=nikita

Don't take the BKL in fsfilt_ext3_setattr() for 2.6 kernels.
It causes scheduling issues when removing large files.

b=12460
i=Adilger

Skip "cd ." part for patchless.

- cleanups in ldlm_pool.c - all pools recalc is moved to separate function ldlm_pools_recalc();
- grant_speed, grant_rate, garnt_plan, cancel_rate have own procfs functions which take into account possible schedule lag for pools thread.

Kernels after 2.6.16 not allow resotre s_dev from put_super, fix it.

b=13304
i=johann
i=green

Never resend AST requests.

b=13596
i=adilger
i=deen
original patch by green

- fixed issue with long time not being scheduled pools thread. We need to compensate that in lprocfs_rd_pool_state()

b=10555

Use correct structure name.

Branch b1_6
b=13600
i=kalpak, bobijam

original patch by adilger.

Description: "lfs find -obd UUID" prints directories
Details    : "lfs find -obd UUID" will return all directory names instead
             of just file names. It is incorrect because the directories
             do not reside on the OSTs.

Branch b1_6
b=2369
i=johann, deen

replace inode->i_size access with i_size_read/write

Branch b1_6

Remove client patches from SLES 10 kernel.  This causes SLES 10 clients to
behave as patchless clients even on a Lustre-patched (server) kernel.

b=12411
i=adilger
i=johann

b=13486
i=Nathan

Increase a set of files to choose from.

Branch b1_6
Move bug 13547 to 1.6.3 section instead of 1.6.4

b=12186
Update ChangeLog

b=12186
i=Adilger

Fixes man pages for lfs

b=3055
i=green
changes from eeb's inspection

Branch b1_6
Allow dbench to find client.txt in /usr/share/dbench.
b=12467
i=nathan
i=adilger (original patch)

Branch b1_6

Add
--------------------------------------------------------------------------------
separator

b=11230
Quiet a warning.

b=11230
r=Nathan, Adilger

To tune the kernel for good SCSI performance.

- make lru resize stuff in sanity.sh less verbose;
- cleanups in tests 120* and test 124 about disable/enable lru resize;
- make test_124 sleep for 30s to not make it too long.

Branch b1_6
b=13125

replace stripe_cnt_min with *stripe_cnt to keep good object distribution

Branch b1_6
b=13555

disable test_36 for now.

b=13552
wait longer for remote clients

Branch b1_6

Update versions for 1.6.4

Branch b1_6

Update versions and dates.

Branch: b1_6
b=13436
Only disconnect errors(ENOTCONNECT & ENODEV) should be returned by rq_status.
i=green
i=adiger

Branch b1_6

Disable journal checksum patch due to release-blocking problems with
quota and other errors (LTS does not support # in the series files).
b=13487
b=13449
r=scjody

Branch b1_6

Disable journal checksum patch due to release-blocking problems with
quota and other errors
b=13487
b=13449
r=scjody

- zero out GS, GR and CR for client pools also in recalc.

- disable/enable all namespace pools matched with pass argument in sanity.sh;
- disable all pools (and OST ones too) in ELC tests;
- fixes in test_124:
  - make test_124 less stressing, create only 1000 locks in it;
  - calculate LVF correctly, that is, based on lock number created, desired sleep time and current limit instead of cardcoded value;
  - make test suitable for running CMD environment, where desired set of data may be shared between few MDSes.

- cleanup in ldlm_cancel_lru_local()

- add OBD_CONNECT_LRU_RESIZE for mds->ost connections. MDS does not take locks on OST, but this flag will allow all namespaces look same way if LRU_RESIZE is supported.

- fixed bug in ldlm_cancel_lru_local(). It should cancel locks according to SLV only in the case of passed zero @count. If @count is not zero - cancel requested number of locks regardless SLV. Found by failure of sanityN test_20;
- raise error and return -EINVAL if ldlm_cancel_lru() did not cancel requested number of locks in case of sync cancel if lru resize is supported.

Branch b1_6
Add "df" so the statfs data will be updated on disk (when statfs patches
are landed).
b=13198