fix for bug #5585 - and syntax error fix (missing newline)

fix for bug #4481

Branch: b1_4
Need to also allow building against an updated kernel version.

A think-o that Andreas didn't catch; really change version to 43

b=5773
added to rhel4 serie: export-show_task-2.6-vanilla.patch and remove-suid-2.6-suse
vfs_intent-2.6-rhel4.patch: got rid of IT_CHDIR, moved LOOKUP_LAST and LOOKUP_NOT_LAST to not clash with LOOKUP_OPEN, incorporated fix for bug 4134
export_symbols-2.6-rhel4: provided declaration of filemap_populate.

b=5654
Landing the purely mechanical parts of bug 5654, to make the patch smaller for
inspection.

Change obd_increase_kms to obd_adjust_kms to allow growing or shrinking the
kms.

remove the last vestiges of LLI_F_PREFER_EXTENDED_SIZE

b=5695
Oleg's patch fixes the kernels to call setattr_raw inside remove_suid.

In 2.4, remove_suid just did nothing.
In 2.6, it would LBUG when notify_change was called instead.

b=5733,5638
Alex's patches to fix small bugs in extents and mballoc:

1) extents-related fixes:
   1) callback's API used in ext3_ext_walk_space() changes a bit to
      reflect that callback can be given >2^16 extent len (hole)
   2) fsfilt_ext3 has changed to use updated callback API
   3) minor race in ext3_ext_new_extent_cb() fixed

2) mballoc-related fixes:
   1) free space searching has changed to be more smart
   2) three possible races have been fixed
   3) lots of minor fixes
   4) mballoc doesn't regenerate buddies in clean umount case

b=5687,5210
A workaround for the crash in ll_unhash_aliases on 2.6.

The 2.6 lookup code is now lockless (thanks to the RCU machinations), which
allows it to race with the unhashing in ll_unhash_aliases.  The 2.6 __d_drop
doesn't leave the list head ->pprev in a safe state, so the next pass through
this loop (which tries to re-hash it after we lose the dput race), would crash.

For the record, it looks like the kernel's own d_prune_aliases is broken in
the very same way, except that instead of crashing immediately, it just leaves
the d_hash pointers poisoned for someone else to crash on.

After a backend disk failure, we somehow got called in dio_complete_routine,
with what looked like a NULL bio->bi_private.

Add some debugging, in case we ever see this again.

Don't hold the pinger_sem in ptlrpc_pinger_sending_on_import.
It's an inherently racy operation in the first place, and until the pinger
thread is fixed not to hold the pinger_sem while it's waiting for an upcall
to complete, it prevents ptlrpcd from needlessly blocking.

b=5702
r=jacob
Scali's patch to fix a few problems with the init scripts on SLES9:

- Sources "/etc/init.d/functions" (doesn't exist on SLES9)
- Uses a function called "action" (doesn't exist on SLES9)
- The scripts don't have LSB-compliant comments to define what runlevels to
  run on, dependencies on external subsystems and so on.

abort with -1 to get a non zero exit code

Updates kernel patcheds for rhel4 kernel (2.6-rhel4 serie). Kernel compiles ok.
Starts updating ldiskfs serie for it too, extents and mballoc2 are remain to be
done for now

Branch: b1_4
Be clearer when printing out the default directory striping pattern.

Branch: b1_4
Quiet verbose and mostly useless message (printed loc_llcd == NULL always).

Branch: b1_4
Allow mtime/atime to be set backward.
b=4829, b=5669

Branch: b1_4
Allow mtime/atime to be set backward.
b=4829, b=5669

Branch: b1_4
Add newlines to VMA_DEBUG messages in ll_vm_{open,close} to avoid console spew.

Branch: b1_4
Hold ns lock when calling ldlm_del_waiting_lock() from ldlm_handle_ast_error().
This was detected by Phil's recent addition of "l_check_ns_lock()" therein.
b=5746

Branch: b1_4
Fix bogus LASSERT when NFS exporting a filesystem.
This is for a structure we don't even use currently.
b=4655, 5760
r=green (original analysis + fix)

init the mpi layer earlier to prevent unknown options when run with a real mpi
layer. mpi init taken from write_append_truncate

*   Added network type 'ra' to comments/help strings in lmc

*   Added missing NALs to failure handling case of zeroconf ADD_PEER

Branch: b1_4
Fix grammar.

Branch: b1_4
Something I noticed when looking at the OST AMD patch.  We should check
the "ost" index and not the "stripe" index.

*     First cut working vibnal

*   Added zeroconf ADD_PEER support for RANAL and VIBNAL

land changes from b_release_1_4_0_10

Branch: b1_4
Minor fix to the MDS default stripe count->inode size calculations.

Branch: b1_4
Ignore generated files.

Land b1_4_smallfix onto b1_4 (20050210_1537)
Fix build problem for older kernels which don't have i_alloc_sem.

Use MDS_{UP,DOWN}_{READ,WRITE}_ORPHAN_SEM() to lock the MDS orphan
information to avoid a confusing name conflict.
b=5700

Branch: b1_4
Add missing ChangeLog entry (bug not known).
r=eeb (original fix)

b=5684
r=adilger

First stab at improving some user visible error messages.

Add some comments so other people don't get fooled into thinking there was a bug here as i did.

Add patch to fix running with 2.6 host systems.

*    Added loopback optimisation to lib-move.c
     lctl --net ??? loopback             # show current state
     lctl --net ??? loopback on          # enable loopback optimisation
     lctl --net ??? loopback off         # disable loopback optimisation
     By default loopback optimisation is turned OFF

Andreas caught a think-o in the liblustre half of this checkin

brown paper bag bug in the lock cleanups; I'm amazed this passed as many tests
as it did, but here we are.

b1_4_mmap landing didn't update the ChangeLog (tsk tsk)

b=5628
r=jacob
- add a per-mdc/osc /proc file that lets you do a Lustre ping
- the old way, used by lfs check, would block when the MDS is down, because it
  opened the mountpoint
- also exported it via liblustreapi as llapi_ping(obd_type, obd_name)

b=5656
Clean up a lot of calls to LDLM_DEBUG that weren't protected by an ns_lock.
This is probably not a comprehensive fix, but addresses all of the violations
that I saw.

Add an l_check_ns_lock to go with l_check_no_ns_lock.

remove the last vestiges of test_ldlm from {l,obd}ctl

Updated config files from 2.4.21-37EL, which enable a handful of new modules
(at least on x86_64)

bump the version to 1.4.0.10 for 1.4.1 rc1

A customer mentioned that we didn't have a get_hostaddr method for the LDAP
backend.  LDAP is on its way out of favour, so I'm hardly shocked.

land b1_4_mmap on b1_4 (20050211_1829)

Land b1_4_smallfix onto b1_4 (20050210_1537)
- fix incorrect LASSERT in mds_getattr_name (5635)
- fix configure check for grab_cache_page_nowait_gfp
- fix lsattr -v for directories so we can get inode generation from userspace
- fix mtime return from glimpse AST reply again (4829)

- BUGS should just point at bugzilla
- nodist doesn't need to reference obdext2 anymore
- rename COPYING to LICENSE and make it somewhat clearer
- remove the unused mgmt/ module; we know how to get it back.

remove the lustre book-building bits from Makefile.am, in preparation for
removal from the tree.
r=jacob

b=5277
r=adilger
Andreas's patch to avoid starting duplicate acceptors on servers with multiple
IP hostaddrs.

b=5544
A checkin was made on 17 Jan to move lov_get_info from llite to obdclass.
But here it is, still in llite, which is causing depmod to cry foul about
recursive dependencies with the lov.

b=5492
Back out the KMS locking change; I saw a problem with it yesterday, and the
new truncate buffalo failures confirmed my suspicion.

At some point, somebody added a 5th upcall argument, but didn't print it
with the rest of them.

b=5654
The lock ordering of i_sem and i_alloc_sem changed between 2.4 and 2.6,
which causes deadlocks if multiple threads try to truncate a single file.

I don't really like this solution, but it's the best I can come up with
right now.

* Landed portals:b_port_step as follows...

  - removed CFS_DECL_SPIN*
    just use 'spinlock_t' and initialise with spin_lock_init()

  - removed CFS_DECL_MUTEX*
    just use 'struct semaphore' and initialise with init_mutex()

  - removed CFS_DECL_RWSEM*
    just use 'struct rw_semaphore' and initialise with init_rwsem()

  - renamed cfs_sleep_chan -> cfs_waitq
            cfs_sleep_link -> cfs_waitlink

          - fixed race in linux version of arch-independent socknal
       (the ENOMEM/EAGAIN decision).

  - Didn't fix problems in Darwin version of arch-independent socknal
      (resetting socket callbacks, eager ack hack, ENOMEM/EAGAIN decision)

  - removed libcfs types from non-socknal header files (only some types
    in the header files had been changed; the .c files hadn't been
    updated at all).

  - Updated lustre b1_4 to match

ignore _netdev as well

this is upstream now

fix automake warning

b=5383
r=phil

allow readahead to fail when low on memory.

land b1_4_smallfix on b1_4(20050202_1817)

- readahead could read extra page into cache that wasn't ejected (5388)
- prevent races in class_attach/setup/cleanup/detach (5260)
- don't dereference de->d_inode after l_dput of de (5458)
- use "int" for stripe value returned from lock_to_stripe (5544)
- mballoc allocation and error-checking fixes in 2.6 (5504)
- block device patches to fix I/O request sizes in 2.6 (5482)
- protect KMS changes with its own lock, not i_sem (5492, 5624, 3453)
- look up hostnames for IB nals (5602)
- fix mount usage message, return errors per mount(8) (5168)
- remove ancient LOV_MAGIC_V0 EA support (5047)
- add "disk I/Os in flight" and "I/O req time" stats in obdfilter

update to SP1 kernel: 2.6.5-7.141

*   ranal debugging and lconf support

*  5602 fix improves checks that NID is set correctly and causes incorrect
   configurations to fail rather than trip a server assertion.

*  5606 fix ensures both peers agree on maximum "immediate" get.

*  ranal updates

Fix for bug 5511

corrected filename

b=5594

remove hardcoded path to llmount that breaks rpm based testing

landing patch for bug 5272 - making copy of list instead of using reference

b=5570

shorten name of suse drop to something we can use with lbuild and buffalo testing

*   Made openib not use the subnet manager to discover connection parameters

    + Openib listens on a TCP/IP port for service queries and responds with the
      service id, port GID and pkey.

    + Openib peer table entries have become (NID, IP, port) tuples, where IP
      and port connect to the peer's service query server.

    + /proc interfaces for port, listener timeout and backlog (restarts kernel
      listener on update).

    + lmc/lconf support for new openib peers, including only running acceptor
      if net == 'tcp'

    + Changed connection daemon to conduct both sides of the service query as
      well as IB connection establishment.  Spawning several since tcp/ip reads
      can block for a timeout.

    + Added a reaper thread to do connection cleanup and timeout checks (the
      single connection daemon used to do that too).

*   Removed some unused lconf default constants

*   Better openib automagic compilation check.

*   Consistent usage (flipping + optional checksum) of all openib messages
    (service query, connection requests and "normal" message flow).

*   Exhaustive openib "are-you-still-the-same-person" checks

*   Fixed bug which stopped idle persistent peers from getting removed from the
    peer table.

*   Fixed some ranal bugs which became obvious when similar problems were
    debugged in openibnal

b=5445
Fix the x86-64 large-stack RHEL3 patch.  The old patch would allocate 1 page
in alloc_task_struct, then free THREAD_ORDER pages in free_task_struct.

* Included changes from *old* b1_4/b_cray

    *  OBD_FL_DEBUG_CHECK for consistent obdecho end-to-end checking

    *  struct echo_obd cleanup

    *  obdecho support for "difficult" reply testing (test_setattr)

    *  replaced cowardly eap_from_cookie() usage with EAP_FROM_COOKIE()
       which asserts it is being called correctly

    *  bracketed echo_client_iocontrol() guts with unlock/lock_kernel()
       for increased concurrency during echo ioctl execution

    *  better thread control and stats in obd.c

    *  n-threads-over-m-objects test_brw support (required for
       obdfilter-survey)

* openibnal changes

    *  re-enabled openib on 2.5/2.6 builds
       configure --with-openib=no can be used to disable openib explicitly if
       required.

    *  fixed some 64 bit casts

    *  just use kernel's page_to_phys()

* fixed CERROR format problem in libcfs/module.c

- keep version in line with latest tarball available on the FTP site;
- keep ia64 configs up-to-date with same tarball

Update series to U4 kernel (2.4.21-27.EL)

Land b1_4_smallfix onto b1_4 (20041221_0116)
- fix 2.6 build problems
- fix mount usage message, return errors per mount(8)
- change grep [] to grep "[]" in tests so they work in more UMLs

Fix non-module build

Remove obd_ptlbd.h, and fix "make dist"

add bigstack support to rhel 2.4.21

Remove one missed smfs/snapfs bit from lustre-core.m4

removing unused b1_4 code modules: cobd, ptlbd, smfs, snapfs

I'll send a separate mail to eng, but BE CAREFUL WHEN MERGING.

Merging into b1_2 or b_cray is fine, but be careful when you merge
into HEAD!  If you want my help, please ask.

Remove chaos series.  chaos76 era kernels are compatible with our rhel patches

I remember very clearly making this change, but I don't know where it
got saved.  Probably in the wrong source tree.

Copyright cleanup phase 1:
- add some HP copyright statements to the code that has survived our
  rewrites
- remove copyright and license boilerplate from non-copyrightable headers
- remove the unused ldlm_test
- remove the kernel copyright from llite/namei.c

Minor b1_4 changelog revision; a few items were in the 1.4.0 list, when
they did not, in fact, make it.

fix in-tree path to portals

Remove files that moved to lustre-build

fixes for make rpms

Add missed files.

Split portals into its own CVS module (b1_4)

This commit was manufactured by cvs2svn to create branch 'b1_4'.

Move portals into its own CVS module for HEAD.

Use the newer libsysio tags.

This commit was generated by cvs2svn to compensate for changes in r45926,
which included commits to RCS files with non-trunk default branches.

import libsysio for b_newsysio

This commit was generated by cvs2svn to compensate for changes in r45924,
which included commits to RCS files with non-trunk default branches.

import older libsysio snapshot.

*    Updated ranal prior to the Great Schism

*   Updated ranal prior to the Great Schism