add cmm_device_shutdown()

- add process_config call for stack cleanup. All devices will be stopped and
  cleaned up before fini/free

lu_object_attr() is only defined for local objects: check this in assertion

Branch: b_new_cmd
1) some fixes about set flags of inode
2) remove useless mti_ld
3) other small cleanup

cosmetic fixes

add "positioning by hash" to iam

restore xxx_attr_set() interface to have "const md_attr*" argument;

fixed:
(1) passed wrong lmm_size to mdd_get_md();
(2) handle -ENODATA error

fixing integer comparism bug

(1) fixing typo in mdd;
(2) fixing lum & lmm stripe_count;

Branch:
some fixes in mds_cmd_cleanup

Branch: b_new_cmd
1 remove md_lov_info and related info, since we create a tmp MDS obd to
  access the lov, so just reuse mds lov code, no need share anymore.
2)some other fixes and cleanup.

(1) remove const from md_attr in moo_attr_set(), because this md_attr may be ajusted/fixed by MDD;
(2) make mdd_lov_mdsize() & mdd_lov_cookiesize() as static inline;
(3) some other small fixes;

Branch: b_new_cmd
it should check MA_LOV before unlink log

fix defect with list_add_tail() params.

forgotten lu_object_put() in case of error

file sanity-gss.sh was added on branch b_new_cmd on 2006-09-11 22:05:00 +0000

- fixed typo in comment.

- update entries counter on entry delete.

- fixed bug in fld_cache_delete(), there should be used ..._safe list iterator;

- added simple cache shrink mechanism to fld cache. It maintains LRU list and
removes old used entries from it until desired size (passed in init time) is
reached. Also some threshold is used to avoid ping-pong and running shrink
each time as new entry is added in the conditions when cache is almost full.

(1) remove MD_ATTR_FLAGS. this is set by LA_FLAGS;
(2) atime/mtime/ctime typo in OSD;
(3) use our new valid bits in MDD entirely;
(4) some other small fixes;

Branch: b_new_cmd
should check mds_log_op_unlink > 0 in mdd_unlink_log

- define and use mdd_attr_get_internal_locking() inline instead of passing flag
need_locked as parameter.
- get attr unlocked while create operations

mdt_md_mkobj() don't need lov attr

- fix issue with checking the result of mds_log_op_unlink() call

- separate __mdd_iattr_get() to get only inode attr. Needed for internal MDD
  use.
- small cleanups and comments,
- use __mdd_finish_unlink() in mdd_rename()
- fix mdd_rename() when tobj is dir, the additional ref should be deleted for
  tobj itself

Branch: b_new_cmd
1) add ma_need to indicate which field it need when it call the lower layer
2) reorganize mdd setattr/getattr code.
3) fix some problems in set/get md.
4) prepare the reply buffer for close.
5) some other fixes and cleanup

 small fixes

add debug

- introduce open counter in mdd
- update mo_close() method with adding the md_attr
- split mdd_attr_get() into two sub-function __mdd_atte_get, __mdd_lov_get
  because they are needed for internal use in mdd
- return lov ea and llog cookie in mdt_close() for unlinked file
- mdt_handle_last_unlink() checks the ma_valid fields to decide what to return
  to the client

- remove unused ot_ref counter

Branch: b_new_cmd
1) fix bit in mdd/mdt/osd after separate LA from ATTR.
2) set blksize after create data object
3) some cleanup

mdt: translate ATTR_FROM_OPEN

Branch: b_new_cmd
oops, just forget 1 file in the last commit

Branch: b_new_cmd
1)add DEAD_OBJ flag to indicate the object has been unlinked.
2)fix intent disposion problems in mdt_reint_open, if we find
  dead parent dir.
3)add sanity check in those mdd object APIs.
4)rename reply should include lmm and logcookie.
5)some other fixes in mdd api

mdd_attr_set(): kill unused code

consity mdo_attr_set() argument

osd: reimplement osd_attr_set()

fix ->la_valid usage

- fixed bug in seq_server_init(), there should be separate portal for data stack.

skip some tests, and modify some argument according to current implementation.

- one more piece of changes missed to commit last time.

- last portion of cleanups and fixes after Nikita's CODEINSP;
- fixes about accessing pointers which are not valid and store error
  code what may be checked with IS_ERR() macro;

- one more portion of fixes and cleanups after Nikita's CODEINSP.

(1) in mdd_lov_create(), allocate lmm before using it to call mdd_get_md();
(2) in mdd_lov_create(), free lsm after using.

- more fixes and cleanups in fld after Nikita's CODEINSP.

Branch: b_new_cmd
Merge fix from b1_5
This Assert is not right for ost add dynamicly

update lmv_placement_policy(). For directories it uses policy 'by name', for
other files - 'by parent mds'. The parent fid is added into struct
lu_placement_hint so parent mds can be taken.

fix issue with use-after-free if commit occurs while journal_stop()
the ot_ref count is added into osd_thandle and osd_thandle is freed only when
last reference is dropped.

- start seq mgr for data stack in separate portal;
- changes about thread names in seq mgr.

(1) small file count in sanity to avoid large directory which is not supported currently;
(2) in mdt_getattr_internal(), set different flag for regular file and dir;
(3) ajust wiretest to fix current implementation.

- more in fld and seq fixes after Nikita's CODEINSP.

1)for Non Create revalidate, we still should pack the child fid.
  for checking dentry stale.
2)we only check stale, if it do not create object in server.

(1) wrong argument in lmv_create();
(2) add rdev support for special file;
(3) skip sanity 51 until we can list large directory.

Branch: b_new_cmd
Sometimes, we need revalidate dentries with (IT_CREATE/IT_OPEN), since
we did not unhash the cache totally on client for getpwd(2). so in
ll_revalidate_it we also need allocate the fid. If in mds, it did create
an object. then the dentry should be invalidate(return -ESTALE).
and some related cleanup work should be done in ll_revalidate_finish_it.

Use libiam for mkfs_lustre

For iam lib.

- implemented almost all Nikita's notes in seq mgr and same ones in fld;
- fixed bug in seq_store_write() - it did not really stored seq ranges;
- s/PFID3/PFID/g s/DFID3/DFID/g - seems it is always needed to write 3 fid components.

(1) pass create flag from client to CMM/MDD in struct md_create_spec;
(2) return object flag to client;
(3) do ioctl for ATTR_ATTR_FLAGS instead of setattr(): sanity 52

Branch: b_new_cmd
1)merge some fixes from b1_5
 *only client has parent update lock, then hash the child dentry, it could
  fix bad inode problems
 *when ll_inode_revaldate_it can not match lock locally, it should try to
  retrieve from remote server
2)re-phase comments in mdd_lov_create
3)remove LUSTRE_POSIX_MAX_ACL_SIZE from liblustre.h, it is not needed.

(1) some computer may not have "which" command
(2) avoid a found bug in fid reusing in test 44a.

Change '/' mode from 040700 to 040755

file nfs-utils-1.0.10-lustre.diff was added on branch b_new_cmd on 2006-09-11 22:05:02 +0000

Branch: b_new_cmd
seems a typo, anyway we need pack the attr back
when inode revalidate

Branch: b_new_cmd
1)we should set size to ost object after creating ost object,
  if the object size is not zero because of truncate.
2)enable ATTR_SIZE in osd_inode_setattr, since we could set size in mds
  for reg file, but not truncate.

return time to client.

Branch: b_new_cmd
add index_ops check before empty dir check in mdd_unlink

1)add is_parent check in mdd_rename_sanity_check
2)fix problems in mdd_is_parent
2)some cleanup according to nikita's comments

(1) set attributes for newly created object and its parent;
(2) only pass S_IFREG to server if it is an open intent lock.

Free buf alloced when program exit normally.

- move sgid check before object creation, in __mdd_create_sanity_check(), so
  updated attr will be used while object_create() after that.

- fix forgotten allocation

- fixed stack allocations of md_op_data in llite.

(1) remove compile error in mdd
(2) remove OBD_MD_FLFLAGS flag because it is not set by OSD;

- in llite and liblustre ll_prepare_md_op_data() zeroes out passed @op_data to avoid garbage in it in caases caller did not zero it out. All fid allocations saved in op_data->fid2 are done after ll_prepare_md_op_data();

- in lmv replace all on stac allocations of struct md_op_data by memory allocated ones;
- in lmv fixed few memory leaks, cleanups.

remove noisy debug code

mdd_object_type(): use lu_object_attr()

Branch: b_new_cmd
add rename checking for rename

unpack some necessary field for open request

(1) set attribute for newly created object.
(2) check S_ISGID for parent directory, and set it for sub-dir also.
    see sanity test 6g.

Adjust 'verbose' method.

- fix bugs with mdt_create_data() introduced by last commit.

Eliminate compile warning.

Fix memory leak BUG in main where key and rec be malloc, but no free, the same BUG maybe for key_opt and rec_opt. There are logic errors in function hex2dec, and fix them also.

Fix memory leak BUG in main where malloc buf, buf no free.

Add mkfs functions create_iam and iam_insert for mdt, all the mkfs work can be done by mkfs_lustre, no other mkfs script are needed. Add malloc validity check in function convert_hostnames.

mkfs_lustre.c

- if fid2 exists and this was create operation, then it is not same as returned
  in case no creation happens. The result was 'Stale NFS file handle' error in
  some tests - 7b, 23. now 23 pass but in 7b the other nasty bug occurs.

- use md_attr in mo_attr_set() and set lov ea together with inode attr.
- while attr_set() return resulting attr back
- move O_EXCL check later, because reply should contain the FID

- introduce the struct md_create_spec. It contains the various type-depended
  parameters for create, e.g. symlink target, eadata, parent info for cross-ref
case, etc.
Struct is allocated in thread context and filled while unpacking requests.

- use lu_object_attr() instead of taking lu_header directly
- remove unused md_attr parameter from __mdd_ref_del()
- make mdd_attr_get() in mdd_unlink() after unlinking dot for directory
- rename mdd_mkname() to the mdd_name_insert() to make it consitent with API and
  other layers
- move mdd_object_create() method near the mdd_create() as close related method.

- define lu_object_attr() to get common object attribute

add EXEC & WRITE pretection support on file to pass sanity 43

Branch: b_new_cmd
1)still create data object in mdd_create, since they should be in the same
  transaction and create data rpc (to ost) should not inside transtaction.
2)some cleanup according to nikita's comments

rename create_data_object to something less ugly

liblustre: add LUSTRE_POSIX_ACL_MAX_SIZE definition

mdd: 0. mdd_create_data_object(): close transaction on error. 1. mdd_lov_set_md(): take transaction handle as an argument. 2. mdd_create_data_object(): start transaction.

osd: add code to track lock/transaction ordering

lu_object: add ->lct_exit() method to lu_context_key

Branch: b_new_cmd
1 add mti_transno_flag to check whether this req handler need transno update
  for those lnk and some special node. we do not need.
2. set DISP_OPEN_OPEN in correct place
3. do not do unlink log in mdd_unlink. since it should only unlink the
   metaobject. add the unlink log after open orphan is implemented.