Whamcloud - gitweb
LU-5977 ofd: Removed correction for bad timestamps
[fs/lustre-release.git] / lustre / include / dt_object.h
index acd0fd0..ced5a8e 100644 (file)
@@ -27,7 +27,7 @@
  * Copyright (c) 2007, 2010, Oracle and/or its affiliates. All rights reserved.
  * Use is subject to license terms.
  *
- * Copyright (c) 2011, 2013, Intel Corporation.
+ * Copyright (c) 2011, 2014, Intel Corporation.
  */
 /*
  * This file is part of Lustre, http://www.lustre.org/
@@ -104,11 +104,14 @@ typedef void (*dt_cb_t)(struct lu_env *env, struct thandle *th,
 #define TRANS_COMMIT_CB_MAGIC  0xa0a00a0a
 #define MAX_COMMIT_CB_STR_LEN  32
 
+#define DCB_TRANS_STOP         0x1
 struct dt_txn_commit_cb {
-       cfs_list_t      dcb_linkage;
-       dt_cb_t         dcb_func;
-       __u32           dcb_magic;
-       char            dcb_name[MAX_COMMIT_CB_STR_LEN];
+       struct list_head        dcb_linkage;
+       dt_cb_t                 dcb_func;
+       void                    *dcb_data;
+       __u32                   dcb_magic;
+       __u32                   dcb_flags;
+       char                    dcb_name[MAX_COMMIT_CB_STR_LEN];
 };
 
 /**
@@ -117,62 +120,193 @@ struct dt_txn_commit_cb {
 struct dt_device_operations {
         /**
          * Return device-wide statistics.
+        *
+        * Return device-wide stats including block size, total and
+        * free blocks, total and free objects, etc. See struct obd_statfs
+        * for the details.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dev       dt device
+        * \param[out] osfs     stats information
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
          */
         int   (*dt_statfs)(const struct lu_env *env,
-                           struct dt_device *dev, struct obd_statfs *osfs);
+                          struct dt_device *dev,
+                          struct obd_statfs *osfs);
+
         /**
-         * Create transaction, described by \a param.
+        * Create transaction.
+        *
+        * Create in-memory structure representing the transaction for the
+        * caller. The structure returned will be used by the calling thread
+        * to specify the transaction the updates belong to. Once created
+        * successfully ->dt_trans_stop() must be called in any case (with
+        * ->dt_trans_start() and updates or not) so that the transaction
+        * handle and other resources can be released by the layers below.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dev       dt device
+        *
+        * \retval pointer to handle    if creation succeeds
+        * \retval ERR_PTR(errno)       if creation fails
          */
         struct thandle *(*dt_trans_create)(const struct lu_env *env,
                                            struct dt_device *dev);
+
         /**
-         * Start transaction, described by \a param.
+        * Start transaction.
+        *
+        * Start the transaction. The transaction described by \a th can be
+        * started only once. Another start is considered as an error.
+        * A thread is not supposed to start a transaction while another
+        * transaction isn't closed by the thread (though multiple handles
+        * can be created). The caller should start the transaction once
+        * all possible updates are declared (see the ->do_declare_* methods
+        * below) and all the needed resources are reserved.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dev       dt device
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
          */
         int   (*dt_trans_start)(const struct lu_env *env,
-                                struct dt_device *dev, struct thandle *th);
+                               struct dt_device *dev,
+                               struct thandle *th);
+
        /**
-        * Finish previously started transaction.
+        * Stop transaction.
+        *
+        * Once stopped the transaction described by \a th is complete (all
+        * the needed updates are applied) and further processing such as
+        * flushing to disk, sending to another target, etc, is handled by
+        * lower layers. The caller can't access this transaction by the
+        * handle anymore (except from the commit callbacks, see below).
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dev       dt device
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
         */
-       int   (*dt_trans_stop)(const struct lu_env *env, struct dt_device *dev,
+       int   (*dt_trans_stop)(const struct lu_env *env,
+                              struct dt_device *dev,
                               struct thandle *th);
+
         /**
          * Add commit callback to the transaction.
+        *
+        * Add a commit callback to the given transaction handle. The callback
+        * will be called when the associated transaction is stored. I.e. the
+        * transaction will survive an event like power off if the callback did
+        * run. The number of callbacks isn't limited, but you should note that
+        * some disk filesystems do handle the commit callbacks in the thread
+        * handling commit/flush of all the transactions, meaning that new
+        * transactions are blocked from commit and flush until all the
+        * callbacks are done. Also, note multiple callbacks can be running
+        * concurrently using multiple CPU cores. The callbacks will be running
+        * in a special environment which can not be used to pass data around.
+        *
+        * \param[in] th        transaction handle
+        * \param[in] dcb       commit callback description
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
          */
         int   (*dt_trans_cb_add)(struct thandle *th,
                                  struct dt_txn_commit_cb *dcb);
+
         /**
-         * Return fid of root index object.
+        * Return FID of root index object.
+        *
+        * Return the FID of the root object in the filesystem. This object
+        * is usually provided as a bootstrap point by a disk filesystem.
+        * This is up to the implementation which FID to use, though
+        * [FID_SEQ_ROOT:1:0] is reserved for this purpose.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dev       dt device
+        * \param[out] fid      FID of the root object
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
          */
         int   (*dt_root_get)(const struct lu_env *env,
-                             struct dt_device *dev, struct lu_fid *f);
+                            struct dt_device *dev,
+                            struct lu_fid *f);
+
         /**
          * Return device configuration data.
+        *
+        * Return device (disk fs, actually) specific configuration.
+        * The configuration isn't subject to change at runtime.
+        * See struct dt_device_param for the details.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dev       dt device
+        * \param[out] param    configuration parameters
          */
         void  (*dt_conf_get)(const struct lu_env *env,
                              const struct dt_device *dev,
                              struct dt_device_param *param);
-        /**
-         *  handling device state, mostly for tests
-         */
-        int   (*dt_sync)(const struct lu_env *env, struct dt_device *dev);
-        int   (*dt_ro)(const struct lu_env *env, struct dt_device *dev);
-        /**
-          * Start a transaction commit asynchronously
-          *
-          * \param env environment
-          * \param dev dt_device to start commit on
-          *
-          * \return 0 success, negative value if error
-          */
+
+       /**
+        * Sync the device.
+        *
+        * Sync all the cached state (dirty buffers, pages, etc) to the
+        * persistent storage. The method returns control once the sync is
+        * complete. This operation may incur significant I/O to disk and
+        * should be reserved for cases where a global sync is strictly
+        * necessary.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dev       dt device
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       int   (*dt_sync)(const struct lu_env *env,
+                        struct dt_device *dev);
+
+       /**
+        * Make device read-only.
+        *
+        * Prevent new modifications to the device. This is a very specific
+        * state where all the changes are accepted successfully and the
+        * commit callbacks are called, but persistent state never changes.
+        * Used only in the tests to simulate power-off scenario.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dev       dt device
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       int   (*dt_ro)(const struct lu_env *env,
+                      struct dt_device *dev);
+
+       /**
+        * Start transaction commit asynchronously.
+        *
+
+        * Provide a hint to the underlying filesystem that it should start
+        * committing soon. The control returns immediately. It's up to the
+        * layer implementing the method how soon to start committing. Usually
+        * this should be throttled to some extent, otherwise the number of
+        * aggregated transaction goes too high causing performance drop.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dev       dt device
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
          int   (*dt_commit_async)(const struct lu_env *env,
                                   struct dt_device *dev);
-        /**
-         * Initialize capability context.
-         */
-        int   (*dt_init_capa_ctxt)(const struct lu_env *env,
-                                   struct dt_device *dev,
-                                   int mode, unsigned long timeout,
-                                   __u32 alg, struct lustre_capa_key *keys);
 };
 
 struct dt_index_features {
@@ -282,274 +416,905 @@ typedef __u64 dt_obj_version_t;
 union ldlm_policy_data;
 
 /**
- * Per-dt-object operations.
+ * A dt_object provides common operations to create and destroy
+ * objects and to manage regular and extended attributes.
  */
 struct dt_object_operations {
-        void  (*do_read_lock)(const struct lu_env *env,
-                              struct dt_object *dt, unsigned role);
-        void  (*do_write_lock)(const struct lu_env *env,
-                               struct dt_object *dt, unsigned role);
+       /**
+        * Get read lock on object.
+        *
+        * Read lock is compatible with other read locks, so it's shared.
+        * Read lock is not compatible with write lock which is exclusive.
+        * The lock is blocking and can't be used from an interrupt context.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object to lock for reading
+        * \param[in] role      a hint to debug locks (see kernel's mutexes)
+        */
+       void  (*do_read_lock)(const struct lu_env *env,
+                             struct dt_object *dt,
+                             unsigned role);
+
+       /*
+        * Get write lock on object.
+        *
+        * Write lock is exclusive and cannot be shared. The lock is blocking
+        * and can't be used from an interrupt context.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object to lock for writing
+        * \param[in] role      a hint to debug locks (see kernel's mutexes)
+        *
+        */
+       void  (*do_write_lock)(const struct lu_env *env,
+                              struct dt_object *dt,
+                              unsigned role);
+
+       /**
+        * Release read lock.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        */
         void  (*do_read_unlock)(const struct lu_env *env,
                                 struct dt_object *dt);
+
+       /**
+        * Release write lock.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        */
         void  (*do_write_unlock)(const struct lu_env *env,
                                  struct dt_object *dt);
+
+       /**
+        * Check whether write lock is held.
+        *
+        * The caller can learn whether write lock is held on the object
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        *
+        * \retval 0            no write lock
+        * \retval 1            write lock is held
+        */
         int  (*do_write_locked)(const struct lu_env *env,
                                 struct dt_object *dt);
-        /**
-         * Note: following ->do_{x,}attr_{set,get}() operations are very
-         * similar to ->moo_{x,}attr_{set,get}() operations in struct
-         * md_object_operations (see md_object.h). These operations are not in
-         * lu_object_operations, because ->do_{x,}attr_set() versions take
-         * transaction handle as an argument (this transaction is started by
-         * caller). We might factor ->do_{x,}attr_get() into
-         * lu_object_operations, but that would break existing symmetry.
-         */
 
+       /**
+        * Declare intention to request reqular attributes.
+        *
+        * Notity the underlying filesystem that the caller may request regular
+        * attributes with ->do_attr_get() soon. This allows OSD to implement
+        * prefetching logic in an object-oriented manner. The implementation
+        * can be noop. This method should avoid expensive delays such as
+        * waiting on disk I/O, otherwise the goal of enabling a performance
+        * optimization would be defeated.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
        int   (*do_declare_attr_get)(const struct lu_env *env,
-                                    struct dt_object *dt,
-                                    struct lustre_capa *capa);
-        /**
-         * Return standard attributes.
-         *
-         * precondition: lu_object_exists(&dt->do_lu);
-         */
-        int   (*do_attr_get)(const struct lu_env *env,
-                             struct dt_object *dt, struct lu_attr *attr,
-                             struct lustre_capa *capa);
-        /**
-         * Set standard attributes.
-         *
-         * precondition: dt_object_exists(dt);
+                                    struct dt_object *dt);
+
+       /**
+        * Return regular attributes.
+        *
+        * The object must exist. Currently all the attributes should be
+        * returned, but in the future this can be improved so that only
+        * a selected set is returned. This can improve performance as in
+        * some cases attributes are stored in different places and
+        * getting them all can be an iterative and expensive process.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[out] attr     attributes to fill
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       int   (*do_attr_get)(const struct lu_env *env,
+                            struct dt_object *dt,
+                            struct lu_attr *attr);
+
+       /**
+        * Declare intention to change regular object's attributes.
+        *
+        * Notify the underlying filesystem that the regular attributes may
+        * change in this transaction. This enables the layer below to prepare
+        * resources (e.g. journal credits in ext4).  This method should be
+        * called between creating the transaction and starting it. Note that
+        * the la_valid field of \a attr specifies which attributes will change.
+        * The object need not exist.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] attr      attributes to change specified in attr.la_valid
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
          */
         int   (*do_declare_attr_set)(const struct lu_env *env,
                                      struct dt_object *dt,
                                      const struct lu_attr *attr,
-                                     struct thandle *handle);
+                                    struct thandle *th);
+
+       /**
+        * Change regular attributes.
+        *
+        * Change regular attributes in the given transaction. Note only
+        * attributes flagged by attr.la_valid change. The object must
+        * exist. If the layer implementing this method is responsible for
+        * quota, then the method should maintain object accounting for the
+        * given credentials when la_uid/la_gid changes.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] attr      new attributes to apply
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
         int   (*do_attr_set)(const struct lu_env *env,
                              struct dt_object *dt,
                              const struct lu_attr *attr,
-                             struct thandle *handle,
-                             struct lustre_capa *capa);
+                            struct thandle *th);
 
+       /**
+        * Declare intention to request extented attribute.
+        *
+        * Notify the underlying filesystem that the caller may request extended
+        * attribute with ->do_xattr_get() soon. This allows OSD to implement
+        * prefetching logic in an object-oriented manner. The implementation
+        * can be noop. This method should avoid expensive delays such as
+        * waiting on disk I/O, otherwise the goal of enabling a performance
+        * optimization would be defeated.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] buf       unused, may be removed in the future
+        * \param[in] name      name of the extended attribute
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
        int   (*do_declare_xattr_get)(const struct lu_env *env,
                                      struct dt_object *dt,
                                      struct lu_buf *buf,
-                                     const char *name,
-                                     struct lustre_capa *capa);
+                                     const char *name);
 
-        /**
-         * Return a value of an extended attribute.
-         *
-         * precondition: dt_object_exists(dt);
-         */
-        int   (*do_xattr_get)(const struct lu_env *env, struct dt_object *dt,
-                              struct lu_buf *buf, const char *name,
-                              struct lustre_capa *capa);
-        /**
-         * Set value of an extended attribute.
-         *
-         * \a fl - flags from enum lu_xattr_flags
-         *
-         * precondition: dt_object_exists(dt);
-         */
-        int   (*do_declare_xattr_set)(const struct lu_env *env,
-                                      struct dt_object *dt,
-                                      const struct lu_buf *buf,
-                                      const char *name, int fl,
-                                      struct thandle *handle);
-        int   (*do_xattr_set)(const struct lu_env *env,
-                              struct dt_object *dt, const struct lu_buf *buf,
-                              const char *name, int fl, struct thandle *handle,
-                              struct lustre_capa *capa);
-        /**
-         * Delete existing extended attribute.
-         *
-         * precondition: dt_object_exists(dt);
-         */
-        int   (*do_declare_xattr_del)(const struct lu_env *env,
-                                      struct dt_object *dt,
-                                      const char *name, struct thandle *handle);
-        int   (*do_xattr_del)(const struct lu_env *env,
-                              struct dt_object *dt,
-                              const char *name, struct thandle *handle,
-                              struct lustre_capa *capa);
-        /**
-         * Place list of existing extended attributes into \a buf (which has
-         * length len).
-         *
-         * precondition: dt_object_exists(dt);
+       /**
+        * Return a value of an extended attribute.
+        *
+        * The object must exist. If the buffer is NULL, then the method
+        * must return the size of the value.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[out] buf      buffer in which to store the value
+        * \param[in] name      name of the extended attribute
+        *
+        * \retval 0            on success
+        * \retval -ERANGE      if \a buf is too small
+        * \retval negative     negated errno on error
+        * \retval positive     value's size if \a buf is NULL or has zero size
+        */
+       int   (*do_xattr_get)(const struct lu_env *env,
+                             struct dt_object *dt,
+                             struct lu_buf *buf,
+                             const char *name);
+
+       /**
+        * Declare intention to change an extended attribute.
+        *
+        * Notify the underlying filesystem that the extended attribute may
+        * change in this transaction.  This enables the layer below to prepare
+        * resources (e.g. journal credits in ext4).  This method should be
+        * called between creating the transaction and starting it. The object
+        * need not exist.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] buf       buffer storing new value of the attribute
+        * \param[in] name      name of the attribute
+        * \param[in] fl        LU_XATTR_CREATE - fail if EA exists
+        *                      LU_XATTR_REPLACE - fail if EA doesn't exist
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
          */
-        int   (*do_xattr_list)(const struct lu_env *env,
-                               struct dt_object *dt, struct lu_buf *buf,
-                               struct lustre_capa *capa);
-        /**
-         * Init allocation hint using parent object and child mode.
-         * (1) The \a parent might be NULL if this is a partial creation for
-         *     remote object.
-         * (2) The type of child is in \a child_mode.
-         * (3) The result hint is stored in \a ah;
+       int   (*do_declare_xattr_set)(const struct lu_env *env,
+                                     struct dt_object *dt,
+                                     const struct lu_buf *buf,
+                                     const char *name,
+                                     int fl,
+                                     struct thandle *th);
+
+       /**
+        * Set an extended attribute.
+        *
+        * Change or replace the specified extended attribute (EA).
+        * The flags passed in \a fl dictate whether the EA is to be
+        * created or replaced, as follows.
+        *   LU_XATTR_CREATE - fail if EA exists
+        *   LU_XATTR_REPLACE - fail if EA doesn't exist
+        * The object must exist.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] buf       buffer storing new value of the attribute
+        * \param[in] name      name of the attribute
+        * \param[in] fl        flags indicating EA creation or replacement
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       int   (*do_xattr_set)(const struct lu_env *env,
+                             struct dt_object *dt,
+                             const struct lu_buf *buf,
+                             const char *name,
+                             int fl,
+                             struct thandle *th);
+
+       /**
+        * Declare intention to delete an extended attribute.
+        *
+        * Notify the underlying filesystem that the extended attribute may
+        * be deleted in this transaction. This enables the layer below to
+        * prepare resources (e.g. journal credits in ext4).  This method
+        * should be called between creating the transaction and starting it.
+        * The object need not exist.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] name      name of the attribute
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       int   (*do_declare_xattr_del)(const struct lu_env *env,
+                                     struct dt_object *dt,
+                                     const char *name,
+                                     struct thandle *th);
+
+       /**
+        * Delete an extended attribute.
+        *
+        * This method deletes the specified extended attribute. The object
+        * must exist.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] name      name of the attribute
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       int   (*do_xattr_del)(const struct lu_env *env,
+                             struct dt_object *dt,
+                             const char *name,
+                             struct thandle *th);
+
+       /**
+        * Return a list of the extended attributes.
+        *
+        * Fills the passed buffer with a list of the extended attributes
+        * found in the object. The names are separated with '\0'.
+        * The object must exist.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[out] buf      buffer to put the list in
+        *
+        * \retval positive     bytes used/required in the buffer
+        * \retval negative     negated errno on error
          */
+       int   (*do_xattr_list)(const struct lu_env *env,
+                              struct dt_object *dt,
+                              const struct lu_buf *buf);
+
+       /**
+        * Prepare allocation hint for a new object.
+        *
+        * This method is used by the caller to inform OSD of the parent-child
+        * relationship between two objects and enable efficient object
+        * allocation. Filled allocation hint will be passed to ->do_create()
+        * later.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[out] ah       allocation hint
+        * \param[in] parent    parent object (can be NULL)
+        * \param[in] child     child object
+        * \param[in] _mode     type of the child object
+        */
        void  (*do_ah_init)(const struct lu_env *env,
                            struct dt_allocation_hint *ah,
                            struct dt_object *parent,
                            struct dt_object *child,
-                           umode_t child_mode);
-        /**
-         * Create new object on this device.
-         *
-         * precondition: !dt_object_exists(dt);
-         * postcondition: ergo(result == 0, dt_object_exists(dt));
-         */
+                           umode_t mode);
+
+       /**
+        * Declare intention to create a new object.
+        *
+        * Notify the underlying filesystem that the object may be created
+        * in this transaction. This enables the layer below to prepare
+        * resources (e.g. journal credits in ext4).  This method should be
+        * called between creating the transaction and starting it.
+        *
+        * If the layer implementing this method is responsible for quota,
+        * then the method should reserve an object for the given credentials
+        * and return an error if quota is over. If object creation later
+        * fails for some reason, then the reservation should be released
+        * properly (usually in ->dt_trans_stop()).
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] attr      attributes of the new object
+        * \param[in] hint      allocation hint
+        * \param[in] dof       object format
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
         int   (*do_declare_create)(const struct lu_env *env,
                                    struct dt_object *dt,
                                    struct lu_attr *attr,
                                    struct dt_allocation_hint *hint,
                                    struct dt_object_format *dof,
                                    struct thandle *th);
-        int   (*do_create)(const struct lu_env *env, struct dt_object *dt,
+
+       /**
+        * Create new object.
+        *
+        * The method creates the object passed with the specified attributes
+        * and object format. Object allocation procedure can use information
+        * stored in the allocation hint. Different object formats are supported
+        * (see enum dt_format_type and struct dt_object_format) depending on
+        * the device. If creation succeeds, then LOHA_EXISTS flag must be set
+        * in the LU-object header attributes.
+        *
+        * If the layer implementing this method is responsible for quota,
+        * then the method should maintain object accounting for the given
+        * credentials.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] attr      attributes of the new object
+        * \param[in] hint      allocation hint
+        * \param[in] dof       object format
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       int   (*do_create)(const struct lu_env *env,
+                          struct dt_object *dt,
                            struct lu_attr *attr,
                            struct dt_allocation_hint *hint,
                            struct dt_object_format *dof,
                            struct thandle *th);
 
-        /**
-          Destroy object on this device
-         * precondition: !dt_object_exists(dt);
-         * postcondition: ergo(result == 0, dt_object_exists(dt));
-         */
+       /**
+        * Declare intention to destroy an object.
+        *
+        * Notify the underlying filesystem that the object may be destroyed
+        * in this transaction. This enables the layer below to prepare
+        * resources (e.g. journal credits in ext4).  This method should be
+        * called between creating the transaction and starting it. The object
+        * need not exist.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
         int   (*do_declare_destroy)(const struct lu_env *env,
                                     struct dt_object *dt,
                                     struct thandle *th);
-        int   (*do_destroy)(const struct lu_env *env, struct dt_object *dt,
-                            struct thandle *th);
 
-        /**
+       /**
+        * Destroy an object.
+        *
+        * This method destroys the object and all the resources associated
+        * with the object (data, key/value pairs, extended attributes, etc).
+        * The object must exist. If destroy is successful, then flag
+        * LU_OBJECT_HEARD_BANSHEE should be set to forbid access to this
+        * instance of in-core object. Any subsequent access to the same FID
+        * should get another instance with no LOHA_EXIST flag set.
+        *
+        * If the layer implementing this method is responsible for quota,
+        * then the method should maintain object accounting for the given
+        * credentials.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       int   (*do_destroy)(const struct lu_env *env,
+                           struct dt_object *dt,
+                           struct thandle *th);
+
+       /**
+        * Try object as an index.
+        *
          * Announce that this object is going to be used as an index. This
-         * operation check that object supports indexing operations and
+        * operation checks that object supports indexing operations and
          * installs appropriate dt_index_operations vector on success.
-         *
          * Also probes for features. Operation is successful if all required
-         * features are supported.
-         */
+        * features are supported. It's not possible to access the object
+        * with index methods before ->do_index_try() returns success.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] feat      index features
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
         int   (*do_index_try)(const struct lu_env *env,
                               struct dt_object *dt,
                               const struct dt_index_features *feat);
-        /**
-         * Add nlink of the object
-         * precondition: dt_object_exists(dt);
-         */
-        int   (*do_declare_ref_add)(const struct lu_env *env,
-                                    struct dt_object *dt, struct thandle *th);
+
+       /**
+        * Declare intention to increment nlink count.
+        *
+        * Notify the underlying filesystem that the nlink regular attribute
+        * be changed in this transaction. This enables the layer below to
+        * prepare resources (e.g. journal credits in ext4).  This method
+        * should be called between creating the transaction and starting it.
+        * The object need not exist.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       int   (*do_declare_ref_add)(const struct lu_env *env,
+                                   struct dt_object *dt,
+                                   struct thandle *th);
+
+       /**
+        * Increment nlink.
+        *
+        * Increment nlink (from the regular attributes set) in the given
+        * transaction. Note the absolute limit for nlink should be learnt
+        * from struct dt_device_param::ddp_max_nlink. The object must exist.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
         int   (*do_ref_add)(const struct lu_env *env,
                             struct dt_object *dt, struct thandle *th);
-        /**
-         * Del nlink of the object
-         * precondition: dt_object_exists(dt);
-         */
-        int   (*do_declare_ref_del)(const struct lu_env *env,
-                                    struct dt_object *dt, struct thandle *th);
-        int   (*do_ref_del)(const struct lu_env *env,
-                            struct dt_object *dt, struct thandle *th);
 
-        struct obd_capa *(*do_capa_get)(const struct lu_env *env,
-                                        struct dt_object *dt,
-                                        struct lustre_capa *old,
-                                        __u64 opc);
-        int (*do_object_sync)(const struct lu_env *, struct dt_object *);
-        /**
-         * Get object info of next level. Currently, only get inode from osd.
-         * This is only used by quota b=16542
-         * precondition: dt_object_exists(dt);
-         */
-        int (*do_data_get)(const struct lu_env *env, struct dt_object *dt,
-                           void **data);
+       /**
+        * Declare intention to decrement nlink count.
+        *
+        * Notify the underlying filesystem that the nlink regular attribute
+        * be changed in this transaction. This enables the layer below to
+        * prepare resources (e.g. journal credits in ext4).  This method
+        * should be called between creating the transaction and starting it.
+        * The object need not exist.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       int   (*do_declare_ref_del)(const struct lu_env *env,
+                                   struct dt_object *dt,
+                                   struct thandle *th);
+
+       /**
+        * Decrement nlink.
+        *
+        * Decrement nlink (from the regular attributes set) in the given
+        * transaction. The object must exist.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       int   (*do_ref_del)(const struct lu_env *env,
+                           struct dt_object *dt,
+                           struct thandle *th);
+
+       /**
+        * Sync obect.
+        *
+        * The method is called to sync specified range of the object to a
+        * persistent storage. The control is returned once the operation is
+        * complete. The difference from ->do_sync() is that the object can
+        * be in-sync with the persistent storage (nothing to flush), then
+        * the method returns quickly with no I/O overhead. So, this method
+        * should be preferred over ->do_sync() where possible. Also note that
+        * if the object isn't clean, then some disk filesystems will call
+        * ->do_sync() to maintain overall consistency, in which case it's
+        * still very expensive.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] start     start of the range to sync
+        * \param[in] end       end of the range to sync
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       int (*do_object_sync)(const struct lu_env *env,
+                             struct dt_object *obj,
+                             __u64 start,
+                             __u64 end);
 
        /**
         * Lock object.
+        *
+        * Lock object(s) using Distributed Lock Manager (LDLM).
+        *
+        * Get LDLM locks for the object. Currently used to lock "remote"
+        * objects in DNE configuration - a service running on MDTx needs
+        * to lock an object on MDTy.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[out] lh       lock handle, sometimes used, sometimes not
+        * \param[in] einfo     ldlm callbacks, locking type and mode
+        * \param[out] einfo    private data to be passed to unlock later
+        * \param[in] policy    inodebits data
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
         */
        int (*do_object_lock)(const struct lu_env *env, struct dt_object *dt,
                              struct lustre_handle *lh,
                              struct ldlm_enqueue_info *einfo,
                              union ldlm_policy_data *policy);
 
-       int (*do_object_unlock)(const struct lu_env *env, struct dt_object *dt,
+       /**
+        * Unlock object.
+        *
+        * Release LDLM lock(s) granted with ->do_object_lock().
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] einfo     lock handles, from ->do_object_lock()
+        * \param[in] policy    inodebits data
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       int (*do_object_unlock)(const struct lu_env *env,
+                               struct dt_object *dt,
                                struct ldlm_enqueue_info *einfo,
                                union ldlm_policy_data *policy);
 };
 
 /**
- * Per-dt-object operations on "file body".
+ * Per-dt-object operations on "file body" - unstructure raw data.
  */
 struct dt_body_operations {
-        /**
-         * precondition: dt_object_exists(dt);
-         */
-        ssize_t (*dbo_read)(const struct lu_env *env, struct dt_object *dt,
-                            struct lu_buf *buf, loff_t *pos,
-                            struct lustre_capa *capa);
-        /**
-         * precondition: dt_object_exists(dt);
-         */
-        ssize_t (*dbo_declare_write)(const struct lu_env *env,
-                                     struct dt_object *dt,
-                                     const loff_t size, loff_t pos,
-                                     struct thandle *handle);
-        ssize_t (*dbo_write)(const struct lu_env *env, struct dt_object *dt,
-                             const struct lu_buf *buf, loff_t *pos,
-                             struct thandle *handle, struct lustre_capa *capa,
-                             int ignore_quota);
-        /*
-         * methods for zero-copy IO
-         */
+       /**
+        * Read data.
+        *
+        * Read unstructured data from an existing regular object.
+        * Only data before attr.la_size is returned.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[out] buf      buffer (including size) to copy data in
+        * \param[in] pos       position in the object to start
+        * \param[out] pos      original value of \a pos + bytes returned
+        *
+        * \retval positive     bytes read on success
+        * \retval negative     negated errno on error
+        */
+       ssize_t (*dbo_read)(const struct lu_env *env,
+                           struct dt_object *dt,
+                           struct lu_buf *buf,
+                           loff_t *pos);
 
-        /*
-         * precondition: dt_object_exists(dt);
-         * returns:
-         * < 0 - error code
-         * = 0 - illegal
-         * > 0 - number of local buffers prepared
-         */
-        int (*dbo_bufs_get)(const struct lu_env *env, struct dt_object *dt,
-                            loff_t pos, ssize_t len, struct niobuf_local *lb,
-                            int rw, struct lustre_capa *capa);
-        /*
-         * precondition: dt_object_exists(dt);
-         */
-        int (*dbo_bufs_put)(const struct lu_env *env, struct dt_object *dt,
-                            struct niobuf_local *lb, int nr);
-        /*
-         * precondition: dt_object_exists(dt);
-         */
-        int (*dbo_write_prep)(const struct lu_env *env, struct dt_object *dt,
-                              struct niobuf_local *lb, int nr);
-        /*
-         * precondition: dt_object_exists(dt);
-         */
-        int (*dbo_declare_write_commit)(const struct lu_env *env,
-                                        struct dt_object *dt,
-                                        struct niobuf_local *,
-                                        int, struct thandle *);
-        /*
-         * precondition: dt_object_exists(dt);
-         */
-        int (*dbo_write_commit)(const struct lu_env *env, struct dt_object *dt,
-                                struct niobuf_local *, int, struct thandle *);
-        /*
-         * precondition: dt_object_exists(dt);
-         */
-        int (*dbo_read_prep)(const struct lu_env *env, struct dt_object *dt,
-                             struct niobuf_local *lnb, int nr);
-        int (*dbo_fiemap_get)(const struct lu_env *env, struct dt_object *dt,
-                              struct ll_user_fiemap *fm);
-        /**
-         * Punch object's content
-         * precondition: regular object, not index
-         */
-        int   (*dbo_declare_punch)(const struct lu_env *, struct dt_object *,
-                                  __u64, __u64, struct thandle *th);
-        int   (*dbo_punch)(const struct lu_env *env, struct dt_object *dt,
-                          __u64 start, __u64 end, struct thandle *th,
-                          struct lustre_capa *capa);
+       /**
+        * Declare intention to write data to object.
+        *
+        * Notify the underlying filesystem that data may be written in
+        * this transaction. This enables the layer below to prepare resources
+        * (e.g. journal credits in ext4).  This method should be called
+        * between creating the transaction and starting it. The object need
+        * not exist. If the layer implementing this method is responsible for
+        * quota, then the method should reserve space for the given credentials
+        * and return an error if quota is over. If the write later fails
+        * for some reason, then the reserve should be released properly
+        * (usually in ->dt_trans_stop()).
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] buf       buffer (including size) to copy data from
+        * \param[in] pos       position in the object to start
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       ssize_t (*dbo_declare_write)(const struct lu_env *env,
+                                    struct dt_object *dt,
+                                    const struct lu_buf *buf,
+                                    loff_t pos,
+                                    struct thandle *th);
+
+       /**
+        * Write unstructured data to regular existing object.
+        *
+        * The method allocates space and puts data in. Also, the method should
+        * maintain attr.la_size properly. Partial writes are possible.
+        *
+        * If the layer implementing this method is responsible for quota,
+        * then the method should maintain space accounting for the given
+        * credentials.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] buf       buffer (including size) to copy data from
+        * \param[in] pos       position in the object to start
+        * \param[out] pos      \a pos + bytes written
+        * \param[in] th        transaction handle
+        * \param[in] ignore    unused (was used to request quota ignorance)
+        *
+        * \retval positive     bytes written on success
+        * \retval negative     negated errno on error
+        */
+       ssize_t (*dbo_write)(const struct lu_env *env,
+                            struct dt_object *dt,
+                            const struct lu_buf *buf,
+                            loff_t *pos,
+                            struct thandle *th,
+                            int ignore);
+
+       /**
+        * Return buffers for data.
+        *
+        * This method is used to access data with no copying. It's so-called
+        * zero-copy I/O. The method returns the descriptors for the internal
+        * buffers where data are managed by the disk filesystem. For example,
+        * pagecache in case of ext4 or ARC with ZFS. Then other components
+        * (e.g. networking) can transfer data from or to the buffers with no
+        * additional copying.
+        *
+        * The method should fill an array of struct niobuf_local, where
+        * each element describes a full or partial page for data at specific
+        * offset. The caller should use page/lnb_page_offset/len to find data
+        * at object's offset lnb_file_offset.
+        *
+        * The memory referenced by the descriptors can't change its purpose
+        * until the complementary ->dbo_bufs_put() is called. The caller should
+        * specify if the buffers are used to read or modify data so that OSD
+        * can decide how to initialize the buffers: bring all the data for
+        * reads or just bring partial buffers for write. Note: the method does
+        * not check whether output array is large enough.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] pos       position in the object to start
+        * \param[in] len       size of region in bytes
+        * \param[out] lb       array of descriptors to fill
+        * \param[in] rw        0 if used to read, 1 if used for write
+        *
+        * \retval positive     number of descriptors on success
+        * \retval negative     negated errno on error
+        */
+       int (*dbo_bufs_get)(const struct lu_env *env,
+                           struct dt_object *dt,
+                           loff_t pos,
+                           ssize_t len,
+                           struct niobuf_local *lb,
+                           int rw);
+
+       /**
+        * Release reference granted by ->dbo_bufs_get().
+        *
+        * Release the reference granted by the previous ->dbo_bufs_get().
+        * Note the references are counted.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[out] lb       array of descriptors to fill
+        * \param[in] nr        size of the array
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       int (*dbo_bufs_put)(const struct lu_env *env,
+                           struct dt_object *dt,
+                           struct niobuf_local *lb,
+                           int nr);
+
+       /**
+        * Prepare buffers for reading.
+        *
+        * The method is called on the given buffers to fill them with data
+        * if that wasn't done in ->dbo_bufs_get(). The idea is that the
+        * caller should be able to get few buffers for discontiguous regions
+        * using few calls to ->dbo_bufs_get() and then request them all for
+        * the preparation with a single call, so that OSD can fire many I/Os
+        * to run concurrently. It's up to the specific OSD whether to implement
+        * this logic in ->dbo_read_prep() or just use ->dbo_bufs_get() to
+        * prepare data for every requested region individually.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] lnb       array of buffer descriptors
+        * \param[in] nr        size of the array
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       int (*dbo_read_prep)(const struct lu_env *env,
+                            struct dt_object *dt,
+                            struct niobuf_local *lnb,
+                            int nr);
+
+       /**
+        * Prepare buffers for write.
+        *
+        * This method is called on the given buffers to ensure the partial
+        * buffers contain correct data. The underlying idea is the same as
+        * in ->db_read_prep().
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] lb        array of buffer descriptors
+        * \param[in] nr        size of the array
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       int (*dbo_write_prep)(const struct lu_env *env,
+                             struct dt_object *dt,
+                             struct niobuf_local *lb,
+                             int nr);
+
+       /**
+        * Declare intention to write data stored in the buffers.
+        *
+        * Notify the underlying filesystem that data may be written in
+        * this transaction. This enables the layer below to prepare resources
+        * (e.g. journal credits in ext4).  This method should be called
+        * between creating the transaction and starting it.
+        *
+        * If the layer implementing this method is responsible for quota,
+        * then the method should be reserving a space for the given
+        * credentials and return an error if quota is exceeded. If the write
+        * later fails for some reason, then the reserve should be released
+        * properly (usually in ->dt_trans_stop()).
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] lb        array of descriptors
+        * \param[in] nr        size of the array
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       int (*dbo_declare_write_commit)(const struct lu_env *env,
+                                       struct dt_object *dt,
+                                       struct niobuf_local *lb,
+                                       int nr,
+                                       struct thandle *th);
+
+       /**
+        * Write to existing object.
+        *
+        * This method is used to write data to a persistent storage using
+        * the buffers returned by ->dbo_bufs_get(). The caller puts new
+        * data into the buffers using own mechanisms (e.g. direct transfer
+        * from a NIC). The method should maintain attr.la_size. Also,
+        * attr.la_blocks should be maintained but this can be done in lazy
+        * manner, when actual allocation happens.
+        *
+        * If the layer implementing this method is responsible for quota,
+        * then the method should maintain space accounting for the given
+        * credentials.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] lb        array of descriptors for the buffers
+        * \param[in] nr        size of the array
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       int (*dbo_write_commit)(const struct lu_env *env,
+                               struct dt_object *dt,
+                               struct niobuf_local *lb,
+                               int nr,
+                               struct thandle *th);
+
+       /**
+        * Return logical to physical block mapping for a given extent
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] fm        describe the region to map and the output buffer
+        *                      see the details in include/linux/fiemap.h
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       int (*dbo_fiemap_get)(const struct lu_env *env,
+                             struct dt_object *dt,
+                             struct fiemap *fm);
+
+       /**
+        * Declare intention to deallocate space from an object.
+        *
+        * Notify the underlying filesystem that space may be deallocated in
+        * this transactions. This enables the layer below to prepare resources
+        * (e.g. journal credits in ext4).  This method should be called between
+        * creating the transaction and starting it. The object need not exist.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] start     the start of the region to deallocate
+        * \param[in] end       the end of the region to deallocate
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       int   (*dbo_declare_punch)(const struct lu_env *env,
+                                  struct dt_object *dt,
+                                  __u64 start,
+                                  __u64 end,
+                                  struct thandle *th);
+
+       /**
+        * Deallocate specified region in an object.
+        *
+        * This method is used to deallocate (release) space possibly consumed
+        * by the given region of the object. If the layer implementing this
+        * method is responsible for quota, then the method should maintain
+        * space accounting for the given credentials.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] start     the start of the region to deallocate
+        * \param[in] end       the end of the region to deallocate
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       int   (*dbo_punch)(const struct lu_env *env,
+                          struct dt_object *dt,
+                          __u64 start,
+                          __u64 end,
+                          struct thandle *th);
 };
 
 /**
@@ -568,73 +1333,335 @@ struct dt_key;
 struct dt_it;
 
 /**
- * Per-dt-object operations on object as index.
+ * Per-dt-object operations on object as index. Index is a set of key/value
+ * pairs abstracted from an on-disk representation. An index supports the
+ * number of operations including lookup by key, insert and delete. Also,
+ * an index can be iterated to find the pairs one by one, from a beginning
+ * or specified point.
  */
 struct dt_index_operations {
-        /**
-         * precondition: dt_object_exists(dt);
-         */
-        int (*dio_lookup)(const struct lu_env *env, struct dt_object *dt,
-                          struct dt_rec *rec, const struct dt_key *key,
-                          struct lustre_capa *capa);
-        /**
-         * precondition: dt_object_exists(dt);
-         */
+       /**
+        * Lookup in an index by key.
+        *
+        * The method returns a value for the given key. Key/value format
+        * and size should have been negotiated with ->do_index_try() before.
+        * Thus it's the caller's responsibility to provide the method with
+        * proper key and big enough buffer. No external locking is required,
+        * all the internal consistency should be implemented by the method
+        * or lower layers. The object should should have been created with
+        * type DFT_INDEX or DFT_DIR.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[out] rec      buffer where value will be stored
+        * \param[in] key       key
+        *
+        * \retval 0            on success
+        * \retval -ENOENT      if key isn't found
+        * \retval negative     negated errno on error
+        */
+       int (*dio_lookup)(const struct lu_env *env,
+                         struct dt_object *dt,
+                         struct dt_rec *rec,
+                         const struct dt_key *key);
+
+       /**
+        * Declare intention to insert a key/value into an index.
+        *
+        * Notify the underlying filesystem that new key/value may be inserted
+        * in this transaction. This enables the layer below to prepare
+        * resources (e.g. journal credits in ext4). This method should be
+        * called between creating the transaction and starting it. key/value
+        * format and size is subject to ->do_index_try().
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] rec       buffer storing value
+        * \param[in] key       key
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
         int (*dio_declare_insert)(const struct lu_env *env,
-                                  struct dt_object *dt,
-                                  const struct dt_rec *rec,
-                                  const struct dt_key *key,
-                                  struct thandle *handle);
-        int (*dio_insert)(const struct lu_env *env, struct dt_object *dt,
-                          const struct dt_rec *rec, const struct dt_key *key,
-                          struct thandle *handle, struct lustre_capa *capa,
-                          int ignore_quota);
-        /**
-         * precondition: dt_object_exists(dt);
-         */
+                                 struct dt_object *dt,
+                                 const struct dt_rec *rec,
+                                 const struct dt_key *key,
+                                 struct thandle *th);
+
+       /**
+        * Insert a new key/value pair into an index.
+        *
+        * The method inserts specified key/value pair into the given index
+        * object. The internal consistency is maintained by the method or
+        * the functionality below. The format and size of key/value should
+        * have been negotiated before using ->do_index_try(), no additional
+        * information can be specified to the method. The keys are unique
+        * in a given index.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] rec       buffer storing value
+        * \param[in] key       key
+        * \param[in] th        transaction handle
+        * \param[in] ignore    unused (was used to request quota ignorance)
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       int (*dio_insert)(const struct lu_env *env,
+                         struct dt_object *dt,
+                         const struct dt_rec *rec,
+                         const struct dt_key *key,
+                         struct thandle *th,
+                         int ignore);
+
+       /**
+        * Declare intention to delete a key/value from an index.
+        *
+        * Notify the underlying filesystem that key/value may be deleted in
+        * this transaction. This enables the layer below to prepare resources
+        * (e.g. journal credits in ext4).  This method should be called
+        * between creating the transaction and starting it. Key/value format
+        * and size is subject to ->do_index_try(). The object need not exist.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] key       key
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
         int (*dio_declare_delete)(const struct lu_env *env,
-                                  struct dt_object *dt,
-                                  const struct dt_key *key,
-                                  struct thandle *handle);
-        int (*dio_delete)(const struct lu_env *env, struct dt_object *dt,
-                          const struct dt_key *key, struct thandle *handle,
-                          struct lustre_capa *capa);
+                                 struct dt_object *dt,
+                                 const struct dt_key *key,
+                                 struct thandle *th);
+
+       /**
+        * Delete key/value pair from an index.
+        *
+        * The method deletes specified key and corresponding value from the
+        * given index object. The internal consistency is maintained by the
+        * method or the functionality below. The format and size of the key
+        * should have been negotiated before using ->do_index_try(), no
+        * additional information can be specified to the method.
+        *
+        * \param[in] env       execution environment for this thread
+        * \param[in] dt        object
+        * \param[in] key       key
+        * \param[in] th        transaction handle
+        *
+        * \retval 0            on success
+        * \retval negative     negated errno on error
+        */
+       int (*dio_delete)(const struct lu_env *env,
+                         struct dt_object *dt,
+                         const struct dt_key *key,
+                         struct thandle *th);
+
         /**
-         * Iterator interface
+        * Iterator interface.
+        *
+        * Methods to iterate over an existing index, list the keys stored and
+        * associated values, get key/value size, etc.
          */
         struct dt_it_ops {
-                /**
-                 * Allocate and initialize new iterator.
-                 *
-                 * precondition: dt_object_exists(dt);
+               /**
+                * Allocate and initialize new iterator.
+                *
+                * The iterator is a handler to be used in the subsequent
+                * methods to access index's content. Note the position is
+                * not defined at this point and should be initialized with
+                * ->get() or ->load() method.
+                *
+                * \param[in] env       execution environment for this thread
+                * \param[in] dt        object
+                * \param[in] attr      ask the iterator to return part of
+                                       the records, see LUDA_* for details
+                *
+                * \retval pointer      iterator pointer on success
+                * \retval ERR_PTR(errno)       on error
                  */
                 struct dt_it *(*init)(const struct lu_env *env,
-                                      struct dt_object *dt,
-                                      __u32 attr,
-                                      struct lustre_capa *capa);
+                                     struct dt_object *dt,
+                                     __u32 attr);
+
+               /**
+                * Release iterator.
+                *
+                * Release the specified iterator and all the resources
+                * associated (e.g. the object, index cache, etc).
+                *
+                * \param[in] env       execution environment for this thread
+                * \param[in] di        iterator to release
+                */
                 void          (*fini)(const struct lu_env *env,
                                       struct dt_it *di);
+
+               /**
+                * Move position of iterator.
+                *
+                * Move the position of the specified iterator to the specified
+                * key.
+                *
+                * \param[in] env       execution environment for this thread
+                * \param[in] di        iterator
+                * \param[in] key       key to position to
+                *
+                * \retval 0            if exact key is found
+                * \retval 1            if at the record with least key
+                *                      not larger than the key
+                * \retval negative     negated errno on error
+                */
                 int            (*get)(const struct lu_env *env,
                                       struct dt_it *di,
                                       const struct dt_key *key);
+
+               /**
+                * Release position
+                *
+                * Complimentary method for dt_it_ops::get() above. Some
+                * implementation can increase a reference on the iterator in
+                * dt_it_ops::get(). So the caller should be able to release
+                * with dt_it_ops::put().
+                *
+                * \param[in] env       execution environment for this thread
+                * \param[in] di        iterator
+                */
                 void           (*put)(const struct lu_env *env,
                                       struct dt_it *di);
+
+               /**
+                * Move to next record.
+                *
+                * Moves the position of the iterator to a next record
+                *
+                * \param[in] env       execution environment for this thread
+                * \param[in] di        iterator
+                *
+                * \retval 1            if no more records
+                * \retval 0            on success, the next record is found
+                * \retval negative     negated errno on error
+                */
                 int           (*next)(const struct lu_env *env,
                                       struct dt_it *di);
+
+               /**
+                * Return key.
+                *
+                * Returns a pointer to a buffer containing the key of the
+                * record at the current position. The pointer is valid and
+                * retains data until ->get(), ->load() and ->fini() methods
+                * are called.
+                *
+                * \param[in] env       execution environment for this thread
+                * \param[in] di        iterator
+                *
+                * \retval pointer to key       on success
+                * \retval ERR_PTR(errno)       on error
+                */
                 struct dt_key *(*key)(const struct lu_env *env,
                                       const struct dt_it *di);
+
+               /**
+                * Return key size.
+                *
+                * Returns size of the key at the current position.
+                *
+                * \param[in] env       execution environment for this thread
+                * \param[in] di        iterator
+                *
+                * \retval key's size   on success
+                * \retval negative     negated errno on error
+                */
                 int       (*key_size)(const struct lu_env *env,
                                       const struct dt_it *di);
+
+               /**
+                * Return record.
+                *
+                * Stores the value of the record at the current position. The
+                * buffer must be big enough (as negotiated with
+                * ->do_index_try() or ->rec_size()). The caller can specify
+                * she is interested only in part of the record, using attr
+                * argument (see LUDA_* definitions for the details).
+                *
+                * \param[in] env       execution environment for this thread
+                * \param[in] di        iterator
+                * \param[out] rec      buffer to store value in
+                * \param[in] attr      specify part of the value to copy
+                *
+                * \retval 0            on success
+                * \retval negative     negated errno on error
+                */
                 int            (*rec)(const struct lu_env *env,
                                       const struct dt_it *di,
                                       struct dt_rec *rec,
                                       __u32 attr);
+
+               /**
+                * Return record size.
+                *
+                * Returns size of the record at the current position. The
+                * \a attr can be used to specify only the parts of the record
+                * needed to be returned. (see LUDA_* definitions for the
+                * details).
+                *
+                * \param[in] env       execution environment for this thread
+                * \param[in] di        iterator
+                * \param[in] attr      part of the record to return
+                *
+                * \retval record's size        on success
+                * \retval negative             negated errno on error
+                */
+               int        (*rec_size)(const struct lu_env *env,
+                                      const struct dt_it *di,
+                                     __u32 attr);
+
+               /**
+                * Return a cookie (hash).
+                *
+                * Returns the cookie (usually hash) of the key at the current
+                * position. This allows the caller to resume iteration at this
+                * position later. The exact value is specific to implementation
+                * and should not be interpreted by the caller.
+                *
+                * \param[in] env       execution environment for this thread
+                * \param[in] di        iterator
+                *
+                * \retval cookie/hash of the key
+                */
                 __u64        (*store)(const struct lu_env *env,
                                       const struct dt_it *di);
+
+               /**
+                * Initialize position using cookie/hash.
+                *
+                * Initializes the current position of the iterator to one
+                * described by the cookie/hash as returned by ->store()
+                * previously.
+                *
+                * \param[in] env       execution environment for this thread
+                * \param[in] di        iterator
+                * \param[in] hash      cookie/hash value
+                *
+                * \retval positive     if current position points to
+                *                      record with least cookie not larger
+                *                      than cookie
+                * \retval 0            if current position matches cookie
+                * \retval negative     negated errno on error
+                */
                 int           (*load)(const struct lu_env *env,
-                                      const struct dt_it *di, __u64 hash);
+                                     const struct dt_it *di,
+                                     __u64 hash);
+
+               /**
+                * Not used
+                */
                 int        (*key_rec)(const struct lu_env *env,
-                                      const struct dt_it *di, void* key_rec);
+                                     const struct dt_it *di,
+                                     void *key_rec);
         } dio_it;
 };
 
@@ -657,7 +1684,7 @@ enum dt_otable_it_flags {
        DOIF_DRYRUN     = 0x0008,
 };
 
-/* otable based iteration needs to use the common DT interation APIs.
+/* otable based iteration needs to use the common DT iteration APIs.
  * To initialize the iteration, it needs call dio_it::init() firstly.
  * Here is how the otable based iteration should prepare arguments to
  * call dt_it_ops::init().
@@ -677,7 +1704,7 @@ struct dt_device {
          * way, because callbacks are supposed to be added/deleted only during
          * single-threaded start-up shut-down procedures.
          */
-        cfs_list_t                         dd_txn_callbacks;
+       struct list_head                   dd_txn_callbacks;
        unsigned int                       dd_record_fid_accessed:1;
 };
 
@@ -707,7 +1734,7 @@ struct dt_object {
  */
 struct local_oid_storage {
        /* all initialized llog systems on this node linked by this */
-       cfs_list_t        los_list;
+       struct list_head  los_list;
 
        /* how many handle's reference this los has */
        atomic_t          los_refcount;
@@ -752,18 +1779,11 @@ static inline struct dt_object *lu2dt_obj(struct lu_object *o)
        return container_of0(o, struct dt_object, do_lu);
 }
 
-struct thandle_update {
-       /* In DNE, one transaction can be disassembled into
-        * updates on several different MDTs, and these updates
-        * will be attached to tu_remote_update_list per target.
-        * Only single thread will access the list, no need lock
-        */
-       struct list_head        tu_remote_update_list;
-
-       /* sent after or before local transaction */
-       unsigned int            tu_sent_after_local_trans:1,
-                               tu_only_remote_trans:1;
-};
+static inline struct dt_object *dt_object_child(struct dt_object *o)
+{
+       return container_of0(lu_object_next(&(o)->do_lu),
+                            struct dt_object, do_lu);
+}
 
 /**
  * This is the general purpose transaction handle.
@@ -783,10 +1803,13 @@ struct thandle {
        /** the dt device on which the transactions are executed */
        struct dt_device *th_dev;
 
-       atomic_t        th_refc;
-       /* the size of transaction */
-       int             th_alloc_size;
-
+       /* point to the top thandle, XXX this is a bit hacky right now,
+        * but normal device trans callback triggered by the bottom
+        * device (OSP/OSD == sub thandle layer) needs to get the
+        * top_thandle (see dt_txn_hook_start/stop()), so we put the
+        * top thandle here for now, will fix it when we have better
+        * callback mechanism */
+       struct thandle  *th_top;
        /** context for this transaction, tag is LCT_TX_HANDLE */
        struct lu_context th_ctx;
 
@@ -798,27 +1821,15 @@ struct thandle {
        __s32             th_result;
 
        /** whether we need sync commit */
-       unsigned int            th_sync:1;
-
+       unsigned int            th_sync:1,
        /* local transation, no need to inform other layers */
-       unsigned int            th_local:1;
-
-       struct thandle_update   *th_update;
+                               th_local:1,
+       /* Whether we need wait the transaction to be submitted */
+                               th_wait_submit:1,
+       /* complex transaction which will track updates on all targets */
+                               th_complex:1;
 };
 
-static inline void thandle_get(struct thandle *thandle)
-{
-       atomic_inc(&thandle->th_refc);
-}
-
-static inline void thandle_put(struct thandle *thandle)
-{
-       if (atomic_dec_and_test(&thandle->th_refc)) {
-               if (thandle->th_update != NULL)
-                       OBD_FREE_PTR(thandle->th_update);
-               OBD_FREE(thandle, thandle->th_alloc_size);
-       }
-}
 /**
  * Transaction call-backs.
  *
@@ -836,9 +1847,9 @@ struct dt_txn_callback {
         int (*dtc_txn_stop)(const struct lu_env *env,
                             struct thandle *txn, void *cookie);
         void (*dtc_txn_commit)(struct thandle *txn, void *cookie);
-        void                *dtc_cookie;
-        __u32                dtc_tag;
-        cfs_list_t           dtc_linkage;
+       void                    *dtc_cookie;
+       __u32                   dtc_tag;
+       struct list_head        dtc_linkage;
 };
 
 void dt_txn_callback_add(struct dt_device *dev, struct dt_txn_callback *cb);
@@ -895,6 +1906,18 @@ dt_locate(const struct lu_env *env, struct dt_device *dev,
                            dev->dd_lu_dev.ld_site->ls_top_dev, NULL);
 }
 
+static inline struct dt_object *
+dt_object_locate(struct dt_object *dto, struct dt_device *dt_dev)
+{
+       struct lu_object *lo;
+
+       list_for_each_entry(lo, &dto->do_lu.lo_header->loh_layers, lo_linkage) {
+               if (lo->lo_dev == &dt_dev->dd_lu_dev)
+                       return container_of(lo, struct dt_object, do_lu);
+       }
+       return NULL;
+}
+
 int local_oid_storage_init(const struct lu_env *env, struct dt_device *dev,
                           const struct lu_fid *first_fid,
                           struct local_oid_storage **los);
@@ -965,13 +1988,13 @@ static inline int dt_object_unlock(const struct lu_env *env,
 int dt_lookup_dir(const struct lu_env *env, struct dt_object *dir,
                  const char *name, struct lu_fid *fid);
 
-static inline int dt_object_sync(const struct lu_env *env,
-                                 struct dt_object *o)
+static inline int dt_object_sync(const struct lu_env *env, struct dt_object *o,
+                                __u64 start, __u64 end)
 {
-        LASSERT(o);
-        LASSERT(o->do_ops);
-        LASSERT(o->do_ops->do_object_sync);
-        return o->do_ops->do_object_sync(env, o);
+       LASSERT(o);
+       LASSERT(o->do_ops);
+       LASSERT(o->do_ops->do_object_sync);
+       return o->do_ops->do_object_sync(env, o, start, end);
 }
 
 int dt_declare_version_set(const struct lu_env *env, struct dt_object *o,
@@ -988,7 +2011,7 @@ int dt_record_read(const struct lu_env *env, struct dt_object *dt,
 int dt_record_write(const struct lu_env *env, struct dt_object *dt,
                     const struct lu_buf *buf, loff_t *pos, struct thandle *th);
 typedef int (*dt_index_page_build_t)(const struct lu_env *env,
-                                    union lu_page *lp, int nob,
+                                    union lu_page *lp, size_t nob,
                                     const struct dt_it_ops *iops,
                                     struct dt_it *it, __u32 attr, void *arg);
 int dt_index_walk(const struct lu_env *env, struct dt_object *obj,
@@ -1038,18 +2061,19 @@ static inline int dt_trans_cb_add(struct thandle *th,
 
 
 static inline int dt_declare_record_write(const struct lu_env *env,
-                                          struct dt_object *dt,
-                                          int size, loff_t pos,
-                                          struct thandle *th)
+                                         struct dt_object *dt,
+                                         const struct lu_buf *buf,
+                                         loff_t pos,
+                                         struct thandle *th)
 {
-        int rc;
+       int rc;
 
-        LASSERTF(dt != NULL, "dt is NULL when we want to write record\n");
-        LASSERT(th != NULL);
-        LASSERT(dt->do_body_ops);
-        LASSERT(dt->do_body_ops->dbo_declare_write);
-        rc = dt->do_body_ops->dbo_declare_write(env, dt, size, pos, th);
-        return rc;
+       LASSERTF(dt != NULL, "dt is NULL when we want to write record\n");
+       LASSERT(th != NULL);
+       LASSERT(dt->do_body_ops);
+       LASSERT(dt->do_body_ops->dbo_declare_write);
+       rc = dt->do_body_ops->dbo_declare_write(env, dt, buf, pos, th);
+       return rc;
 }
 
 static inline int dt_declare_create(const struct lu_env *env,
@@ -1062,6 +2086,10 @@ static inline int dt_declare_create(const struct lu_env *env,
         LASSERT(dt);
         LASSERT(dt->do_ops);
         LASSERT(dt->do_ops->do_declare_create);
+
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_DECLARE_CREATE))
+               return cfs_fail_err;
+
         return dt->do_ops->do_declare_create(env, dt, attr, hint, dof, th);
 }
 
@@ -1075,6 +2103,10 @@ static inline int dt_create(const struct lu_env *env,
         LASSERT(dt);
         LASSERT(dt->do_ops);
         LASSERT(dt->do_ops->do_create);
+
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_CREATE))
+               return cfs_fail_err;
+
         return dt->do_ops->do_create(env, dt, attr, hint, dof, th);
 }
 
@@ -1085,6 +2117,10 @@ static inline int dt_declare_destroy(const struct lu_env *env,
         LASSERT(dt);
         LASSERT(dt->do_ops);
         LASSERT(dt->do_ops->do_declare_destroy);
+
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_DECLARE_DESTROY))
+               return cfs_fail_err;
+
         return dt->do_ops->do_declare_destroy(env, dt, th);
 }
 
@@ -1095,6 +2131,10 @@ static inline int dt_destroy(const struct lu_env *env,
         LASSERT(dt);
         LASSERT(dt->do_ops);
         LASSERT(dt->do_ops->do_destroy);
+
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_DESTROY))
+               return cfs_fail_err;
+
         return dt->do_ops->do_destroy(env, dt, th);
 }
 
@@ -1146,22 +2186,29 @@ static inline int dt_write_locked(const struct lu_env *env,
 }
 
 static inline int dt_declare_attr_get(const struct lu_env *env,
-                                     struct dt_object *dt,
-                                     struct lustre_capa *capa)
+                                     struct dt_object *dt)
 {
        LASSERT(dt);
        LASSERT(dt->do_ops);
        LASSERT(dt->do_ops->do_declare_attr_get);
-       return dt->do_ops->do_declare_attr_get(env, dt, capa);
+
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_DECLARE_ATTR_GET))
+               return cfs_fail_err;
+
+       return dt->do_ops->do_declare_attr_get(env, dt);
 }
 
 static inline int dt_attr_get(const struct lu_env *env, struct dt_object *dt,
-                              struct lu_attr *la, void *arg)
+                             struct lu_attr *la)
 {
         LASSERT(dt);
         LASSERT(dt->do_ops);
         LASSERT(dt->do_ops->do_attr_get);
-        return dt->do_ops->do_attr_get(env, dt, la, arg);
+
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_ATTR_GET))
+               return cfs_fail_err;
+
+       return dt->do_ops->do_attr_get(env, dt, la);
 }
 
 static inline int dt_declare_attr_set(const struct lu_env *env,
@@ -1172,17 +2219,24 @@ static inline int dt_declare_attr_set(const struct lu_env *env,
         LASSERT(dt);
         LASSERT(dt->do_ops);
         LASSERT(dt->do_ops->do_declare_attr_set);
+
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_DECLARE_ATTR_SET))
+               return cfs_fail_err;
+
         return dt->do_ops->do_declare_attr_set(env, dt, la, th);
 }
 
 static inline int dt_attr_set(const struct lu_env *env, struct dt_object *dt,
-                              const struct lu_attr *la, struct thandle *th,
-                              struct lustre_capa *capa)
+                             const struct lu_attr *la, struct thandle *th)
 {
         LASSERT(dt);
         LASSERT(dt->do_ops);
         LASSERT(dt->do_ops->do_attr_set);
-        return dt->do_ops->do_attr_set(env, dt, la, th, capa);
+
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_ATTR_SET))
+               return cfs_fail_err;
+
+       return dt->do_ops->do_attr_set(env, dt, la, th);
 }
 
 static inline int dt_declare_ref_add(const struct lu_env *env,
@@ -1191,6 +2245,10 @@ static inline int dt_declare_ref_add(const struct lu_env *env,
         LASSERT(dt);
         LASSERT(dt->do_ops);
         LASSERT(dt->do_ops->do_declare_ref_add);
+
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_DECLARE_REF_ADD))
+               return cfs_fail_err;
+
         return dt->do_ops->do_declare_ref_add(env, dt, th);
 }
 
@@ -1200,6 +2258,10 @@ static inline int dt_ref_add(const struct lu_env *env,
         LASSERT(dt);
         LASSERT(dt->do_ops);
         LASSERT(dt->do_ops->do_ref_add);
+
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_REF_ADD))
+               return cfs_fail_err;
+
         return dt->do_ops->do_ref_add(env, dt, th);
 }
 
@@ -1209,6 +2271,10 @@ static inline int dt_declare_ref_del(const struct lu_env *env,
         LASSERT(dt);
         LASSERT(dt->do_ops);
         LASSERT(dt->do_ops->do_declare_ref_del);
+
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_DECLARE_REF_DEL))
+               return cfs_fail_err;
+
         return dt->do_ops->do_declare_ref_del(env, dt, th);
 }
 
@@ -1218,29 +2284,22 @@ static inline int dt_ref_del(const struct lu_env *env,
         LASSERT(dt);
         LASSERT(dt->do_ops);
         LASSERT(dt->do_ops->do_ref_del);
-        return dt->do_ops->do_ref_del(env, dt, th);
-}
 
-static inline struct obd_capa *dt_capa_get(const struct lu_env *env,
-                                           struct dt_object *dt,
-                                           struct lustre_capa *old, __u64 opc)
-{
-        LASSERT(dt);
-        LASSERT(dt->do_ops);
-       LASSERT(dt->do_ops->do_capa_get);
-        return dt->do_ops->do_capa_get(env, dt, old, opc);
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_REF_DEL))
+               return cfs_fail_err;
+
+        return dt->do_ops->do_ref_del(env, dt, th);
 }
 
 static inline int dt_bufs_get(const struct lu_env *env, struct dt_object *d,
-                              struct niobuf_remote *rnb,
-                              struct niobuf_local *lnb, int rw,
-                              struct lustre_capa *capa)
+                             struct niobuf_remote *rnb,
+                             struct niobuf_local *lnb, int rw)
 {
-        LASSERT(d);
-        LASSERT(d->do_body_ops);
-        LASSERT(d->do_body_ops->dbo_bufs_get);
-        return d->do_body_ops->dbo_bufs_get(env, d, rnb->offset,
-                                            rnb->len, lnb, rw, capa);
+       LASSERT(d);
+       LASSERT(d->do_body_ops);
+       LASSERT(d->do_body_ops->dbo_bufs_get);
+       return d->do_body_ops->dbo_bufs_get(env, d, rnb->rnb_offset,
+                                           rnb->rnb_len, lnb, rw);
 }
 
 static inline int dt_bufs_put(const struct lu_env *env, struct dt_object *d,
@@ -1291,6 +2350,27 @@ static inline int dt_read_prep(const struct lu_env *env, struct dt_object *d,
         return d->do_body_ops->dbo_read_prep(env, d, lnb, n);
 }
 
+static inline int dt_declare_write(const struct lu_env *env,
+                                  struct dt_object *dt,
+                                  const struct lu_buf *buf, loff_t pos,
+                                  struct thandle *th)
+{
+       LASSERT(dt);
+       LASSERT(dt->do_body_ops);
+       LASSERT(dt->do_body_ops->dbo_declare_write);
+       return dt->do_body_ops->dbo_declare_write(env, dt, buf, pos, th);
+}
+
+static inline ssize_t dt_write(const struct lu_env *env, struct dt_object *dt,
+                              const struct lu_buf *buf, loff_t *pos,
+                              struct thandle *th, int rq)
+{
+       LASSERT(dt);
+       LASSERT(dt->do_body_ops);
+       LASSERT(dt->do_body_ops->dbo_write);
+       return dt->do_body_ops->dbo_write(env, dt, buf, pos, th, rq);
+}
+
 static inline int dt_declare_punch(const struct lu_env *env,
                                    struct dt_object *dt, __u64 start,
                                    __u64 end, struct thandle *th)
@@ -1302,17 +2382,16 @@ static inline int dt_declare_punch(const struct lu_env *env,
 }
 
 static inline int dt_punch(const struct lu_env *env, struct dt_object *dt,
-                           __u64 start, __u64 end, struct thandle *th,
-                           struct lustre_capa *capa)
+                          __u64 start, __u64 end, struct thandle *th)
 {
         LASSERT(dt);
         LASSERT(dt->do_body_ops);
         LASSERT(dt->do_body_ops->dbo_punch);
-        return dt->do_body_ops->dbo_punch(env, dt, start, end, th, capa);
+       return dt->do_body_ops->dbo_punch(env, dt, start, end, th);
 }
 
 static inline int dt_fiemap_get(const struct lu_env *env, struct dt_object *d,
-                                struct ll_user_fiemap *fm)
+                               struct fiemap *fm)
 {
         LASSERT(d);
         if (d->do_body_ops == NULL)
@@ -1375,7 +2454,11 @@ static inline int dt_declare_insert(const struct lu_env *env,
         LASSERT(dt);
         LASSERT(dt->do_index_ops);
         LASSERT(dt->do_index_ops->dio_declare_insert);
-        return dt->do_index_ops->dio_declare_insert(env, dt, rec, key, th);
+
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_DECLARE_INSERT))
+               return cfs_fail_err;
+
+       return dt->do_index_ops->dio_declare_insert(env, dt, rec, key, th);
 }
 
 static inline int dt_insert(const struct lu_env *env,
@@ -1383,14 +2466,16 @@ static inline int dt_insert(const struct lu_env *env,
                                     const struct dt_rec *rec,
                                     const struct dt_key *key,
                                     struct thandle *th,
-                                    struct lustre_capa *capa,
                                     int noquota)
 {
         LASSERT(dt);
         LASSERT(dt->do_index_ops);
         LASSERT(dt->do_index_ops->dio_insert);
-        return dt->do_index_ops->dio_insert(env, dt, rec, key, th,
-                                            capa, noquota);
+
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_INSERT))
+               return cfs_fail_err;
+
+       return dt->do_index_ops->dio_insert(env, dt, rec, key, th, noquota);
 }
 
 static inline int dt_declare_xattr_del(const struct lu_env *env,
@@ -1401,18 +2486,25 @@ static inline int dt_declare_xattr_del(const struct lu_env *env,
         LASSERT(dt);
         LASSERT(dt->do_ops);
         LASSERT(dt->do_ops->do_declare_xattr_del);
+
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_DECLARE_XATTR_DEL))
+               return cfs_fail_err;
+
         return dt->do_ops->do_declare_xattr_del(env, dt, name, th);
 }
 
 static inline int dt_xattr_del(const struct lu_env *env,
-                               struct dt_object *dt, const char *name,
-                               struct thandle *th,
-                               struct lustre_capa *capa)
+                              struct dt_object *dt, const char *name,
+                              struct thandle *th)
 {
         LASSERT(dt);
         LASSERT(dt->do_ops);
         LASSERT(dt->do_ops->do_xattr_del);
-        return dt->do_ops->do_xattr_del(env, dt, name, th, capa);
+
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_XATTR_DEL))
+               return cfs_fail_err;
+
+       return dt->do_ops->do_xattr_del(env, dt, name, th);
 }
 
 static inline int dt_declare_xattr_set(const struct lu_env *env,
@@ -1424,50 +2516,67 @@ static inline int dt_declare_xattr_set(const struct lu_env *env,
         LASSERT(dt);
         LASSERT(dt->do_ops);
         LASSERT(dt->do_ops->do_declare_xattr_set);
+
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_DECLARE_XATTR_SET))
+               return cfs_fail_err;
+
         return dt->do_ops->do_declare_xattr_set(env, dt, buf, name, fl, th);
 }
 
 static inline int dt_xattr_set(const struct lu_env *env,
-                              struct dt_object *dt, const struct lu_buf *buf,
-                              const char *name, int fl, struct thandle *th,
-                              struct lustre_capa *capa)
+                              struct dt_object *dt, const struct lu_buf *buf,
+                              const char *name, int fl, struct thandle *th)
 {
         LASSERT(dt);
         LASSERT(dt->do_ops);
         LASSERT(dt->do_ops->do_xattr_set);
-        return dt->do_ops->do_xattr_set(env, dt, buf, name, fl, th, capa);
+
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_XATTR_SET))
+               return cfs_fail_err;
+
+       return dt->do_ops->do_xattr_set(env, dt, buf, name, fl, th);
 }
 
 static inline int dt_declare_xattr_get(const struct lu_env *env,
                                       struct dt_object *dt,
                                       struct lu_buf *buf,
-                                      const char *name,
-                                      struct lustre_capa *capa)
+                                      const char *name)
 {
        LASSERT(dt);
        LASSERT(dt->do_ops);
        LASSERT(dt->do_ops->do_declare_xattr_get);
-       return dt->do_ops->do_declare_xattr_get(env, dt, buf, name, capa);
+
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_DECLARE_XATTR_GET))
+               return cfs_fail_err;
+
+       return dt->do_ops->do_declare_xattr_get(env, dt, buf, name);
 }
 
 static inline int dt_xattr_get(const struct lu_env *env,
-                              struct dt_object *dt, struct lu_buf *buf,
-                              const char *name, struct lustre_capa *capa)
+                              struct dt_object *dt, struct lu_buf *buf,
+                              const char *name)
 {
         LASSERT(dt);
         LASSERT(dt->do_ops);
         LASSERT(dt->do_ops->do_xattr_get);
-        return dt->do_ops->do_xattr_get(env, dt, buf, name, capa);
+
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_XATTR_GET))
+               return cfs_fail_err;
+
+       return dt->do_ops->do_xattr_get(env, dt, buf, name);
 }
 
-static inline int dt_xattr_list(const struct lu_env *env,
-                               struct dt_object *dt, struct lu_buf *buf,
-                               struct lustre_capa *capa)
+static inline int dt_xattr_list(const struct lu_env *env, struct dt_object *dt,
+                               const struct lu_buf *buf)
 {
         LASSERT(dt);
         LASSERT(dt->do_ops);
         LASSERT(dt->do_ops->do_xattr_list);
-        return dt->do_ops->do_xattr_list(env, dt, buf, capa);
+
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_XATTR_LIST))
+               return cfs_fail_err;
+
+       return dt->do_ops->do_xattr_list(env, dt, buf);
 }
 
 static inline int dt_declare_delete(const struct lu_env *env,
@@ -1478,19 +2587,26 @@ static inline int dt_declare_delete(const struct lu_env *env,
         LASSERT(dt);
         LASSERT(dt->do_index_ops);
         LASSERT(dt->do_index_ops->dio_declare_delete);
+
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_DECLARE_DELETE))
+               return cfs_fail_err;
+
         return dt->do_index_ops->dio_declare_delete(env, dt, key, th);
 }
 
 static inline int dt_delete(const struct lu_env *env,
-                            struct dt_object *dt,
-                            const struct dt_key *key,
-                            struct thandle *th,
-                            struct lustre_capa *capa)
+                           struct dt_object *dt,
+                           const struct dt_key *key,
+                           struct thandle *th)
 {
         LASSERT(dt);
         LASSERT(dt->do_index_ops);
         LASSERT(dt->do_index_ops->dio_delete);
-        return dt->do_index_ops->dio_delete(env, dt, key, th, capa);
+
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_DELETE))
+               return cfs_fail_err;
+
+       return dt->do_index_ops->dio_delete(env, dt, key, th);
 }
 
 static inline int dt_commit_async(const struct lu_env *env,
@@ -1502,23 +2618,10 @@ static inline int dt_commit_async(const struct lu_env *env,
         return dev->dd_ops->dt_commit_async(env, dev);
 }
 
-static inline int dt_init_capa_ctxt(const struct lu_env *env,
-                                   struct dt_device *dev,
-                                   int mode, unsigned long timeout,
-                                   __u32 alg, struct lustre_capa_key *keys)
-{
-       LASSERT(dev);
-       LASSERT(dev->dd_ops);
-       LASSERT(dev->dd_ops->dt_init_capa_ctxt);
-       return dev->dd_ops->dt_init_capa_ctxt(env, dev, mode,
-                                             timeout, alg, keys);
-}
-
 static inline int dt_lookup(const struct lu_env *env,
-                            struct dt_object *dt,
-                            struct dt_rec *rec,
-                            const struct dt_key *key,
-                            struct lustre_capa *capa)
+                           struct dt_object *dt,
+                           struct dt_rec *rec,
+                           const struct dt_key *key)
 {
         int ret;
 
@@ -1526,7 +2629,10 @@ static inline int dt_lookup(const struct lu_env *env,
         LASSERT(dt->do_index_ops);
         LASSERT(dt->do_index_ops->dio_lookup);
 
-        ret = dt->do_index_ops->dio_lookup(env, dt, rec, key, capa);
+       if (CFS_FAULT_CHECK(OBD_FAIL_DT_LOOKUP))
+               return cfs_fail_err;
+
+       ret = dt->do_index_ops->dio_lookup(env, dt, rec, key);
         if (ret > 0)
                 ret = 0;
         else if (ret == 0)
@@ -1534,14 +2640,26 @@ static inline int dt_lookup(const struct lu_env *env,
         return ret;
 }
 
-#define LU221_BAD_TIME (0x80000000U + 24 * 3600)
-
 struct dt_find_hint {
        struct lu_fid        *dfh_fid;
        struct dt_device     *dfh_dt;
        struct dt_object     *dfh_o;
 };
 
+struct dt_insert_rec {
+       union {
+               const struct lu_fid     *rec_fid;
+               void                    *rec_data;
+       };
+       union {
+               struct {
+                       __u32            rec_type;
+                       __u32            rec_padding;
+               };
+               __u64                    rec_misc;
+       };
+};
+
 struct dt_thread_info {
        char                     dti_buf[DT_MAX_PATH];
        struct dt_find_hint      dti_dfh;
@@ -1552,6 +2670,7 @@ struct dt_thread_info {
        struct lu_buf            dti_lb;
        struct lu_object_conf    dti_conf;
        loff_t                   dti_off;
+       struct dt_insert_rec     dti_dt_rec;
 };
 
 extern struct lu_context_key dt_key;
@@ -1568,27 +2687,13 @@ static inline struct dt_thread_info *dt_info(const struct lu_env *env)
 int dt_global_init(void);
 void dt_global_fini(void);
 
-# ifdef LPROCFS
-#ifndef HAVE_ONLY_PROCFS_SEQ
-int lprocfs_dt_rd_blksize(char *page, char **start, off_t off,
-                         int count, int *eof, void *data);
-int lprocfs_dt_rd_kbytestotal(char *page, char **start, off_t off,
-                             int count, int *eof, void *data);
-int lprocfs_dt_rd_kbytesfree(char *page, char **start, off_t off,
-                            int count, int *eof, void *data);
-int lprocfs_dt_rd_kbytesavail(char *page, char **start, off_t off,
-                             int count, int *eof, void *data);
-int lprocfs_dt_rd_filestotal(char *page, char **start, off_t off,
-                            int count, int *eof, void *data);
-int lprocfs_dt_rd_filesfree(char *page, char **start, off_t off,
-                           int count, int *eof, void *data);
-#endif
+# ifdef CONFIG_PROC_FS
 int lprocfs_dt_blksize_seq_show(struct seq_file *m, void *v);
 int lprocfs_dt_kbytestotal_seq_show(struct seq_file *m, void *v);
 int lprocfs_dt_kbytesfree_seq_show(struct seq_file *m, void *v);
 int lprocfs_dt_kbytesavail_seq_show(struct seq_file *m, void *v);
 int lprocfs_dt_filestotal_seq_show(struct seq_file *m, void *v);
 int lprocfs_dt_filesfree_seq_show(struct seq_file *m, void *v);
-# endif /* LPROCFS */
+# endif /* CONFIG_PROC_FS */
 
 #endif /* __LUSTRE_DT_OBJECT_H */