Whamcloud - gitweb
LU-15727 lod: honor append_pool with default composite layouts
[fs/lustre-release.git] / lustre / osp / osp_md_object.c
index fb77b3b..6ff56f4 100644 (file)
@@ -20,7 +20,7 @@
  * GPL HEADER END
  */
 /*
- * Copyright (c) 2013, 2016, Intel Corporation.
+ * Copyright (c) 2013, 2017, Intel Corporation.
  */
 /*
  * lustre/osp/osp_md_object.c
@@ -157,15 +157,20 @@ int osp_md_create(const struct lu_env *env, struct dt_object *dt,
                  struct lu_attr *attr, struct dt_allocation_hint *hint,
                  struct dt_object_format *dof, struct thandle *th)
 {
-       struct osp_update_request       *update;
-       struct osp_object               *obj = dt2osp_obj(dt);
-       int                             rc;
+       struct osp_update_request *update;
+       struct osp_object *obj = dt2osp_obj(dt);
+       int rc;
 
        update = thandle_to_osp_update_request(th);
        LASSERT(update != NULL);
 
-       LASSERT(attr->la_valid & LA_TYPE);
-       rc = osp_update_rpc_pack(env, create, update, OUT_CREATE,
+       if (!(attr->la_valid & LA_TYPE)) {
+               CERROR("%s: create type not specified: valid %llx\n",
+                      dt->do_lu.lo_dev->ld_obd->obd_name, attr->la_valid);
+               GOTO(out, rc = -EINVAL);
+       }
+
+       rc = OSP_UPDATE_RPC_PACK(env, out_create_pack, update,
                                 lu_object_fid(&dt->do_lu), attr, hint, dof);
        if (rc != 0)
                GOTO(out, rc);
@@ -178,6 +183,7 @@ int osp_md_create(const struct lu_env *env, struct dt_object *dt,
 
        dt->do_lu.lo_header->loh_attr |= LOHA_EXISTS | (attr->la_mode & S_IFMT);
        dt2osp_obj(dt)->opo_non_exist = 0;
+       obj->opo_stale = 0;
 
        obj->opo_attr = *attr;
 out:
@@ -219,13 +225,13 @@ static int osp_md_declare_ref_del(const struct lu_env *env,
 static int osp_md_ref_del(const struct lu_env *env, struct dt_object *dt,
                          struct thandle *th)
 {
-       struct osp_update_request       *update;
-       int                             rc;
+       struct osp_update_request *update;
+       int rc;
 
        update = thandle_to_osp_update_request(th);
        LASSERT(update != NULL);
 
-       rc = osp_update_rpc_pack(env, ref_del, update, OUT_REF_DEL,
+       rc = OSP_UPDATE_RPC_PACK(env, out_ref_del_pack, update,
                                 lu_object_fid(&dt->do_lu));
        return rc;
 }
@@ -265,13 +271,13 @@ static int osp_md_declare_ref_add(const struct lu_env *env,
 static int osp_md_ref_add(const struct lu_env *env, struct dt_object *dt,
                          struct thandle *th)
 {
-       struct osp_update_request       *update;
-       int                             rc;
+       struct osp_update_request *update;
+       int rc;
 
        update = thandle_to_osp_update_request(th);
        LASSERT(update != NULL);
 
-       rc = osp_update_rpc_pack(env, ref_add, update, OUT_REF_ADD,
+       rc = OSP_UPDATE_RPC_PACK(env, out_ref_add_pack, update,
                                 lu_object_fid(&dt->do_lu));
        return rc;
 }
@@ -299,7 +305,6 @@ static void osp_md_ah_init(const struct lu_env *env,
        LASSERT(ah);
 
        ah->dah_parent = parent;
-       ah->dah_mode = child_mode;
 }
 
 /**
@@ -341,13 +346,13 @@ int osp_md_declare_attr_set(const struct lu_env *env, struct dt_object *dt,
 int osp_md_attr_set(const struct lu_env *env, struct dt_object *dt,
                    const struct lu_attr *attr, struct thandle *th)
 {
-       struct osp_update_request       *update;
-       int                             rc;
+       struct osp_update_request *update;
+       int rc;
 
        update = thandle_to_osp_update_request(th);
        LASSERT(update != NULL);
 
-       rc = osp_update_rpc_pack(env, attr_set, update, OUT_ATTR_SET,
+       rc = OSP_UPDATE_RPC_PACK(env, out_attr_set_pack, update,
                                 lu_object_fid(&dt->do_lu), attr);
        return rc;
 }
@@ -362,7 +367,7 @@ int osp_md_attr_set(const struct lu_env *env, struct dt_object *dt,
  *
  * \param[in] env      execution environment
  * \param[in] dt       object to be locked
- * \param[in] role     lock role from MDD layer, see mdd_object_role().
+ * \param[in] role     lock role from MDD layer, see dt_object_role().
  */
 static void osp_md_read_lock(const struct lu_env *env, struct dt_object *dt,
                             unsigned role)
@@ -382,7 +387,7 @@ static void osp_md_read_lock(const struct lu_env *env, struct dt_object *dt,
  *
  * \param[in] env      execution environment
  * \param[in] dt       object to be locked
- * \param[in] role     lock role from MDD layer, see mdd_object_role().
+ * \param[in] role     lock role from MDD layer, see dt_object_role().
  */
 static void osp_md_write_lock(const struct lu_env *env, struct dt_object *dt,
                              unsigned role)
@@ -477,7 +482,7 @@ static int osp_md_index_lookup(const struct lu_env *env, struct dt_object *dt,
        if (IS_ERR(update))
                RETURN(PTR_ERR(update));
 
-       rc = osp_update_rpc_pack(env, index_lookup, update, OUT_INDEX_LOOKUP,
+       rc = OSP_UPDATE_RPC_PACK(env, out_index_lookup_pack, update,
                                 lu_object_fid(&dt->do_lu), rec, key);
        if (rc != 0) {
                CERROR("%s: Insert update error: rc = %d\n",
@@ -512,7 +517,7 @@ static int osp_md_index_lookup(const struct lu_env *env, struct dt_object *dt,
        }
 
        fid = lbuf->lb_buf;
-       if (ptlrpc_rep_need_swab(req))
+       if (req_capsule_rep_need_swab(&req->rq_pill))
                lustre_swab_lu_fid(fid);
        if (!fid_is_sane(fid)) {
                CERROR("%s: lookup "DFID" %s invalid fid "DFID"\n",
@@ -569,25 +574,21 @@ static int osp_md_declare_index_insert(const struct lu_env *env,
  * \param[in] rec      record of the index to be inserted
  * \param[in] key      key of the index to be inserted
  * \param[in] th       the transaction handle
- * \param[in] ignore_quota quota enforcement for insert
  *
  * \retval             0 if packing index insert succeeds.
  * \retval             negative errno if packing fails.
  */
-static int osp_md_index_insert(const struct lu_env *env,
-                              struct dt_object *dt,
+static int osp_md_index_insert(const struct lu_env *env, struct dt_object *dt,
                               const struct dt_rec *rec,
-                              const struct dt_key *key,
-                              struct thandle *th,
-                              int ignore_quota)
+                              const struct dt_key *key, struct thandle *th)
 {
        struct osp_update_request *update;
-       int                      rc;
+       int rc;
 
        update = thandle_to_osp_update_request(th);
        LASSERT(update != NULL);
 
-       rc = osp_update_rpc_pack(env, index_insert, update, OUT_INDEX_INSERT,
+       rc = OSP_UPDATE_RPC_PACK(env, out_index_insert_pack, update,
                                 lu_object_fid(&dt->do_lu), rec, key);
        return rc;
 }
@@ -639,7 +640,7 @@ static int osp_md_index_delete(const struct lu_env *env,
        update = thandle_to_osp_update_request(th);
        LASSERT(update != NULL);
 
-       rc = osp_update_rpc_pack(env, index_delete, update, OUT_INDEX_DELETE,
+       rc = OSP_UPDATE_RPC_PACK(env, out_index_delete_pack, update,
                                 lu_object_fid(&dt->do_lu), key);
 
        return rc;
@@ -818,6 +819,95 @@ const struct dt_index_operations osp_md_index_ops = {
 };
 
 /**
+ * Implement OSP layer dt_object_operations::do_xattr_list() interface.
+ *
+ * List extended attribute from the specified MDT/OST object, result is not
+ * cached because this is called by directory migration only.
+ *
+ * \param[in] env      pointer to the thread context
+ * \param[in] dt       pointer to the OSP layer dt_object
+ * \param[out] buf     pointer to the lu_buf to hold the extended attribute
+ *
+ * \retval             positive bytes used/required in the buffer
+ * \retval             negative error number on failure
+ */
+static int osp_md_xattr_list(const struct lu_env *env, struct dt_object *dt,
+                            const struct lu_buf *buf)
+{
+       struct osp_device *osp = lu2osp_dev(dt->do_lu.lo_dev);
+       struct osp_object *obj = dt2osp_obj(dt);
+       struct dt_device *dev = &osp->opd_dt_dev;
+       struct lu_buf *rbuf = &osp_env_info(env)->osi_lb2;
+       struct osp_update_request *update = NULL;
+       struct ptlrpc_request *req = NULL;
+       struct object_update_reply *reply;
+       const char *dname  = dt->do_lu.lo_dev->ld_obd->obd_name;
+       int rc = 0;
+
+       ENTRY;
+
+       LASSERT(buf);
+
+       if (unlikely(obj->opo_non_exist))
+               RETURN(-ENOENT);
+
+       update = osp_update_request_create(dev);
+       if (IS_ERR(update))
+               RETURN(PTR_ERR(update));
+
+       rc = OSP_UPDATE_RPC_PACK(env, out_xattr_list_pack, update,
+                                lu_object_fid(&dt->do_lu), buf->lb_len);
+       if (rc) {
+               CERROR("%s: Insert update error "DFID": rc = %d\n",
+                      dname, PFID(lu_object_fid(&dt->do_lu)), rc);
+               GOTO(out, rc);
+       }
+
+       rc = osp_remote_sync(env, osp, update, &req);
+       if (rc < 0) {
+               if (rc == -ENOENT) {
+                       dt->do_lu.lo_header->loh_attr &= ~LOHA_EXISTS;
+                       obj->opo_non_exist = 1;
+               }
+               GOTO(out, rc);
+       }
+
+       reply = req_capsule_server_sized_get(&req->rq_pill,
+                                            &RMF_OUT_UPDATE_REPLY,
+                                            OUT_UPDATE_REPLY_SIZE);
+       if (reply->ourp_magic != UPDATE_REPLY_MAGIC) {
+               DEBUG_REQ(D_ERROR, req,
+                         "%s: Wrong version %x expected %x "DFID": rc = %d",
+                         dname, reply->ourp_magic, UPDATE_REPLY_MAGIC,
+                         PFID(lu_object_fid(&dt->do_lu)), -EPROTO);
+
+               GOTO(out, rc = -EPROTO);
+       }
+
+       rc = object_update_result_data_get(reply, rbuf, 0);
+       if (rc < 0)
+               GOTO(out, rc);
+
+       if (!buf->lb_buf)
+               GOTO(out, rc);
+
+       if (unlikely(buf->lb_len < rbuf->lb_len))
+               GOTO(out, rc = -ERANGE);
+
+       memcpy(buf->lb_buf, rbuf->lb_buf, rbuf->lb_len);
+       EXIT;
+
+out:
+       if (req)
+               ptlrpc_req_finished(req);
+
+       if (update && !IS_ERR(update))
+               osp_update_request_destroy(env, update);
+
+       return rc;
+}
+
+/**
  * Implementation of dt_object_operations::do_index_try
  *
  * Try to initialize the index API pointer for the given object. This
@@ -872,8 +962,6 @@ static int osp_md_object_lock(const struct lu_env *env,
        res_id = einfo->ei_res_id;
        LASSERT(res_id != NULL);
 
-       if (einfo->ei_nonblock)
-               flags |= LDLM_FL_BLOCK_NOWAIT;
        if (einfo->ei_mode & (LCK_EX | LCK_PW))
                flags |= LDLM_FL_COS_INCOMPAT;
 
@@ -935,6 +1023,15 @@ int osp_md_declare_destroy(const struct lu_env *env, struct dt_object *dt,
        return osp_trans_update_request_create(th);
 }
 
+static int osp_destroy_interpreter(const struct lu_env *env,
+                                  struct object_update_reply *reply,
+                                  struct ptlrpc_request *req,
+                                  struct osp_object *obj,
+                                  void *data, int index, int rc)
+{
+       return 0;
+}
+
 /**
  * Implement OSP layer dt_object_operations::do_destroy() interface.
  *
@@ -953,23 +1050,30 @@ int osp_md_declare_destroy(const struct lu_env *env, struct dt_object *dt,
 int osp_md_destroy(const struct lu_env *env, struct dt_object *dt,
                   struct thandle *th)
 {
-       struct osp_object               *o = dt2osp_obj(dt);
-       struct osp_device               *osp = lu2osp_dev(dt->do_lu.lo_dev);
-       struct osp_update_request       *update;
-       int                             rc = 0;
-
+       struct osp_object *o = dt2osp_obj(dt);
+       struct osp_device *osp = lu2osp_dev(dt->do_lu.lo_dev);
+       struct osp_update_request *update;
+       int rc = 0;
        ENTRY;
+
        o->opo_non_exist = 1;
+       o->opo_destroyed = 1;
 
        LASSERT(osp->opd_connect_mdt);
        update = thandle_to_osp_update_request(th);
        LASSERT(update != NULL);
 
-       rc = osp_update_rpc_pack(env, destroy, update, OUT_DESTROY,
+       rc = OSP_UPDATE_RPC_PACK(env, out_destroy_pack, update,
                                 lu_object_fid(&dt->do_lu));
        if (rc != 0)
                RETURN(rc);
 
+       /* retain the object and it's status until it's destroyed on remote */
+       rc = osp_insert_update_callback(env, update, o, NULL,
+                                       osp_destroy_interpreter);
+       if (rc != 0)
+               RETURN(rc);
+
        set_bit(LU_OBJECT_HEARD_BANSHEE, &dt->do_lu.lo_header->loh_flags);
        rc = osp_insert_update_callback(env, update, dt2osp_obj(dt), NULL,
                                        NULL);
@@ -977,7 +1081,7 @@ int osp_md_destroy(const struct lu_env *env, struct dt_object *dt,
        RETURN(rc);
 }
 
-struct dt_object_operations osp_md_obj_ops = {
+const struct dt_object_operations osp_md_obj_ops = {
        .do_read_lock         = osp_md_read_lock,
        .do_write_lock        = osp_md_write_lock,
        .do_read_unlock       = osp_md_read_unlock,
@@ -996,6 +1100,7 @@ struct dt_object_operations osp_md_obj_ops = {
        .do_declare_attr_set  = osp_md_declare_attr_set,
        .do_attr_set          = osp_md_attr_set,
        .do_xattr_get         = osp_xattr_get,
+       .do_xattr_list        = osp_md_xattr_list,
        .do_declare_xattr_set = osp_declare_xattr_set,
        .do_xattr_set         = osp_xattr_set,
        .do_declare_xattr_del = osp_declare_xattr_del,
@@ -1004,6 +1109,7 @@ struct dt_object_operations osp_md_obj_ops = {
        .do_object_lock       = osp_md_object_lock,
        .do_object_unlock     = osp_md_object_unlock,
        .do_invalidate        = osp_invalidate,
+       .do_check_stale       = osp_check_stale,
 };
 
 /**
@@ -1029,6 +1135,9 @@ static ssize_t osp_md_declare_write(const struct lu_env *env,
        struct osp_device *osp = dt2osp_dev(th->th_dev);
        int rc;
 
+       if (dt2osp_obj(dt)->opo_destroyed)
+               return -ENOENT;
+
        rc = osp_trans_update_request_create(th);
        if (rc != 0)
                return rc;
@@ -1042,6 +1151,24 @@ static ssize_t osp_md_declare_write(const struct lu_env *env,
        return 0;
 }
 
+static int osp_write_interpreter(const struct lu_env *env,
+                                 struct object_update_reply *reply,
+                                 struct ptlrpc_request *req,
+                                 struct osp_object *obj,
+                                 void *data, int index, int rc)
+{
+       if (rc) {
+               CDEBUG(D_HA, "error "DFID": rc = %d\n",
+                      PFID(lu_object_fid(&obj->opo_obj.do_lu)), rc);
+               OBD_RACE(OBD_FAIL_OUT_OBJECT_MISS);
+               spin_lock(&obj->opo_lock);
+               obj->opo_attr.la_valid = 0;
+               obj->opo_stale = 1;
+               spin_unlock(&obj->opo_lock);
+       }
+       return 0;
+}
+
 /**
  * Implementation of dt_body_operations::dbo_write
  *
@@ -1053,14 +1180,13 @@ static ssize_t osp_md_declare_write(const struct lu_env *env,
  * \param[in] buf      buffer to write which includes an embedded size field
  * \param[in] pos      offet in the object to start writing at
  * \param[in] th       transaction handle
- * \param[in] ignore_quota quota enforcement for this write
  *
  * \retval             the buffer size in bytes if packing succeeds.
  * \retval             negative errno if packing fails.
  */
 static ssize_t osp_md_write(const struct lu_env *env, struct dt_object *dt,
                            const struct lu_buf *buf, loff_t *pos,
-                           struct thandle *th, int ignore_quota)
+                           struct thandle *th)
 {
        struct osp_object         *obj = dt2osp_obj(dt);
        struct osp_update_request  *update;
@@ -1068,13 +1194,16 @@ static ssize_t osp_md_write(const struct lu_env *env, struct dt_object *dt,
        ssize_t                   rc;
        ENTRY;
 
+       if (obj->opo_destroyed)
+               RETURN(-ENOENT);
+
        update = thandle_to_osp_update_request(th);
        LASSERT(update != NULL);
 
        CDEBUG(D_INFO, "write "DFID" offset = %llu length = %zu\n",
               PFID(lu_object_fid(&dt->do_lu)), *pos, buf->lb_len);
 
-       rc = osp_update_rpc_pack(env, write, update, OUT_WRITE,
+       rc = OSP_UPDATE_RPC_PACK(env, out_write_pack, update,
                                 lu_object_fid(&dt->do_lu), buf, *pos);
        if (rc < 0)
                RETURN(rc);
@@ -1083,6 +1212,12 @@ static ssize_t osp_md_write(const struct lu_env *env, struct dt_object *dt,
        if (rc < 0)
                RETURN(rc);
 
+       /* to be able to invalidate object's state in case of an error */
+       rc = osp_insert_update_callback(env, update, obj, NULL,
+                       osp_write_interpreter);
+       if (rc < 0)
+               RETURN(rc);
+
        /* XXX: how about the write error happened later? */
        *pos += buf->lb_len;
 
@@ -1123,12 +1258,13 @@ static ssize_t osp_md_read(const struct lu_env *env, struct dt_object *dt,
        struct out_read_reply *orr;
        struct ptlrpc_bulk_desc *desc;
        struct object_update_reply *reply;
-       __u32 left_size;
-       int nbufs;
-       int i;
+       int pages;
        int rc;
        ENTRY;
 
+       if (dt2osp_obj(dt)->opo_destroyed)
+               RETURN(-ENOENT);
+
        /* Because it needs send the update buffer right away,
         * just create an update buffer, instead of attaching the
         * update_remote list of the thandle.  */
@@ -1136,7 +1272,7 @@ static ssize_t osp_md_read(const struct lu_env *env, struct dt_object *dt,
        if (IS_ERR(update))
                RETURN(PTR_ERR(update));
 
-       rc = osp_update_rpc_pack(env, read, update, OUT_READ,
+       rc = OSP_UPDATE_RPC_PACK(env, out_read_pack, update,
                                 lu_object_fid(&dt->do_lu),
                                 rbuf->lb_len, *pos);
        if (rc != 0) {
@@ -1153,26 +1289,18 @@ static ssize_t osp_md_read(const struct lu_env *env, struct dt_object *dt,
        if (rc != 0)
                GOTO(out_update, rc);
 
-       nbufs = (rbuf->lb_len + OUT_BULK_BUFFER_SIZE - 1) /
-                                       OUT_BULK_BUFFER_SIZE;
+       /* First *and* last might be partial pages, hence +1 */
+       pages = DIV_ROUND_UP(rbuf->lb_len, PAGE_SIZE) + 1;
+
        /* allocate bulk descriptor */
-       desc = ptlrpc_prep_bulk_imp(req, nbufs, 1,
-                                   PTLRPC_BULK_PUT_SINK | PTLRPC_BULK_BUF_KVEC,
-                                   MDS_BULK_PORTAL, &ptlrpc_bulk_kvec_ops);
+       desc = ptlrpc_prep_bulk_imp(req, pages, 1,
+                                   PTLRPC_BULK_PUT_SINK,
+                                   MDS_BULK_PORTAL,
+                                   &ptlrpc_bulk_kiov_nopin_ops);
        if (desc == NULL)
                GOTO(out, rc = -ENOMEM);
 
-       /* split the buffer into small chunk size */
-       left_size = rbuf->lb_len;
-       for (i = 0; i < nbufs; i++) {
-               int read_size;
-
-               read_size = left_size > OUT_BULK_BUFFER_SIZE ?
-                               OUT_BULK_BUFFER_SIZE : left_size;
-               desc->bd_frag_ops->add_iov_frag(desc, ptr, read_size);
-
-               ptr += read_size;
-       }
+       desc->bd_frag_ops->add_iov_frag(desc, ptr, rbuf->lb_len);
 
        osp_set_req_replay(osp, req);
        req->rq_bulk_read = 1;
@@ -1218,7 +1346,7 @@ out_update:
 }
 
 /* These body operation will be used to write symlinks during migration etc */
-struct dt_body_operations osp_md_body_ops = {
+const struct dt_body_operations osp_md_body_ops = {
        .dbo_declare_write      = osp_md_declare_write,
        .dbo_write              = osp_md_write,
        .dbo_read               = osp_md_read,