lustre/mdd/mdd_dir.c

   1 /*
   2  * GPL HEADER START
   3  *
   4  * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
   5  *
   6  * This program is free software; you can redistribute it and/or modify
   7  * it under the terms of the GNU General Public License version 2 only,
   8  * as published by the Free Software Foundation.
   9  *
  10  * This program is distributed in the hope that it will be useful, but
  11  * WITHOUT ANY WARRANTY; without even the implied warranty of
  12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13  * General Public License version 2 for more details (a copy is included
  14  * in the LICENSE file that accompanied this code).
  15  *
  16  * You should have received a copy of the GNU General Public License
  17  * version 2 along with this program; If not, see
  18  * http://www.sun.com/software/products/lustre/docs/GPLv2.pdf
  19  *
  20  * Please contact Sun Microsystems, Inc., 4150 Network Circle, Santa Clara,
  21  * CA 95054 USA or visit www.sun.com if you need additional information or
  22  * have any questions.
  23  *
  24  * GPL HEADER END
  25  */
  26 /*
  27  * Copyright (c) 2007, 2010, Oracle and/or its affiliates. All rights reserved.
  28  * Use is subject to license terms.
  29  *
  30  * Copyright (c) 2011, 2013, Intel Corporation.
  31  */
  32 /*
  33  * This file is part of Lustre, http://www.lustre.org/
  34  * Lustre is a trademark of Sun Microsystems, Inc.
  35  *
  36  * lustre/mdd/mdd_dir.c
  37  *
  38  * Lustre Metadata Server (mdd) routines
  39  *
  40  * Author: Wang Di <wangdi@intel.com>
  41  */
  42
  43 #define DEBUG_SUBSYSTEM S_MDS
  44
  45 #include <obd_class.h>
  46 #include <obd_support.h>
  47 #include <lustre_mds.h>
  48 #include <lustre_fid.h>
  49
  50 #include "mdd_internal.h"
  51
  52 static const char dot[] = ".";
  53 static const char dotdot[] = "..";
  54
  55 static struct lu_name lname_dotdot = {
  56         (char *) dotdot,
  57         sizeof(dotdot) - 1
  58 };
  59
  60 static inline int
  61 mdd_name_check(struct mdd_device *m, const struct lu_name *ln)
  62 {
  63         if (!lu_name_is_valid(ln))
  64                 return -EINVAL;
  65         else if (ln->ln_namelen > m->mdd_dt_conf.ddp_max_name_len)
  66                 return -ENAMETOOLONG;
  67         else
  68                 return 0;
  69 }
  70
  71 /* Get FID from name and parent */
  72 static int
  73 __mdd_lookup(const struct lu_env *env, struct md_object *pobj,
  74              const struct lu_attr *pattr, const struct lu_name *lname,
  75              struct lu_fid* fid, int mask)
  76 {
  77         const char *name                = lname->ln_name;
  78         const struct dt_key *key        = (const struct dt_key *)name;
  79         struct mdd_object *mdd_obj      = md2mdd_obj(pobj);
  80         struct mdd_device *m            = mdo2mdd(pobj);
  81         struct dt_object *dir           = mdd_object_child(mdd_obj);
  82         int rc;
  83         ENTRY;
  84
  85         if (unlikely(mdd_is_dead_obj(mdd_obj)))
  86                 RETURN(-ESTALE);
  87
  88         if (mdd_object_remote(mdd_obj)) {
  89                 CDEBUG(D_INFO, "%s: Object "DFID" locates on remote server\n",
  90                        mdd2obd_dev(m)->obd_name, PFID(mdo2fid(mdd_obj)));
  91         } else if (!mdd_object_exists(mdd_obj)) {
  92                 RETURN(-ESTALE);
  93         }
  94
  95         rc = mdd_permission_internal_locked(env, mdd_obj, pattr, mask,
  96                                             MOR_TGT_PARENT);
  97         if (rc)
  98                 RETURN(rc);
  99
 100         if (likely(S_ISDIR(mdd_object_type(mdd_obj)) &&
 101                    dt_try_as_dir(env, dir)))
 102                 rc = dt_lookup(env, dir, (struct dt_rec *)fid, key,
 103                                mdd_object_capa(env, mdd_obj));
 104         else
 105                 rc = -ENOTDIR;
 106
 107         RETURN(rc);
 108 }
 109
 110 int mdd_lookup(const struct lu_env *env,
 111                struct md_object *pobj, const struct lu_name *lname,
 112                struct lu_fid *fid, struct md_op_spec *spec)
 113 {
 114         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
 115         int rc;
 116         ENTRY;
 117
 118         rc = mdd_la_get(env, md2mdd_obj(pobj), pattr, BYPASS_CAPA);
 119         if (rc != 0)
 120                 RETURN(rc);
 121
 122         rc = __mdd_lookup(env, pobj, pattr, lname, fid, MAY_EXEC);
 123         RETURN(rc);
 124 }
 125
 126 static inline int mdd_parent_fid(const struct lu_env *env,
 127                                  struct mdd_object *obj,
 128                                  const struct lu_attr *attr,
 129                                  struct lu_fid *fid)
 130 {
 131         return __mdd_lookup(env, &obj->mod_obj, attr, &lname_dotdot, fid, 0);
 132 }
 133
 134 /*
 135  * For root fid use special function, which does not compare version component
 136  * of fid. Version component is different for root fids on all MDTs.
 137  */
 138 int mdd_is_root(struct mdd_device *mdd, const struct lu_fid *fid)
 139 {
 140         return fid_seq(&mdd->mdd_root_fid) == fid_seq(fid) &&
 141                 fid_oid(&mdd->mdd_root_fid) == fid_oid(fid);
 142 }
 143
 144 /*
 145  * return 1: if lf is the fid of the ancestor of p1;
 146  * return 0: if not;
 147  *
 148  * return -EREMOTE: if remote object is found, in this
 149  * case fid of remote object is saved to @pf;
 150  *
 151  * otherwise: values < 0, errors.
 152  */
 153 static int mdd_is_parent(const struct lu_env *env,
 154                         struct mdd_device *mdd,
 155                         struct mdd_object *p1,
 156                         const struct lu_attr *attr,
 157                         const struct lu_fid *lf,
 158                         struct lu_fid *pf)
 159 {
 160         struct mdd_object *parent = NULL;
 161         struct lu_fid *pfid;
 162         int rc;
 163         ENTRY;
 164
 165         LASSERT(!lu_fid_eq(mdo2fid(p1), lf));
 166         pfid = &mdd_env_info(env)->mti_fid;
 167
 168         /* Check for root first. */
 169         if (mdd_is_root(mdd, mdo2fid(p1)))
 170                 RETURN(0);
 171
 172         for(;;) {
 173                 /* this is done recursively, bypass capa for each obj */
 174                 mdd_set_capainfo(env, 4, p1, BYPASS_CAPA);
 175                 rc = mdd_parent_fid(env, p1, attr, pfid);
 176                 if (rc)
 177                         GOTO(out, rc);
 178                 if (mdd_is_root(mdd, pfid))
 179                         GOTO(out, rc = 0);
 180                 if (lu_fid_eq(pfid, &mdd->mdd_local_root_fid))
 181                         GOTO(out, rc = 0);
 182                 if (lu_fid_eq(pfid, lf))
 183                         GOTO(out, rc = 1);
 184                 if (parent)
 185                         mdd_object_put(env, parent);
 186
 187                 parent = mdd_object_find(env, mdd, pfid);
 188                 if (IS_ERR(parent)) {
 189                         GOTO(out, rc = PTR_ERR(parent));
 190                 } else if (mdd_object_remote(parent)) {
 191                         /*FIXME: Because of the restriction of rename in Phase I.
 192                          * If the parent is remote, we just assumed lf is not the
 193                          * parent of P1 for now */
 194                         GOTO(out, rc = 0);
 195                 }
 196                 p1 = parent;
 197         }
 198         EXIT;
 199 out:
 200         if (parent && !IS_ERR(parent))
 201                 mdd_object_put(env, parent);
 202         return rc;
 203 }
 204
 205 /*
 206  * No permission check is needed.
 207  *
 208  * returns 1: if fid is ancestor of @mo;
 209  * returns 0: if fid is not a ancestor of @mo;
 210  *
 211  * returns EREMOTE if remote object is found, fid of remote object is saved to
 212  * @fid;
 213  *
 214  * returns < 0: if error
 215  */
 216 int mdd_is_subdir(const struct lu_env *env, struct md_object *mo,
 217                   const struct lu_fid *fid, struct lu_fid *sfid)
 218 {
 219         struct mdd_device *mdd = mdo2mdd(mo);
 220         struct lu_attr *attr = MDD_ENV_VAR(env, cattr);
 221         int rc;
 222         ENTRY;
 223
 224         if (!S_ISDIR(mdd_object_type(md2mdd_obj(mo))))
 225                 RETURN(0);
 226
 227         rc = mdd_la_get(env, md2mdd_obj(mo), attr, BYPASS_CAPA);
 228         if (rc != 0)
 229                 RETURN(rc);
 230
 231         rc = mdd_is_parent(env, mdd, md2mdd_obj(mo), attr, fid, sfid);
 232         if (rc == 0) {
 233                 /* found root */
 234                 fid_zero(sfid);
 235         } else if (rc == 1) {
 236                 /* found @fid is parent */
 237                 *sfid = *fid;
 238                 rc = 0;
 239         }
 240         RETURN(rc);
 241 }
 242
 243 /*
 244  * Check that @dir contains no entries except (possibly) dot and dotdot.
 245  *
 246  * Returns:
 247  *
 248  *             0        empty
 249  *      -ENOTDIR        not a directory object
 250  *    -ENOTEMPTY        not empty
 251  *           -ve        other error
 252  *
 253  */
 254 static int mdd_dir_is_empty(const struct lu_env *env,
 255                             struct mdd_object *dir)
 256 {
 257         struct dt_it     *it;
 258         struct dt_object *obj;
 259         const struct dt_it_ops *iops;
 260         int result;
 261         ENTRY;
 262
 263         obj = mdd_object_child(dir);
 264         if (!dt_try_as_dir(env, obj))
 265                 RETURN(-ENOTDIR);
 266
 267         iops = &obj->do_index_ops->dio_it;
 268         it = iops->init(env, obj, LUDA_64BITHASH, BYPASS_CAPA);
 269         if (!IS_ERR(it)) {
 270                 result = iops->get(env, it, (const struct dt_key *)"");
 271                 if (result > 0) {
 272                         int i;
 273                         for (result = 0, i = 0; result == 0 && i < 3; ++i)
 274                                 result = iops->next(env, it);
 275                         if (result == 0)
 276                                 result = -ENOTEMPTY;
 277                         else if (result == 1)
 278                                 result = 0;
 279                 } else if (result == 0)
 280                         /*
 281                          * Huh? Index contains no zero key?
 282                          */
 283                         result = -EIO;
 284
 285                 iops->put(env, it);
 286                 iops->fini(env, it);
 287         } else
 288                 result = PTR_ERR(it);
 289         RETURN(result);
 290 }
 291
 292 /**
 293  * Determine if the target object can be hard linked, and right now it only
 294  * checks if the link count reach the maximum limit. Note: for ldiskfs, the
 295  * directory nlink count might exceed the maximum link count(see
 296  * osd_object_ref_add), so it only check nlink for non-directories.
 297  *
 298  * \param[in] env       thread environment
 299  * \param[in] obj       object being linked to
 300  * \param[in] la        attributes of \a obj
 301  *
 302  * \retval              0 if \a obj can be hard linked
 303  * \retval              negative error if \a obj is a directory or has too
 304  *                      many links
 305  */
 306 static int __mdd_may_link(const struct lu_env *env, struct mdd_object *obj,
 307                           const struct lu_attr *la)
 308 {
 309         struct mdd_device *m = mdd_obj2mdd_dev(obj);
 310         ENTRY;
 311
 312         LASSERT(la != NULL);
 313
 314         /* Subdir count limitation can be broken through
 315          * (see osd_object_ref_add), so only check non-directory here. */
 316         if (!S_ISDIR(la->la_mode) &&
 317             la->la_nlink >= m->mdd_dt_conf.ddp_max_nlink)
 318                 RETURN(-EMLINK);
 319
 320         RETURN(0);
 321 }
 322
 323 /**
 324  * Check whether it may create the cobj under the pobj.
 325  *
 326  * \param[in] env       execution environment
 327  * \param[in] pobj      the parent directory
 328  * \param[in] pattr     the attribute of the parent directory
 329  * \param[in] cobj      the child to be created
 330  * \param[in] check_perm        if check WRITE|EXEC permission for parent
 331  *
 332  * \retval              = 0 create the child under this dir is allowed
 333  * \retval              negative errno create the child under this dir is
 334  *                      not allowed
 335  */
 336 int mdd_may_create(const struct lu_env *env, struct mdd_object *pobj,
 337                    const struct lu_attr *pattr, struct mdd_object *cobj,
 338                    bool check_perm)
 339 {
 340         struct mdd_thread_info *info = mdd_env_info(env);
 341         struct lu_buf   *xbuf;
 342         int rc = 0;
 343         ENTRY;
 344
 345         if (cobj && mdd_object_exists(cobj))
 346                 RETURN(-EEXIST);
 347
 348         if (mdd_is_dead_obj(pobj))
 349                 RETURN(-ENOENT);
 350
 351         /* If the parent is a sub-stripe, check whether it is dead */
 352         xbuf = mdd_buf_get(env, info->mti_key, sizeof(info->mti_key));
 353         rc = mdo_xattr_get(env, pobj, xbuf, XATTR_NAME_LMV,
 354                            mdd_object_capa(env, pobj));
 355         if (unlikely(rc > 0)) {
 356                 struct lmv_mds_md_v1  *lmv1 = xbuf->lb_buf;
 357
 358                 if (le32_to_cpu(lmv1->lmv_magic) == LMV_MAGIC_STRIPE &&
 359                     le32_to_cpu(lmv1->lmv_hash_type) & LMV_HASH_FLAG_DEAD)
 360                         RETURN(-ESTALE);
 361         }
 362         rc = 0;
 363
 364         if (check_perm)
 365                 rc = mdd_permission_internal_locked(env, pobj, pattr,
 366                                                     MAY_WRITE | MAY_EXEC,
 367                                                     MOR_TGT_PARENT);
 368         RETURN(rc);
 369 }
 370
 371 /*
 372  * Check whether can unlink from the pobj in the case of "cobj == NULL".
 373  */
 374 int mdd_may_unlink(const struct lu_env *env, struct mdd_object *pobj,
 375                    const struct lu_attr *pattr, const struct lu_attr *attr)
 376 {
 377         int rc;
 378         ENTRY;
 379
 380         if (mdd_is_dead_obj(pobj))
 381                 RETURN(-ENOENT);
 382
 383         if ((attr->la_valid & LA_FLAGS) &&
 384             (attr->la_flags & (LUSTRE_APPEND_FL | LUSTRE_IMMUTABLE_FL)))
 385                 RETURN(-EPERM);
 386
 387         rc = mdd_permission_internal_locked(env, pobj, pattr,
 388                                             MAY_WRITE | MAY_EXEC,
 389                                             MOR_TGT_PARENT);
 390         if (rc)
 391                 RETURN(rc);
 392
 393         if (mdd_is_append(pobj))
 394                 RETURN(-EPERM);
 395
 396         RETURN(rc);
 397 }
 398
 399 /*
 400  * pobj == NULL is remote ops case, under such case, pobj's
 401  * VTX feature has been checked already, no need check again.
 402  */
 403 static inline int mdd_is_sticky(const struct lu_env *env,
 404                                 struct mdd_object *pobj,
 405                                 const struct lu_attr *pattr,
 406                                 struct mdd_object *cobj,
 407                                 const struct lu_attr *cattr)
 408 {
 409         struct lu_ucred *uc = lu_ucred_assert(env);
 410
 411         if (pobj != NULL) {
 412                 LASSERT(pattr != NULL);
 413                 if (!(pattr->la_mode & S_ISVTX) ||
 414                     (pattr->la_uid == uc->uc_fsuid))
 415                         return 0;
 416         }
 417
 418         LASSERT(cattr != NULL);
 419         if (cattr->la_uid == uc->uc_fsuid)
 420                 return 0;
 421
 422         return !md_capable(uc, CFS_CAP_FOWNER);
 423 }
 424
 425 static int mdd_may_delete_entry(const struct lu_env *env,
 426                                 struct mdd_object *pobj,
 427                                 const struct lu_attr *pattr,
 428                                 int check_perm)
 429 {
 430         ENTRY;
 431
 432         LASSERT(pobj != NULL);
 433         if (!mdd_object_exists(pobj))
 434                 RETURN(-ENOENT);
 435
 436         if (mdd_is_dead_obj(pobj))
 437                 RETURN(-ENOENT);
 438
 439         if (check_perm) {
 440                 int rc;
 441                 rc = mdd_permission_internal_locked(env, pobj, pattr,
 442                                             MAY_WRITE | MAY_EXEC,
 443                                             MOR_TGT_PARENT);
 444                 if (rc)
 445                         RETURN(rc);
 446         }
 447
 448         if (mdd_is_append(pobj))
 449                 RETURN(-EPERM);
 450
 451         RETURN(0);
 452 }
 453
 454 /*
 455  * Check whether it may delete the cobj from the pobj.
 456  * pobj maybe NULL
 457  */
 458 int mdd_may_delete(const struct lu_env *env, struct mdd_object *tpobj,
 459                    const struct lu_attr *tpattr, struct mdd_object *tobj,
 460                    const struct lu_attr *tattr, const struct lu_attr *cattr,
 461                    int check_perm, int check_empty)
 462 {
 463         int rc = 0;
 464         ENTRY;
 465
 466         if (tpobj) {
 467                 LASSERT(tpattr != NULL);
 468                 rc = mdd_may_delete_entry(env, tpobj, tpattr, check_perm);
 469                 if (rc != 0)
 470                         RETURN(rc);
 471         }
 472
 473         if (tobj == NULL)
 474                 RETURN(0);
 475
 476         if (!mdd_object_exists(tobj))
 477                 RETURN(-ENOENT);
 478
 479         if (mdd_is_dead_obj(tobj))
 480                 RETURN(-ESTALE);
 481
 482         if (mdd_is_sticky(env, tpobj, tpattr, tobj, tattr))
 483                 RETURN(-EPERM);
 484
 485         if (mdd_is_immutable(tobj) || mdd_is_append(tobj))
 486                 RETURN(-EPERM);
 487
 488         if ((tattr->la_valid & LA_FLAGS) &&
 489             (tattr->la_flags & (LUSTRE_APPEND_FL | LUSTRE_IMMUTABLE_FL)))
 490                 RETURN(-EPERM);
 491
 492         /* additional check the rename case */
 493         if (cattr) {
 494                 if (S_ISDIR(cattr->la_mode)) {
 495                         struct mdd_device *mdd = mdo2mdd(&tobj->mod_obj);
 496
 497                         if (!S_ISDIR(tattr->la_mode))
 498                                 RETURN(-ENOTDIR);
 499
 500                         if (lu_fid_eq(mdo2fid(tobj), &mdd->mdd_root_fid))
 501                                 RETURN(-EBUSY);
 502                 } else if (S_ISDIR(tattr->la_mode))
 503                         RETURN(-EISDIR);
 504         }
 505
 506         if (S_ISDIR(tattr->la_mode) && check_empty)
 507                 rc = mdd_dir_is_empty(env, tobj);
 508
 509         RETURN(rc);
 510 }
 511
 512 /**
 513  * Check whether it can create the link file(linked to @src_obj) under
 514  * the target directory(@tgt_obj), and src_obj has been locked by
 515  * mdd_write_lock.
 516  *
 517  * \param[in] env       execution environment
 518  * \param[in] tgt_obj   the target directory
 519  * \param[in] tattr     attributes of target directory
 520  * \param[in] lname     the link name
 521  * \param[in] src_obj   source object for link
 522  * \param[in] cattr     attributes for source object
 523  *
 524  * \retval              = 0 it is allowed to create the link file under tgt_obj
 525  * \retval              negative error not allowed to create the link file
 526  */
 527 static int mdd_link_sanity_check(const struct lu_env *env,
 528                                  struct mdd_object *tgt_obj,
 529                                  const struct lu_attr *tattr,
 530                                  const struct lu_name *lname,
 531                                  struct mdd_object *src_obj,
 532                                  const struct lu_attr *cattr)
 533 {
 534         struct mdd_device *m = mdd_obj2mdd_dev(src_obj);
 535         int rc = 0;
 536         ENTRY;
 537
 538         if (!mdd_object_exists(src_obj))
 539                 RETURN(-ENOENT);
 540
 541         if (mdd_is_dead_obj(src_obj))
 542                 RETURN(-ESTALE);
 543
 544         /* Local ops, no lookup before link, check filename length here. */
 545         rc = mdd_name_check(m, lname);
 546         if (rc < 0)
 547                 RETURN(rc);
 548
 549         if (mdd_is_immutable(src_obj) || mdd_is_append(src_obj))
 550                 RETURN(-EPERM);
 551
 552         if (S_ISDIR(mdd_object_type(src_obj)))
 553                 RETURN(-EPERM);
 554
 555         LASSERT(src_obj != tgt_obj);
 556         rc = mdd_may_create(env, tgt_obj, tattr, NULL, true);
 557         if (rc != 0)
 558                 RETURN(rc);
 559
 560         rc = __mdd_may_link(env, src_obj, cattr);
 561
 562         RETURN(rc);
 563 }
 564
 565 static int __mdd_index_delete_only(const struct lu_env *env, struct mdd_object *pobj,
 566                                    const char *name, struct thandle *handle,
 567                                    struct lustre_capa *capa)
 568 {
 569         struct dt_object *next = mdd_object_child(pobj);
 570         int rc;
 571         ENTRY;
 572
 573         if (dt_try_as_dir(env, next))
 574                 rc = dt_delete(env, next, (struct dt_key *)name, handle, capa);
 575         else
 576                 rc = -ENOTDIR;
 577
 578         RETURN(rc);
 579 }
 580
 581 static int __mdd_index_insert_only(const struct lu_env *env,
 582                                    struct mdd_object *pobj,
 583                                    const struct lu_fid *lf, __u32 type,
 584                                    const char *name,
 585                                    struct thandle *handle,
 586                                    struct lustre_capa *capa)
 587 {
 588         struct dt_object *next = mdd_object_child(pobj);
 589         int               rc;
 590         ENTRY;
 591
 592         if (dt_try_as_dir(env, next)) {
 593                 struct dt_insert_rec    *rec = &mdd_env_info(env)->mti_dt_rec;
 594                 struct lu_ucred         *uc  = lu_ucred_check(env);
 595                 int                      ignore_quota;
 596
 597                 rec->rec_fid = lf;
 598                 rec->rec_type = type;
 599                 ignore_quota = uc ? uc->uc_cap & CFS_CAP_SYS_RESOURCE_MASK : 1;
 600                 rc = dt_insert(env, next, (const struct dt_rec *)rec,
 601                                (const struct dt_key *)name, handle, capa,
 602                                ignore_quota);
 603         } else {
 604                 rc = -ENOTDIR;
 605         }
 606         RETURN(rc);
 607 }
 608
 609 /* insert named index, add reference if isdir */
 610 static int __mdd_index_insert(const struct lu_env *env, struct mdd_object *pobj,
 611                               const struct lu_fid *lf, __u32 type,
 612                               const char *name, struct thandle *handle,
 613                               struct lustre_capa *capa)
 614 {
 615         int rc;
 616         ENTRY;
 617
 618         rc = __mdd_index_insert_only(env, pobj, lf, type, name, handle, capa);
 619         if (rc == 0 && S_ISDIR(type)) {
 620                 mdd_write_lock(env, pobj, MOR_TGT_PARENT);
 621                 mdo_ref_add(env, pobj, handle);
 622                 mdd_write_unlock(env, pobj);
 623         }
 624
 625         RETURN(rc);
 626 }
 627
 628 /* delete named index, drop reference if isdir */
 629 static int __mdd_index_delete(const struct lu_env *env, struct mdd_object *pobj,
 630                               const char *name, int is_dir, struct thandle *handle,
 631                               struct lustre_capa *capa)
 632 {
 633         int               rc;
 634         ENTRY;
 635
 636         rc = __mdd_index_delete_only(env, pobj, name, handle, capa);
 637         if (rc == 0 && is_dir) {
 638                 mdd_write_lock(env, pobj, MOR_TGT_PARENT);
 639                 mdo_ref_del(env, pobj, handle);
 640                 mdd_write_unlock(env, pobj);
 641         }
 642
 643         RETURN(rc);
 644 }
 645
 646 static int mdd_llog_record_calc_size(const struct lu_env *env,
 647                                      const struct lu_name *tname,
 648                                      const struct lu_name *sname)
 649 {
 650         const struct lu_ucred   *uc = lu_ucred(env);
 651         enum changelog_rec_flags crf = 0;
 652         size_t                   hdr_size = sizeof(struct llog_changelog_rec) -
 653                                             sizeof(struct changelog_rec);
 654
 655         if (sname != NULL)
 656                 crf |= CLF_RENAME;
 657
 658         if (uc != NULL && uc->uc_jobid[0] != '\0')
 659                 crf |= CLF_JOBID;
 660
 661         return llog_data_len(hdr_size + changelog_rec_offset(crf) +
 662                              (tname != NULL ? tname->ln_namelen : 0) +
 663                              (sname != NULL ? 1 + sname->ln_namelen : 0));
 664 }
 665
 666 int mdd_declare_changelog_store(const struct lu_env *env,
 667                                 struct mdd_device *mdd,
 668                                 const struct lu_name *tname,
 669                                 const struct lu_name *sname,
 670                                 struct thandle *handle)
 671 {
 672         struct obd_device               *obd = mdd2obd_dev(mdd);
 673         struct llog_ctxt                *ctxt;
 674         struct llog_changelog_rec       *rec;
 675         struct lu_buf                   *buf;
 676         int                              reclen;
 677         int                              rc;
 678
 679         /* Not recording */
 680         if (!(mdd->mdd_cl.mc_flags & CLM_ON))
 681                 return 0;
 682
 683         reclen = mdd_llog_record_calc_size(env, tname, sname);
 684         buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_big_buf, reclen);
 685         if (buf->lb_buf == NULL)
 686                 return -ENOMEM;
 687
 688         rec = buf->lb_buf;
 689         rec->cr_hdr.lrh_len = reclen;
 690         rec->cr_hdr.lrh_type = CHANGELOG_REC;
 691
 692         ctxt = llog_get_context(obd, LLOG_CHANGELOG_ORIG_CTXT);
 693         if (ctxt == NULL)
 694                 return -ENXIO;
 695
 696         rc = llog_declare_add(env, ctxt->loc_handle, &rec->cr_hdr, handle);
 697         llog_ctxt_put(ctxt);
 698
 699         return rc;
 700 }
 701
 702 /** Add a changelog entry \a rec to the changelog llog
 703  * \param mdd
 704  * \param rec
 705  * \param handle - currently ignored since llogs start their own transaction;
 706  *              this will hopefully be fixed in llog rewrite
 707  * \retval 0 ok
 708  */
 709 int mdd_changelog_store(const struct lu_env *env, struct mdd_device *mdd,
 710                         struct llog_changelog_rec *rec, struct thandle *th)
 711 {
 712         struct obd_device       *obd = mdd2obd_dev(mdd);
 713         struct llog_ctxt        *ctxt;
 714         int                      rc;
 715
 716         rec->cr_hdr.lrh_len = llog_data_len(sizeof(*rec) +
 717                                             changelog_rec_varsize(&rec->cr));
 718
 719         /* llog_lvfs_write_rec sets the llog tail len */
 720         rec->cr_hdr.lrh_type = CHANGELOG_REC;
 721         rec->cr.cr_time = cl_time();
 722
 723         spin_lock(&mdd->mdd_cl.mc_lock);
 724         /* NB: I suppose it's possible llog_add adds out of order wrt cr_index,
 725          * but as long as the MDD transactions are ordered correctly for e.g.
 726          * rename conflicts, I don't think this should matter. */
 727         rec->cr.cr_index = ++mdd->mdd_cl.mc_index;
 728         spin_unlock(&mdd->mdd_cl.mc_lock);
 729
 730         ctxt = llog_get_context(obd, LLOG_CHANGELOG_ORIG_CTXT);
 731         if (ctxt == NULL)
 732                 return -ENXIO;
 733
 734         /* nested journal transaction */
 735         rc = llog_add(env, ctxt->loc_handle, &rec->cr_hdr, NULL, th);
 736         llog_ctxt_put(ctxt);
 737         if (rc > 0)
 738                 rc = 0;
 739
 740         return rc;
 741 }
 742
 743 static void mdd_changelog_rec_ext_rename(struct changelog_rec *rec,
 744                                          const struct lu_fid *sfid,
 745                                          const struct lu_fid *spfid,
 746                                          const struct lu_name *sname)
 747 {
 748         struct changelog_ext_rename     *rnm = changelog_rec_rename(rec);
 749         size_t                           extsize = sname->ln_namelen + 1;
 750
 751         LASSERT(sfid != NULL);
 752         LASSERT(spfid != NULL);
 753         LASSERT(sname != NULL);
 754
 755         rnm->cr_sfid = *sfid;
 756         rnm->cr_spfid = *spfid;
 757
 758         changelog_rec_name(rec)[rec->cr_namelen] = '\0';
 759         strlcpy(changelog_rec_sname(rec), sname->ln_name, extsize);
 760         rec->cr_namelen += extsize;
 761 }
 762
 763 void mdd_changelog_rec_ext_jobid(struct changelog_rec *rec, const char *jobid)
 764 {
 765         struct changelog_ext_jobid      *jid = changelog_rec_jobid(rec);
 766
 767         if (jobid == NULL || jobid[0] == '\0')
 768                 return;
 769
 770         strlcpy(jid->cr_jobid, jobid, sizeof(jid->cr_jobid));
 771 }
 772
 773 /** Store a namespace change changelog record
 774  * If this fails, we must fail the whole transaction; we don't
 775  * want the change to commit without the log entry.
 776  * \param target - mdd_object of change
 777  * \param tpfid - target parent dir/object fid
 778  * \param sfid - source object fid
 779  * \param spfid - source parent fid
 780  * \param tname - target name string
 781  * \param sname - source name string
 782  * \param handle - transacion handle
 783  */
 784 int mdd_changelog_ns_store(const struct lu_env *env,
 785                            struct mdd_device *mdd,
 786                            enum changelog_rec_type type,
 787                            enum changelog_rec_flags crf,
 788                            struct mdd_object *target,
 789                            const struct lu_fid *tpfid,
 790                            const struct lu_fid *sfid,
 791                            const struct lu_fid *spfid,
 792                            const struct lu_name *tname,
 793                            const struct lu_name *sname,
 794                            struct thandle *handle)
 795 {
 796         const struct lu_ucred           *uc = lu_ucred(env);
 797         struct llog_changelog_rec       *rec;
 798         struct lu_buf                   *buf;
 799         int                              reclen;
 800         int                              rc;
 801         ENTRY;
 802
 803         /* Not recording */
 804         if (!(mdd->mdd_cl.mc_flags & CLM_ON))
 805                 RETURN(0);
 806
 807         if ((mdd->mdd_cl.mc_mask & (1 << type)) == 0)
 808                 RETURN(0);
 809
 810         LASSERT(tpfid != NULL);
 811         LASSERT(tname != NULL);
 812         LASSERT(handle != NULL);
 813
 814         reclen = mdd_llog_record_calc_size(env, tname, sname);
 815         buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_big_buf, reclen);
 816         if (buf->lb_buf == NULL)
 817                 RETURN(-ENOMEM);
 818         rec = buf->lb_buf;
 819
 820         crf = (crf & CLF_FLAGMASK);
 821
 822         if (uc->uc_jobid[0] != '\0')
 823                 crf |= CLF_JOBID;
 824
 825         if (sname != NULL)
 826                 crf |= CLF_RENAME;
 827         else
 828                 crf |= CLF_VERSION;
 829
 830         rec->cr.cr_flags = crf;
 831         rec->cr.cr_type = (__u32)type;
 832         rec->cr.cr_pfid = *tpfid;
 833         rec->cr.cr_namelen = tname->ln_namelen;
 834         memcpy(changelog_rec_name(&rec->cr), tname->ln_name, tname->ln_namelen);
 835
 836         if (crf & CLF_RENAME)
 837                 mdd_changelog_rec_ext_rename(&rec->cr, sfid, spfid, sname);
 838
 839         if (crf & CLF_JOBID)
 840                 mdd_changelog_rec_ext_jobid(&rec->cr, uc->uc_jobid);
 841
 842         if (likely(target != NULL)) {
 843                 rec->cr.cr_tfid = *mdo2fid(target);
 844                 target->mod_cltime = cfs_time_current_64();
 845         } else {
 846                 fid_zero(&rec->cr.cr_tfid);
 847         }
 848
 849         rc = mdd_changelog_store(env, mdd, rec, handle);
 850         if (rc < 0) {
 851                 CERROR("changelog failed: rc=%d, op%d %s c"DFID" p"DFID"\n",
 852                         rc, type, tname->ln_name, PFID(sfid), PFID(tpfid));
 853                 return -EFAULT;
 854         }
 855
 856         return 0;
 857 }
 858
 859 static int __mdd_links_add(const struct lu_env *env,
 860                            struct mdd_object *mdd_obj,
 861                            struct linkea_data *ldata,
 862                            const struct lu_name *lname,
 863                            const struct lu_fid *pfid,
 864                            int first, int check)
 865 {
 866         int rc;
 867
 868         if (ldata->ld_leh == NULL) {
 869                 rc = first ? -ENODATA : mdd_links_read(env, mdd_obj, ldata);
 870                 if (rc) {
 871                         if (rc != -ENODATA)
 872                                 return rc;
 873                         rc = linkea_data_new(ldata,
 874                                              &mdd_env_info(env)->mti_link_buf);
 875                         if (rc)
 876                                 return rc;
 877                 }
 878         }
 879
 880         if (check) {
 881                 rc = linkea_links_find(ldata, lname, pfid);
 882                 if (rc && rc != -ENOENT)
 883                         return rc;
 884                 if (rc == 0)
 885                         return -EEXIST;
 886         }
 887
 888         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_LINKEA_MORE)) {
 889                 struct lu_fid *tfid = &mdd_env_info(env)->mti_fid2;
 890
 891                 *tfid = *pfid;
 892                 tfid->f_ver = ~0;
 893                 linkea_add_buf(ldata, lname, tfid);
 894         }
 895
 896         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_LINKEA_MORE2))
 897                 linkea_add_buf(ldata, lname, pfid);
 898
 899         return linkea_add_buf(ldata, lname, pfid);
 900 }
 901
 902 static int __mdd_links_del(const struct lu_env *env,
 903                            struct mdd_object *mdd_obj,
 904                            struct linkea_data *ldata,
 905                            const struct lu_name *lname,
 906                            const struct lu_fid *pfid)
 907 {
 908         int rc;
 909
 910         if (ldata->ld_leh == NULL) {
 911                 rc = mdd_links_read(env, mdd_obj, ldata);
 912                 if (rc)
 913                         return rc;
 914         }
 915
 916         rc = linkea_links_find(ldata, lname, pfid);
 917         if (rc)
 918                 return rc;
 919
 920         linkea_del_buf(ldata, lname);
 921         return 0;
 922 }
 923
 924 static int mdd_linkea_prepare(const struct lu_env *env,
 925                               struct mdd_object *mdd_obj,
 926                               const struct lu_fid *oldpfid,
 927                               const struct lu_name *oldlname,
 928                               const struct lu_fid *newpfid,
 929                               const struct lu_name *newlname,
 930                               int first, int check,
 931                               struct linkea_data *ldata)
 932 {
 933         int rc = 0;
 934         int rc2 = 0;
 935         ENTRY;
 936
 937         if (OBD_FAIL_CHECK(OBD_FAIL_FID_IGIF))
 938                 return 0;
 939
 940         LASSERT(oldpfid != NULL || newpfid != NULL);
 941
 942         if (mdd_obj->mod_flags & DEAD_OBJ) {
 943                 /* Prevent linkea to be updated which is NOT necessary. */
 944                 ldata->ld_reclen = 0;
 945                 /* No more links, don't bother */
 946                 RETURN(0);
 947         }
 948
 949         if (oldpfid != NULL) {
 950                 rc = __mdd_links_del(env, mdd_obj, ldata, oldlname, oldpfid);
 951                 if (rc) {
 952                         if ((check == 1) ||
 953                             (rc != -ENODATA && rc != -ENOENT))
 954                                 RETURN(rc);
 955                         /* No changes done. */
 956                         rc = 0;
 957                 }
 958         }
 959
 960         /* If renaming, add the new record */
 961         if (newpfid != NULL) {
 962                 /* even if the add fails, we still delete the out-of-date
 963                  * old link */
 964                 rc2 = __mdd_links_add(env, mdd_obj, ldata, newlname, newpfid,
 965                                       first, check);
 966         }
 967
 968         rc = rc != 0 ? rc : rc2;
 969
 970         RETURN(rc);
 971 }
 972
 973 int mdd_links_rename(const struct lu_env *env,
 974                      struct mdd_object *mdd_obj,
 975                      const struct lu_fid *oldpfid,
 976                      const struct lu_name *oldlname,
 977                      const struct lu_fid *newpfid,
 978                      const struct lu_name *newlname,
 979                      struct thandle *handle,
 980                      struct linkea_data *ldata,
 981                      int first, int check)
 982 {
 983         int rc = 0;
 984         ENTRY;
 985
 986         if (ldata == NULL) {
 987                 ldata = &mdd_env_info(env)->mti_link_data;
 988                 memset(ldata, 0, sizeof(*ldata));
 989                 rc = mdd_linkea_prepare(env, mdd_obj, oldpfid, oldlname,
 990                                         newpfid, newlname, first, check,
 991                                         ldata);
 992                 if (rc != 0)
 993                         GOTO(out, rc);
 994         }
 995
 996         if (ldata->ld_reclen != 0)
 997                 rc = mdd_links_write(env, mdd_obj, ldata, handle);
 998         EXIT;
 999 out:
1000         if (rc != 0) {
1001                 int error = 1;
1002                 if (rc == -EOVERFLOW || rc == -ENOSPC)
1003                         error = 0;
1004                 if (oldpfid == NULL)
1005                         CDEBUG(error ? D_ERROR : D_OTHER,
1006                                "link_ea add '%.*s' failed %d "DFID"\n",
1007                                newlname->ln_namelen, newlname->ln_name,
1008                                rc, PFID(mdd_object_fid(mdd_obj)));
1009                 else if (newpfid == NULL)
1010                         CDEBUG(error ? D_ERROR : D_OTHER,
1011                                "link_ea del '%.*s' failed %d "DFID"\n",
1012                                oldlname->ln_namelen, oldlname->ln_name,
1013                                rc, PFID(mdd_object_fid(mdd_obj)));
1014                 else
1015                         CDEBUG(error ? D_ERROR : D_OTHER,
1016                                "link_ea rename '%.*s'->'%.*s' failed %d "
1017                                DFID"\n",
1018                                oldlname->ln_namelen, oldlname->ln_name,
1019                                newlname->ln_namelen, newlname->ln_name,
1020                                rc, PFID(mdd_object_fid(mdd_obj)));
1021         }
1022
1023         if (ldata->ld_buf && ldata->ld_buf->lb_len > OBD_ALLOC_BIG)
1024                 /* if we vmalloced a large buffer drop it */
1025                 lu_buf_free(ldata->ld_buf);
1026
1027         return rc;
1028 }
1029
1030 static inline int mdd_links_add(const struct lu_env *env,
1031                                 struct mdd_object *mdd_obj,
1032                                 const struct lu_fid *pfid,
1033                                 const struct lu_name *lname,
1034                                 struct thandle *handle,
1035                                 struct linkea_data *ldata, int first)
1036 {
1037         return mdd_links_rename(env, mdd_obj, NULL, NULL,
1038                                 pfid, lname, handle, ldata, first, 0);
1039 }
1040
1041 static inline int mdd_links_del(const struct lu_env *env,
1042                                 struct mdd_object *mdd_obj,
1043                                 const struct lu_fid *pfid,
1044                                 const struct lu_name *lname,
1045                                 struct thandle *handle)
1046 {
1047         return mdd_links_rename(env, mdd_obj, pfid, lname,
1048                                 NULL, NULL, handle, NULL, 0, 0);
1049 }
1050
1051 /** Read the link EA into a temp buffer.
1052  * Uses the mdd_thread_info::mti_big_buf since it is generally large.
1053  * A pointer to the buffer is stored in \a ldata::ld_buf.
1054  *
1055  * \retval 0 or error
1056  */
1057 int mdd_links_read(const struct lu_env *env, struct mdd_object *mdd_obj,
1058                    struct linkea_data *ldata)
1059 {
1060         int rc;
1061
1062         if (!mdd_object_exists(mdd_obj))
1063                 return -ENODATA;
1064
1065         /* First try a small buf */
1066         LASSERT(env != NULL);
1067         ldata->ld_buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_link_buf,
1068                                                PAGE_CACHE_SIZE);
1069         if (ldata->ld_buf->lb_buf == NULL)
1070                 return -ENOMEM;
1071
1072         rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf, XATTR_NAME_LINK,
1073                           BYPASS_CAPA);
1074         if (rc == -ERANGE) {
1075                 /* Buf was too small, figure out what we need. */
1076                 lu_buf_free(ldata->ld_buf);
1077                 rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf,
1078                                    XATTR_NAME_LINK, BYPASS_CAPA);
1079                 if (rc < 0)
1080                         return rc;
1081                 ldata->ld_buf = lu_buf_check_and_alloc(ldata->ld_buf, rc);
1082                 if (ldata->ld_buf->lb_buf == NULL)
1083                         return -ENOMEM;
1084                 rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf,
1085                                   XATTR_NAME_LINK, BYPASS_CAPA);
1086         }
1087         if (rc < 0) {
1088                 lu_buf_free(ldata->ld_buf);
1089                 ldata->ld_buf = NULL;
1090                 return rc;
1091         }
1092
1093         return linkea_init(ldata);
1094 }
1095
1096 /** Read the link EA into a temp buffer.
1097  * Uses the name_buf since it is generally large.
1098  * \retval IS_ERR err
1099  * \retval ptr to \a lu_buf (always \a mti_big_buf)
1100  */
1101 struct lu_buf *mdd_links_get(const struct lu_env *env,
1102                              struct mdd_object *mdd_obj)
1103 {
1104         struct linkea_data ldata = { 0 };
1105         int rc;
1106
1107         rc = mdd_links_read(env, mdd_obj, &ldata);
1108         return rc ? ERR_PTR(rc) : ldata.ld_buf;
1109 }
1110
1111 int mdd_links_write(const struct lu_env *env, struct mdd_object *mdd_obj,
1112                     struct linkea_data *ldata, struct thandle *handle)
1113 {
1114         const struct lu_buf *buf = mdd_buf_get_const(env, ldata->ld_buf->lb_buf,
1115                                                      ldata->ld_leh->leh_len);
1116         int                 rc;
1117
1118         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_NO_LINKEA))
1119                 return 0;
1120
1121         rc = mdo_xattr_set(env, mdd_obj, buf, XATTR_NAME_LINK, 0, handle,
1122                            mdd_object_capa(env, mdd_obj));
1123         if (unlikely(rc == -ENOSPC) && S_ISREG(mdd_object_type(mdd_obj)) &&
1124             mdd_object_remote(mdd_obj) == 0) {
1125                 struct lfsck_request *lr = &mdd_env_info(env)->mti_lr;
1126
1127                 /* XXX: If the linkEA is overflow, then we need to notify the
1128                  *      namespace LFSCK to skip "nlink" attribute verification
1129                  *      on this object to avoid the "nlink" to be shrinked by
1130                  *      wrong. It may be not good an interaction with LFSCK
1131                  *      like this. We will consider to replace it with other
1132                  *      mechanism in future. LU-5802. */
1133                 lfsck_pack_rfa(lr, mdo2fid(mdd_obj), LE_SKIP_NLINK,
1134                                LFSCK_TYPE_NAMESPACE);
1135                 lfsck_in_notify(env, mdo2mdd(&mdd_obj->mod_obj)->mdd_bottom,
1136                                 lr, handle);
1137         }
1138
1139         return rc;
1140 }
1141
1142 int mdd_declare_links_add(const struct lu_env *env, struct mdd_object *mdd_obj,
1143                           struct thandle *handle, struct linkea_data *ldata,
1144                           enum mdd_links_add_overflow overflow)
1145 {
1146         int     rc;
1147         int     ea_len;
1148         void    *linkea;
1149
1150         if (ldata != NULL && ldata->ld_leh != NULL) {
1151                 ea_len = ldata->ld_leh->leh_len;
1152                 linkea = ldata->ld_buf->lb_buf;
1153         } else {
1154                 ea_len = DEFAULT_LINKEA_SIZE;
1155                 linkea = NULL;
1156         }
1157
1158         /* XXX: max size? */
1159         rc = mdo_declare_xattr_set(env, mdd_obj,
1160                                    mdd_buf_get_const(env, linkea, ea_len),
1161                                    XATTR_NAME_LINK, 0, handle);
1162         if (rc != 0)
1163                 return rc;
1164
1165         if (mdd_object_remote(mdd_obj) == 0 && overflow == MLAO_CHECK) {
1166                 struct lfsck_request *lr = &mdd_env_info(env)->mti_lr;
1167
1168                 /* XXX: If the linkEA is overflow, then we need to notify the
1169                  *      namespace LFSCK to skip "nlink" attribute verification
1170                  *      on this object to avoid the "nlink" to be shrinked by
1171                  *      wrong. It may be not good an interaction with LFSCK
1172                  *      like this. We will consider to replace it with other
1173                  *      mechanism in future. LU-5802. */
1174                 lfsck_pack_rfa(lr, mdo2fid(mdd_obj), LE_SKIP_NLINK_DECLARE,
1175                                LFSCK_TYPE_NAMESPACE);
1176                 rc = lfsck_in_notify(env,
1177                                      mdo2mdd(&mdd_obj->mod_obj)->mdd_bottom,
1178                                      lr, handle);
1179         }
1180
1181         return rc;
1182 }
1183
1184 static inline int mdd_declare_links_del(const struct lu_env *env,
1185                                         struct mdd_object *c,
1186                                         struct thandle *handle)
1187 {
1188         int rc = 0;
1189
1190         /* For directory, the linkEA will be removed together
1191          * with the object. */
1192         if (!S_ISDIR(mdd_object_type(c)))
1193                 rc = mdd_declare_links_add(env, c, handle, NULL, MLAO_IGNORE);
1194
1195         return rc;
1196 }
1197
1198 static int mdd_declare_link(const struct lu_env *env,
1199                             struct mdd_device *mdd,
1200                             struct mdd_object *p,
1201                             struct mdd_object *c,
1202                             const struct lu_name *name,
1203                             struct thandle *handle,
1204                             struct lu_attr *la,
1205                             struct linkea_data *data)
1206 {
1207         int rc;
1208
1209         rc = mdo_declare_index_insert(env, p, mdo2fid(c), mdd_object_type(c),
1210                                       name->ln_name, handle);
1211         if (rc != 0)
1212                 return rc;
1213
1214         rc = mdo_declare_ref_add(env, c, handle);
1215         if (rc != 0)
1216                 return rc;
1217
1218         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_MORE_NLINK)) {
1219                 rc = mdo_declare_ref_add(env, c, handle);
1220                 if (rc != 0)
1221                         return rc;
1222         }
1223
1224         la->la_valid = LA_CTIME | LA_MTIME;
1225         rc = mdo_declare_attr_set(env, p, la, handle);
1226         if (rc != 0)
1227                 return rc;
1228
1229         la->la_valid = LA_CTIME;
1230         rc = mdo_declare_attr_set(env, c, la, handle);
1231         if (rc != 0)
1232                 return rc;
1233
1234         rc = mdd_declare_links_add(env, c, handle, data,
1235                         S_ISREG(mdd_object_type(c)) ? MLAO_CHECK : MLAO_IGNORE);
1236         if (rc != 0)
1237                 return rc;
1238
1239         rc = mdd_declare_changelog_store(env, mdd, name, NULL, handle);
1240
1241         return rc;
1242 }
1243
1244 static int mdd_link(const struct lu_env *env, struct md_object *tgt_obj,
1245                     struct md_object *src_obj, const struct lu_name *lname,
1246                     struct md_attr *ma)
1247 {
1248         const char *name = lname->ln_name;
1249         struct lu_attr    *la = &mdd_env_info(env)->mti_la_for_fix;
1250         struct mdd_object *mdd_tobj = md2mdd_obj(tgt_obj);
1251         struct mdd_object *mdd_sobj = md2mdd_obj(src_obj);
1252         struct lu_attr    *cattr = MDD_ENV_VAR(env, cattr);
1253         struct lu_attr    *tattr = MDD_ENV_VAR(env, tattr);
1254         struct mdd_device *mdd = mdo2mdd(src_obj);
1255         struct thandle *handle;
1256         struct linkea_data *ldata = &mdd_env_info(env)->mti_link_data;
1257         int rc;
1258         ENTRY;
1259
1260         rc = mdd_la_get(env, mdd_sobj, cattr, BYPASS_CAPA);
1261         if (rc != 0)
1262                 RETURN(rc);
1263
1264         rc = mdd_la_get(env, mdd_tobj, tattr, BYPASS_CAPA);
1265         if (rc != 0)
1266                 RETURN(rc);
1267
1268         handle = mdd_trans_create(env, mdd);
1269         if (IS_ERR(handle))
1270                 GOTO(out_pending, rc = PTR_ERR(handle));
1271
1272         memset(ldata, 0, sizeof(*ldata));
1273
1274         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1275         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1276
1277         rc = mdd_declare_link(env, mdd, mdd_tobj, mdd_sobj, lname, handle,
1278                               la, ldata);
1279         if (rc)
1280                 GOTO(stop, rc);
1281
1282         rc = mdd_trans_start(env, mdd, handle);
1283         if (rc)
1284                 GOTO(stop, rc);
1285
1286         mdd_write_lock(env, mdd_sobj, MOR_TGT_CHILD);
1287         rc = mdd_link_sanity_check(env, mdd_tobj, tattr, lname, mdd_sobj,
1288                                    cattr);
1289         if (rc)
1290                 GOTO(out_unlock, rc);
1291
1292         if (!OBD_FAIL_CHECK(OBD_FAIL_LFSCK_LESS_NLINK)) {
1293                 rc = mdo_ref_add(env, mdd_sobj, handle);
1294                 if (rc != 0)
1295                         GOTO(out_unlock, rc);
1296         }
1297
1298         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_MORE_NLINK)) {
1299                 rc = mdo_ref_add(env, mdd_sobj, handle);
1300                 if (rc != 0)
1301                         GOTO(out_unlock, rc);
1302         }
1303
1304         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_DANGLING3)) {
1305                 struct lu_fid tfid = *mdo2fid(mdd_sobj);
1306
1307                 tfid.f_oid++;
1308                 rc = __mdd_index_insert_only(env, mdd_tobj, &tfid,
1309                                              mdd_object_type(mdd_sobj),
1310                                              name, handle,
1311                                              mdd_object_capa(env, mdd_tobj));
1312         } else {
1313                 rc = __mdd_index_insert_only(env, mdd_tobj, mdo2fid(mdd_sobj),
1314                                              mdd_object_type(mdd_sobj),
1315                                              name, handle,
1316                                              mdd_object_capa(env, mdd_tobj));
1317         }
1318
1319         if (rc != 0) {
1320                 mdo_ref_del(env, mdd_sobj, handle);
1321                 GOTO(out_unlock, rc);
1322         }
1323
1324         la->la_valid = LA_CTIME | LA_MTIME;
1325         rc = mdd_update_time(env, mdd_tobj, tattr, la, handle);
1326         if (rc)
1327                 GOTO(out_unlock, rc);
1328
1329         la->la_valid = LA_CTIME;
1330         rc = mdd_update_time(env, mdd_sobj, cattr, la, handle);
1331         if (rc == 0) {
1332                 rc = mdd_linkea_prepare(env, mdd_sobj, NULL, NULL,
1333                                         mdo2fid(mdd_tobj), lname, 0, 0,
1334                                         ldata);
1335                 if (rc == 0)
1336                         mdd_links_add(env, mdd_sobj, mdo2fid(mdd_tobj),
1337                                       lname, handle, ldata, 0);
1338                 /* The failure of links_add should not cause the link
1339                  * failure, reset rc here */
1340                 rc = 0;
1341         }
1342         EXIT;
1343 out_unlock:
1344         mdd_write_unlock(env, mdd_sobj);
1345         if (rc == 0)
1346                 rc = mdd_changelog_ns_store(env, mdd, CL_HARDLINK, 0, mdd_sobj,
1347                                             mdo2fid(mdd_tobj), NULL, NULL,
1348                                             lname, NULL, handle);
1349 stop:
1350         mdd_trans_stop(env, mdd, rc, handle);
1351
1352         if (ldata->ld_buf && ldata->ld_buf->lb_len > OBD_ALLOC_BIG)
1353                 /* if we vmalloced a large buffer drop it */
1354                 lu_buf_free(ldata->ld_buf);
1355 out_pending:
1356         return rc;
1357 }
1358
1359 static int mdd_mark_dead_object(const struct lu_env *env,
1360                                 struct mdd_object *obj, struct thandle *handle,
1361                                 bool declare)
1362 {
1363         struct lu_attr *attr = MDD_ENV_VAR(env, la_for_start);
1364         int rc;
1365
1366         if (!declare)
1367                 obj->mod_flags |= DEAD_OBJ;
1368
1369         if (!S_ISDIR(mdd_object_type(obj)))
1370                 return 0;
1371
1372         attr->la_valid = LA_FLAGS;
1373         attr->la_flags = LUSTRE_SLAVE_DEAD_FL;
1374
1375         if (declare)
1376                 rc = mdo_declare_attr_set(env, obj, attr, handle);
1377         else
1378                 rc = mdo_attr_set(env, obj, attr, handle,
1379                                   mdd_object_capa(env, obj));
1380
1381         return rc;
1382 }
1383
1384 static int mdd_declare_finish_unlink(const struct lu_env *env,
1385                                      struct mdd_object *obj,
1386                                      struct thandle *handle)
1387 {
1388         int     rc;
1389
1390         rc = mdd_mark_dead_object(env, obj, handle, true);
1391         if (rc != 0)
1392                 return rc;
1393
1394         rc = orph_declare_index_insert(env, obj, mdd_object_type(obj), handle);
1395         if (rc != 0)
1396                 return rc;
1397
1398         rc = mdo_declare_destroy(env, obj, handle);
1399         if (rc != 0)
1400                 return rc;
1401
1402         return mdd_declare_links_del(env, obj, handle);
1403 }
1404
1405 /* caller should take a lock before calling */
1406 int mdd_finish_unlink(const struct lu_env *env,
1407                       struct mdd_object *obj, struct md_attr *ma,
1408                       const struct mdd_object *pobj,
1409                       const struct lu_name *lname,
1410                       struct thandle *th)
1411 {
1412         int rc = 0;
1413         int is_dir = S_ISDIR(ma->ma_attr.la_mode);
1414         ENTRY;
1415
1416         LASSERT(mdd_write_locked(env, obj) != 0);
1417
1418         if (ma->ma_attr.la_nlink == 0 || is_dir) {
1419                 rc = mdd_mark_dead_object(env, obj, th, false);
1420                 if (rc != 0)
1421                         RETURN(rc);
1422
1423                 /* add new orphan and the object
1424                  * will be deleted during mdd_close() */
1425                 if (obj->mod_count) {
1426                         rc = __mdd_orphan_add(env, obj, th);
1427                         if (rc == 0)
1428                                 CDEBUG(D_HA, "Object "DFID" is inserted into "
1429                                         "orphan list, open count = %d\n",
1430                                         PFID(mdd_object_fid(obj)),
1431                                         obj->mod_count);
1432                         else
1433                                 CERROR("Object "DFID" fail to be an orphan, "
1434                                        "open count = %d, maybe cause failed "
1435                                        "open replay\n",
1436                                         PFID(mdd_object_fid(obj)),
1437                                         obj->mod_count);
1438                 } else {
1439                         rc = mdo_destroy(env, obj, th);
1440                 }
1441         } else if (!is_dir) {
1442                 /* old files may not have link ea; ignore errors */
1443                 mdd_links_del(env, obj, mdo2fid(pobj), lname, th);
1444         }
1445
1446         RETURN(rc);
1447 }
1448
1449 /*
1450  * pobj maybe NULL
1451  * has mdd_write_lock on cobj already, but not on pobj yet
1452  */
1453 int mdd_unlink_sanity_check(const struct lu_env *env, struct mdd_object *pobj,
1454                             const struct lu_attr *pattr,
1455                             struct mdd_object *cobj,
1456                             const struct lu_attr *cattr)
1457 {
1458         int rc;
1459         ENTRY;
1460
1461         rc = mdd_may_delete(env, pobj, pattr, cobj, cattr, NULL, 1, 1);
1462
1463         RETURN(rc);
1464 }
1465
1466 static int mdd_declare_unlink(const struct lu_env *env, struct mdd_device *mdd,
1467                               struct mdd_object *p, struct mdd_object *c,
1468                               const struct lu_name *name, struct md_attr *ma,
1469                               struct thandle *handle, int no_name, int is_dir)
1470 {
1471         struct lu_attr  *la = &mdd_env_info(env)->mti_la_for_fix;
1472         int              rc;
1473
1474         if (!OBD_FAIL_CHECK(OBD_FAIL_LFSCK_DANGLING2)) {
1475                 if (likely(no_name == 0)) {
1476                         rc = mdo_declare_index_delete(env, p, name->ln_name,
1477                                                       handle);
1478                         if (rc != 0)
1479                                 return rc;
1480                 }
1481
1482                 if (is_dir != 0) {
1483                         rc = mdo_declare_ref_del(env, p, handle);
1484                         if (rc != 0)
1485                                 return rc;
1486                 }
1487         }
1488
1489         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1490         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1491         la->la_valid = LA_CTIME | LA_MTIME;
1492         rc = mdo_declare_attr_set(env, p, la, handle);
1493         if (rc)
1494                 return rc;
1495
1496         if (c != NULL) {
1497                 rc = mdo_declare_ref_del(env, c, handle);
1498                 if (rc)
1499                         return rc;
1500
1501                 rc = mdo_declare_ref_del(env, c, handle);
1502                 if (rc)
1503                         return rc;
1504
1505                 la->la_valid = LA_CTIME;
1506                 rc = mdo_declare_attr_set(env, c, la, handle);
1507                 if (rc)
1508                         return rc;
1509
1510                 rc = mdd_declare_finish_unlink(env, c, handle);
1511                 if (rc)
1512                         return rc;
1513
1514                 /* FIXME: need changelog for remove entry */
1515                 rc = mdd_declare_changelog_store(env, mdd, name, NULL, handle);
1516         }
1517
1518         return rc;
1519 }
1520
1521 /*
1522  * test if a file has an HSM archive
1523  * if HSM attributes are not found in ma update them from
1524  * HSM xattr
1525  */
1526 static bool mdd_hsm_archive_exists(const struct lu_env *env,
1527                                    struct mdd_object *obj,
1528                                    struct md_attr *ma)
1529 {
1530         ENTRY;
1531
1532         if (!(ma->ma_valid & MA_HSM)) {
1533                 /* no HSM MD provided, read xattr */
1534                 struct lu_buf   *hsm_buf;
1535                 const size_t     buflen = sizeof(struct hsm_attrs);
1536                 int              rc;
1537
1538                 hsm_buf = mdd_buf_get(env, NULL, 0);
1539                 lu_buf_alloc(hsm_buf, buflen);
1540                 rc = mdo_xattr_get(env, obj, hsm_buf, XATTR_NAME_HSM,
1541                                    mdd_object_capa(env, obj));
1542                 rc = lustre_buf2hsm(hsm_buf->lb_buf, rc, &ma->ma_hsm);
1543                 lu_buf_free(hsm_buf);
1544                 if (rc < 0)
1545                         RETURN(false);
1546
1547                 ma->ma_valid = MA_HSM;
1548         }
1549         if (ma->ma_hsm.mh_flags & HS_EXISTS)
1550                 RETURN(true);
1551         RETURN(false);
1552 }
1553
1554 /**
1555  * Delete name entry and the object.
1556  * Note: no_name == 1 means it only destory the object, i.e. name_entry
1557  * does not exist for this object, and it could only happen during resending
1558  * of remote unlink. see the comments in mdt_reint_unlink. Unfortunately, lname
1559  * is also needed in this case(needed by changelog), so we have to add another
1560  * parameter(no_name)here. XXX: this is only needed in DNE phase I, on Phase II,
1561  * the ENOENT failure should be able to be fixed by redo mechanism.
1562  */
1563 static int mdd_unlink(const struct lu_env *env, struct md_object *pobj,
1564                       struct md_object *cobj, const struct lu_name *lname,
1565                       struct md_attr *ma, int no_name)
1566 {
1567         const char *name = lname->ln_name;
1568         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
1569         struct lu_attr *cattr = MDD_ENV_VAR(env, cattr);
1570         struct lu_attr *la = &mdd_env_info(env)->mti_la_for_fix;
1571         struct mdd_object *mdd_pobj = md2mdd_obj(pobj);
1572         struct mdd_object *mdd_cobj = NULL;
1573         struct mdd_device *mdd = mdo2mdd(pobj);
1574         struct thandle    *handle;
1575         int rc, is_dir = 0;
1576         ENTRY;
1577
1578         /* cobj == NULL means only delete name entry */
1579         if (likely(cobj != NULL)) {
1580                 mdd_cobj = md2mdd_obj(cobj);
1581                 if (mdd_object_exists(mdd_cobj) == 0)
1582                         RETURN(-ENOENT);
1583         }
1584
1585         rc = mdd_la_get(env, mdd_pobj, pattr, BYPASS_CAPA);
1586         if (rc)
1587                 RETURN(rc);
1588
1589         if (likely(mdd_cobj != NULL)) {
1590                 /* fetch cattr */
1591                 rc = mdd_la_get(env, mdd_cobj, cattr, BYPASS_CAPA);
1592                 if (rc)
1593                         RETURN(rc);
1594
1595                 is_dir = S_ISDIR(cattr->la_mode);
1596         }
1597
1598         rc = mdd_unlink_sanity_check(env, mdd_pobj, pattr, mdd_cobj, cattr);
1599         if (rc)
1600                 RETURN(rc);
1601
1602         handle = mdd_trans_create(env, mdd);
1603         if (IS_ERR(handle))
1604                 RETURN(PTR_ERR(handle));
1605
1606         rc = mdd_declare_unlink(env, mdd, mdd_pobj, mdd_cobj,
1607                                 lname, ma, handle, no_name, is_dir);
1608         if (rc)
1609                 GOTO(stop, rc);
1610
1611         rc = mdd_trans_start(env, mdd, handle);
1612         if (rc)
1613                 GOTO(stop, rc);
1614
1615         if (likely(mdd_cobj != NULL))
1616                 mdd_write_lock(env, mdd_cobj, MOR_TGT_CHILD);
1617
1618         if (likely(no_name == 0) && !OBD_FAIL_CHECK(OBD_FAIL_LFSCK_DANGLING2)) {
1619                 rc = __mdd_index_delete(env, mdd_pobj, name, is_dir, handle,
1620                                         mdd_object_capa(env, mdd_pobj));
1621                 if (rc)
1622                         GOTO(cleanup, rc);
1623         }
1624
1625         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_MUL_REF) ||
1626             OBD_FAIL_CHECK(OBD_FAIL_LFSCK_NO_NAMEENTRY))
1627                 GOTO(cleanup, rc = 0);
1628
1629         if (likely(mdd_cobj != NULL)) {
1630                 rc = mdo_ref_del(env, mdd_cobj, handle);
1631                 if (rc != 0) {
1632                         __mdd_index_insert_only(env, mdd_pobj,
1633                                                 mdo2fid(mdd_cobj),
1634                                                 mdd_object_type(mdd_cobj),
1635                                                 name, handle,
1636                                                 mdd_object_capa(env, mdd_pobj));
1637                         GOTO(cleanup, rc);
1638                 }
1639
1640                 if (is_dir)
1641                         /* unlink dot */
1642                         mdo_ref_del(env, mdd_cobj, handle);
1643
1644                 /* fetch updated nlink */
1645                 rc = mdd_la_get(env, mdd_cobj, cattr, BYPASS_CAPA);
1646                 if (rc)
1647                         GOTO(cleanup, rc);
1648         }
1649
1650         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1651         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1652
1653         la->la_valid = LA_CTIME | LA_MTIME;
1654         rc = mdd_update_time(env, mdd_pobj, pattr, la, handle);
1655         if (rc)
1656                 GOTO(cleanup, rc);
1657
1658         /* Enough for only unlink the entry */
1659         if (unlikely(mdd_cobj == NULL))
1660                 GOTO(stop, rc);
1661
1662         if (cattr->la_nlink > 0 || mdd_cobj->mod_count > 0) {
1663                 /* update ctime of an unlinked file only if it is still
1664                  * opened or a link still exists */
1665                 la->la_valid = LA_CTIME;
1666                 rc = mdd_update_time(env, mdd_cobj, cattr, la, handle);
1667                 if (rc)
1668                         GOTO(cleanup, rc);
1669         }
1670
1671         /* XXX: this transfer to ma will be removed with LOD/OSP */
1672         ma->ma_attr = *cattr;
1673         ma->ma_valid |= MA_INODE;
1674         rc = mdd_finish_unlink(env, mdd_cobj, ma, mdd_pobj, lname, handle);
1675
1676         /* fetch updated nlink */
1677         if (rc == 0)
1678                 rc = mdd_la_get(env, mdd_cobj, cattr, BYPASS_CAPA);
1679
1680         /* if object is removed then we can't get its attrs, use last get */
1681         if (cattr->la_nlink == 0) {
1682                 ma->ma_attr = *cattr;
1683                 ma->ma_valid |= MA_INODE;
1684         }
1685         EXIT;
1686 cleanup:
1687         if (likely(mdd_cobj != NULL))
1688                 mdd_write_unlock(env, mdd_cobj);
1689
1690         if (rc == 0) {
1691                 int cl_flags = 0;
1692
1693                 if (cattr->la_nlink == 0) {
1694                         cl_flags |= CLF_UNLINK_LAST;
1695                         /* search for an existing archive */
1696                         if (mdd_hsm_archive_exists(env, mdd_cobj, ma))
1697                                 cl_flags |= CLF_UNLINK_HSM_EXISTS;
1698                 }
1699
1700                 rc = mdd_changelog_ns_store(env, mdd,
1701                         is_dir ? CL_RMDIR : CL_UNLINK, cl_flags,
1702                         mdd_cobj, mdo2fid(mdd_pobj), NULL, NULL, lname, NULL,
1703                         handle);
1704         }
1705
1706 stop:
1707         mdd_trans_stop(env, mdd, rc, handle);
1708
1709         return rc;
1710 }
1711
1712 /*
1713  * The permission has been checked when obj created, no need check again.
1714  */
1715 static int mdd_cd_sanity_check(const struct lu_env *env,
1716                                struct mdd_object *obj)
1717 {
1718         ENTRY;
1719
1720         /* EEXIST check */
1721         if (!obj || mdd_is_dead_obj(obj))
1722                 RETURN(-ENOENT);
1723
1724         RETURN(0);
1725 }
1726
1727 static int mdd_create_data(const struct lu_env *env, struct md_object *pobj,
1728                            struct md_object *cobj, const struct md_op_spec *spec,
1729                            struct md_attr *ma)
1730 {
1731         struct mdd_device *mdd = mdo2mdd(cobj);
1732         struct mdd_object *mdd_pobj = md2mdd_obj(pobj);
1733         struct mdd_object *son = md2mdd_obj(cobj);
1734         struct thandle    *handle;
1735         const struct lu_buf *buf;
1736         struct lu_attr    *attr = MDD_ENV_VAR(env, cattr);
1737         struct dt_allocation_hint *hint = &mdd_env_info(env)->mti_hint;
1738         int                rc;
1739         ENTRY;
1740
1741         rc = mdd_cd_sanity_check(env, son);
1742         if (rc)
1743                 RETURN(rc);
1744
1745         if (!md_should_create(spec->sp_cr_flags))
1746                 RETURN(0);
1747
1748         /*
1749          * there are following use cases for this function:
1750          * 1) late striping - file was created with MDS_OPEN_DELAY_CREATE
1751          *    striping can be specified or not
1752          * 2) CMD?
1753          */
1754         rc = mdd_la_get(env, son, attr, BYPASS_CAPA);
1755         if (rc)
1756                 RETURN(rc);
1757
1758         /* calling ->ah_make_hint() is used to transfer information from parent */
1759         mdd_object_make_hint(env, mdd_pobj, son, attr, spec, hint);
1760
1761         handle = mdd_trans_create(env, mdd);
1762         if (IS_ERR(handle))
1763                 GOTO(out_free, rc = PTR_ERR(handle));
1764
1765         /*
1766          * XXX: Setting the lov ea is not locked but setting the attr is locked?
1767          * Should this be fixed?
1768          */
1769         CDEBUG(D_OTHER, "ea %p/%u, cr_flags "LPO64", no_create %u\n",
1770                spec->u.sp_ea.eadata, spec->u.sp_ea.eadatalen,
1771                spec->sp_cr_flags, spec->no_create);
1772
1773         if (spec->no_create || (spec->sp_cr_flags & MDS_OPEN_HAS_EA)) {
1774                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
1775                                         spec->u.sp_ea.eadatalen);
1776         } else {
1777                 buf = &LU_BUF_NULL;
1778         }
1779
1780         rc = dt_declare_xattr_set(env, mdd_object_child(son), buf,
1781                                   XATTR_NAME_LOV, 0, handle);
1782         if (rc)
1783                 GOTO(stop, rc);
1784
1785         rc = mdd_declare_changelog_store(env, mdd, NULL, NULL, handle);
1786         if (rc)
1787                 GOTO(stop, rc);
1788
1789         rc = mdd_trans_start(env, mdd, handle);
1790         if (rc)
1791                 GOTO(stop, rc);
1792
1793         rc = dt_xattr_set(env, mdd_object_child(son), buf, XATTR_NAME_LOV,
1794                           0, handle, mdd_object_capa(env, son));
1795
1796         if (rc)
1797                 GOTO(stop, rc);
1798
1799         rc = mdd_changelog_data_store(env, mdd, CL_LAYOUT, 0, son, handle);
1800
1801 stop:
1802         mdd_trans_stop(env, mdd, rc, handle);
1803 out_free:
1804         RETURN(rc);
1805 }
1806
1807 static int mdd_declare_object_initialize(const struct lu_env *env,
1808                                          struct mdd_object *parent,
1809                                          struct mdd_object *child,
1810                                          struct lu_attr *attr,
1811                                          struct thandle *handle)
1812 {
1813         int rc;
1814         ENTRY;
1815
1816         /*
1817          * inode mode has been set in creation time, and it's based on umask,
1818          * la_mode and acl, don't set here again! (which will go wrong
1819          * because below function doesn't consider umask).
1820          * I'd suggest set all object attributes in creation time, see above.
1821          */
1822         LASSERT(attr->la_valid & (LA_MODE | LA_TYPE));
1823         attr->la_valid &= ~(LA_MODE | LA_TYPE);
1824         rc = mdo_declare_attr_set(env, child, attr, handle);
1825         attr->la_valid |= LA_MODE | LA_TYPE;
1826         if (rc != 0 || !S_ISDIR(attr->la_mode))
1827                 RETURN(rc);
1828
1829         rc = mdo_declare_index_insert(env, child, mdo2fid(child), S_IFDIR,
1830                                       dot, handle);
1831         if (rc != 0)
1832                 RETURN(rc);
1833
1834         rc = mdo_declare_ref_add(env, child, handle);
1835         if (rc != 0)
1836                 RETURN(rc);
1837
1838         rc = mdo_declare_index_insert(env, child, mdo2fid(parent), S_IFDIR,
1839                                       dotdot, handle);
1840
1841         RETURN(rc);
1842 }
1843
1844 static int mdd_object_initialize(const struct lu_env *env,
1845                                  const struct lu_fid *pfid,
1846                                  struct mdd_object *child,
1847                                  struct lu_attr *attr, struct thandle *handle,
1848                                  const struct md_op_spec *spec)
1849 {
1850         int rc;
1851         ENTRY;
1852
1853         /*
1854          * Update attributes for child.
1855          *
1856          * FIXME:
1857          *  (1) the valid bits should be converted between Lustre and Linux;
1858          *  (2) maybe, the child attributes should be set in OSD when creation.
1859          */
1860
1861         rc = mdd_attr_set_internal(env, child, attr, handle, 0);
1862         /* arguments are supposed to stay the same */
1863         if (S_ISDIR(attr->la_mode)) {
1864                 /* Add "." and ".." for newly created dir */
1865                 mdo_ref_add(env, child, handle);
1866                 rc = __mdd_index_insert_only(env, child, mdo2fid(child),
1867                                              S_IFDIR, dot, handle, BYPASS_CAPA);
1868                 if (rc == 0)
1869                         rc = __mdd_index_insert_only(env, child, pfid, S_IFDIR,
1870                                                      dotdot, handle,
1871                                                      BYPASS_CAPA);
1872                 if (rc != 0)
1873                         mdo_ref_del(env, child, handle);
1874         }
1875
1876         RETURN(rc);
1877 }
1878
1879 /**
1880  * This function checks whether it can create a file/dir under the
1881  * directory(@pobj). The directory(@pobj) is not being locked by
1882  * mdd lock.
1883  *
1884  * \param[in] env       execution environment
1885  * \param[in] pobj      the directory to create files
1886  * \param[in] pattr     the attributes of the directory
1887  * \param[in] lname     the name of the created file/dir
1888  * \param[in] cattr     the attributes of the file/dir
1889  * \param[in] spec      create specification
1890  *
1891  * \retval              = 0 it is allowed to create file/dir under
1892  *                      the directory
1893  * \retval              negative error not allowed to create file/dir
1894  *                      under the directory
1895  */
1896 static int mdd_create_sanity_check(const struct lu_env *env,
1897                                    struct md_object *pobj,
1898                                    const struct lu_attr *pattr,
1899                                    const struct lu_name *lname,
1900                                    struct lu_attr *cattr,
1901                                    struct md_op_spec *spec)
1902 {
1903         struct mdd_thread_info *info = mdd_env_info(env);
1904         struct lu_fid     *fid       = &info->mti_fid;
1905         struct mdd_object *obj       = md2mdd_obj(pobj);
1906         struct mdd_device *m         = mdo2mdd(pobj);
1907         bool            check_perm = true;
1908         int rc;
1909         ENTRY;
1910
1911         /* EEXIST check */
1912         if (mdd_is_dead_obj(obj))
1913                 RETURN(-ENOENT);
1914
1915         /*
1916          * In some cases this lookup is not needed - we know before if name
1917          * exists or not because MDT performs lookup for it.
1918          * name length check is done in lookup.
1919          */
1920         if (spec->sp_cr_lookup) {
1921                 /*
1922                  * Check if the name already exist, though it will be checked in
1923                  * _index_insert also, for avoiding rolling back if exists
1924                  * _index_insert.
1925                  */
1926                 rc = __mdd_lookup(env, pobj, pattr, lname, fid,
1927                                   MAY_WRITE | MAY_EXEC);
1928                 if (rc != -ENOENT)
1929                         RETURN(rc ? : -EEXIST);
1930
1931                 /* Permission is already being checked in mdd_lookup */
1932                 check_perm = false;
1933         }
1934
1935         rc = mdd_may_create(env, obj, pattr, NULL, check_perm);
1936         if (rc != 0)
1937                 RETURN(rc);
1938
1939         /* sgid check */
1940         if (pattr->la_mode & S_ISGID) {
1941                 cattr->la_gid = pattr->la_gid;
1942                 if (S_ISDIR(cattr->la_mode)) {
1943                         cattr->la_mode |= S_ISGID;
1944                         cattr->la_valid |= LA_MODE;
1945                 }
1946         }
1947
1948         rc = mdd_name_check(m, lname);
1949         if (rc < 0)
1950                 RETURN(rc);
1951
1952         switch (cattr->la_mode & S_IFMT) {
1953         case S_IFLNK: {
1954                 unsigned int symlen = strlen(spec->u.sp_symname) + 1;
1955
1956                 if (symlen > (1 << m->mdd_dt_conf.ddp_block_shift))
1957                         RETURN(-ENAMETOOLONG);
1958                 else
1959                         RETURN(0);
1960         }
1961         case S_IFDIR:
1962         case S_IFREG:
1963         case S_IFCHR:
1964         case S_IFBLK:
1965         case S_IFIFO:
1966         case S_IFSOCK:
1967                 rc = 0;
1968                 break;
1969         default:
1970                 rc = -EINVAL;
1971                 break;
1972         }
1973         RETURN(rc);
1974 }
1975
1976 static int mdd_declare_object_create(const struct lu_env *env,
1977                                      struct mdd_device *mdd,
1978                                      struct mdd_object *p, struct mdd_object *c,
1979                                      struct lu_attr *attr,
1980                                      struct thandle *handle,
1981                                      const struct md_op_spec *spec,
1982                                      struct lu_buf *def_acl_buf,
1983                                      struct lu_buf *acl_buf,
1984                                      struct dt_allocation_hint *hint)
1985 {
1986         int rc;
1987
1988         rc = mdd_declare_object_create_internal(env, p, c, attr, handle, spec,
1989                                                 hint);
1990         if (rc)
1991                 GOTO(out, rc);
1992
1993 #ifdef CONFIG_FS_POSIX_ACL
1994         if (def_acl_buf->lb_len > 0 && S_ISDIR(attr->la_mode)) {
1995                 /* if dir, then can inherit default ACl */
1996                 rc = mdo_declare_xattr_set(env, c, def_acl_buf,
1997                                            XATTR_NAME_ACL_DEFAULT,
1998                                            0, handle);
1999                 if (rc)
2000                         GOTO(out, rc);
2001         }
2002
2003         if (acl_buf->lb_len > 0) {
2004                 rc = mdo_declare_attr_set(env, c, attr, handle);
2005                 if (rc)
2006                         GOTO(out, rc);
2007
2008                 rc = mdo_declare_xattr_set(env, c, acl_buf,
2009                                            XATTR_NAME_ACL_ACCESS, 0, handle);
2010                 if (rc)
2011                         GOTO(out, rc);
2012         }
2013 #endif
2014         rc = mdd_declare_object_initialize(env, p, c, attr, handle);
2015         if (rc)
2016                 GOTO(out, rc);
2017
2018         /* replay case, create LOV EA from client data */
2019         if (spec->no_create ||
2020             (spec->sp_cr_flags & MDS_OPEN_HAS_EA && S_ISREG(attr->la_mode))) {
2021                 const struct lu_buf *buf;
2022
2023                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
2024                                         spec->u.sp_ea.eadatalen);
2025                 rc = mdo_declare_xattr_set(env, c, buf, XATTR_NAME_LOV, 0,
2026                                            handle);
2027                 if (rc)
2028                         GOTO(out, rc);
2029         }
2030
2031         if (S_ISLNK(attr->la_mode)) {
2032                 const char *target_name = spec->u.sp_symname;
2033                 int sym_len = strlen(target_name);
2034                 const struct lu_buf *buf;
2035
2036                 buf = mdd_buf_get_const(env, target_name, sym_len);
2037                 rc = dt_declare_record_write(env, mdd_object_child(c),
2038                                              buf, 0, handle);
2039                 if (rc)
2040                         GOTO(out, rc);
2041         }
2042 out:
2043         return rc;
2044 }
2045
2046 static int mdd_declare_create(const struct lu_env *env, struct mdd_device *mdd,
2047                               struct mdd_object *p, struct mdd_object *c,
2048                               const struct lu_name *name,
2049                               struct lu_attr *attr,
2050                               struct thandle *handle,
2051                               const struct md_op_spec *spec,
2052                               struct linkea_data *ldata,
2053                               struct lu_buf *def_acl_buf,
2054                               struct lu_buf *acl_buf,
2055                               struct dt_allocation_hint *hint)
2056 {
2057         int rc;
2058
2059         rc = mdd_declare_object_create(env, mdd, p, c, attr, handle, spec,
2060                                        def_acl_buf, acl_buf, hint);
2061         if (rc)
2062                 GOTO(out, rc);
2063
2064         if (S_ISDIR(attr->la_mode)) {
2065                 rc = mdo_declare_ref_add(env, p, handle);
2066                 if (rc)
2067                         GOTO(out, rc);
2068         }
2069
2070         if (unlikely(spec->sp_cr_flags & MDS_OPEN_VOLATILE)) {
2071                 rc = orph_declare_index_insert(env, c, attr->la_mode, handle);
2072                 if (rc)
2073                         GOTO(out, rc);
2074         } else {
2075                 struct lu_attr  *la = &mdd_env_info(env)->mti_la_for_fix;
2076
2077                 rc = mdo_declare_index_insert(env, p, mdo2fid(c), attr->la_mode,
2078                                               name->ln_name, handle);
2079                 if (rc != 0)
2080                         return rc;
2081
2082                 rc = mdd_declare_links_add(env, c, handle, ldata, MLAO_IGNORE);
2083                 if (rc)
2084                         return rc;
2085
2086                 *la = *attr;
2087                 la->la_valid = LA_CTIME | LA_MTIME;
2088                 rc = mdo_declare_attr_set(env, p, la, handle);
2089                 if (rc)
2090                         return rc;
2091
2092                 rc = mdd_declare_changelog_store(env, mdd, name, NULL, handle);
2093                 if (rc)
2094                         return rc;
2095         }
2096
2097         /* XXX: For remote create, it should indicate the remote RPC
2098          * will be sent after local transaction is finished, which
2099          * is not very nice, but it will be removed once we fully support
2100          * async update */
2101         if (mdd_object_remote(p) && handle->th_update != NULL)
2102                 handle->th_update->tu_sent_after_local_trans = 1;
2103 out:
2104         return rc;
2105 }
2106
2107 static int mdd_acl_init(const struct lu_env *env, struct mdd_object *pobj,
2108                         struct lu_attr *la, struct lu_buf *def_acl_buf,
2109                         struct lu_buf *acl_buf)
2110 {
2111         int     rc;
2112         ENTRY;
2113
2114         if (S_ISLNK(la->la_mode)) {
2115                 acl_buf->lb_len = 0;
2116                 def_acl_buf->lb_len = 0;
2117                 RETURN(0);
2118         }
2119
2120         mdd_read_lock(env, pobj, MOR_TGT_PARENT);
2121         rc = mdo_xattr_get(env, pobj, def_acl_buf,
2122                            XATTR_NAME_ACL_DEFAULT, BYPASS_CAPA);
2123         mdd_read_unlock(env, pobj);
2124         if (rc > 0) {
2125                 /* If there are default ACL, fix mode/ACL by default ACL */
2126                 def_acl_buf->lb_len = rc;
2127                 LASSERT(def_acl_buf->lb_len <= acl_buf->lb_len);
2128                 memcpy(acl_buf->lb_buf, def_acl_buf->lb_buf, rc);
2129                 acl_buf->lb_len = rc;
2130                 rc = __mdd_fix_mode_acl(env, acl_buf, &la->la_mode);
2131                 if (rc < 0)
2132                         RETURN(rc);
2133         } else if (rc == -ENODATA || rc == -EOPNOTSUPP) {
2134                 /* If there are no default ACL, fix mode by mask */
2135                 struct lu_ucred *uc = lu_ucred(env);
2136
2137                 /* The create triggered by MDT internal events, such as
2138                  * LFSCK reset, will not contain valid "uc". */
2139                 if (unlikely(uc != NULL))
2140                         la->la_mode &= ~uc->uc_umask;
2141                 rc = 0;
2142                 acl_buf->lb_len = 0;
2143                 def_acl_buf->lb_len = 0;
2144         }
2145
2146         RETURN(rc);
2147 }
2148
2149 /**
2150  * Create a metadata object and initialize it, set acl, xattr.
2151  **/
2152 static int mdd_object_create(const struct lu_env *env, struct mdd_object *pobj,
2153                              struct mdd_object *son, struct lu_attr *attr,
2154                              struct md_op_spec *spec, struct lu_buf *acl_buf,
2155                              struct lu_buf *def_acl_buf,
2156                              struct dt_allocation_hint *hint,
2157                              struct thandle *handle)
2158 {
2159         int                     rc;
2160
2161         mdd_write_lock(env, son, MOR_TGT_CHILD);
2162         rc = mdd_object_create_internal(env, NULL, son, attr, handle, spec,
2163                                         hint);
2164         if (rc)
2165                 GOTO(unlock, rc);
2166
2167         /* Note: In DNE phase I, for striped dir, though sub-stripes will be
2168          * created in declare phase, they also needs to be added to master
2169          * object as sub-directory entry. So it has to initialize the master
2170          * object, then set dir striped EA.(in mdo_xattr_set) */
2171         rc = mdd_object_initialize(env, mdo2fid(pobj), son, attr, handle,
2172                                    spec);
2173         if (rc != 0)
2174                 GOTO(err_destroy, rc);
2175
2176         /*
2177          * in case of replay we just set LOVEA provided by the client
2178          * XXX: I think it would be interesting to try "old" way where
2179          *      MDT calls this xattr_set(LOV) in a different transaction.
2180          *      probably this way we code can be made better.
2181          */
2182
2183         /* During creation, there are only a few cases we need do xattr_set to
2184          * create stripes.
2185          * 1. regular file: see comments above.
2186          * 2. create striped directory with provided stripeEA.
2187          * 3. create striped directory because inherit default layout from the
2188          * parent. */
2189         if (spec->no_create ||
2190             (S_ISREG(attr->la_mode) && spec->sp_cr_flags & MDS_OPEN_HAS_EA) ||
2191             S_ISDIR(attr->la_mode)) {
2192                 const struct lu_buf *buf;
2193
2194                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
2195                                         spec->u.sp_ea.eadatalen);
2196                 rc = mdo_xattr_set(env, son, buf,
2197                                    S_ISDIR(attr->la_mode) ? XATTR_NAME_LMV :
2198                                                             XATTR_NAME_LOV, 0,
2199                                    handle, BYPASS_CAPA);
2200                 if (rc != 0)
2201                         GOTO(err_destroy, rc);
2202         }
2203
2204 #ifdef CONFIG_FS_POSIX_ACL
2205         if (def_acl_buf != NULL && def_acl_buf->lb_len > 0 &&
2206             S_ISDIR(attr->la_mode)) {
2207                 /* set default acl */
2208                 rc = mdo_xattr_set(env, son, def_acl_buf,
2209                                    XATTR_NAME_ACL_DEFAULT, 0,
2210                                    handle, BYPASS_CAPA);
2211                 if (rc)
2212                         GOTO(err_destroy, rc);
2213         }
2214         /* set its own acl */
2215         if (acl_buf != NULL && acl_buf->lb_len > 0) {
2216                 rc = mdo_xattr_set(env, son, acl_buf,
2217                                    XATTR_NAME_ACL_ACCESS,
2218                                    0, handle, BYPASS_CAPA);
2219                 if (rc)
2220                         GOTO(err_destroy, rc);
2221         }
2222 #endif
2223
2224         if (S_ISLNK(attr->la_mode)) {
2225                 struct lu_ucred  *uc = lu_ucred_assert(env);
2226                 struct dt_object *dt = mdd_object_child(son);
2227                 const char *target_name = spec->u.sp_symname;
2228                 int sym_len = strlen(target_name);
2229                 const struct lu_buf *buf;
2230                 loff_t pos = 0;
2231
2232                 buf = mdd_buf_get_const(env, target_name, sym_len);
2233                 rc = dt->do_body_ops->dbo_write(env, dt, buf, &pos, handle,
2234                                                 mdd_object_capa(env, son),
2235                                                 uc->uc_cap &
2236                                                 CFS_CAP_SYS_RESOURCE_MASK);
2237
2238                 if (rc == sym_len)
2239                         rc = 0;
2240                 else
2241                         GOTO(err_initlized, rc = -EFAULT);
2242         }
2243
2244 err_initlized:
2245         if (unlikely(rc != 0)) {
2246                 int rc2;
2247                 if (S_ISDIR(attr->la_mode)) {
2248                         /* Drop the reference, no need to delete "."/"..",
2249                          * because the object to be destroied directly. */
2250                         rc2 = mdo_ref_del(env, son, handle);
2251                         if (rc2 != 0)
2252                                 GOTO(unlock, rc);
2253                 }
2254                 rc2 = mdo_ref_del(env, son, handle);
2255                 if (rc2 != 0)
2256                         GOTO(unlock, rc);
2257 err_destroy:
2258                 mdo_destroy(env, son, handle);
2259         }
2260 unlock:
2261         mdd_write_unlock(env, son);
2262         RETURN(rc);
2263 }
2264
2265 /*
2266  * Create object and insert it into namespace.
2267  */
2268 static int mdd_create(const struct lu_env *env, struct md_object *pobj,
2269                       const struct lu_name *lname, struct md_object *child,
2270                       struct md_op_spec *spec, struct md_attr* ma)
2271 {
2272         struct mdd_thread_info  *info = mdd_env_info(env);
2273         struct lu_attr          *la = &info->mti_la_for_fix;
2274         struct mdd_object       *mdd_pobj = md2mdd_obj(pobj);
2275         struct mdd_object       *son = md2mdd_obj(child);
2276         struct mdd_device       *mdd = mdo2mdd(pobj);
2277         struct lu_attr          *attr = &ma->ma_attr;
2278         struct thandle          *handle;
2279         struct lu_attr          *pattr = &info->mti_pattr;
2280         struct lu_buf           acl_buf;
2281         struct lu_buf           def_acl_buf;
2282         struct linkea_data      *ldata = &info->mti_link_data;
2283         const char              *name = lname->ln_name;
2284         struct dt_allocation_hint *hint = &mdd_env_info(env)->mti_hint;
2285         int                      rc;
2286         int                      rc2;
2287         ENTRY;
2288
2289         /*
2290          * Two operations have to be performed:
2291          *
2292          *  - an allocation of a new object (->do_create()), and
2293          *
2294          *  - an insertion into a parent index (->dio_insert()).
2295          *
2296          * Due to locking, operation order is not important, when both are
2297          * successful, *but* error handling cases are quite different:
2298          *
2299          *  - if insertion is done first, and following object creation fails,
2300          *  insertion has to be rolled back, but this operation might fail
2301          *  also leaving us with dangling index entry.
2302          *
2303          *  - if creation is done first, is has to be undone if insertion
2304          *  fails, leaving us with leaked space, which is neither good, nor
2305          *  fatal.
2306          *
2307          * It seems that creation-first is simplest solution, but it is
2308          * sub-optimal in the frequent
2309          *
2310          *         $ mkdir foo
2311          *         $ mkdir foo
2312          *
2313          * case, because second mkdir is bound to create object, only to
2314          * destroy it immediately.
2315          *
2316          * To avoid this follow local file systems that do double lookup:
2317          *
2318          *     0. lookup -> -EEXIST (mdd_create_sanity_check())
2319          *
2320          *     1. create            (mdd_object_create_internal())
2321          *
2322          *     2. insert            (__mdd_index_insert(), lookup again)
2323          */
2324
2325         rc = mdd_la_get(env, mdd_pobj, pattr, BYPASS_CAPA);
2326         if (rc != 0)
2327                 RETURN(rc);
2328
2329         /* Sanity checks before big job. */
2330         rc = mdd_create_sanity_check(env, pobj, pattr, lname, attr, spec);
2331         if (rc)
2332                 RETURN(rc);
2333
2334         if (OBD_FAIL_CHECK(OBD_FAIL_MDS_DQACQ_NET))
2335                 GOTO(out_free, rc = -EINPROGRESS);
2336
2337         handle = mdd_trans_create(env, mdd);
2338         if (IS_ERR(handle))
2339                 GOTO(out_free, rc = PTR_ERR(handle));
2340
2341         acl_buf.lb_buf = info->mti_xattr_buf;
2342         acl_buf.lb_len = sizeof(info->mti_xattr_buf);
2343         def_acl_buf.lb_buf = info->mti_key;
2344         def_acl_buf.lb_len = sizeof(info->mti_key);
2345         rc = mdd_acl_init(env, mdd_pobj, attr, &def_acl_buf, &acl_buf);
2346         if (rc < 0)
2347                 GOTO(out_stop, rc);
2348
2349         mdd_object_make_hint(env, mdd_pobj, son, attr, spec, hint);
2350
2351         memset(ldata, 0, sizeof(*ldata));
2352         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_BAD_PARENT2)) {
2353                 struct lu_fid tfid = *mdd_object_fid(mdd_pobj);
2354
2355                 tfid.f_oid--;
2356                 rc = mdd_linkea_prepare(env, son, NULL, NULL,
2357                                         &tfid, lname, 1, 0, ldata);
2358         } else {
2359                 rc = mdd_linkea_prepare(env, son, NULL, NULL,
2360                                         mdd_object_fid(mdd_pobj),
2361                                         lname, 1, 0, ldata);
2362         }
2363
2364         rc = mdd_declare_create(env, mdd, mdd_pobj, son, lname, attr,
2365                                 handle, spec, ldata, &def_acl_buf, &acl_buf,
2366                                 hint);
2367         if (rc)
2368                 GOTO(out_stop, rc);
2369
2370         rc = mdd_trans_start(env, mdd, handle);
2371         if (rc)
2372                 GOTO(out_stop, rc);
2373
2374         rc = mdd_object_create(env, mdd_pobj, son, attr, spec, &acl_buf,
2375                                &def_acl_buf, hint, handle);
2376         if (rc != 0)
2377                 GOTO(out_stop, rc);
2378
2379         if (unlikely(spec->sp_cr_flags & MDS_OPEN_VOLATILE)) {
2380                 mdd_write_lock(env, son, MOR_TGT_CHILD);
2381                 rc = __mdd_orphan_add(env, son, handle);
2382                 GOTO(out_volatile, rc);
2383         } else {
2384                 rc = __mdd_index_insert(env, mdd_pobj, mdo2fid(son),
2385                                         attr->la_mode, name, handle,
2386                                         mdd_object_capa(env, mdd_pobj));
2387                 if (rc != 0)
2388                         GOTO(err_created, rc);
2389
2390                 mdd_links_add(env, son, mdo2fid(mdd_pobj), lname, handle,
2391                               ldata, 1);
2392
2393                 /* update parent directory mtime/ctime */
2394                 *la = *attr;
2395                 la->la_valid = LA_CTIME | LA_MTIME;
2396                 rc = mdd_update_time(env, mdd_pobj, pattr, la, handle);
2397                 if (rc)
2398                         GOTO(err_insert, rc);
2399         }
2400
2401         EXIT;
2402 err_insert:
2403         if (rc != 0) {
2404                 int rc2;
2405
2406                 if (spec->sp_cr_flags & MDS_OPEN_VOLATILE)
2407                         rc2 = __mdd_orphan_del(env, son, handle);
2408                 else
2409                         rc2 = __mdd_index_delete(env, mdd_pobj, name,
2410                                                  S_ISDIR(attr->la_mode),
2411                                                  handle, BYPASS_CAPA);
2412                 if (rc2 != 0)
2413                         goto out_stop;
2414
2415 err_created:
2416                 mdd_write_lock(env, son, MOR_TGT_CHILD);
2417                 if (S_ISDIR(attr->la_mode)) {
2418                         /* Drop the reference, no need to delete "."/"..",
2419                          * because the object is to be destroyed directly. */
2420                         rc2 = mdo_ref_del(env, son, handle);
2421                         if (rc2 != 0) {
2422                                 mdd_write_unlock(env, son);
2423                                 goto out_stop;
2424                         }
2425                 }
2426 out_volatile:
2427                 /* For volatile files drop one link immediately, since there is
2428                  * no filename in the namespace, and save any error returned. */
2429                 rc2 = mdo_ref_del(env, son, handle);
2430                 if (rc2 != 0) {
2431                         mdd_write_unlock(env, son);
2432                         if (unlikely(rc == 0))
2433                                 rc = rc2;
2434                         goto out_stop;
2435                 }
2436
2437                 /* Don't destroy the volatile object on success */
2438                 if (likely(rc != 0))
2439                         mdo_destroy(env, son, handle);
2440                 mdd_write_unlock(env, son);
2441         }
2442
2443         if (rc == 0 && fid_is_namespace_visible(mdo2fid(son)) &&
2444             likely((spec->sp_cr_flags & MDS_OPEN_VOLATILE) == 0))
2445                 rc = mdd_changelog_ns_store(env, mdd,
2446                                 S_ISDIR(attr->la_mode) ? CL_MKDIR :
2447                                 S_ISREG(attr->la_mode) ? CL_CREATE :
2448                                 S_ISLNK(attr->la_mode) ? CL_SOFTLINK : CL_MKNOD,
2449                                 0, son, mdo2fid(mdd_pobj), NULL, NULL, lname,
2450                                 NULL, handle);
2451 out_stop:
2452         rc2 = mdd_trans_stop(env, mdd, rc, handle);
2453         if (rc == 0)
2454                 rc = rc2;
2455 out_free:
2456         if (ldata->ld_buf && ldata->ld_buf->lb_len > OBD_ALLOC_BIG)
2457                 /* if we vmalloced a large buffer drop it */
2458                 lu_buf_free(ldata->ld_buf);
2459
2460         /* The child object shouldn't be cached anymore */
2461         if (rc)
2462                 set_bit(LU_OBJECT_HEARD_BANSHEE,
2463                         &child->mo_lu.lo_header->loh_flags);
2464         return rc;
2465 }
2466
2467 /*
2468  * Get locks on parents in proper order
2469  * RETURN: < 0 - error, rename_order if successful
2470  */
2471 enum rename_order {
2472         MDD_RN_SAME,
2473         MDD_RN_SRCTGT,
2474         MDD_RN_TGTSRC
2475 };
2476
2477 static int mdd_rename_order(const struct lu_env *env,
2478                             struct mdd_device *mdd,
2479                             struct mdd_object *src_pobj,
2480                             const struct lu_attr *pattr,
2481                             struct mdd_object *tgt_pobj)
2482 {
2483         /* order of locking, 1 - tgt-src, 0 - src-tgt*/
2484         int rc;
2485         ENTRY;
2486
2487         if (src_pobj == tgt_pobj)
2488                 RETURN(MDD_RN_SAME);
2489
2490         /* compared the parent child relationship of src_p&tgt_p */
2491         if (lu_fid_eq(&mdd->mdd_root_fid, mdo2fid(src_pobj))){
2492                 rc = MDD_RN_SRCTGT;
2493         } else if (lu_fid_eq(&mdd->mdd_root_fid, mdo2fid(tgt_pobj))) {
2494                 rc = MDD_RN_TGTSRC;
2495         } else {
2496                 rc = mdd_is_parent(env, mdd, src_pobj, pattr, mdo2fid(tgt_pobj),
2497                                    NULL);
2498                 if (rc == -EREMOTE)
2499                         rc = 0;
2500
2501                 if (rc == 1)
2502                         rc = MDD_RN_TGTSRC;
2503                 else if (rc == 0)
2504                         rc = MDD_RN_SRCTGT;
2505         }
2506
2507         RETURN(rc);
2508 }
2509
2510 /* has not mdd_write{read}_lock on any obj yet. */
2511 static int mdd_rename_sanity_check(const struct lu_env *env,
2512                                    struct mdd_object *src_pobj,
2513                                    const struct lu_attr *pattr,
2514                                    struct mdd_object *tgt_pobj,
2515                                    const struct lu_attr *tpattr,
2516                                    struct mdd_object *sobj,
2517                                    const struct lu_attr *cattr,
2518                                    struct mdd_object *tobj,
2519                                    const struct lu_attr *tattr)
2520 {
2521         int rc = 0;
2522         ENTRY;
2523
2524         /* XXX: when get here, sobj must NOT be NULL,
2525          * the other case has been processed in cld_rename
2526          * before mdd_rename and enable MDS_PERM_BYPASS. */
2527         LASSERT(sobj);
2528
2529         rc = mdd_may_delete(env, src_pobj, pattr, sobj, cattr, NULL, 1, 0);
2530         if (rc)
2531                 RETURN(rc);
2532
2533         /* XXX: when get here, "tobj == NULL" means tobj must
2534          * NOT exist (neither on remote MDS, such case has been
2535          * processed in cld_rename before mdd_rename and enable
2536          * MDS_PERM_BYPASS).
2537          * So check may_create, but not check may_unlink. */
2538         if (tobj == NULL)
2539                 rc = mdd_may_create(env, tgt_pobj, tpattr, NULL,
2540                                     (src_pobj != tgt_pobj));
2541         else
2542                 rc = mdd_may_delete(env, tgt_pobj, tpattr, tobj, tattr, cattr,
2543                                     (src_pobj != tgt_pobj), 1);
2544
2545         if (!rc && !tobj && (src_pobj != tgt_pobj) && S_ISDIR(cattr->la_mode))
2546                 rc = __mdd_may_link(env, tgt_pobj, tpattr);
2547
2548         RETURN(rc);
2549 }
2550
2551 static int mdd_declare_rename(const struct lu_env *env,
2552                               struct mdd_device *mdd,
2553                               struct mdd_object *mdd_spobj,
2554                               struct mdd_object *mdd_tpobj,
2555                               struct mdd_object *mdd_sobj,
2556                               struct mdd_object *mdd_tobj,
2557                               const struct lu_name *tname,
2558                               const struct lu_name *sname,
2559                               struct md_attr *ma,
2560                               struct linkea_data *ldata,
2561                               struct thandle *handle)
2562 {
2563         struct lu_attr    *la = &mdd_env_info(env)->mti_la_for_fix;
2564         int rc;
2565
2566         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
2567         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
2568
2569         LASSERT(mdd_spobj);
2570         LASSERT(mdd_tpobj);
2571         LASSERT(mdd_sobj);
2572
2573         /* name from source dir */
2574         rc = mdo_declare_index_delete(env, mdd_spobj, sname->ln_name, handle);
2575         if (rc)
2576                 return rc;
2577
2578         /* .. from source child */
2579         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
2580                 /* source child can be directory,
2581                  * counted by source dir's nlink */
2582                 rc = mdo_declare_ref_del(env, mdd_spobj, handle);
2583                 if (rc)
2584                         return rc;
2585                 if (mdd_spobj != mdd_tpobj) {
2586                         rc = mdo_declare_index_delete(env, mdd_sobj, dotdot,
2587                                                       handle);
2588                         if (rc != 0)
2589                                 return rc;
2590
2591                         rc = mdo_declare_index_insert(env, mdd_sobj,
2592                                                       mdo2fid(mdd_tpobj),
2593                                                       S_IFDIR, dotdot, handle);
2594                         if (rc != 0)
2595                                 return rc;
2596                 }
2597
2598                 /* new target child can be directory,
2599                  * counted by target dir's nlink */
2600                 rc = mdo_declare_ref_add(env, mdd_tpobj, handle);
2601                 if (rc != 0)
2602                         return rc;
2603         }
2604
2605         la->la_valid = LA_CTIME | LA_MTIME;
2606         rc = mdo_declare_attr_set(env, mdd_spobj, la, handle);
2607         if (rc != 0)
2608                 return rc;
2609
2610         rc = mdo_declare_attr_set(env, mdd_tpobj, la, handle);
2611         if (rc != 0)
2612                 return rc;
2613
2614         la->la_valid = LA_CTIME;
2615         rc = mdo_declare_attr_set(env, mdd_sobj, la, handle);
2616         if (rc)
2617                 return rc;
2618
2619         rc = mdd_declare_links_add(env, mdd_sobj, handle, ldata,
2620                 S_ISREG(mdd_object_type(mdd_sobj)) ? MLAO_CHECK : MLAO_IGNORE);
2621         if (rc)
2622                 return rc;
2623
2624         /* new name */
2625         rc = mdo_declare_index_insert(env, mdd_tpobj, mdo2fid(mdd_sobj),
2626                                       mdd_object_type(mdd_sobj),
2627                                       tname->ln_name, handle);
2628         if (rc != 0)
2629                 return rc;
2630
2631         /* name from target dir (old name), we declare it unconditionally
2632          * as mdd_rename() calls delete unconditionally as well. so just
2633          * to balance declarations vs calls to change ... */
2634         rc = mdo_declare_index_delete(env, mdd_tpobj, tname->ln_name, handle);
2635         if (rc)
2636                 return rc;
2637
2638         if (mdd_tobj && mdd_object_exists(mdd_tobj)) {
2639                 /* delete target child in target parent directory */
2640                 rc = mdo_declare_ref_del(env, mdd_tobj, handle);
2641                 if (rc)
2642                         return rc;
2643
2644                 if (S_ISDIR(mdd_object_type(mdd_tobj))) {
2645                         /* target child can be directory,
2646                          * delete "." reference in target child directory */
2647                         rc = mdo_declare_ref_del(env, mdd_tobj, handle);
2648                         if (rc)
2649                                 return rc;
2650
2651                         /* delete ".." reference in target parent directory */
2652                         rc = mdo_declare_ref_del(env, mdd_tpobj, handle);
2653                         if (rc)
2654                                 return rc;
2655                 }
2656
2657                 la->la_valid = LA_CTIME;
2658                 rc = mdo_declare_attr_set(env, mdd_tobj, la, handle);
2659                 if (rc)
2660                         return rc;
2661
2662                 rc = mdd_declare_finish_unlink(env, mdd_tobj, handle);
2663                 if (rc)
2664                         return rc;
2665         }
2666
2667         rc = mdd_declare_changelog_store(env, mdd, tname, sname, handle);
2668         if (rc)
2669                 return rc;
2670
2671         return rc;
2672 }
2673
2674 /* src object can be remote that is why we use only fid and type of object */
2675 static int mdd_rename(const struct lu_env *env,
2676                       struct md_object *src_pobj, struct md_object *tgt_pobj,
2677                       const struct lu_fid *lf, const struct lu_name *lsname,
2678                       struct md_object *tobj, const struct lu_name *ltname,
2679                       struct md_attr *ma)
2680 {
2681         const char *sname = lsname->ln_name;
2682         const char *tname = ltname->ln_name;
2683         struct lu_attr    *la = &mdd_env_info(env)->mti_la_for_fix;
2684         struct mdd_object *mdd_spobj = md2mdd_obj(src_pobj); /* source parent */
2685         struct mdd_object *mdd_tpobj = md2mdd_obj(tgt_pobj);
2686         struct mdd_device *mdd = mdo2mdd(src_pobj);
2687         struct mdd_object *mdd_sobj = NULL;                  /* source object */
2688         struct mdd_object *mdd_tobj = NULL;
2689         struct lu_attr *cattr = MDD_ENV_VAR(env, cattr);
2690         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
2691         struct lu_attr *tattr = MDD_ENV_VAR(env, tattr);
2692         struct lu_attr *tpattr = MDD_ENV_VAR(env, tpattr);
2693         struct thandle *handle;
2694         struct linkea_data  *ldata = &mdd_env_info(env)->mti_link_data;
2695         const struct lu_fid *tpobj_fid = mdo2fid(mdd_tpobj);
2696         const struct lu_fid *spobj_fid = mdo2fid(mdd_spobj);
2697         bool is_dir;
2698         bool tobj_ref = 0;
2699         bool tobj_locked = 0;
2700         unsigned cl_flags = 0;
2701         int rc, rc2;
2702         ENTRY;
2703
2704         if (tobj)
2705                 mdd_tobj = md2mdd_obj(tobj);
2706
2707         mdd_sobj = mdd_object_find(env, mdd, lf);
2708
2709         rc = mdd_la_get(env, mdd_sobj, cattr, BYPASS_CAPA);
2710         if (rc)
2711                 GOTO(out_pending, rc);
2712
2713         rc = mdd_la_get(env, mdd_spobj, pattr, BYPASS_CAPA);
2714         if (rc)
2715                 GOTO(out_pending, rc);
2716
2717         if (mdd_tobj) {
2718                 rc = mdd_la_get(env, mdd_tobj, tattr, BYPASS_CAPA);
2719                 if (rc)
2720                         GOTO(out_pending, rc);
2721         }
2722
2723         rc = mdd_la_get(env, mdd_tpobj, tpattr, BYPASS_CAPA);
2724         if (rc)
2725                 GOTO(out_pending, rc);
2726
2727         rc = mdd_rename_sanity_check(env, mdd_spobj, pattr, mdd_tpobj, tpattr,
2728                                      mdd_sobj, cattr, mdd_tobj, tattr);
2729         if (rc)
2730                 GOTO(out_pending, rc);
2731
2732         rc = mdd_name_check(mdd, ltname);
2733         if (rc < 0)
2734                 GOTO(out_pending, rc);
2735
2736         handle = mdd_trans_create(env, mdd);
2737         if (IS_ERR(handle))
2738                 GOTO(out_pending, rc = PTR_ERR(handle));
2739
2740         memset(ldata, 0, sizeof(*ldata));
2741         mdd_linkea_prepare(env, mdd_sobj, NULL, NULL, mdd_object_fid(mdd_tpobj),
2742                            ltname, 1, 0, ldata);
2743         rc = mdd_declare_rename(env, mdd, mdd_spobj, mdd_tpobj, mdd_sobj,
2744                                 mdd_tobj, lsname, ltname, ma, ldata, handle);
2745         if (rc)
2746                 GOTO(stop, rc);
2747
2748         rc = mdd_trans_start(env, mdd, handle);
2749         if (rc)
2750                 GOTO(stop, rc);
2751
2752         /* FIXME: Should consider tobj and sobj too in rename_lock. */
2753         rc = mdd_rename_order(env, mdd, mdd_spobj, pattr, mdd_tpobj);
2754         if (rc < 0)
2755                 GOTO(cleanup_unlocked, rc);
2756
2757         is_dir = S_ISDIR(cattr->la_mode);
2758
2759         /* Remove source name from source directory */
2760         rc = __mdd_index_delete(env, mdd_spobj, sname, is_dir, handle,
2761                                 mdd_object_capa(env, mdd_spobj));
2762         if (rc)
2763                 GOTO(cleanup, rc);
2764
2765         /* "mv dir1 dir2" needs "dir1/.." link update */
2766         if (is_dir && mdd_sobj && !lu_fid_eq(spobj_fid, tpobj_fid)) {
2767                 rc = __mdd_index_delete_only(env, mdd_sobj, dotdot, handle,
2768                                         mdd_object_capa(env, mdd_sobj));
2769                 if (rc != 0)
2770                         GOTO(fixup_spobj2, rc);
2771
2772                 rc = __mdd_index_insert_only(env, mdd_sobj, tpobj_fid, S_IFDIR,
2773                                              dotdot, handle,
2774                                              mdd_object_capa(env, mdd_sobj));
2775                 if (rc != 0)
2776                         GOTO(fixup_spobj, rc);
2777         }
2778
2779         /* Remove target name from target directory
2780          * Here tobj can be remote one, so we do index_delete unconditionally
2781          * and -ENOENT is allowed.
2782          */
2783         rc = __mdd_index_delete(env, mdd_tpobj, tname, is_dir, handle,
2784                                 mdd_object_capa(env, mdd_tpobj));
2785         if (rc != 0) {
2786                 if (mdd_tobj) {
2787                         /* tname might been renamed to something else */
2788                         GOTO(fixup_spobj, rc);
2789                 }
2790                 if (rc != -ENOENT)
2791                         GOTO(fixup_spobj, rc);
2792         }
2793
2794         /* Insert new fid with target name into target dir */
2795         rc = __mdd_index_insert(env, mdd_tpobj, lf, cattr->la_mode,
2796                                 tname, handle, mdd_object_capa(env, mdd_tpobj));
2797         if (rc != 0)
2798                 GOTO(fixup_tpobj, rc);
2799
2800         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
2801         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
2802
2803         /* XXX: mdd_sobj must be local one if it is NOT NULL. */
2804         if (mdd_sobj) {
2805                 la->la_valid = LA_CTIME;
2806                 rc = mdd_update_time(env, mdd_sobj, cattr, la, handle);
2807                 if (rc)
2808                         GOTO(fixup_tpobj, rc);
2809         }
2810
2811         /* Remove old target object
2812          * For tobj is remote case cmm layer has processed
2813          * and set tobj to NULL then. So when tobj is NOT NULL,
2814          * it must be local one.
2815          */
2816         if (tobj && mdd_object_exists(mdd_tobj)) {
2817                 mdd_write_lock(env, mdd_tobj, MOR_TGT_CHILD);
2818                 tobj_locked = 1;
2819                 if (mdd_is_dead_obj(mdd_tobj)) {
2820                         /* shld not be dead, something is wrong */
2821                         CERROR("tobj is dead, something is wrong\n");
2822                         rc = -EINVAL;
2823                         goto cleanup;
2824                 }
2825                 mdo_ref_del(env, mdd_tobj, handle);
2826
2827                 /* Remove dot reference. */
2828                 if (S_ISDIR(tattr->la_mode))
2829                         mdo_ref_del(env, mdd_tobj, handle);
2830                 tobj_ref = 1;
2831
2832                 /* fetch updated nlink */
2833                 rc = mdd_la_get(env, mdd_tobj, tattr, BYPASS_CAPA);
2834                 if (rc != 0) {
2835                         CERROR("%s: Failed to get nlink for tobj "
2836                                 DFID": rc = %d\n",
2837                                 mdd2obd_dev(mdd)->obd_name,
2838                                 PFID(tpobj_fid), rc);
2839                         GOTO(fixup_tpobj, rc);
2840                 }
2841
2842                 la->la_valid = LA_CTIME;
2843                 rc = mdd_update_time(env, mdd_tobj, tattr, la, handle);
2844                 if (rc != 0) {
2845                         CERROR("%s: Failed to set ctime for tobj "
2846                                 DFID": rc = %d\n",
2847                                 mdd2obd_dev(mdd)->obd_name,
2848                                 PFID(tpobj_fid), rc);
2849                         GOTO(fixup_tpobj, rc);
2850                 }
2851
2852                 /* XXX: this transfer to ma will be removed with LOD/OSP */
2853                 ma->ma_attr = *tattr;
2854                 ma->ma_valid |= MA_INODE;
2855                 rc = mdd_finish_unlink(env, mdd_tobj, ma, mdd_tpobj, ltname,
2856                                        handle);
2857                 if (rc != 0) {
2858                         CERROR("%s: Failed to unlink tobj "
2859                                 DFID": rc = %d\n",
2860                                 mdd2obd_dev(mdd)->obd_name,
2861                                 PFID(tpobj_fid), rc);
2862                         GOTO(fixup_tpobj, rc);
2863                 }
2864
2865                 /* fetch updated nlink */
2866                 rc = mdd_la_get(env, mdd_tobj, tattr, BYPASS_CAPA);
2867                 if (rc != 0) {
2868                         CERROR("%s: Failed to get nlink for tobj "
2869                                 DFID": rc = %d\n",
2870                                 mdd2obd_dev(mdd)->obd_name,
2871                                 PFID(tpobj_fid), rc);
2872                         GOTO(fixup_tpobj, rc);
2873                 }
2874                 /* XXX: this transfer to ma will be removed with LOD/OSP */
2875                 ma->ma_attr = *tattr;
2876                 ma->ma_valid |= MA_INODE;
2877
2878                 if (tattr->la_nlink == 0) {
2879                         cl_flags |= CLF_RENAME_LAST;
2880                         if (mdd_hsm_archive_exists(env, mdd_tobj, ma))
2881                                 cl_flags |= CLF_RENAME_LAST_EXISTS;
2882                 }
2883         }
2884
2885         la->la_valid = LA_CTIME | LA_MTIME;
2886         rc = mdd_update_time(env, mdd_spobj, pattr, la, handle);
2887         if (rc)
2888                 GOTO(fixup_tpobj, rc);
2889
2890         if (mdd_spobj != mdd_tpobj) {
2891                 la->la_valid = LA_CTIME | LA_MTIME;
2892                 rc = mdd_update_time(env, mdd_tpobj, tpattr, la, handle);
2893         }
2894
2895         if (rc == 0 && mdd_sobj) {
2896                 mdd_write_lock(env, mdd_sobj, MOR_SRC_CHILD);
2897                 rc = mdd_links_rename(env, mdd_sobj, mdo2fid(mdd_spobj), lsname,
2898                                       mdo2fid(mdd_tpobj), ltname, handle, NULL,
2899                                       0, 0);
2900                 if (rc == -ENOENT)
2901                         /* Old files might not have EA entry */
2902                         mdd_links_add(env, mdd_sobj, mdo2fid(mdd_spobj),
2903                                       lsname, handle, NULL, 0);
2904                 mdd_write_unlock(env, mdd_sobj);
2905                 /* We don't fail the transaction if the link ea can't be
2906                    updated -- fid2path will use alternate lookup method. */
2907                 rc = 0;
2908         }
2909
2910         EXIT;
2911
2912 fixup_tpobj:
2913         if (rc) {
2914                 rc2 = __mdd_index_delete(env, mdd_tpobj, tname, is_dir, handle,
2915                                          BYPASS_CAPA);
2916                 if (rc2)
2917                         CWARN("tp obj fix error %d\n",rc2);
2918
2919                 if (mdd_tobj && mdd_object_exists(mdd_tobj) &&
2920                     !mdd_is_dead_obj(mdd_tobj)) {
2921                         if (tobj_ref) {
2922                                 mdo_ref_add(env, mdd_tobj, handle);
2923                                 if (is_dir)
2924                                         mdo_ref_add(env, mdd_tobj, handle);
2925                         }
2926
2927                         rc2 = __mdd_index_insert(env, mdd_tpobj,
2928                                                   mdo2fid(mdd_tobj),
2929                                                   mdd_object_type(mdd_tobj),
2930                                                   tname, handle, BYPASS_CAPA);
2931                         if (rc2 != 0)
2932                                 CWARN("tp obj fix error: rc = %d\n", rc2);
2933                 }
2934         }
2935
2936 fixup_spobj:
2937         if (rc && is_dir && mdd_sobj && mdd_spobj != mdd_tpobj) {
2938                 rc2 = __mdd_index_delete_only(env, mdd_sobj, dotdot, handle,
2939                                               BYPASS_CAPA);
2940
2941                 if (rc2)
2942                         CWARN("%s: sp obj dotdot delete error: rc = %d\n",
2943                                mdd2obd_dev(mdd)->obd_name, rc2);
2944
2945
2946                 rc2 = __mdd_index_insert_only(env, mdd_sobj, spobj_fid, S_IFDIR,
2947                                               dotdot, handle, BYPASS_CAPA);
2948                 if (rc2 != 0)
2949                         CWARN("%s: sp obj dotdot insert error: rc = %d\n",
2950                               mdd2obd_dev(mdd)->obd_name, rc2);
2951         }
2952
2953 fixup_spobj2:
2954         if (rc != 0) {
2955                 rc2 = __mdd_index_insert(env, mdd_spobj, lf,
2956                                          mdd_object_type(mdd_sobj), sname,
2957                                          handle, BYPASS_CAPA);
2958                 if (rc2 != 0)
2959                         CWARN("sp obj fix error: rc = %d\n", rc2);
2960         }
2961
2962 cleanup:
2963         if (tobj_locked)
2964                 mdd_write_unlock(env, mdd_tobj);
2965
2966 cleanup_unlocked:
2967         if (rc == 0)
2968                 rc = mdd_changelog_ns_store(env, mdd, CL_RENAME, cl_flags,
2969                                             mdd_tobj, tpobj_fid, lf, spobj_fid,
2970                                             ltname, lsname, handle);
2971
2972 stop:
2973         mdd_trans_stop(env, mdd, rc, handle);
2974
2975 out_pending:
2976         mdd_object_put(env, mdd_sobj);
2977         return rc;
2978 }
2979
2980 /**
2981  * During migration once the parent FID has been changed,
2982  * we need update the parent FID in linkea.
2983  **/
2984 static int mdd_linkea_update_child_internal(const struct lu_env *env,
2985                                             struct mdd_object *parent,
2986                                             struct mdd_object *child,
2987                                             const char *name, int namelen,
2988                                             struct thandle *handle,
2989                                             bool declare)
2990 {
2991         struct mdd_thread_info  *info = mdd_env_info(env);
2992         struct linkea_data      ldata = {0};
2993         struct lu_buf           *buf = &info->mti_link_buf;
2994         int                     count;
2995         int                     rc = 0;
2996
2997         ENTRY;
2998
2999         buf = lu_buf_check_and_alloc(buf, PATH_MAX);
3000         if (buf->lb_buf == NULL)
3001                 RETURN(-ENOMEM);
3002
3003         ldata.ld_buf = buf;
3004         rc = mdd_links_read(env, child, &ldata);
3005         if (rc != 0) {
3006                 if (rc == -ENOENT || rc == -ENODATA)
3007                         rc = 0;
3008                 RETURN(rc);
3009         }
3010
3011         LASSERT(ldata.ld_leh != NULL);
3012         ldata.ld_lee = (struct link_ea_entry *)(ldata.ld_leh + 1);
3013         for (count = 0; count < ldata.ld_leh->leh_reccount; count++) {
3014                 struct mdd_device *mdd = mdo2mdd(&child->mod_obj);
3015                 struct lu_name lname;
3016                 struct lu_fid  fid;
3017
3018                 linkea_entry_unpack(ldata.ld_lee, &ldata.ld_reclen,
3019                                     &lname, &fid);
3020
3021                 if (strncmp(lname.ln_name, name, namelen) != 0 ||
3022                     lu_fid_eq(&fid, mdd_object_fid(parent))) {
3023                         ldata.ld_lee = (struct link_ea_entry *)
3024                                        ((char *)ldata.ld_lee +
3025                                         ldata.ld_reclen);
3026                         continue;
3027                 }
3028
3029                 CDEBUG(D_INFO, "%s: update "DFID" with %.*s:"DFID"\n",
3030                        mdd2obd_dev(mdd)->obd_name, PFID(mdd_object_fid(child)),
3031                        lname.ln_namelen, lname.ln_name,
3032                        PFID(mdd_object_fid(parent)));
3033                 /* update to the new parent fid */
3034                 linkea_entry_pack(ldata.ld_lee, &lname,
3035                                   mdd_object_fid(parent));
3036                 if (declare)
3037                         rc = mdd_declare_links_add(env, child, handle, &ldata,
3038                                                    MLAO_IGNORE);
3039                 else
3040                         rc = mdd_links_write(env, child, &ldata, handle);
3041                 break;
3042         }
3043         RETURN(rc);
3044 }
3045
3046 static int mdd_linkea_declare_update_child(const struct lu_env *env,
3047                                            struct mdd_object *parent,
3048                                            struct mdd_object *child,
3049                                            const char *name, int namelen,
3050                                            struct thandle *handle)
3051 {
3052         return mdd_linkea_update_child_internal(env, parent, child, name,
3053                                                 namelen, handle, true);
3054 }
3055
3056 static int mdd_linkea_update_child(const struct lu_env *env,
3057                                    struct mdd_object *parent,
3058                                    struct mdd_object *child,
3059                                    const char *name, int namelen,
3060                                    struct thandle *handle)
3061 {
3062         return mdd_linkea_update_child_internal(env, parent, child, name,
3063                                                 namelen, handle, false);
3064 }
3065
3066 static int mdd_update_linkea_internal(const struct lu_env *env,
3067                                       struct mdd_object *mdd_pobj,
3068                                       struct mdd_object *mdd_sobj,
3069                                       struct mdd_object *mdd_tobj,
3070                                       const struct lu_name *child_name,
3071                                       struct thandle *handle,
3072                                       int declare)
3073 {
3074         struct mdd_thread_info  *info = mdd_env_info(env);
3075         struct linkea_data      *ldata = &info->mti_link_data;
3076         int                     count;
3077         int                     rc = 0;
3078         ENTRY;
3079
3080         rc = mdd_links_read(env, mdd_sobj, ldata);
3081         if (rc != 0) {
3082                 if (rc == -ENOENT || rc == -ENODATA)
3083                         rc = 0;
3084                 RETURN(rc);
3085         }
3086
3087         if (declare)
3088                 rc = mdd_declare_links_add(env, mdd_tobj, handle, ldata,
3089                                            MLAO_IGNORE);
3090         else
3091                 rc = mdd_links_write(env, mdd_tobj, ldata, handle);
3092
3093         if (rc != 0)
3094                 RETURN(rc);
3095
3096         /* If it is mulitple links file, we need update the name entry for
3097          * all parent */
3098         LASSERT(ldata->ld_leh != NULL);
3099         ldata->ld_lee = (struct link_ea_entry *)(ldata->ld_leh + 1);
3100         for (count = 0; count < ldata->ld_leh->leh_reccount; count++) {
3101                 struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3102                 struct mdd_object       *pobj;
3103                 struct lu_name          lname;
3104                 struct lu_fid           fid;
3105
3106                 linkea_entry_unpack(ldata->ld_lee, &ldata->ld_reclen,
3107                                     &lname, &fid);
3108                 ldata->ld_lee = (struct link_ea_entry *)((char *)ldata->ld_lee +
3109                                                          ldata->ld_reclen);
3110                 pobj = mdd_object_find(env, mdd, &fid);
3111                 if (IS_ERR(pobj)) {
3112                         CWARN("%s: cannot find obj "DFID": rc = %ld\n",
3113                               mdd2obd_dev(mdd)->obd_name, PFID(&fid),
3114                               PTR_ERR(pobj));
3115                         continue;
3116                 }
3117
3118                 if (!mdd_object_exists(pobj)) {
3119                         CDEBUG(D_INFO, "%s: obj "DFID" does not exist\n",
3120                               mdd2obd_dev(mdd)->obd_name, PFID(&fid));
3121                         GOTO(next_put, rc);
3122                 }
3123
3124                 if (pobj == mdd_pobj &&
3125                     lname.ln_namelen == child_name->ln_namelen &&
3126                     strncmp(lname.ln_name, child_name->ln_name,
3127                             lname.ln_namelen) == 0) {
3128                         CDEBUG(D_INFO, "%s: skip its own %s: "DFID"\n",
3129                               mdd2obd_dev(mdd)->obd_name, child_name->ln_name,
3130                               PFID(&fid));
3131                         GOTO(next_put, rc);
3132                 }
3133
3134                 CDEBUG(D_INFO, "%s: update "DFID" with "DNAME":"DFID"\n",
3135                        mdd2obd_dev(mdd)->obd_name, PFID(mdd_object_fid(pobj)),
3136                        PNAME(&lname), PFID(mdd_object_fid(mdd_tobj)));
3137
3138                 if (declare) {
3139                         /* Remove source name from source directory */
3140                         /* Insert new fid with target name into target dir */
3141                         rc = mdo_declare_index_delete(env, pobj, lname.ln_name,
3142                                                       handle);
3143                         if (rc != 0)
3144                                 GOTO(next_put, rc);
3145
3146                         rc = mdo_declare_index_insert(env, pobj,
3147                                         mdd_object_fid(mdd_tobj),
3148                                         mdd_object_type(mdd_tobj),
3149                                         lname.ln_name, handle);
3150                         if (rc != 0)
3151                                 GOTO(next_put, rc);
3152
3153                         rc = mdo_declare_ref_add(env, mdd_tobj, handle);
3154                         if (rc)
3155                                 GOTO(next_put, rc);
3156
3157                         rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3158                         if (rc)
3159                                 GOTO(next_put, rc);
3160                 } else {
3161                         rc = __mdd_index_delete(env, pobj, lname.ln_name,
3162                                                 0, handle,
3163                                                 mdd_object_capa(env, pobj));
3164                         if (rc)
3165                                 GOTO(next_put, rc);
3166
3167                         rc = __mdd_index_insert(env, pobj,
3168                                         mdd_object_fid(mdd_tobj),
3169                                         mdd_object_type(mdd_tobj),
3170                                         lname.ln_name, handle,
3171                                         mdd_object_capa(env, pobj));
3172                         if (rc != 0)
3173                                 GOTO(next_put, rc);
3174
3175                         mdd_write_lock(env, mdd_tobj, MOR_SRC_CHILD);
3176                         rc = mdo_ref_add(env, mdd_tobj, handle);
3177                         mdd_write_unlock(env, mdd_tobj);
3178                         if (rc)
3179                                 GOTO(next_put, rc);
3180
3181                         mdd_write_lock(env, mdd_sobj, MOR_TGT_CHILD);
3182                         mdo_ref_del(env, mdd_sobj, handle);
3183                         mdd_write_unlock(env, mdd_sobj);
3184                 }
3185 next_put:
3186                 mdd_object_put(env, pobj);
3187                 if (rc != 0)
3188                         break;
3189         }
3190
3191         RETURN(rc);
3192 }
3193
3194 static int mdd_migrate_xattrs(const struct lu_env *env,
3195                               struct mdd_object *mdd_sobj,
3196                               struct mdd_object *mdd_tobj)
3197 {
3198         struct mdd_thread_info  *info = mdd_env_info(env);
3199         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3200         char                    *xname;
3201         struct thandle          *handle;
3202         struct lu_buf           xbuf;
3203         int                     xlen;
3204         int                     rem;
3205         int                     xsize;
3206         int                     list_xsize;
3207         struct lu_buf           list_xbuf;
3208         int                     rc;
3209
3210         /* retrieve xattr list from the old object */
3211         list_xsize = mdo_xattr_list(env, mdd_sobj, &LU_BUF_NULL,
3212                                     mdd_object_capa(env, mdd_sobj));
3213         if (list_xsize == -ENODATA)
3214                 return 0;
3215
3216         if (list_xsize < 0)
3217                 return list_xsize;
3218
3219         lu_buf_check_and_alloc(&info->mti_big_buf, list_xsize);
3220         if (info->mti_big_buf.lb_buf == NULL)
3221                 return -ENOMEM;
3222
3223         list_xbuf.lb_buf = info->mti_big_buf.lb_buf;
3224         list_xbuf.lb_len = list_xsize;
3225         rc = mdo_xattr_list(env, mdd_sobj, &list_xbuf,
3226                             mdd_object_capa(env, mdd_sobj));
3227         if (rc < 0)
3228                 return rc;
3229         rc = 0;
3230         rem = list_xsize;
3231         xname = list_xbuf.lb_buf;
3232         while (rem > 0) {
3233                 xlen = strnlen(xname, rem - 1) + 1;
3234                 if (strcmp(XATTR_NAME_LINK, xname) == 0 ||
3235                     strcmp(XATTR_NAME_LMA, xname) == 0 ||
3236                     strcmp(XATTR_NAME_LMV, xname) == 0)
3237                         goto next;
3238
3239                 /* For directory, if there are default layout, migrate here */
3240                 if (strcmp(XATTR_NAME_LOV, xname) == 0 &&
3241                     !S_ISDIR(lu_object_attr(&mdd_sobj->mod_obj.mo_lu)))
3242                         goto next;
3243
3244                 xsize = mdo_xattr_get(env, mdd_sobj, &LU_BUF_NULL,
3245                                       xname,
3246                                       mdd_object_capa(env, mdd_sobj));
3247                 if (xsize == -ENODATA)
3248                         goto next;
3249                 if (xsize < 0)
3250                         GOTO(out, rc);
3251
3252                 lu_buf_check_and_alloc(&info->mti_link_buf, xsize);
3253                 if (info->mti_link_buf.lb_buf == NULL)
3254                         GOTO(out, rc = -ENOMEM);
3255
3256                 xbuf.lb_len = xsize;
3257                 xbuf.lb_buf = info->mti_link_buf.lb_buf;
3258                 rc = mdo_xattr_get(env, mdd_sobj, &xbuf, xname,
3259                                    mdd_object_capa(env, mdd_sobj));
3260                 if (rc == -ENODATA)
3261                         goto next;
3262                 if (rc < 0)
3263                         GOTO(out, rc);
3264
3265                 handle = mdd_trans_create(env, mdd);
3266                 if (IS_ERR(handle))
3267                         GOTO(out, rc = PTR_ERR(handle));
3268
3269                 rc = mdo_declare_xattr_set(env, mdd_tobj, &xbuf, xname, 0,
3270                                            handle);
3271                 if (rc != 0)
3272                         GOTO(stop_trans, rc);
3273                 /* Note: this transaction is part of migration, and it is not
3274                  * the last step of migration, so we set th_local = 1 to avoid
3275                  * update last rcvd for this transaction */
3276                 handle->th_local = 1;
3277                 rc = mdd_trans_start(env, mdd, handle);
3278                 if (rc != 0)
3279                         GOTO(stop_trans, rc);
3280
3281                 rc = mdo_xattr_set(env, mdd_tobj, &xbuf, xname, 0, handle,
3282                                    mdd_object_capa(env, mdd_sobj));
3283                 if (rc == -EEXIST)
3284                         GOTO(stop_trans, rc = 0);
3285
3286                 if (rc != 0)
3287                         GOTO(stop_trans, rc);
3288 stop_trans:
3289                 mdd_trans_stop(env, mdd, rc, handle);
3290                 if (rc != 0)
3291                         GOTO(out, rc);
3292 next:
3293                 rem -= xlen;
3294                 memmove(xname, xname + xlen, rem);
3295         }
3296 out:
3297         return rc;
3298 }
3299
3300 static int mdd_declare_migrate_create(const struct lu_env *env,
3301                                       struct mdd_object *mdd_pobj,
3302                                       struct mdd_object *mdd_sobj,
3303                                       struct mdd_object *mdd_tobj,
3304                                       struct md_op_spec *spec,
3305                                       struct lu_attr *la,
3306                                       union lmv_mds_md *mgr_ea,
3307                                       struct thandle *handle)
3308 {
3309         struct lu_attr          *la_flag = MDD_ENV_VAR(env, la_for_fix);
3310         const struct lu_buf     *buf;
3311         int                     rc;
3312         int                     mgr_easize;
3313
3314         rc = mdd_declare_object_create_internal(env, mdd_pobj, mdd_tobj, la,
3315                                                 handle, spec, NULL);
3316         if (rc != 0)
3317                 return rc;
3318
3319         rc = mdd_declare_object_initialize(env, mdd_pobj, mdd_tobj, la,
3320                                            handle);
3321         if (rc != 0)
3322                 return rc;
3323
3324         if (S_ISLNK(la->la_mode)) {
3325                 const char *target_name = spec->u.sp_symname;
3326                 int sym_len = strlen(target_name);
3327                 const struct lu_buf *buf;
3328
3329                 buf = mdd_buf_get_const(env, target_name, sym_len);
3330                 rc = dt_declare_record_write(env, mdd_object_child(mdd_tobj),
3331                                              buf, 0, handle);
3332                 if (rc != 0)
3333                         return rc;
3334         }
3335
3336         if (spec->u.sp_ea.eadata != NULL && spec->u.sp_ea.eadatalen != 0) {
3337                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
3338                                         spec->u.sp_ea.eadatalen);
3339                 rc = mdo_declare_xattr_set(env, mdd_tobj, buf, XATTR_NAME_LOV,
3340                                            0, handle);
3341                 if (rc)
3342                         return rc;
3343         }
3344
3345         mgr_easize = lmv_mds_md_size(2, LMV_MAGIC_V1);
3346         buf = mdd_buf_get_const(env, mgr_ea, mgr_easize);
3347         rc = mdo_declare_xattr_set(env, mdd_sobj, buf, XATTR_NAME_LMV,
3348                                    0, handle);
3349         if (rc)
3350                 return rc;
3351
3352         la_flag->la_valid = LA_FLAGS;
3353         la_flag->la_flags = la->la_flags | LUSTRE_IMMUTABLE_FL;
3354         mdd_flags_xlate(mdd_sobj, la_flag->la_flags);
3355         rc = mdo_declare_attr_set(env, mdd_sobj, la_flag, handle);
3356
3357         return rc;
3358 }
3359
3360 static int mdd_migrate_create(const struct lu_env *env,
3361                               struct mdd_object *mdd_pobj,
3362                               struct mdd_object *mdd_sobj,
3363                               struct mdd_object *mdd_tobj,
3364                               struct lu_attr *la)
3365 {
3366         struct mdd_thread_info  *info = mdd_env_info(env);
3367         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3368         struct md_op_spec       *spec = &info->mti_spec;
3369         struct lu_buf           lmm_buf = { 0 };
3370         struct lu_buf           link_buf = { 0 };
3371         const struct lu_buf     *buf;
3372         struct thandle          *handle;
3373         struct lmv_mds_md_v1    *mgr_ea;
3374         struct lu_attr          *la_flag = MDD_ENV_VAR(env, la_for_fix);
3375         struct dt_allocation_hint *hint = &mdd_env_info(env)->mti_hint;
3376         int                     mgr_easize;
3377         int                     rc;
3378         ENTRY;
3379
3380         /* prepare spec for create */
3381         memset(spec, 0, sizeof(*spec));
3382         spec->sp_cr_lookup = 0;
3383         spec->sp_feat = &dt_directory_features;
3384         if (S_ISLNK(la->la_mode)) {
3385                 buf = lu_buf_check_and_alloc(
3386                                 &mdd_env_info(env)->mti_big_buf,
3387                                 la->la_size + 1);
3388                 link_buf = *buf;
3389                 link_buf.lb_len = la->la_size + 1;
3390                 rc = mdd_readlink(env, &mdd_sobj->mod_obj, &link_buf);
3391                 if (rc <= 0) {
3392                         rc = rc != 0 ? rc : -EFAULT;
3393                         CERROR("%s: "DFID" readlink failed: rc = %d\n",
3394                                mdd2obd_dev(mdd)->obd_name,
3395                                PFID(mdd_object_fid(mdd_sobj)), rc);
3396                         RETURN(rc);
3397                 }
3398                 spec->u.sp_symname = link_buf.lb_buf;
3399         } else if S_ISREG(la->la_mode) {
3400                 /* retrieve lov of the old object */
3401                 rc = mdd_get_lov_ea(env, mdd_sobj, &lmm_buf);
3402                 if (rc != 0 && rc != -ENODATA)
3403                         RETURN(rc);
3404                 if (lmm_buf.lb_buf != NULL && lmm_buf.lb_len != 0) {
3405                         spec->u.sp_ea.eadata = lmm_buf.lb_buf;
3406                         spec->u.sp_ea.eadatalen = lmm_buf.lb_len;
3407                         spec->sp_cr_flags |= MDS_OPEN_HAS_EA;
3408                 }
3409         }
3410
3411         mgr_ea = (struct lmv_mds_md_v1 *)info->mti_xattr_buf;
3412         memset(mgr_ea, 0, sizeof(*mgr_ea));
3413         mgr_ea->lmv_magic = cpu_to_le32(LMV_MAGIC_V1);
3414         mgr_ea->lmv_stripe_count = cpu_to_le32(2);
3415         mgr_ea->lmv_master_mdt_index = mdd_seq_site(mdd)->ss_node_id;
3416         mgr_ea->lmv_hash_type = cpu_to_le32(LMV_HASH_FLAG_MIGRATION);
3417         fid_cpu_to_le(&mgr_ea->lmv_stripe_fids[0], mdd_object_fid(mdd_sobj));
3418         fid_cpu_to_le(&mgr_ea->lmv_stripe_fids[1], mdd_object_fid(mdd_tobj));
3419
3420         mdd_object_make_hint(env, mdd_pobj, mdd_tobj, la, spec, hint);
3421
3422         handle = mdd_trans_create(env, mdd);
3423         if (IS_ERR(handle))
3424                 GOTO(out_free, rc = PTR_ERR(handle));
3425
3426         /* Note: this transaction is part of migration, and it is not
3427          * the last step of migration, so we set th_local = 1 to avoid
3428          * update last rcvd for this transaction */
3429         handle->th_local = 1;
3430         rc = mdd_declare_migrate_create(env, mdd_pobj, mdd_sobj, mdd_tobj,
3431                                         spec, la,
3432                                         (union lmv_mds_md *)info->mti_xattr_buf,
3433                                         handle);
3434         if (rc != 0)
3435                 GOTO(stop_trans, rc);
3436
3437         rc = mdd_trans_start(env, mdd, handle);
3438         if (rc != 0)
3439                 GOTO(stop_trans, rc);
3440
3441         /* create the target object */
3442         rc = mdd_object_create(env, mdd_pobj, mdd_tobj, la, spec, NULL, NULL,
3443                                hint, handle);
3444         if (rc != 0)
3445                 GOTO(stop_trans, rc);
3446
3447         /* Set MIGRATE EA on the source inode, so once the migration needs
3448          * to be re-done during failover, the re-do process can locate the
3449          * target object which is already being created. */
3450         mgr_easize = lmv_mds_md_size(2, LMV_MAGIC_V1);
3451         buf = mdd_buf_get_const(env, mgr_ea, mgr_easize);
3452         rc = mdo_xattr_set(env, mdd_sobj, buf, XATTR_NAME_LMV, 0,
3453                            handle, mdd_object_capa(env, mdd_sobj));
3454         if (rc != 0)
3455                 GOTO(stop_trans, rc);
3456
3457         /* Set immutable flag, so any modification is disabled until
3458          * the migration is done. Once the migration is interrupted,
3459          * if the resume process find the migrating object has both
3460          * IMMUTALBE flag and MIGRATE EA, it need to clear IMMUTABLE
3461          * flag and approve the migration */
3462         la_flag->la_valid = LA_FLAGS;
3463         la_flag->la_flags = la->la_flags | LUSTRE_IMMUTABLE_FL;
3464         mdd_flags_xlate(mdd_sobj, la_flag->la_flags);
3465         rc = mdo_attr_set(env, mdd_sobj, la_flag, handle,
3466                           mdd_object_capa(env, mdd_sobj));
3467 stop_trans:
3468         if (handle != NULL)
3469                 mdd_trans_stop(env, mdd, rc, handle);
3470 out_free:
3471         if (lmm_buf.lb_buf != NULL)
3472                 OBD_FREE(lmm_buf.lb_buf, lmm_buf.lb_len);
3473         RETURN(rc);
3474 }
3475
3476 static int mdd_migrate_entries(const struct lu_env *env,
3477                                struct mdd_object *mdd_sobj,
3478                                struct mdd_object *mdd_tobj)
3479 {
3480         struct dt_object        *next = mdd_object_child(mdd_sobj);
3481         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3482         struct dt_object        *dt_tobj = mdd_object_child(mdd_tobj);
3483         struct thandle          *handle;
3484         struct dt_it            *it;
3485         const struct dt_it_ops  *iops;
3486         int                      rc;
3487         int                      result;
3488         struct lu_dirent        *ent;
3489         ENTRY;
3490
3491         OBD_ALLOC(ent, NAME_MAX + sizeof(*ent) + 1);
3492         if (ent == NULL)
3493                 RETURN(-ENOMEM);
3494
3495         if (!dt_try_as_dir(env, next))
3496                 GOTO(out_ent, rc = -ENOTDIR);
3497         /*
3498          * iterate directories
3499          */
3500         iops = &next->do_index_ops->dio_it;
3501         it = iops->init(env, next, LUDA_FID | LUDA_TYPE,
3502                         mdd_object_capa(env, mdd_sobj));
3503         if (IS_ERR(it))
3504                 GOTO(out_ent, rc = PTR_ERR(it));
3505
3506         rc = iops->load(env, it, 0);
3507         if (rc == 0)
3508                 rc = iops->next(env, it);
3509         else if (rc > 0)
3510                 rc = 0;
3511         /*
3512          * At this point and across for-loop:
3513          *
3514          *  rc == 0 -> ok, proceed.
3515          *  rc >  0 -> end of directory.
3516          *  rc <  0 -> error.
3517          */
3518         do {
3519                 struct mdd_object       *child;
3520                 char                    *name = mdd_env_info(env)->mti_key;
3521                 int                     len;
3522                 int                     recsize;
3523                 int                     is_dir;
3524                 bool                    target_exist = false;
3525
3526                 len = iops->key_size(env, it);
3527                 if (len == 0)
3528                         goto next;
3529
3530                 result = iops->rec(env, it, (struct dt_rec *)ent,
3531                                    LUDA_FID | LUDA_TYPE);
3532                 if (result == -ESTALE)
3533                         goto next;
3534                 if (result != 0) {
3535                         rc = result;
3536                         goto out;
3537                 }
3538
3539                 fid_le_to_cpu(&ent->lde_fid, &ent->lde_fid);
3540                 recsize = le16_to_cpu(ent->lde_reclen);
3541
3542                 /* Insert new fid with target name into target dir */
3543                 if ((ent->lde_namelen == 1 && ent->lde_name[0] == '.') ||
3544                     (ent->lde_namelen == 2 && ent->lde_name[0] == '.' &&
3545                      ent->lde_name[1] == '.'))
3546                         goto next;
3547
3548                 child = mdd_object_find(env, mdd, &ent->lde_fid);
3549                 if (IS_ERR(child))
3550                         GOTO(out, rc = PTR_ERR(child));
3551
3552                 is_dir = S_ISDIR(mdd_object_type(child));
3553
3554                 snprintf(name, ent->lde_namelen + 1, "%s", ent->lde_name);
3555
3556                 /* Check whether the name has been inserted to the target */
3557                 if (dt_try_as_dir(env, dt_tobj)) {
3558                         struct lu_fid *fid = &mdd_env_info(env)->mti_fid2;
3559
3560                         rc = dt_lookup(env, dt_tobj, (struct dt_rec *)fid,
3561                                        (struct dt_key *)name,
3562                                        mdd_object_capa(env, mdd_tobj));
3563                         if (unlikely(rc == 0))
3564                                 target_exist = true;
3565                 }
3566
3567                 handle = mdd_trans_create(env, mdd);
3568                 if (IS_ERR(handle))
3569                         GOTO(out, rc = PTR_ERR(handle));
3570
3571                 /* Note: this transaction is part of migration, and it is not
3572                  * the last step of migration, so we set th_local = 1 to avoid
3573                  * updating last rcvd for this transaction */
3574                 handle->th_local = 1;
3575                 if (likely(!target_exist)) {
3576                         rc = mdo_declare_index_insert(env, mdd_tobj,
3577                                                       &ent->lde_fid,
3578                                                       mdd_object_type(child),
3579                                                       name, handle);
3580                         if (rc != 0)
3581                                 GOTO(out_put, rc);
3582
3583                         if (is_dir) {
3584                                 rc = mdo_declare_ref_add(env, mdd_tobj, handle);
3585                                 if (rc != 0)
3586                                         GOTO(out_put, rc);
3587                         }
3588                 }
3589
3590                 rc = mdo_declare_index_delete(env, mdd_sobj, name, handle);
3591                 if (rc != 0)
3592                         GOTO(out_put, rc);
3593
3594                 if (is_dir) {
3595                         rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3596                         if (rc != 0)
3597                                 GOTO(out_put, rc);
3598
3599                         /* Update .. for child */
3600                         rc = mdo_declare_index_delete(env, child, dotdot,
3601                                                       handle);
3602                         if (rc != 0)
3603                                 GOTO(out_put, rc);
3604
3605                         rc = mdo_declare_index_insert(env, child,
3606                                                       mdd_object_fid(mdd_tobj),
3607                                                       S_IFDIR, dotdot, handle);
3608                         if (rc != 0)
3609                                 GOTO(out_put, rc);
3610                 }
3611
3612                 rc = mdd_linkea_declare_update_child(env, mdd_tobj,
3613                                                      child, name,
3614                                                      strlen(name),
3615                                                      handle);
3616                 if (rc != 0)
3617                         GOTO(out_put, rc);
3618
3619                 rc = mdd_trans_start(env, mdd, handle);
3620                 if (rc != 0) {
3621                         CERROR("%s: transaction start failed: rc = %d\n",
3622                                mdd2obd_dev(mdd)->obd_name, rc);
3623                         GOTO(out_put, rc);
3624                 }
3625
3626                 if (likely(!target_exist)) {
3627                         rc = __mdd_index_insert(env, mdd_tobj, &ent->lde_fid,
3628                                                 mdd_object_type(child),
3629                                                 name, handle,
3630                                                 mdd_object_capa(env, mdd_tobj));
3631                         if (rc != 0)
3632                                 GOTO(out_put, rc);
3633
3634                         if (is_dir) {
3635                                 rc = mdo_ref_add(env, mdd_tobj, handle);
3636                                 if (rc != 0)
3637                                         GOTO(out_put, rc);
3638
3639                         }
3640                 }
3641
3642                 rc = __mdd_index_delete(env, mdd_sobj, name, is_dir, handle,
3643                                         mdd_object_capa(env, mdd_sobj));
3644                 if (rc != 0)
3645                         GOTO(out_put, rc);
3646
3647                 if (is_dir) {
3648                         rc = __mdd_index_delete_only(env, child, dotdot, handle,
3649                                                    mdd_object_capa(env, child));
3650                         if (rc != 0)
3651                                 GOTO(out_put, rc);
3652
3653                         rc = __mdd_index_insert_only(env, child,
3654                                          mdd_object_fid(mdd_tobj), S_IFDIR,
3655                                          dotdot, handle,
3656                                          mdd_object_capa(env, child));
3657                         if (rc != 0)
3658                                 GOTO(out_put, rc);
3659                 }
3660
3661                 rc = mdd_linkea_update_child(env, mdd_tobj, child, name,
3662                                              strlen(name), handle);
3663
3664 out_put:
3665                 mdd_object_put(env, child);
3666                 mdd_trans_stop(env, mdd, rc, handle);
3667                 if (rc != 0)
3668                         GOTO(out, rc);
3669 next:
3670                 result = iops->next(env, it);
3671                 if (OBD_FAIL_CHECK(OBD_FAIL_MIGRATE_ENTRIES))
3672                         GOTO(out, rc = -EINTR);
3673
3674                 if (result == -ESTALE)
3675                         goto next;
3676         } while (result == 0);
3677 out:
3678         iops->put(env, it);
3679         iops->fini(env, it);
3680 out_ent:
3681         OBD_FREE(ent, NAME_MAX + sizeof(*ent) + 1);
3682         RETURN(rc);
3683 }
3684
3685 static int mdd_declare_update_linkea(const struct lu_env *env,
3686                                      struct mdd_object *mdd_pobj,
3687                                      struct mdd_object *mdd_sobj,
3688                                      struct mdd_object *mdd_tobj,
3689                                      struct thandle *handle,
3690                                      const struct lu_name *child_name)
3691 {
3692         return mdd_update_linkea_internal(env, mdd_pobj, mdd_sobj, mdd_tobj,
3693                                           child_name, handle, 1);
3694 }
3695
3696 static int mdd_update_linkea(const struct lu_env *env,
3697                              struct mdd_object *mdd_pobj,
3698                              struct mdd_object *mdd_sobj,
3699                              struct mdd_object *mdd_tobj,
3700                              struct thandle *handle,
3701                              const struct lu_name *child_name)
3702 {
3703         return mdd_update_linkea_internal(env, mdd_pobj, mdd_sobj, mdd_tobj,
3704                                           child_name, handle, 0);
3705 }
3706
3707 static int mdd_declare_migrate_update_name(const struct lu_env *env,
3708                                            struct mdd_object *mdd_pobj,
3709                                            struct mdd_object *mdd_sobj,
3710                                            struct mdd_object *mdd_tobj,
3711                                            const struct lu_name *lname,
3712                                            struct lu_attr *la,
3713                                            struct lu_attr *parent_la,
3714                                            struct thandle *handle)
3715 {
3716         struct lu_attr  *la_flag = MDD_ENV_VAR(env, tattr);
3717         int             rc;
3718
3719         /* Revert IMMUTABLE flag */
3720         la_flag->la_valid = LA_FLAGS;
3721         la_flag->la_flags = la->la_flags & ~LUSTRE_IMMUTABLE_FL;
3722         mdd_flags_xlate(mdd_sobj, la_flag->la_flags);
3723         rc = mdo_declare_attr_set(env, mdd_sobj, la_flag, handle);
3724         if (rc != 0)
3725                 return rc;
3726
3727         /* delete entry from source dir */
3728         rc = mdo_declare_index_delete(env, mdd_pobj, lname->ln_name, handle);
3729         if (rc != 0)
3730                 return rc;
3731
3732         rc = mdd_declare_update_linkea(env, mdd_pobj, mdd_sobj,
3733                                        mdd_tobj, handle, lname);
3734         if (rc != 0)
3735                 return rc;
3736
3737         if (S_ISREG(mdd_object_type(mdd_sobj))) {
3738                 rc = mdo_declare_xattr_del(env, mdd_sobj, XATTR_NAME_LOV,
3739                                            handle);
3740                 if (rc != 0)
3741                         return rc;
3742         }
3743
3744         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
3745                 rc = mdo_declare_ref_del(env, mdd_pobj, handle);
3746                 if (rc != 0)
3747                         return rc;
3748         }
3749
3750         /* new name */
3751         rc = mdo_declare_index_insert(env, mdd_pobj, mdo2fid(mdd_tobj),
3752                                       mdd_object_type(mdd_tobj),
3753                                       lname->ln_name, handle);
3754         if (rc != 0)
3755                 return rc;
3756
3757         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
3758                 rc = mdo_declare_ref_add(env, mdd_pobj, handle);
3759                 if (rc != 0)
3760                         return rc;
3761         }
3762
3763         /* delete old object */
3764         rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3765         if (rc != 0)
3766                 return rc;
3767
3768         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
3769                 /* delete old object */
3770                 rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3771                 if (rc != 0)
3772                         return rc;
3773                 /* set nlink to 0 */
3774                 rc = mdo_declare_attr_set(env, mdd_sobj, la, handle);
3775                 if (rc != 0)
3776                         return rc;
3777         }
3778
3779         rc = mdd_declare_finish_unlink(env, mdd_sobj, handle);
3780         if (rc)
3781                 return rc;
3782
3783         rc = mdo_declare_attr_set(env, mdd_pobj, parent_la, handle);
3784
3785         return rc;
3786 }
3787
3788 static int mdd_migrate_update_name(const struct lu_env *env,
3789                                    struct mdd_object *mdd_pobj,
3790                                    struct mdd_object *mdd_sobj,
3791                                    struct mdd_object *mdd_tobj,
3792                                    const struct lu_name *lname,
3793                                    struct md_attr *ma)
3794 {
3795         struct lu_attr          *p_la = MDD_ENV_VAR(env, la_for_fix);
3796         struct lu_attr          *so_attr = MDD_ENV_VAR(env, cattr);
3797         struct lu_attr          *la_flag = MDD_ENV_VAR(env, tattr);
3798         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3799         struct thandle          *handle;
3800         int                     is_dir = S_ISDIR(mdd_object_type(mdd_sobj));
3801         const char              *name = lname->ln_name;
3802         int                     rc;
3803         ENTRY;
3804
3805         /* update time for parent */
3806         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
3807         p_la->la_ctime = p_la->la_mtime = ma->ma_attr.la_ctime;
3808         p_la->la_valid = LA_CTIME;
3809
3810         rc = mdd_la_get(env, mdd_sobj, so_attr, mdd_object_capa(env, mdd_sobj));
3811         if (rc != 0)
3812                 RETURN(rc);
3813
3814         handle = mdd_trans_create(env, mdd);
3815         if (IS_ERR(handle))
3816                 RETURN(PTR_ERR(handle));
3817
3818         rc = mdd_declare_migrate_update_name(env, mdd_pobj, mdd_sobj, mdd_tobj,
3819                                              lname, so_attr, p_la, handle);
3820         if (rc != 0) {
3821                 /* If the migration can not be fit in one transaction, just
3822                  * leave it in the original MDT */
3823                 if (rc == -E2BIG)
3824                         GOTO(stop_trans, rc = 0);
3825                 else
3826                         GOTO(stop_trans, rc);
3827         }
3828
3829         CDEBUG(D_INFO, "%s: update "DFID"/"DFID" with %s:"DFID"\n",
3830                mdd2obd_dev(mdd)->obd_name, PFID(mdd_object_fid(mdd_pobj)),
3831                PFID(mdd_object_fid(mdd_sobj)), lname->ln_name,
3832                PFID(mdd_object_fid(mdd_tobj)));
3833
3834         rc = mdd_trans_start(env, mdd, handle);
3835         if (rc != 0)
3836                 GOTO(stop_trans, rc);
3837
3838         /* Revert IMMUTABLE flag */
3839         la_flag->la_valid = LA_FLAGS;
3840         la_flag->la_flags = so_attr->la_flags & ~LUSTRE_IMMUTABLE_FL;
3841         mdd_flags_xlate(mdd_sobj, la_flag->la_flags);
3842         rc = mdo_attr_set(env, mdd_sobj, la_flag, handle,
3843                           mdd_object_capa(env, mdd_pobj));
3844         if (rc != 0)
3845                 GOTO(stop_trans, rc);
3846
3847         /* Remove source name from source directory */
3848         rc = __mdd_index_delete(env, mdd_pobj, name, is_dir, handle,
3849                                 mdd_object_capa(env, mdd_pobj));
3850         if (rc != 0)
3851                 GOTO(stop_trans, rc);
3852
3853         rc = mdd_update_linkea(env, mdd_pobj, mdd_sobj, mdd_tobj,
3854                                handle, lname);
3855         if (rc != 0)
3856                 GOTO(stop_trans, rc);
3857
3858         if (S_ISREG(so_attr->la_mode)) {
3859                 if (so_attr->la_nlink == 1) {
3860                         rc = mdo_xattr_del(env, mdd_sobj, XATTR_NAME_LOV,
3861                                            handle,
3862                                            mdd_object_capa(env, mdd_sobj));
3863                         if (rc != 0 && rc != -ENODATA)
3864                                 GOTO(stop_trans, rc);
3865                 }
3866         }
3867
3868         /* Insert new fid with target name into target dir */
3869         rc = __mdd_index_insert(env, mdd_pobj, mdd_object_fid(mdd_tobj),
3870                                 mdd_object_type(mdd_tobj), name,
3871                                 handle, mdd_object_capa(env, mdd_pobj));
3872         if (rc != 0)
3873                 GOTO(stop_trans, rc);
3874
3875         rc = mdd_links_add(env, mdd_tobj, mdo2fid(mdd_pobj), lname, handle,
3876                            NULL, 1);
3877         if (rc != 0)
3878                 GOTO(stop_trans, rc);
3879
3880         mdd_write_lock(env, mdd_sobj, MOR_SRC_CHILD);
3881         mdo_ref_del(env, mdd_sobj, handle);
3882         if (is_dir)
3883                 mdo_ref_del(env, mdd_sobj, handle);
3884
3885         /* Get the attr again after ref_del */
3886         rc = mdd_la_get(env, mdd_sobj, so_attr,
3887                         mdd_object_capa(env, mdd_sobj));
3888         if (rc != 0)
3889                 GOTO(out_unlock, rc);
3890
3891         ma->ma_attr = *so_attr;
3892         ma->ma_valid |= MA_INODE;
3893         rc = mdd_finish_unlink(env, mdd_sobj, ma, mdd_pobj, lname, handle);
3894         if (rc != 0)
3895                 GOTO(out_unlock, rc);
3896
3897         rc = mdd_attr_set_internal(env, mdd_pobj, p_la, handle, 0);
3898         if (rc != 0)
3899                 GOTO(out_unlock, rc);
3900
3901 out_unlock:
3902         mdd_write_unlock(env, mdd_sobj);
3903
3904 stop_trans:
3905         mdd_trans_stop(env, mdd, rc, handle);
3906
3907         RETURN(rc);
3908 }
3909
3910 /**
3911  * Check whether we should migrate the file/dir
3912  * return val
3913  *      < 0  permission check failed or other error.
3914  *      = 0  the file can be migrated.
3915  *      > 0  the file does not need to be migrated, mostly
3916  *           for multiple link file
3917  **/
3918 static int mdd_migrate_sanity_check(const struct lu_env *env,
3919                                     struct mdd_object *pobj,
3920                                     const struct lu_attr *pattr,
3921                                     struct mdd_object *sobj,
3922                                     struct lu_attr *sattr)
3923 {
3924         struct mdd_thread_info  *info = mdd_env_info(env);
3925         struct linkea_data      *ldata = &info->mti_link_data;
3926         int                     mgr_easize;
3927         struct lu_buf           *mgr_buf;
3928         int                     count;
3929         int                     rc;
3930
3931         ENTRY;
3932
3933         mgr_easize = lmv_mds_md_size(2, LMV_MAGIC_V1);
3934         mgr_buf = lu_buf_check_and_alloc(&info->mti_big_buf, mgr_easize);
3935         if (mgr_buf->lb_buf == NULL)
3936                 RETURN(-ENOMEM);
3937
3938         rc = mdo_xattr_get(env, sobj, mgr_buf, XATTR_NAME_LMV,
3939                            mdd_object_capa(env, sobj));
3940         if (rc > 0) {
3941                 union lmv_mds_md *lmm = mgr_buf->lb_buf;
3942
3943                 /* If the object has migrateEA, it means IMMUTE flag
3944                  * is being set by previous migration process, so it
3945                  * needs to override the IMMUTE flag, otherwise the
3946                  * following sanity check will fail */
3947                 if (le32_to_cpu(lmm->lmv_md_v1.lmv_hash_type) &
3948                                                 LMV_HASH_FLAG_MIGRATION) {
3949                         struct mdd_device *mdd = mdo2mdd(&sobj->mod_obj);
3950
3951                         sattr->la_flags &= ~LUSTRE_IMMUTABLE_FL;
3952                         sobj->mod_flags &= ~IMMUTE_OBJ;
3953                         CDEBUG(D_HA, "%s: "DFID" override IMMUTE FLAG\n",
3954                                mdd2obd_dev(mdd)->obd_name,
3955                                PFID(mdd_object_fid(sobj)));
3956                 }
3957         }
3958
3959         rc = mdd_rename_sanity_check(env, pobj, pattr, pobj, pattr,
3960                                      sobj, sattr, NULL, NULL);
3961         if (rc != 0)
3962                 RETURN(rc);
3963
3964         /* Then it will check if the file should be migrated. If the file
3965          * has mulitple links, we only need migrate the file if all of its
3966          * entries has been migrated to the remote MDT */
3967         if (!S_ISREG(sattr->la_mode) || sattr->la_nlink < 2)
3968                 RETURN(0);
3969
3970         rc = mdd_links_read(env, sobj, ldata);
3971         if (rc != 0) {
3972                 /* For multiple links files, if there are no linkEA data at all,
3973                  * means the file might be created before linkEA is enabled, and
3974                  * all all of its links should not be migrated yet, otherwise
3975                  * it should have some linkEA there */
3976                 if (rc == -ENOENT || rc == -ENODATA)
3977                         RETURN(1);
3978                 RETURN(rc);
3979         }
3980
3981         /* If it is mulitple links file, we need update the name entry for
3982          * all parent */
3983         LASSERT(ldata->ld_leh != NULL);
3984         ldata->ld_lee = (struct link_ea_entry *)(ldata->ld_leh + 1);
3985         for (count = 0; count < ldata->ld_leh->leh_reccount; count++) {
3986                 struct mdd_device       *mdd = mdo2mdd(&sobj->mod_obj);
3987                 struct mdd_object       *lpobj;
3988                 struct lu_name          lname;
3989                 struct lu_fid           fid;
3990
3991                 linkea_entry_unpack(ldata->ld_lee, &ldata->ld_reclen,
3992                                     &lname, &fid);
3993                 ldata->ld_lee = (struct link_ea_entry *)((char *)ldata->ld_lee +
3994                                                          ldata->ld_reclen);
3995                 lpobj = mdd_object_find(env, mdd, &fid);
3996                 if (IS_ERR(lpobj)) {
3997                         CWARN("%s: cannot find obj "DFID": rc = %ld\n",
3998                               mdd2obd_dev(mdd)->obd_name, PFID(&fid),
3999                               PTR_ERR(lpobj));
4000                         continue;
4001                 }
4002
4003                 if (!mdd_object_exists(lpobj) || mdd_object_remote(lpobj)) {
4004                         CDEBUG(D_INFO, DFID"%.*s: is on remote MDT.\n",
4005                                PFID(&fid), lname.ln_namelen, lname.ln_name);
4006                         mdd_object_put(env, lpobj);
4007                         continue;
4008                 }
4009
4010                 CDEBUG(D_INFO, DFID"still has local entry %.*s "DFID"\n",
4011                        PFID(mdd_object_fid(sobj)), lname.ln_namelen,
4012                        lname.ln_name, PFID(&fid));
4013                 mdd_object_put(env, lpobj);
4014                 rc = 1;
4015                 break;
4016         }
4017
4018         RETURN(rc);
4019 }
4020
4021 static int mdd_migrate(const struct lu_env *env, struct md_object *pobj,
4022                        struct md_object *sobj, const struct lu_name *lname,
4023                        struct md_object *tobj, struct md_attr *ma)
4024 {
4025         struct mdd_object       *mdd_pobj = md2mdd_obj(pobj);
4026         struct mdd_device       *mdd = mdo2mdd(pobj);
4027         struct mdd_object       *mdd_sobj = md2mdd_obj(sobj);
4028         struct mdd_object       *mdd_tobj = NULL;
4029         struct lu_attr          *so_attr = MDD_ENV_VAR(env, cattr);
4030         struct lu_attr          *pattr = MDD_ENV_VAR(env, pattr);
4031         int                     rc;
4032
4033         ENTRY;
4034         /* If the file will being migrated, it will check whether
4035          * the file is being opened by someone else right now */
4036         mdd_read_lock(env, mdd_sobj, MOR_SRC_CHILD);
4037         if (mdd_sobj->mod_count >= 1) {
4038                 CERROR("%s: "DFID"%s is already opened count %d: rc = %d\n",
4039                        mdd2obd_dev(mdd)->obd_name,
4040                        PFID(mdd_object_fid(mdd_sobj)), lname->ln_name,
4041                        mdd_sobj->mod_count, -EBUSY);
4042                 mdd_read_unlock(env, mdd_sobj);
4043                 GOTO(put, rc = -EBUSY);
4044         }
4045         mdd_read_unlock(env, mdd_sobj);
4046
4047         rc = mdd_la_get(env, mdd_sobj, so_attr, mdd_object_capa(env, mdd_sobj));
4048         if (rc != 0)
4049                 GOTO(put, rc);
4050
4051         rc = mdd_la_get(env, mdd_pobj, pattr, BYPASS_CAPA);
4052         if (rc != 0)
4053                 GOTO(put, rc);
4054
4055         rc = mdd_migrate_sanity_check(env, mdd_pobj, pattr, mdd_sobj, so_attr);
4056         if (rc != 0) {
4057                 if (rc > 0)
4058                         rc = 0;
4059                 GOTO(put, rc);
4060         }
4061
4062         /* Sigh, it is impossible to finish all of migration in a single
4063          * transaction, for example migrating big directory entries to the
4064          * new MDT, it needs insert all of name entries of children in the
4065          * new directory.
4066          *
4067          * So migration will be done in multiple steps and transactions.
4068          *
4069          * 1. create an orphan object on the remote MDT in one transaction.
4070          * 2. migrate extend attributes to the new target file/directory.
4071          * 3. For directory, migrate the entries to the new MDT and update
4072          * linkEA of each children. Because we can not migrate all entries
4073          * in a single transaction, so the migrating directory will become
4074          * a striped directory during migration, so once the process is
4075          * interrupted, the directory is still accessible. (During lookup,
4076          * client will locate the name by searching both original and target
4077          * object).
4078          * 4. Finally, update the name/FID to point to the new file/directory
4079          * in a separate transaction.
4080          */
4081
4082         /* step 1: Check whether the orphan object has been created, and create
4083          * orphan object on the remote MDT if needed */
4084         mdd_tobj = md2mdd_obj(tobj);
4085         if (!mdd_object_exists(mdd_tobj)) {
4086                 rc = mdd_migrate_create(env, mdd_pobj, mdd_sobj, mdd_tobj,
4087                                         so_attr);
4088                 if (rc != 0)
4089                         GOTO(put, rc);
4090         }
4091
4092         /* step 2: migrate xattr */
4093         rc = mdd_migrate_xattrs(env, mdd_sobj, mdd_tobj);
4094         if (rc != 0)
4095                 GOTO(put, rc);
4096
4097         /* step 3: migrate name entries to the orphan object */
4098         if (S_ISDIR(lu_object_attr(&mdd_sobj->mod_obj.mo_lu))) {
4099                 rc = mdd_migrate_entries(env, mdd_sobj, mdd_tobj);
4100                 if (rc != 0)
4101                         GOTO(put, rc);
4102                 if (unlikely(OBD_FAIL_CHECK_RESET(OBD_FAIL_MIGRATE_NET_REP,
4103                                                   OBD_FAIL_MDS_REINT_NET_REP)))
4104                         GOTO(put, rc = 0);
4105         }
4106
4107         /* step 4: update name entry to the new object */
4108         rc = mdd_migrate_update_name(env, mdd_pobj, mdd_sobj, mdd_tobj, lname,
4109                                      ma);
4110         if (rc != 0)
4111                 GOTO(put, rc);
4112 put:
4113         RETURN(rc);
4114 }
4115
4116 const struct md_dir_operations mdd_dir_ops = {
4117         .mdo_is_subdir     = mdd_is_subdir,
4118         .mdo_lookup        = mdd_lookup,
4119         .mdo_create        = mdd_create,
4120         .mdo_rename        = mdd_rename,
4121         .mdo_link          = mdd_link,
4122         .mdo_unlink        = mdd_unlink,
4123         .mdo_create_data   = mdd_create_data,
4124         .mdo_migrate       = mdd_migrate,
4125 };