lustre/mdd/mdd_dir.c

   1 /*
   2  * GPL HEADER START
   3  *
   4  * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
   5  *
   6  * This program is free software; you can redistribute it and/or modify
   7  * it under the terms of the GNU General Public License version 2 only,
   8  * as published by the Free Software Foundation.
   9  *
  10  * This program is distributed in the hope that it will be useful, but
  11  * WITHOUT ANY WARRANTY; without even the implied warranty of
  12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13  * General Public License version 2 for more details (a copy is included
  14  * in the LICENSE file that accompanied this code).
  15  *
  16  * You should have received a copy of the GNU General Public License
  17  * version 2 along with this program; If not, see
  18  * http://www.sun.com/software/products/lustre/docs/GPLv2.pdf
  19  *
  20  * Please contact Sun Microsystems, Inc., 4150 Network Circle, Santa Clara,
  21  * CA 95054 USA or visit www.sun.com if you need additional information or
  22  * have any questions.
  23  *
  24  * GPL HEADER END
  25  */
  26 /*
  27  * Copyright (c) 2007, 2010, Oracle and/or its affiliates. All rights reserved.
  28  * Use is subject to license terms.
  29  *
  30  * Copyright (c) 2011, 2014, Intel Corporation.
  31  */
  32 /*
  33  * This file is part of Lustre, http://www.lustre.org/
  34  * Lustre is a trademark of Sun Microsystems, Inc.
  35  *
  36  * lustre/mdd/mdd_dir.c
  37  *
  38  * Lustre Metadata Server (mdd) routines
  39  *
  40  * Author: Wang Di <wangdi@intel.com>
  41  */
  42
  43 #define DEBUG_SUBSYSTEM S_MDS
  44
  45 #include <obd_class.h>
  46 #include <obd_support.h>
  47 #include <lustre_mds.h>
  48 #include <lustre_fid.h>
  49
  50 #include "mdd_internal.h"
  51
  52 static const char dot[] = ".";
  53 static const char dotdot[] = "..";
  54
  55 static struct lu_name lname_dotdot = {
  56         (char *) dotdot,
  57         sizeof(dotdot) - 1
  58 };
  59
  60 static inline int
  61 mdd_name_check(struct mdd_device *m, const struct lu_name *ln)
  62 {
  63         if (!lu_name_is_valid(ln))
  64                 return -EINVAL;
  65         else if (ln->ln_namelen > m->mdd_dt_conf.ddp_max_name_len)
  66                 return -ENAMETOOLONG;
  67         else
  68                 return 0;
  69 }
  70
  71 /* Get FID from name and parent */
  72 static int
  73 __mdd_lookup(const struct lu_env *env, struct md_object *pobj,
  74              const struct lu_attr *pattr, const struct lu_name *lname,
  75              struct lu_fid* fid, int mask)
  76 {
  77         const char *name                = lname->ln_name;
  78         const struct dt_key *key        = (const struct dt_key *)name;
  79         struct mdd_object *mdd_obj      = md2mdd_obj(pobj);
  80         struct mdd_device *m            = mdo2mdd(pobj);
  81         struct dt_object *dir           = mdd_object_child(mdd_obj);
  82         int rc;
  83         ENTRY;
  84
  85         if (unlikely(mdd_is_dead_obj(mdd_obj)))
  86                 RETURN(-ESTALE);
  87
  88         if (mdd_object_remote(mdd_obj)) {
  89                 CDEBUG(D_INFO, "%s: Object "DFID" locates on remote server\n",
  90                        mdd2obd_dev(m)->obd_name, PFID(mdo2fid(mdd_obj)));
  91         } else if (!mdd_object_exists(mdd_obj)) {
  92                 RETURN(-ESTALE);
  93         }
  94
  95         rc = mdd_permission_internal_locked(env, mdd_obj, pattr, mask,
  96                                             MOR_TGT_PARENT);
  97         if (rc)
  98                 RETURN(rc);
  99
 100         if (likely(S_ISDIR(mdd_object_type(mdd_obj)) &&
 101                    dt_try_as_dir(env, dir)))
 102                 rc = dt_lookup(env, dir, (struct dt_rec *)fid, key);
 103         else
 104                 rc = -ENOTDIR;
 105
 106         RETURN(rc);
 107 }
 108
 109 int mdd_lookup(const struct lu_env *env,
 110                struct md_object *pobj, const struct lu_name *lname,
 111                struct lu_fid *fid, struct md_op_spec *spec)
 112 {
 113         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
 114         int rc;
 115         ENTRY;
 116
 117         rc = mdd_la_get(env, md2mdd_obj(pobj), pattr);
 118         if (rc != 0)
 119                 RETURN(rc);
 120
 121         rc = __mdd_lookup(env, pobj, pattr, lname, fid,
 122                           (spec != NULL && spec->sp_permitted) ? 0 : MAY_EXEC);
 123         RETURN(rc);
 124 }
 125
 126 /**
 127  * Get parent FID of the directory
 128  *
 129  * Read parent FID from linkEA, if that fails, then do lookup
 130  * dotdot to get the parent FID.
 131  *
 132  * \param[in] env       execution environment
 133  * \param[in] obj       object from which to find the parent FID
 134  * \param[in] attr      attribute of the object
 135  * \param[out] fid      fid to get the parent FID
 136  *
 137  * \retval              0 if getting the parent FID succeeds.
 138  * \retval              negative errno if getting the parent FID fails.
 139  **/
 140 static inline int mdd_parent_fid(const struct lu_env *env,
 141                                  struct mdd_object *obj,
 142                                  const struct lu_attr *attr,
 143                                  struct lu_fid *fid)
 144 {
 145         struct mdd_thread_info  *info = mdd_env_info(env);
 146         struct linkea_data      ldata = { NULL };
 147         struct lu_buf           *buf = &info->mti_link_buf;
 148         struct lu_name          lname;
 149         int                     rc = 0;
 150
 151         ENTRY;
 152
 153         LASSERT(S_ISDIR(mdd_object_type(obj)));
 154
 155         buf = lu_buf_check_and_alloc(buf, PATH_MAX);
 156         if (buf->lb_buf == NULL)
 157                 GOTO(lookup, rc = 0);
 158
 159         ldata.ld_buf = buf;
 160         rc = mdd_links_read(env, obj, &ldata);
 161         if (rc != 0)
 162                 GOTO(lookup, rc);
 163
 164         LASSERT(ldata.ld_leh != NULL);
 165         /* Directory should only have 1 parent */
 166         if (ldata.ld_leh->leh_reccount > 1)
 167                 GOTO(lookup, rc);
 168
 169         ldata.ld_lee = (struct link_ea_entry *)(ldata.ld_leh + 1);
 170
 171         linkea_entry_unpack(ldata.ld_lee, &ldata.ld_reclen, &lname, fid);
 172         if (likely(fid_is_sane(fid)))
 173                 RETURN(0);
 174 lookup:
 175         rc =  __mdd_lookup(env, &obj->mod_obj, attr, &lname_dotdot, fid, 0);
 176         RETURN(rc);
 177 }
 178
 179 /*
 180  * For root fid use special function, which does not compare version component
 181  * of fid. Version component is different for root fids on all MDTs.
 182  */
 183 int mdd_is_root(struct mdd_device *mdd, const struct lu_fid *fid)
 184 {
 185         return fid_seq(&mdd->mdd_root_fid) == fid_seq(fid) &&
 186                 fid_oid(&mdd->mdd_root_fid) == fid_oid(fid);
 187 }
 188
 189 /*
 190  * return 1: if lf is the fid of the ancestor of p1;
 191  * return 0: if not;
 192  *
 193  * return -EREMOTE: if remote object is found, in this
 194  * case fid of remote object is saved to @pf;
 195  *
 196  * otherwise: values < 0, errors.
 197  */
 198 static int mdd_is_parent(const struct lu_env *env,
 199                         struct mdd_device *mdd,
 200                         struct mdd_object *p1,
 201                         const struct lu_attr *attr,
 202                         const struct lu_fid *lf,
 203                         struct lu_fid *pf)
 204 {
 205         struct mdd_object *parent = NULL;
 206         struct lu_fid *pfid;
 207         int rc;
 208         ENTRY;
 209
 210         LASSERT(!lu_fid_eq(mdo2fid(p1), lf));
 211         pfid = &mdd_env_info(env)->mti_fid;
 212
 213         /* Check for root first. */
 214         if (mdd_is_root(mdd, mdo2fid(p1)))
 215                 RETURN(0);
 216
 217         for(;;) {
 218                 /* this is done recursively */
 219                 rc = mdd_parent_fid(env, p1, attr, pfid);
 220                 if (rc)
 221                         GOTO(out, rc);
 222                 if (mdd_is_root(mdd, pfid))
 223                         GOTO(out, rc = 0);
 224                 if (lu_fid_eq(pfid, &mdd->mdd_local_root_fid))
 225                         GOTO(out, rc = 0);
 226                 if (lu_fid_eq(pfid, lf))
 227                         GOTO(out, rc = 1);
 228                 if (parent != NULL)
 229                         mdd_object_put(env, parent);
 230
 231                 parent = mdd_object_find(env, mdd, pfid);
 232                 if (IS_ERR(parent))
 233                         GOTO(out, rc = PTR_ERR(parent));
 234                 p1 = parent;
 235         }
 236         EXIT;
 237 out:
 238         if (parent && !IS_ERR(parent))
 239                 mdd_object_put(env, parent);
 240         return rc;
 241 }
 242
 243 /*
 244  * No permission check is needed.
 245  *
 246  * returns 1: if fid is ancestor of @mo;
 247  * returns 0: if fid is not an ancestor of @mo;
 248  *
 249  * returns EREMOTE if remote object is found, fid of remote object is saved to
 250  * @fid;
 251  *
 252  * returns < 0: if error
 253  */
 254 int mdd_is_subdir(const struct lu_env *env, struct md_object *mo,
 255                   const struct lu_fid *fid, struct lu_fid *sfid)
 256 {
 257         struct mdd_device *mdd = mdo2mdd(mo);
 258         struct lu_attr *attr = MDD_ENV_VAR(env, cattr);
 259         int rc;
 260         ENTRY;
 261
 262         if (!S_ISDIR(mdd_object_type(md2mdd_obj(mo))))
 263                 RETURN(0);
 264
 265         rc = mdd_la_get(env, md2mdd_obj(mo), attr);
 266         if (rc != 0)
 267                 RETURN(rc);
 268
 269         rc = mdd_is_parent(env, mdd, md2mdd_obj(mo), attr, fid, sfid);
 270         if (rc == 0) {
 271                 /* found root */
 272                 fid_zero(sfid);
 273         } else if (rc == 1) {
 274                 /* found @fid is parent */
 275                 *sfid = *fid;
 276                 rc = 0;
 277         }
 278         RETURN(rc);
 279 }
 280
 281 /*
 282  * Check that @dir contains no entries except (possibly) dot and dotdot.
 283  *
 284  * Returns:
 285  *
 286  *             0        empty
 287  *      -ENOTDIR        not a directory object
 288  *    -ENOTEMPTY        not empty
 289  *           -ve        other error
 290  *
 291  */
 292 static int mdd_dir_is_empty(const struct lu_env *env,
 293                             struct mdd_object *dir)
 294 {
 295         struct dt_it     *it;
 296         struct dt_object *obj;
 297         const struct dt_it_ops *iops;
 298         int result;
 299         ENTRY;
 300
 301         obj = mdd_object_child(dir);
 302         if (!dt_try_as_dir(env, obj))
 303                 RETURN(-ENOTDIR);
 304
 305         iops = &obj->do_index_ops->dio_it;
 306         it = iops->init(env, obj, LUDA_64BITHASH);
 307         if (!IS_ERR(it)) {
 308                 result = iops->get(env, it, (const struct dt_key *)"");
 309                 if (result > 0) {
 310                         int i;
 311                         for (result = 0, i = 0; result == 0 && i < 3; ++i)
 312                                 result = iops->next(env, it);
 313                         if (result == 0)
 314                                 result = -ENOTEMPTY;
 315                         else if (result == 1)
 316                                 result = 0;
 317                 } else if (result == 0)
 318                         /*
 319                          * Huh? Index contains no zero key?
 320                          */
 321                         result = -EIO;
 322
 323                 iops->put(env, it);
 324                 iops->fini(env, it);
 325         } else
 326                 result = PTR_ERR(it);
 327         RETURN(result);
 328 }
 329
 330 /**
 331  * Determine if the target object can be hard linked, and right now it only
 332  * checks if the link count reach the maximum limit. Note: for ldiskfs, the
 333  * directory nlink count might exceed the maximum link count(see
 334  * osd_object_ref_add), so it only check nlink for non-directories.
 335  *
 336  * \param[in] env       thread environment
 337  * \param[in] obj       object being linked to
 338  * \param[in] la        attributes of \a obj
 339  *
 340  * \retval              0 if \a obj can be hard linked
 341  * \retval              negative error if \a obj is a directory or has too
 342  *                      many links
 343  */
 344 static int __mdd_may_link(const struct lu_env *env, struct mdd_object *obj,
 345                           const struct lu_attr *la)
 346 {
 347         struct mdd_device *m = mdd_obj2mdd_dev(obj);
 348         ENTRY;
 349
 350         LASSERT(la != NULL);
 351
 352         /* Subdir count limitation can be broken through
 353          * (see osd_object_ref_add), so only check non-directory here. */
 354         if (!S_ISDIR(la->la_mode) &&
 355             la->la_nlink >= m->mdd_dt_conf.ddp_max_nlink)
 356                 RETURN(-EMLINK);
 357
 358         RETURN(0);
 359 }
 360
 361 /**
 362  * Check whether it may create the cobj under the pobj.
 363  *
 364  * \param[in] env       execution environment
 365  * \param[in] pobj      the parent directory
 366  * \param[in] pattr     the attribute of the parent directory
 367  * \param[in] cobj      the child to be created
 368  * \param[in] check_perm        if check WRITE|EXEC permission for parent
 369  *
 370  * \retval              = 0 create the child under this dir is allowed
 371  * \retval              negative errno create the child under this dir is
 372  *                      not allowed
 373  */
 374 int mdd_may_create(const struct lu_env *env, struct mdd_object *pobj,
 375                    const struct lu_attr *pattr, struct mdd_object *cobj,
 376                    bool check_perm)
 377 {
 378         struct mdd_thread_info *info = mdd_env_info(env);
 379         struct lu_buf   *xbuf;
 380         int rc = 0;
 381         ENTRY;
 382
 383         if (cobj && mdd_object_exists(cobj))
 384                 RETURN(-EEXIST);
 385
 386         if (mdd_is_dead_obj(pobj))
 387                 RETURN(-ENOENT);
 388
 389         /* If the parent is a sub-stripe, check whether it is dead */
 390         xbuf = mdd_buf_get(env, info->mti_key, sizeof(info->mti_key));
 391         rc = mdo_xattr_get(env, pobj, xbuf, XATTR_NAME_LMV);
 392         if (unlikely(rc > 0)) {
 393                 struct lmv_mds_md_v1  *lmv1 = xbuf->lb_buf;
 394
 395                 if (le32_to_cpu(lmv1->lmv_magic) == LMV_MAGIC_STRIPE &&
 396                     le32_to_cpu(lmv1->lmv_hash_type) & LMV_HASH_FLAG_DEAD)
 397                         RETURN(-ESTALE);
 398         }
 399         rc = 0;
 400
 401         if (check_perm)
 402                 rc = mdd_permission_internal_locked(env, pobj, pattr,
 403                                                     MAY_WRITE | MAY_EXEC,
 404                                                     MOR_TGT_PARENT);
 405         RETURN(rc);
 406 }
 407
 408 /*
 409  * Check whether can unlink from the pobj in the case of "cobj == NULL".
 410  */
 411 int mdd_may_unlink(const struct lu_env *env, struct mdd_object *pobj,
 412                    const struct lu_attr *pattr, const struct lu_attr *attr)
 413 {
 414         int rc;
 415         ENTRY;
 416
 417         if (mdd_is_dead_obj(pobj))
 418                 RETURN(-ENOENT);
 419
 420         if (attr->la_flags & (LUSTRE_APPEND_FL | LUSTRE_IMMUTABLE_FL))
 421                 RETURN(-EPERM);
 422
 423         rc = mdd_permission_internal_locked(env, pobj, pattr,
 424                                             MAY_WRITE | MAY_EXEC,
 425                                             MOR_TGT_PARENT);
 426         if (rc != 0)
 427                 RETURN(rc);
 428
 429         if (pattr->la_flags & LUSTRE_APPEND_FL)
 430                 RETURN(-EPERM);
 431
 432         RETURN(rc);
 433 }
 434
 435 /*
 436  * pobj == NULL is remote ops case, under such case, pobj's
 437  * VTX feature has been checked already, no need check again.
 438  */
 439 static inline int mdd_is_sticky(const struct lu_env *env,
 440                                 struct mdd_object *pobj,
 441                                 const struct lu_attr *pattr,
 442                                 struct mdd_object *cobj,
 443                                 const struct lu_attr *cattr)
 444 {
 445         struct lu_ucred *uc = lu_ucred_assert(env);
 446
 447         if (pobj != NULL) {
 448                 LASSERT(pattr != NULL);
 449                 if (!(pattr->la_mode & S_ISVTX) ||
 450                     (pattr->la_uid == uc->uc_fsuid))
 451                         return 0;
 452         }
 453
 454         LASSERT(cattr != NULL);
 455         if (cattr->la_uid == uc->uc_fsuid)
 456                 return 0;
 457
 458         return !md_capable(uc, CFS_CAP_FOWNER);
 459 }
 460
 461 static int mdd_may_delete_entry(const struct lu_env *env,
 462                                 struct mdd_object *pobj,
 463                                 const struct lu_attr *pattr,
 464                                 int check_perm)
 465 {
 466         ENTRY;
 467
 468         LASSERT(pobj != NULL);
 469         if (!mdd_object_exists(pobj))
 470                 RETURN(-ENOENT);
 471
 472         if (mdd_is_dead_obj(pobj))
 473                 RETURN(-ENOENT);
 474
 475         if (check_perm) {
 476                 int rc;
 477                 rc = mdd_permission_internal_locked(env, pobj, pattr,
 478                                             MAY_WRITE | MAY_EXEC,
 479                                             MOR_TGT_PARENT);
 480                 if (rc)
 481                         RETURN(rc);
 482         }
 483
 484         if (pattr->la_flags & LUSTRE_APPEND_FL)
 485                 RETURN(-EPERM);
 486
 487         RETURN(0);
 488 }
 489
 490 /*
 491  * Check whether it may delete the cobj from the pobj.
 492  * pobj maybe NULL
 493  */
 494 int mdd_may_delete(const struct lu_env *env, struct mdd_object *tpobj,
 495                    const struct lu_attr *tpattr, struct mdd_object *tobj,
 496                    const struct lu_attr *tattr, const struct lu_attr *cattr,
 497                    int check_perm, int check_empty)
 498 {
 499         int rc = 0;
 500         ENTRY;
 501
 502         if (tpobj) {
 503                 LASSERT(tpattr != NULL);
 504                 rc = mdd_may_delete_entry(env, tpobj, tpattr, check_perm);
 505                 if (rc != 0)
 506                         RETURN(rc);
 507         }
 508
 509         if (tobj == NULL)
 510                 RETURN(0);
 511
 512         if (!mdd_object_exists(tobj))
 513                 RETURN(-ENOENT);
 514
 515         if (mdd_is_dead_obj(tobj))
 516                 RETURN(-ESTALE);
 517
 518         if (mdd_is_sticky(env, tpobj, tpattr, tobj, tattr))
 519                 RETURN(-EPERM);
 520
 521         if (tattr->la_flags & (LUSTRE_APPEND_FL | LUSTRE_IMMUTABLE_FL))
 522                 RETURN(-EPERM);
 523
 524         /* additional check the rename case */
 525         if (cattr) {
 526                 if (S_ISDIR(cattr->la_mode)) {
 527                         struct mdd_device *mdd = mdo2mdd(&tobj->mod_obj);
 528
 529                         if (!S_ISDIR(tattr->la_mode))
 530                                 RETURN(-ENOTDIR);
 531
 532                         if (lu_fid_eq(mdo2fid(tobj), &mdd->mdd_root_fid))
 533                                 RETURN(-EBUSY);
 534                 } else if (S_ISDIR(tattr->la_mode))
 535                         RETURN(-EISDIR);
 536         }
 537
 538         if (S_ISDIR(tattr->la_mode) && check_empty)
 539                 rc = mdd_dir_is_empty(env, tobj);
 540
 541         RETURN(rc);
 542 }
 543
 544 /**
 545  * Check whether it can create the link file(linked to @src_obj) under
 546  * the target directory(@tgt_obj), and src_obj has been locked by
 547  * mdd_write_lock.
 548  *
 549  * \param[in] env       execution environment
 550  * \param[in] tgt_obj   the target directory
 551  * \param[in] tattr     attributes of target directory
 552  * \param[in] lname     the link name
 553  * \param[in] src_obj   source object for link
 554  * \param[in] cattr     attributes for source object
 555  *
 556  * \retval              = 0 it is allowed to create the link file under tgt_obj
 557  * \retval              negative error not allowed to create the link file
 558  */
 559 static int mdd_link_sanity_check(const struct lu_env *env,
 560                                  struct mdd_object *tgt_obj,
 561                                  const struct lu_attr *tattr,
 562                                  const struct lu_name *lname,
 563                                  struct mdd_object *src_obj,
 564                                  const struct lu_attr *cattr)
 565 {
 566         struct mdd_device *m = mdd_obj2mdd_dev(src_obj);
 567         int rc = 0;
 568         ENTRY;
 569
 570         if (!mdd_object_exists(src_obj))
 571                 RETURN(-ENOENT);
 572
 573         if (mdd_is_dead_obj(src_obj))
 574                 RETURN(-ESTALE);
 575
 576         /* Local ops, no lookup before link, check filename length here. */
 577         rc = mdd_name_check(m, lname);
 578         if (rc < 0)
 579                 RETURN(rc);
 580
 581         if (cattr->la_flags & (LUSTRE_IMMUTABLE_FL | LUSTRE_APPEND_FL))
 582                 RETURN(-EPERM);
 583
 584         if (S_ISDIR(mdd_object_type(src_obj)))
 585                 RETURN(-EPERM);
 586
 587         LASSERT(src_obj != tgt_obj);
 588         rc = mdd_may_create(env, tgt_obj, tattr, NULL, true);
 589         if (rc != 0)
 590                 RETURN(rc);
 591
 592         rc = __mdd_may_link(env, src_obj, cattr);
 593
 594         RETURN(rc);
 595 }
 596
 597 static int __mdd_index_delete_only(const struct lu_env *env, struct mdd_object *pobj,
 598                                    const char *name, struct thandle *handle)
 599 {
 600         struct dt_object *next = mdd_object_child(pobj);
 601         int rc;
 602         ENTRY;
 603
 604         if (dt_try_as_dir(env, next))
 605                 rc = dt_delete(env, next, (struct dt_key *)name, handle);
 606         else
 607                 rc = -ENOTDIR;
 608
 609         RETURN(rc);
 610 }
 611
 612 static int __mdd_index_insert_only(const struct lu_env *env,
 613                                    struct mdd_object *pobj,
 614                                    const struct lu_fid *lf, __u32 type,
 615                                    const char *name,
 616                                    struct thandle *handle)
 617 {
 618         struct dt_object *next = mdd_object_child(pobj);
 619         int               rc;
 620         ENTRY;
 621
 622         if (dt_try_as_dir(env, next)) {
 623                 struct dt_insert_rec    *rec = &mdd_env_info(env)->mti_dt_rec;
 624                 struct lu_ucred         *uc  = lu_ucred_check(env);
 625                 int                      ignore_quota;
 626
 627                 rec->rec_fid = lf;
 628                 rec->rec_type = type;
 629                 ignore_quota = uc ? uc->uc_cap & CFS_CAP_SYS_RESOURCE_MASK : 1;
 630                 rc = dt_insert(env, next, (const struct dt_rec *)rec,
 631                                (const struct dt_key *)name, handle,
 632                                ignore_quota);
 633         } else {
 634                 rc = -ENOTDIR;
 635         }
 636         RETURN(rc);
 637 }
 638
 639 /* insert named index, add reference if isdir */
 640 static int __mdd_index_insert(const struct lu_env *env, struct mdd_object *pobj,
 641                               const struct lu_fid *lf, __u32 type,
 642                               const char *name, struct thandle *handle)
 643 {
 644         int rc;
 645         ENTRY;
 646
 647         rc = __mdd_index_insert_only(env, pobj, lf, type, name, handle);
 648         if (rc == 0 && S_ISDIR(type)) {
 649                 mdd_write_lock(env, pobj, MOR_TGT_PARENT);
 650                 mdo_ref_add(env, pobj, handle);
 651                 mdd_write_unlock(env, pobj);
 652         }
 653
 654         RETURN(rc);
 655 }
 656
 657 /* delete named index, drop reference if isdir */
 658 static int __mdd_index_delete(const struct lu_env *env, struct mdd_object *pobj,
 659                               const char *name, int is_dir,
 660                               struct thandle *handle)
 661 {
 662         int               rc;
 663         ENTRY;
 664
 665         rc = __mdd_index_delete_only(env, pobj, name, handle);
 666         if (rc == 0 && is_dir) {
 667                 mdd_write_lock(env, pobj, MOR_TGT_PARENT);
 668                 mdo_ref_del(env, pobj, handle);
 669                 mdd_write_unlock(env, pobj);
 670         }
 671
 672         RETURN(rc);
 673 }
 674
 675 static int mdd_llog_record_calc_size(const struct lu_env *env,
 676                                      const struct lu_name *tname,
 677                                      const struct lu_name *sname)
 678 {
 679         const struct lu_ucred   *uc = lu_ucred(env);
 680         enum changelog_rec_flags crf = 0;
 681         size_t                   hdr_size = sizeof(struct llog_changelog_rec) -
 682                                             sizeof(struct changelog_rec);
 683
 684         if (sname != NULL)
 685                 crf |= CLF_RENAME;
 686
 687         if (uc != NULL && uc->uc_jobid[0] != '\0')
 688                 crf |= CLF_JOBID;
 689
 690         return llog_data_len(hdr_size + changelog_rec_offset(crf) +
 691                              (tname != NULL ? tname->ln_namelen : 0) +
 692                              (sname != NULL ? 1 + sname->ln_namelen : 0));
 693 }
 694
 695 int mdd_declare_changelog_store(const struct lu_env *env,
 696                                 struct mdd_device *mdd,
 697                                 const struct lu_name *tname,
 698                                 const struct lu_name *sname,
 699                                 struct thandle *handle)
 700 {
 701         struct obd_device               *obd = mdd2obd_dev(mdd);
 702         struct llog_ctxt                *ctxt;
 703         struct llog_changelog_rec       *rec;
 704         struct lu_buf                   *buf;
 705         struct thandle                  *llog_th;
 706         int                              reclen;
 707         int                              rc;
 708
 709         /* Not recording */
 710         if (!(mdd->mdd_cl.mc_flags & CLM_ON))
 711                 return 0;
 712
 713         reclen = mdd_llog_record_calc_size(env, tname, sname);
 714         buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_big_buf, reclen);
 715         if (buf->lb_buf == NULL)
 716                 return -ENOMEM;
 717
 718         rec = buf->lb_buf;
 719         rec->cr_hdr.lrh_len = reclen;
 720         rec->cr_hdr.lrh_type = CHANGELOG_REC;
 721
 722         ctxt = llog_get_context(obd, LLOG_CHANGELOG_ORIG_CTXT);
 723         if (ctxt == NULL)
 724                 return -ENXIO;
 725
 726         llog_th = thandle_get_sub(env, handle, ctxt->loc_handle->lgh_obj);
 727         if (IS_ERR(llog_th))
 728                 GOTO(out_put, rc = PTR_ERR(llog_th));
 729
 730         rc = llog_declare_add(env, ctxt->loc_handle, &rec->cr_hdr, llog_th);
 731
 732 out_put:
 733         llog_ctxt_put(ctxt);
 734
 735         return rc;
 736 }
 737
 738 /** Add a changelog entry \a rec to the changelog llog
 739  * \param mdd
 740  * \param rec
 741  * \param handle - currently ignored since llogs start their own transaction;
 742  *              this will hopefully be fixed in llog rewrite
 743  * \retval 0 ok
 744  */
 745 int mdd_changelog_store(const struct lu_env *env, struct mdd_device *mdd,
 746                         struct llog_changelog_rec *rec, struct thandle *th)
 747 {
 748         struct obd_device       *obd = mdd2obd_dev(mdd);
 749         struct llog_ctxt        *ctxt;
 750         struct thandle          *llog_th;
 751         int                      rc;
 752
 753         rec->cr_hdr.lrh_len = llog_data_len(sizeof(*rec) +
 754                                             changelog_rec_varsize(&rec->cr));
 755
 756         /* llog_lvfs_write_rec sets the llog tail len */
 757         rec->cr_hdr.lrh_type = CHANGELOG_REC;
 758         rec->cr.cr_time = cl_time();
 759
 760         spin_lock(&mdd->mdd_cl.mc_lock);
 761         /* NB: I suppose it's possible llog_add adds out of order wrt cr_index,
 762          * but as long as the MDD transactions are ordered correctly for e.g.
 763          * rename conflicts, I don't think this should matter. */
 764         rec->cr.cr_index = ++mdd->mdd_cl.mc_index;
 765         spin_unlock(&mdd->mdd_cl.mc_lock);
 766
 767         ctxt = llog_get_context(obd, LLOG_CHANGELOG_ORIG_CTXT);
 768         if (ctxt == NULL)
 769                 return -ENXIO;
 770
 771         llog_th = thandle_get_sub(env, th, ctxt->loc_handle->lgh_obj);
 772         if (IS_ERR(llog_th))
 773                 GOTO(out_put, rc = PTR_ERR(llog_th));
 774
 775         /* nested journal transaction */
 776         rc = llog_add(env, ctxt->loc_handle, &rec->cr_hdr, NULL, llog_th);
 777
 778 out_put:
 779         llog_ctxt_put(ctxt);
 780         if (rc > 0)
 781                 rc = 0;
 782         return rc;
 783 }
 784
 785 static void mdd_changelog_rec_ext_rename(struct changelog_rec *rec,
 786                                          const struct lu_fid *sfid,
 787                                          const struct lu_fid *spfid,
 788                                          const struct lu_name *sname)
 789 {
 790         struct changelog_ext_rename     *rnm = changelog_rec_rename(rec);
 791         size_t                           extsize = sname->ln_namelen + 1;
 792
 793         LASSERT(sfid != NULL);
 794         LASSERT(spfid != NULL);
 795         LASSERT(sname != NULL);
 796
 797         rnm->cr_sfid = *sfid;
 798         rnm->cr_spfid = *spfid;
 799
 800         changelog_rec_name(rec)[rec->cr_namelen] = '\0';
 801         strlcpy(changelog_rec_sname(rec), sname->ln_name, extsize);
 802         rec->cr_namelen += extsize;
 803 }
 804
 805 void mdd_changelog_rec_ext_jobid(struct changelog_rec *rec, const char *jobid)
 806 {
 807         struct changelog_ext_jobid      *jid = changelog_rec_jobid(rec);
 808
 809         if (jobid == NULL || jobid[0] == '\0')
 810                 return;
 811
 812         strlcpy(jid->cr_jobid, jobid, sizeof(jid->cr_jobid));
 813 }
 814
 815 /** Store a namespace change changelog record
 816  * If this fails, we must fail the whole transaction; we don't
 817  * want the change to commit without the log entry.
 818  * \param target - mdd_object of change
 819  * \param tpfid - target parent dir/object fid
 820  * \param sfid - source object fid
 821  * \param spfid - source parent fid
 822  * \param tname - target name string
 823  * \param sname - source name string
 824  * \param handle - transaction handle
 825  */
 826 int mdd_changelog_ns_store(const struct lu_env *env,
 827                            struct mdd_device *mdd,
 828                            enum changelog_rec_type type,
 829                            enum changelog_rec_flags crf,
 830                            struct mdd_object *target,
 831                            const struct lu_fid *tpfid,
 832                            const struct lu_fid *sfid,
 833                            const struct lu_fid *spfid,
 834                            const struct lu_name *tname,
 835                            const struct lu_name *sname,
 836                            struct thandle *handle)
 837 {
 838         const struct lu_ucred           *uc = lu_ucred(env);
 839         struct llog_changelog_rec       *rec;
 840         struct lu_buf                   *buf;
 841         int                              reclen;
 842         int                              rc;
 843         ENTRY;
 844
 845         /* Not recording */
 846         if (!(mdd->mdd_cl.mc_flags & CLM_ON))
 847                 RETURN(0);
 848
 849         if ((mdd->mdd_cl.mc_mask & (1 << type)) == 0)
 850                 RETURN(0);
 851
 852         LASSERT(tpfid != NULL);
 853         LASSERT(tname != NULL);
 854         LASSERT(handle != NULL);
 855
 856         reclen = mdd_llog_record_calc_size(env, tname, sname);
 857         buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_big_buf, reclen);
 858         if (buf->lb_buf == NULL)
 859                 RETURN(-ENOMEM);
 860         rec = buf->lb_buf;
 861
 862         crf &= CLF_FLAGMASK;
 863
 864         if (uc != NULL && uc->uc_jobid[0] != '\0')
 865                 crf |= CLF_JOBID;
 866
 867         if (sname != NULL)
 868                 crf |= CLF_RENAME;
 869         else
 870                 crf |= CLF_VERSION;
 871
 872         rec->cr.cr_flags = crf;
 873         rec->cr.cr_type = (__u32)type;
 874         rec->cr.cr_pfid = *tpfid;
 875         rec->cr.cr_namelen = tname->ln_namelen;
 876         memcpy(changelog_rec_name(&rec->cr), tname->ln_name, tname->ln_namelen);
 877
 878         if (crf & CLF_RENAME)
 879                 mdd_changelog_rec_ext_rename(&rec->cr, sfid, spfid, sname);
 880
 881         if (crf & CLF_JOBID)
 882                 mdd_changelog_rec_ext_jobid(&rec->cr, uc->uc_jobid);
 883
 884         if (likely(target != NULL)) {
 885                 rec->cr.cr_tfid = *mdo2fid(target);
 886                 target->mod_cltime = cfs_time_current_64();
 887         } else {
 888                 fid_zero(&rec->cr.cr_tfid);
 889         }
 890
 891         rc = mdd_changelog_store(env, mdd, rec, handle);
 892         if (rc < 0) {
 893                 CERROR("%s: cannot store changelog record: type = %d, "
 894                        "name = '%s', t = "DFID", p = "DFID": rc = %d\n",
 895                        mdd2obd_dev(mdd)->obd_name, type, tname->ln_name,
 896                        PFID(&rec->cr.cr_tfid), PFID(&rec->cr.cr_pfid), rc);
 897                 return -EFAULT;
 898         }
 899
 900         return 0;
 901 }
 902
 903 static int __mdd_links_add(const struct lu_env *env,
 904                            struct mdd_object *mdd_obj,
 905                            struct linkea_data *ldata,
 906                            const struct lu_name *lname,
 907                            const struct lu_fid *pfid,
 908                            int first, int check)
 909 {
 910         int rc;
 911
 912         if (ldata->ld_leh == NULL) {
 913                 rc = first ? -ENODATA : mdd_links_read(env, mdd_obj, ldata);
 914                 if (rc) {
 915                         if (rc != -ENODATA)
 916                                 return rc;
 917                         rc = linkea_data_new(ldata,
 918                                              &mdd_env_info(env)->mti_link_buf);
 919                         if (rc)
 920                                 return rc;
 921                 }
 922         }
 923
 924         if (check) {
 925                 rc = linkea_links_find(ldata, lname, pfid);
 926                 if (rc && rc != -ENOENT)
 927                         return rc;
 928                 if (rc == 0)
 929                         return -EEXIST;
 930         }
 931
 932         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_LINKEA_MORE)) {
 933                 struct lu_fid *tfid = &mdd_env_info(env)->mti_fid2;
 934
 935                 *tfid = *pfid;
 936                 tfid->f_ver = ~0;
 937                 linkea_add_buf(ldata, lname, tfid);
 938         }
 939
 940         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_LINKEA_MORE2))
 941                 linkea_add_buf(ldata, lname, pfid);
 942
 943         return linkea_add_buf(ldata, lname, pfid);
 944 }
 945
 946 static int __mdd_links_del(const struct lu_env *env,
 947                            struct mdd_object *mdd_obj,
 948                            struct linkea_data *ldata,
 949                            const struct lu_name *lname,
 950                            const struct lu_fid *pfid)
 951 {
 952         int rc;
 953
 954         if (ldata->ld_leh == NULL) {
 955                 rc = mdd_links_read(env, mdd_obj, ldata);
 956                 if (rc)
 957                         return rc;
 958         }
 959
 960         rc = linkea_links_find(ldata, lname, pfid);
 961         if (rc)
 962                 return rc;
 963
 964         linkea_del_buf(ldata, lname);
 965         return 0;
 966 }
 967
 968 static int mdd_linkea_prepare(const struct lu_env *env,
 969                               struct mdd_object *mdd_obj,
 970                               const struct lu_fid *oldpfid,
 971                               const struct lu_name *oldlname,
 972                               const struct lu_fid *newpfid,
 973                               const struct lu_name *newlname,
 974                               int first, int check,
 975                               struct linkea_data *ldata)
 976 {
 977         int rc = 0;
 978         int rc2 = 0;
 979         ENTRY;
 980
 981         if (OBD_FAIL_CHECK(OBD_FAIL_FID_IGIF))
 982                 return 0;
 983
 984         LASSERT(oldpfid != NULL || newpfid != NULL);
 985
 986         if (mdd_obj->mod_flags & DEAD_OBJ) {
 987                 /* Prevent linkea to be updated which is NOT necessary. */
 988                 ldata->ld_reclen = 0;
 989                 /* No more links, don't bother */
 990                 RETURN(0);
 991         }
 992
 993         if (oldpfid != NULL) {
 994                 rc = __mdd_links_del(env, mdd_obj, ldata, oldlname, oldpfid);
 995                 if (rc) {
 996                         if ((check == 1) ||
 997                             (rc != -ENODATA && rc != -ENOENT))
 998                                 RETURN(rc);
 999                         /* No changes done. */
1000                         rc = 0;
1001                 }
1002         }
1003
1004         /* If renaming, add the new record */
1005         if (newpfid != NULL) {
1006                 /* even if the add fails, we still delete the out-of-date
1007                  * old link */
1008                 rc2 = __mdd_links_add(env, mdd_obj, ldata, newlname, newpfid,
1009                                       first, check);
1010         }
1011
1012         rc = rc != 0 ? rc : rc2;
1013
1014         RETURN(rc);
1015 }
1016
1017 int mdd_links_rename(const struct lu_env *env,
1018                      struct mdd_object *mdd_obj,
1019                      const struct lu_fid *oldpfid,
1020                      const struct lu_name *oldlname,
1021                      const struct lu_fid *newpfid,
1022                      const struct lu_name *newlname,
1023                      struct thandle *handle,
1024                      struct linkea_data *ldata,
1025                      int first, int check)
1026 {
1027         int rc = 0;
1028         ENTRY;
1029
1030         if (ldata == NULL) {
1031                 ldata = &mdd_env_info(env)->mti_link_data;
1032                 memset(ldata, 0, sizeof(*ldata));
1033                 rc = mdd_linkea_prepare(env, mdd_obj, oldpfid, oldlname,
1034                                         newpfid, newlname, first, check,
1035                                         ldata);
1036                 if (rc != 0)
1037                         GOTO(out, rc);
1038         }
1039
1040         if (ldata->ld_reclen != 0)
1041                 rc = mdd_links_write(env, mdd_obj, ldata, handle);
1042         EXIT;
1043 out:
1044         if (rc != 0) {
1045                 int error = 1;
1046                 if (rc == -EOVERFLOW || rc == -ENOSPC)
1047                         error = 0;
1048                 if (oldpfid == NULL)
1049                         CDEBUG(error ? D_ERROR : D_OTHER,
1050                                "link_ea add '%.*s' failed %d "DFID"\n",
1051                                newlname->ln_namelen, newlname->ln_name,
1052                                rc, PFID(mdd_object_fid(mdd_obj)));
1053                 else if (newpfid == NULL)
1054                         CDEBUG(error ? D_ERROR : D_OTHER,
1055                                "link_ea del '%.*s' failed %d "DFID"\n",
1056                                oldlname->ln_namelen, oldlname->ln_name,
1057                                rc, PFID(mdd_object_fid(mdd_obj)));
1058                 else
1059                         CDEBUG(error ? D_ERROR : D_OTHER,
1060                                "link_ea rename '%.*s'->'%.*s' failed %d "
1061                                DFID"\n",
1062                                oldlname->ln_namelen, oldlname->ln_name,
1063                                newlname->ln_namelen, newlname->ln_name,
1064                                rc, PFID(mdd_object_fid(mdd_obj)));
1065         }
1066
1067         if (is_vmalloc_addr(ldata->ld_buf))
1068                 /* if we vmalloced a large buffer drop it */
1069                 lu_buf_free(ldata->ld_buf);
1070
1071         return rc;
1072 }
1073
1074 static inline int mdd_links_add(const struct lu_env *env,
1075                                 struct mdd_object *mdd_obj,
1076                                 const struct lu_fid *pfid,
1077                                 const struct lu_name *lname,
1078                                 struct thandle *handle,
1079                                 struct linkea_data *ldata, int first)
1080 {
1081         return mdd_links_rename(env, mdd_obj, NULL, NULL,
1082                                 pfid, lname, handle, ldata, first, 0);
1083 }
1084
1085 static inline int mdd_links_del(const struct lu_env *env,
1086                                 struct mdd_object *mdd_obj,
1087                                 const struct lu_fid *pfid,
1088                                 const struct lu_name *lname,
1089                                 struct thandle *handle)
1090 {
1091         return mdd_links_rename(env, mdd_obj, pfid, lname,
1092                                 NULL, NULL, handle, NULL, 0, 0);
1093 }
1094
1095 /** Read the link EA into a temp buffer.
1096  * Uses the mdd_thread_info::mti_big_buf since it is generally large.
1097  * A pointer to the buffer is stored in \a ldata::ld_buf.
1098  *
1099  * \retval 0 or error
1100  */
1101 int mdd_links_read(const struct lu_env *env, struct mdd_object *mdd_obj,
1102                    struct linkea_data *ldata)
1103 {
1104         int rc;
1105
1106         if (!mdd_object_exists(mdd_obj))
1107                 return -ENODATA;
1108
1109         /* First try a small buf */
1110         LASSERT(env != NULL);
1111         ldata->ld_buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_link_buf,
1112                                                PAGE_CACHE_SIZE);
1113         if (ldata->ld_buf->lb_buf == NULL)
1114                 return -ENOMEM;
1115
1116         rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf, XATTR_NAME_LINK);
1117         if (rc == -ERANGE) {
1118                 /* Buf was too small, figure out what we need. */
1119                 lu_buf_free(ldata->ld_buf);
1120                 rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf,
1121                                    XATTR_NAME_LINK);
1122                 if (rc < 0)
1123                         return rc;
1124                 ldata->ld_buf = lu_buf_check_and_alloc(ldata->ld_buf, rc);
1125                 if (ldata->ld_buf->lb_buf == NULL)
1126                         return -ENOMEM;
1127                 rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf,
1128                                   XATTR_NAME_LINK);
1129         }
1130         if (rc < 0) {
1131                 lu_buf_free(ldata->ld_buf);
1132                 ldata->ld_buf = NULL;
1133                 return rc;
1134         }
1135
1136         return linkea_init(ldata);
1137 }
1138
1139 /** Read the link EA into a temp buffer.
1140  * Uses the name_buf since it is generally large.
1141  * \retval IS_ERR err
1142  * \retval ptr to \a lu_buf (always \a mti_big_buf)
1143  */
1144 struct lu_buf *mdd_links_get(const struct lu_env *env,
1145                              struct mdd_object *mdd_obj)
1146 {
1147         struct linkea_data ldata = { NULL };
1148         int rc;
1149
1150         rc = mdd_links_read(env, mdd_obj, &ldata);
1151         return rc ? ERR_PTR(rc) : ldata.ld_buf;
1152 }
1153
1154 int mdd_links_write(const struct lu_env *env, struct mdd_object *mdd_obj,
1155                     struct linkea_data *ldata, struct thandle *handle)
1156 {
1157         const struct lu_buf *buf = mdd_buf_get_const(env, ldata->ld_buf->lb_buf,
1158                                                      ldata->ld_leh->leh_len);
1159         int                 rc;
1160
1161         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_NO_LINKEA))
1162                 return 0;
1163
1164         rc = mdo_xattr_set(env, mdd_obj, buf, XATTR_NAME_LINK, 0, handle);
1165         if (unlikely(rc == -ENOSPC) && S_ISREG(mdd_object_type(mdd_obj)) &&
1166             mdd_object_remote(mdd_obj) == 0) {
1167                 struct lfsck_request *lr = &mdd_env_info(env)->mti_lr;
1168                 struct thandle  *sub_th;
1169
1170                 /* XXX: If the linkEA is overflow, then we need to notify the
1171                  *      namespace LFSCK to skip "nlink" attribute verification
1172                  *      on this object to avoid the "nlink" to be shrinked by
1173                  *      wrong. It may be not good an interaction with LFSCK
1174                  *      like this. We will consider to replace it with other
1175                  *      mechanism in future. LU-5802. */
1176                 lfsck_pack_rfa(lr, mdo2fid(mdd_obj), LE_SKIP_NLINK,
1177                                LFSCK_TYPE_NAMESPACE);
1178
1179                 sub_th = thandle_get_sub_by_dt(env, handle,
1180                                 mdo2mdd(&mdd_obj->mod_obj)->mdd_bottom);
1181                 lfsck_in_notify(env, mdo2mdd(&mdd_obj->mod_obj)->mdd_bottom,
1182                                 lr, sub_th);
1183         }
1184
1185         return rc;
1186 }
1187
1188 int mdd_declare_links_add(const struct lu_env *env, struct mdd_object *mdd_obj,
1189                           struct thandle *handle, struct linkea_data *ldata,
1190                           enum mdd_links_add_overflow overflow)
1191 {
1192         int     rc;
1193         int     ea_len;
1194         void    *linkea;
1195
1196         if (ldata != NULL && ldata->ld_leh != NULL) {
1197                 ea_len = ldata->ld_leh->leh_len;
1198                 linkea = ldata->ld_buf->lb_buf;
1199         } else {
1200                 ea_len = DEFAULT_LINKEA_SIZE;
1201                 linkea = NULL;
1202         }
1203
1204         /* XXX: max size? */
1205         rc = mdo_declare_xattr_set(env, mdd_obj,
1206                                    mdd_buf_get_const(env, linkea, ea_len),
1207                                    XATTR_NAME_LINK, 0, handle);
1208         if (rc != 0)
1209                 return rc;
1210
1211         if (mdd_object_remote(mdd_obj) == 0 && overflow == MLAO_CHECK) {
1212                 struct lfsck_request *lr = &mdd_env_info(env)->mti_lr;
1213                 struct thandle  *sub_th;
1214
1215                 /* XXX: If the linkEA is overflow, then we need to notify the
1216                  *      namespace LFSCK to skip "nlink" attribute verification
1217                  *      on this object to avoid the "nlink" to be shrinked by
1218                  *      wrong. It may be not good an interaction with LFSCK
1219                  *      like this. We will consider to replace it with other
1220                  *      mechanism in future. LU-5802. */
1221                 lfsck_pack_rfa(lr, mdo2fid(mdd_obj), LE_SKIP_NLINK_DECLARE,
1222                                LFSCK_TYPE_NAMESPACE);
1223
1224                 sub_th = thandle_get_sub_by_dt(env, handle,
1225                                 mdo2mdd(&mdd_obj->mod_obj)->mdd_bottom);
1226                 rc = lfsck_in_notify(env,
1227                                      mdo2mdd(&mdd_obj->mod_obj)->mdd_bottom,
1228                                      lr, sub_th);
1229         }
1230
1231         return rc;
1232 }
1233
1234 static inline int mdd_declare_links_del(const struct lu_env *env,
1235                                         struct mdd_object *c,
1236                                         struct thandle *handle)
1237 {
1238         int rc = 0;
1239
1240         /* For directory, the linkEA will be removed together
1241          * with the object. */
1242         if (!S_ISDIR(mdd_object_type(c)))
1243                 rc = mdd_declare_links_add(env, c, handle, NULL, MLAO_IGNORE);
1244
1245         return rc;
1246 }
1247
1248 static int mdd_declare_link(const struct lu_env *env,
1249                             struct mdd_device *mdd,
1250                             struct mdd_object *p,
1251                             struct mdd_object *c,
1252                             const struct lu_name *name,
1253                             struct thandle *handle,
1254                             struct lu_attr *la,
1255                             struct linkea_data *data)
1256 {
1257         int rc;
1258
1259         rc = mdo_declare_index_insert(env, p, mdo2fid(c), mdd_object_type(c),
1260                                       name->ln_name, handle);
1261         if (rc != 0)
1262                 return rc;
1263
1264         rc = mdo_declare_ref_add(env, c, handle);
1265         if (rc != 0)
1266                 return rc;
1267
1268         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_MORE_NLINK)) {
1269                 rc = mdo_declare_ref_add(env, c, handle);
1270                 if (rc != 0)
1271                         return rc;
1272         }
1273
1274         la->la_valid = LA_CTIME | LA_MTIME;
1275         rc = mdo_declare_attr_set(env, p, la, handle);
1276         if (rc != 0)
1277                 return rc;
1278
1279         la->la_valid = LA_CTIME;
1280         rc = mdo_declare_attr_set(env, c, la, handle);
1281         if (rc != 0)
1282                 return rc;
1283
1284         rc = mdd_declare_links_add(env, c, handle, data,
1285                         S_ISREG(mdd_object_type(c)) ? MLAO_CHECK : MLAO_IGNORE);
1286         if (rc != 0)
1287                 return rc;
1288
1289         rc = mdd_declare_changelog_store(env, mdd, name, NULL, handle);
1290
1291         return rc;
1292 }
1293
1294 static int mdd_link(const struct lu_env *env, struct md_object *tgt_obj,
1295                     struct md_object *src_obj, const struct lu_name *lname,
1296                     struct md_attr *ma)
1297 {
1298         const char *name = lname->ln_name;
1299         struct lu_attr    *la = &mdd_env_info(env)->mti_la_for_fix;
1300         struct mdd_object *mdd_tobj = md2mdd_obj(tgt_obj);
1301         struct mdd_object *mdd_sobj = md2mdd_obj(src_obj);
1302         struct lu_attr    *cattr = MDD_ENV_VAR(env, cattr);
1303         struct lu_attr    *tattr = MDD_ENV_VAR(env, tattr);
1304         struct mdd_device *mdd = mdo2mdd(src_obj);
1305         struct thandle *handle;
1306         struct linkea_data *ldata = &mdd_env_info(env)->mti_link_data;
1307         int rc;
1308         ENTRY;
1309
1310         rc = mdd_la_get(env, mdd_sobj, cattr);
1311         if (rc != 0)
1312                 RETURN(rc);
1313
1314         rc = mdd_la_get(env, mdd_tobj, tattr);
1315         if (rc != 0)
1316                 RETURN(rc);
1317
1318         handle = mdd_trans_create(env, mdd);
1319         if (IS_ERR(handle))
1320                 GOTO(out_pending, rc = PTR_ERR(handle));
1321
1322         memset(ldata, 0, sizeof(*ldata));
1323
1324         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1325         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1326
1327         rc = mdd_declare_link(env, mdd, mdd_tobj, mdd_sobj, lname, handle,
1328                               la, ldata);
1329         if (rc)
1330                 GOTO(stop, rc);
1331
1332         rc = mdd_trans_start(env, mdd, handle);
1333         if (rc)
1334                 GOTO(stop, rc);
1335
1336         mdd_write_lock(env, mdd_sobj, MOR_TGT_CHILD);
1337         rc = mdd_link_sanity_check(env, mdd_tobj, tattr, lname, mdd_sobj,
1338                                    cattr);
1339         if (rc)
1340                 GOTO(out_unlock, rc);
1341
1342         if (!OBD_FAIL_CHECK(OBD_FAIL_LFSCK_LESS_NLINK)) {
1343                 rc = mdo_ref_add(env, mdd_sobj, handle);
1344                 if (rc != 0)
1345                         GOTO(out_unlock, rc);
1346         }
1347
1348         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_MORE_NLINK)) {
1349                 rc = mdo_ref_add(env, mdd_sobj, handle);
1350                 if (rc != 0)
1351                         GOTO(out_unlock, rc);
1352         }
1353
1354         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_DANGLING3)) {
1355                 struct lu_fid tfid = *mdo2fid(mdd_sobj);
1356
1357                 tfid.f_oid++;
1358                 rc = __mdd_index_insert_only(env, mdd_tobj, &tfid,
1359                                              mdd_object_type(mdd_sobj),
1360                                              name, handle);
1361         } else {
1362                 rc = __mdd_index_insert_only(env, mdd_tobj, mdo2fid(mdd_sobj),
1363                                              mdd_object_type(mdd_sobj),
1364                                              name, handle);
1365         }
1366
1367         if (rc != 0) {
1368                 mdo_ref_del(env, mdd_sobj, handle);
1369                 GOTO(out_unlock, rc);
1370         }
1371
1372         la->la_valid = LA_CTIME | LA_MTIME;
1373         rc = mdd_update_time(env, mdd_tobj, tattr, la, handle);
1374         if (rc)
1375                 GOTO(out_unlock, rc);
1376
1377         la->la_valid = LA_CTIME;
1378         rc = mdd_update_time(env, mdd_sobj, cattr, la, handle);
1379         if (rc == 0) {
1380                 rc = mdd_linkea_prepare(env, mdd_sobj, NULL, NULL,
1381                                         mdo2fid(mdd_tobj), lname, 0, 0,
1382                                         ldata);
1383                 if (rc == 0)
1384                         mdd_links_add(env, mdd_sobj, mdo2fid(mdd_tobj),
1385                                       lname, handle, ldata, 0);
1386                 /* The failure of links_add should not cause the link
1387                  * failure, reset rc here */
1388                 rc = 0;
1389         }
1390         EXIT;
1391 out_unlock:
1392         mdd_write_unlock(env, mdd_sobj);
1393         if (rc == 0)
1394                 rc = mdd_changelog_ns_store(env, mdd, CL_HARDLINK, 0, mdd_sobj,
1395                                             mdo2fid(mdd_tobj), NULL, NULL,
1396                                             lname, NULL, handle);
1397 stop:
1398         mdd_trans_stop(env, mdd, rc, handle);
1399
1400         if (is_vmalloc_addr(ldata->ld_buf))
1401                 /* if we vmalloced a large buffer drop it */
1402                 lu_buf_free(ldata->ld_buf);
1403 out_pending:
1404         return rc;
1405 }
1406
1407 static int mdd_mark_dead_object(const struct lu_env *env,
1408                                 struct mdd_object *obj, struct thandle *handle,
1409                                 bool declare)
1410 {
1411         struct lu_attr *attr = MDD_ENV_VAR(env, la_for_start);
1412         int rc;
1413
1414         if (!declare)
1415                 obj->mod_flags |= DEAD_OBJ;
1416
1417         if (!S_ISDIR(mdd_object_type(obj)))
1418                 return 0;
1419
1420         attr->la_valid = LA_FLAGS;
1421         attr->la_flags = LUSTRE_SLAVE_DEAD_FL;
1422
1423         if (declare)
1424                 rc = mdo_declare_attr_set(env, obj, attr, handle);
1425         else
1426                 rc = mdo_attr_set(env, obj, attr, handle);
1427
1428         return rc;
1429 }
1430
1431 static int mdd_declare_finish_unlink(const struct lu_env *env,
1432                                      struct mdd_object *obj,
1433                                      struct thandle *handle)
1434 {
1435         int     rc;
1436
1437         rc = mdd_mark_dead_object(env, obj, handle, true);
1438         if (rc != 0)
1439                 return rc;
1440
1441         rc = orph_declare_index_insert(env, obj, mdd_object_type(obj), handle);
1442         if (rc != 0)
1443                 return rc;
1444
1445         rc = mdo_declare_destroy(env, obj, handle);
1446         if (rc != 0)
1447                 return rc;
1448
1449         return mdd_declare_links_del(env, obj, handle);
1450 }
1451
1452 /* caller should take a lock before calling */
1453 int mdd_finish_unlink(const struct lu_env *env,
1454                       struct mdd_object *obj, struct md_attr *ma,
1455                       const struct mdd_object *pobj,
1456                       const struct lu_name *lname,
1457                       struct thandle *th)
1458 {
1459         int rc = 0;
1460         int is_dir = S_ISDIR(ma->ma_attr.la_mode);
1461         ENTRY;
1462
1463         LASSERT(mdd_write_locked(env, obj) != 0);
1464
1465         if (ma->ma_attr.la_nlink == 0 || is_dir) {
1466                 rc = mdd_mark_dead_object(env, obj, th, false);
1467                 if (rc != 0)
1468                         RETURN(rc);
1469
1470                 /* add new orphan and the object
1471                  * will be deleted during mdd_close() */
1472                 if (obj->mod_count) {
1473                         rc = __mdd_orphan_add(env, obj, th);
1474                         if (rc == 0)
1475                                 CDEBUG(D_HA, "Object "DFID" is inserted into "
1476                                         "orphan list, open count = %d\n",
1477                                         PFID(mdd_object_fid(obj)),
1478                                         obj->mod_count);
1479                         else
1480                                 CERROR("Object "DFID" fail to be an orphan, "
1481                                        "open count = %d, maybe cause failed "
1482                                        "open replay\n",
1483                                         PFID(mdd_object_fid(obj)),
1484                                         obj->mod_count);
1485                 } else {
1486                         rc = mdo_destroy(env, obj, th);
1487                 }
1488         } else if (!is_dir) {
1489                 /* old files may not have link ea; ignore errors */
1490                 mdd_links_del(env, obj, mdo2fid(pobj), lname, th);
1491         }
1492
1493         RETURN(rc);
1494 }
1495
1496 /*
1497  * pobj maybe NULL
1498  * has mdd_write_lock on cobj already, but not on pobj yet
1499  */
1500 int mdd_unlink_sanity_check(const struct lu_env *env, struct mdd_object *pobj,
1501                             const struct lu_attr *pattr,
1502                             struct mdd_object *cobj,
1503                             const struct lu_attr *cattr)
1504 {
1505         int rc;
1506         ENTRY;
1507
1508         rc = mdd_may_delete(env, pobj, pattr, cobj, cattr, NULL, 1, 1);
1509
1510         RETURN(rc);
1511 }
1512
1513 static int mdd_declare_unlink(const struct lu_env *env, struct mdd_device *mdd,
1514                               struct mdd_object *p, struct mdd_object *c,
1515                               const struct lu_name *name, struct md_attr *ma,
1516                               struct thandle *handle, int no_name, int is_dir)
1517 {
1518         struct lu_attr  *la = &mdd_env_info(env)->mti_la_for_fix;
1519         int              rc;
1520
1521         if (!OBD_FAIL_CHECK(OBD_FAIL_LFSCK_DANGLING2)) {
1522                 if (likely(no_name == 0)) {
1523                         rc = mdo_declare_index_delete(env, p, name->ln_name,
1524                                                       handle);
1525                         if (rc != 0)
1526                                 return rc;
1527                 }
1528
1529                 if (is_dir != 0) {
1530                         rc = mdo_declare_ref_del(env, p, handle);
1531                         if (rc != 0)
1532                                 return rc;
1533                 }
1534         }
1535
1536         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1537         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1538         la->la_valid = LA_CTIME | LA_MTIME;
1539         rc = mdo_declare_attr_set(env, p, la, handle);
1540         if (rc)
1541                 return rc;
1542
1543         if (c != NULL) {
1544                 rc = mdo_declare_ref_del(env, c, handle);
1545                 if (rc)
1546                         return rc;
1547
1548                 rc = mdo_declare_ref_del(env, c, handle);
1549                 if (rc)
1550                         return rc;
1551
1552                 la->la_valid = LA_CTIME;
1553                 rc = mdo_declare_attr_set(env, c, la, handle);
1554                 if (rc)
1555                         return rc;
1556
1557                 rc = mdd_declare_finish_unlink(env, c, handle);
1558                 if (rc)
1559                         return rc;
1560
1561                 /* FIXME: need changelog for remove entry */
1562                 rc = mdd_declare_changelog_store(env, mdd, name, NULL, handle);
1563         }
1564
1565         return rc;
1566 }
1567
1568 /*
1569  * test if a file has an HSM archive
1570  * if HSM attributes are not found in ma update them from
1571  * HSM xattr
1572  */
1573 static bool mdd_hsm_archive_exists(const struct lu_env *env,
1574                                    struct mdd_object *obj,
1575                                    struct md_attr *ma)
1576 {
1577         ENTRY;
1578
1579         if (!(ma->ma_valid & MA_HSM)) {
1580                 /* no HSM MD provided, read xattr */
1581                 struct lu_buf   *hsm_buf;
1582                 const size_t     buflen = sizeof(struct hsm_attrs);
1583                 int              rc;
1584
1585                 hsm_buf = mdd_buf_get(env, NULL, 0);
1586                 lu_buf_alloc(hsm_buf, buflen);
1587                 rc = mdo_xattr_get(env, obj, hsm_buf, XATTR_NAME_HSM);
1588                 rc = lustre_buf2hsm(hsm_buf->lb_buf, rc, &ma->ma_hsm);
1589                 lu_buf_free(hsm_buf);
1590                 if (rc < 0)
1591                         RETURN(false);
1592
1593                 ma->ma_valid = MA_HSM;
1594         }
1595         if (ma->ma_hsm.mh_flags & HS_EXISTS)
1596                 RETURN(true);
1597         RETURN(false);
1598 }
1599
1600 /**
1601  * Delete name entry and the object.
1602  * Note: no_name == 1 means it only destory the object, i.e. name_entry
1603  * does not exist for this object, and it could only happen during resending
1604  * of remote unlink. see the comments in mdt_reint_unlink. Unfortunately, lname
1605  * is also needed in this case(needed by changelog), so we have to add another
1606  * parameter(no_name)here. XXX: this is only needed in DNE phase I, on Phase II,
1607  * the ENOENT failure should be able to be fixed by redo mechanism.
1608  */
1609 static int mdd_unlink(const struct lu_env *env, struct md_object *pobj,
1610                       struct md_object *cobj, const struct lu_name *lname,
1611                       struct md_attr *ma, int no_name)
1612 {
1613         const char *name = lname->ln_name;
1614         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
1615         struct lu_attr *cattr = MDD_ENV_VAR(env, cattr);
1616         struct lu_attr *la = &mdd_env_info(env)->mti_la_for_fix;
1617         struct mdd_object *mdd_pobj = md2mdd_obj(pobj);
1618         struct mdd_object *mdd_cobj = NULL;
1619         struct mdd_device *mdd = mdo2mdd(pobj);
1620         struct thandle    *handle;
1621         int rc, is_dir = 0;
1622         ENTRY;
1623
1624         /* cobj == NULL means only delete name entry */
1625         if (likely(cobj != NULL)) {
1626                 mdd_cobj = md2mdd_obj(cobj);
1627                 if (mdd_object_exists(mdd_cobj) == 0)
1628                         RETURN(-ENOENT);
1629         }
1630
1631         rc = mdd_la_get(env, mdd_pobj, pattr);
1632         if (rc)
1633                 RETURN(rc);
1634
1635         if (likely(mdd_cobj != NULL)) {
1636                 /* fetch cattr */
1637                 rc = mdd_la_get(env, mdd_cobj, cattr);
1638                 if (rc)
1639                         RETURN(rc);
1640
1641                 is_dir = S_ISDIR(cattr->la_mode);
1642         }
1643
1644         rc = mdd_unlink_sanity_check(env, mdd_pobj, pattr, mdd_cobj, cattr);
1645         if (rc)
1646                 RETURN(rc);
1647
1648         handle = mdd_trans_create(env, mdd);
1649         if (IS_ERR(handle))
1650                 RETURN(PTR_ERR(handle));
1651
1652         rc = mdd_declare_unlink(env, mdd, mdd_pobj, mdd_cobj,
1653                                 lname, ma, handle, no_name, is_dir);
1654         if (rc)
1655                 GOTO(stop, rc);
1656
1657         rc = mdd_trans_start(env, mdd, handle);
1658         if (rc)
1659                 GOTO(stop, rc);
1660
1661         if (likely(mdd_cobj != NULL))
1662                 mdd_write_lock(env, mdd_cobj, MOR_TGT_CHILD);
1663
1664         if (likely(no_name == 0) && !OBD_FAIL_CHECK(OBD_FAIL_LFSCK_DANGLING2)) {
1665                 rc = __mdd_index_delete(env, mdd_pobj, name, is_dir, handle);
1666                 if (rc)
1667                         GOTO(cleanup, rc);
1668         }
1669
1670         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_MUL_REF) ||
1671             OBD_FAIL_CHECK(OBD_FAIL_LFSCK_NO_NAMEENTRY))
1672                 GOTO(cleanup, rc = 0);
1673
1674         if (likely(mdd_cobj != NULL)) {
1675                 rc = mdo_ref_del(env, mdd_cobj, handle);
1676                 if (rc != 0) {
1677                         __mdd_index_insert_only(env, mdd_pobj,
1678                                                 mdo2fid(mdd_cobj),
1679                                                 mdd_object_type(mdd_cobj),
1680                                                 name, handle);
1681                         GOTO(cleanup, rc);
1682                 }
1683
1684                 if (is_dir)
1685                         /* unlink dot */
1686                         mdo_ref_del(env, mdd_cobj, handle);
1687
1688                 /* fetch updated nlink */
1689                 rc = mdd_la_get(env, mdd_cobj, cattr);
1690                 if (rc)
1691                         GOTO(cleanup, rc);
1692         }
1693
1694         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1695         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1696
1697         la->la_valid = LA_CTIME | LA_MTIME;
1698         rc = mdd_update_time(env, mdd_pobj, pattr, la, handle);
1699         if (rc)
1700                 GOTO(cleanup, rc);
1701
1702         /* Enough for only unlink the entry */
1703         if (unlikely(mdd_cobj == NULL))
1704                 GOTO(stop, rc);
1705
1706         if (cattr->la_nlink > 0 || mdd_cobj->mod_count > 0) {
1707                 /* update ctime of an unlinked file only if it is still
1708                  * opened or a link still exists */
1709                 la->la_valid = LA_CTIME;
1710                 rc = mdd_update_time(env, mdd_cobj, cattr, la, handle);
1711                 if (rc)
1712                         GOTO(cleanup, rc);
1713         }
1714
1715         /* XXX: this transfer to ma will be removed with LOD/OSP */
1716         ma->ma_attr = *cattr;
1717         ma->ma_valid |= MA_INODE;
1718         rc = mdd_finish_unlink(env, mdd_cobj, ma, mdd_pobj, lname, handle);
1719
1720         /* fetch updated nlink */
1721         if (rc == 0)
1722                 rc = mdd_la_get(env, mdd_cobj, cattr);
1723
1724         /* if object is removed then we can't get its attrs, use last get */
1725         if (cattr->la_nlink == 0) {
1726                 ma->ma_attr = *cattr;
1727                 ma->ma_valid |= MA_INODE;
1728         }
1729         EXIT;
1730 cleanup:
1731         if (likely(mdd_cobj != NULL))
1732                 mdd_write_unlock(env, mdd_cobj);
1733
1734         if (rc == 0) {
1735                 int cl_flags = 0;
1736
1737                 if (cattr->la_nlink == 0) {
1738                         cl_flags |= CLF_UNLINK_LAST;
1739                         /* search for an existing archive */
1740                         if (mdd_hsm_archive_exists(env, mdd_cobj, ma))
1741                                 cl_flags |= CLF_UNLINK_HSM_EXISTS;
1742                 }
1743
1744                 rc = mdd_changelog_ns_store(env, mdd,
1745                         is_dir ? CL_RMDIR : CL_UNLINK, cl_flags,
1746                         mdd_cobj, mdo2fid(mdd_pobj), NULL, NULL, lname, NULL,
1747                         handle);
1748         }
1749
1750 stop:
1751         mdd_trans_stop(env, mdd, rc, handle);
1752
1753         return rc;
1754 }
1755
1756 /*
1757  * The permission has been checked when obj created, no need check again.
1758  */
1759 static int mdd_cd_sanity_check(const struct lu_env *env,
1760                                struct mdd_object *obj)
1761 {
1762         ENTRY;
1763
1764         /* EEXIST check */
1765         if (!obj || mdd_is_dead_obj(obj))
1766                 RETURN(-ENOENT);
1767
1768         RETURN(0);
1769 }
1770
1771 static int mdd_create_data(const struct lu_env *env, struct md_object *pobj,
1772                            struct md_object *cobj, const struct md_op_spec *spec,
1773                            struct md_attr *ma)
1774 {
1775         struct mdd_device *mdd = mdo2mdd(cobj);
1776         struct mdd_object *mdd_pobj = md2mdd_obj(pobj);
1777         struct mdd_object *son = md2mdd_obj(cobj);
1778         struct thandle    *handle;
1779         const struct lu_buf *buf;
1780         struct lu_attr    *attr = MDD_ENV_VAR(env, cattr);
1781         struct dt_allocation_hint *hint = &mdd_env_info(env)->mti_hint;
1782         int                rc;
1783         ENTRY;
1784
1785         rc = mdd_cd_sanity_check(env, son);
1786         if (rc)
1787                 RETURN(rc);
1788
1789         if (!md_should_create(spec->sp_cr_flags))
1790                 RETURN(0);
1791
1792         /*
1793          * there are following use cases for this function:
1794          * 1) late striping - file was created with MDS_OPEN_DELAY_CREATE
1795          *    striping can be specified or not
1796          * 2) CMD?
1797          */
1798         rc = mdd_la_get(env, son, attr);
1799         if (rc)
1800                 RETURN(rc);
1801
1802         /* calling ->ah_make_hint() is used to transfer information from parent */
1803         mdd_object_make_hint(env, mdd_pobj, son, attr, spec, hint);
1804
1805         handle = mdd_trans_create(env, mdd);
1806         if (IS_ERR(handle))
1807                 GOTO(out_free, rc = PTR_ERR(handle));
1808
1809         /*
1810          * XXX: Setting the lov ea is not locked but setting the attr is locked?
1811          * Should this be fixed?
1812          */
1813         CDEBUG(D_OTHER, "ea %p/%u, cr_flags "LPO64", no_create %u\n",
1814                spec->u.sp_ea.eadata, spec->u.sp_ea.eadatalen,
1815                spec->sp_cr_flags, spec->no_create);
1816
1817         if (spec->no_create || (spec->sp_cr_flags & MDS_OPEN_HAS_EA)) {
1818                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
1819                                         spec->u.sp_ea.eadatalen);
1820         } else {
1821                 buf = &LU_BUF_NULL;
1822         }
1823
1824         rc = dt_declare_xattr_set(env, mdd_object_child(son), buf,
1825                                   XATTR_NAME_LOV, 0, handle);
1826         if (rc)
1827                 GOTO(stop, rc);
1828
1829         rc = mdd_declare_changelog_store(env, mdd, NULL, NULL, handle);
1830         if (rc)
1831                 GOTO(stop, rc);
1832
1833         rc = mdd_trans_start(env, mdd, handle);
1834         if (rc)
1835                 GOTO(stop, rc);
1836
1837         rc = dt_xattr_set(env, mdd_object_child(son), buf, XATTR_NAME_LOV,
1838                           0, handle);
1839
1840         if (rc)
1841                 GOTO(stop, rc);
1842
1843         rc = mdd_changelog_data_store(env, mdd, CL_LAYOUT, 0, son, handle);
1844
1845 stop:
1846         mdd_trans_stop(env, mdd, rc, handle);
1847 out_free:
1848         RETURN(rc);
1849 }
1850
1851 static int mdd_declare_object_initialize(const struct lu_env *env,
1852                                          struct mdd_object *parent,
1853                                          struct mdd_object *child,
1854                                          struct lu_attr *attr,
1855                                          struct thandle *handle)
1856 {
1857         int rc;
1858         ENTRY;
1859
1860         /*
1861          * inode mode has been set in creation time, and it's based on umask,
1862          * la_mode and acl, don't set here again! (which will go wrong
1863          * because below function doesn't consider umask).
1864          * I'd suggest set all object attributes in creation time, see above.
1865          */
1866         LASSERT(attr->la_valid & (LA_MODE | LA_TYPE));
1867         attr->la_valid &= ~(LA_MODE | LA_TYPE);
1868         rc = mdo_declare_attr_set(env, child, attr, handle);
1869         attr->la_valid |= LA_MODE | LA_TYPE;
1870         if (rc != 0 || !S_ISDIR(attr->la_mode))
1871                 RETURN(rc);
1872
1873         rc = mdo_declare_index_insert(env, child, mdo2fid(child), S_IFDIR,
1874                                       dot, handle);
1875         if (rc != 0)
1876                 RETURN(rc);
1877
1878         rc = mdo_declare_ref_add(env, child, handle);
1879         if (rc != 0)
1880                 RETURN(rc);
1881
1882         rc = mdo_declare_index_insert(env, child, mdo2fid(parent), S_IFDIR,
1883                                       dotdot, handle);
1884
1885         RETURN(rc);
1886 }
1887
1888 static int mdd_object_initialize(const struct lu_env *env,
1889                                  const struct lu_fid *pfid,
1890                                  struct mdd_object *child,
1891                                  struct lu_attr *attr, struct thandle *handle,
1892                                  const struct md_op_spec *spec)
1893 {
1894         int rc = 0;
1895         ENTRY;
1896
1897         if (S_ISDIR(attr->la_mode)) {
1898                 /* Add "." and ".." for newly created dir */
1899                 mdo_ref_add(env, child, handle);
1900                 rc = __mdd_index_insert_only(env, child, mdo2fid(child),
1901                                              S_IFDIR, dot, handle);
1902                 if (rc == 0)
1903                         rc = __mdd_index_insert_only(env, child, pfid, S_IFDIR,
1904                                                      dotdot, handle);
1905                 if (rc != 0)
1906                         mdo_ref_del(env, child, handle);
1907         }
1908
1909         RETURN(rc);
1910 }
1911
1912 /**
1913  * This function checks whether it can create a file/dir under the
1914  * directory(@pobj). The directory(@pobj) is not being locked by
1915  * mdd lock.
1916  *
1917  * \param[in] env       execution environment
1918  * \param[in] pobj      the directory to create files
1919  * \param[in] pattr     the attributes of the directory
1920  * \param[in] lname     the name of the created file/dir
1921  * \param[in] cattr     the attributes of the file/dir
1922  * \param[in] spec      create specification
1923  *
1924  * \retval              = 0 it is allowed to create file/dir under
1925  *                      the directory
1926  * \retval              negative error not allowed to create file/dir
1927  *                      under the directory
1928  */
1929 static int mdd_create_sanity_check(const struct lu_env *env,
1930                                    struct md_object *pobj,
1931                                    const struct lu_attr *pattr,
1932                                    const struct lu_name *lname,
1933                                    struct lu_attr *cattr,
1934                                    struct md_op_spec *spec)
1935 {
1936         struct mdd_thread_info *info = mdd_env_info(env);
1937         struct lu_fid     *fid       = &info->mti_fid;
1938         struct mdd_object *obj       = md2mdd_obj(pobj);
1939         struct mdd_device *m         = mdo2mdd(pobj);
1940         bool            check_perm = true;
1941         int rc;
1942         ENTRY;
1943
1944         /* EEXIST check */
1945         if (mdd_is_dead_obj(obj))
1946                 RETURN(-ENOENT);
1947
1948         /*
1949          * In some cases this lookup is not needed - we know before if name
1950          * exists or not because MDT performs lookup for it.
1951          * name length check is done in lookup.
1952          */
1953         if (spec->sp_cr_lookup) {
1954                 /*
1955                  * Check if the name already exist, though it will be checked in
1956                  * _index_insert also, for avoiding rolling back if exists
1957                  * _index_insert.
1958                  */
1959                 rc = __mdd_lookup(env, pobj, pattr, lname, fid,
1960                                   MAY_WRITE | MAY_EXEC);
1961                 if (rc != -ENOENT)
1962                         RETURN(rc ? : -EEXIST);
1963
1964                 /* Permission is already being checked in mdd_lookup */
1965                 check_perm = false;
1966         }
1967
1968         rc = mdd_may_create(env, obj, pattr, NULL, check_perm);
1969         if (rc != 0)
1970                 RETURN(rc);
1971
1972         /* sgid check */
1973         if (pattr->la_mode & S_ISGID) {
1974                 cattr->la_gid = pattr->la_gid;
1975                 if (S_ISDIR(cattr->la_mode)) {
1976                         cattr->la_mode |= S_ISGID;
1977                         cattr->la_valid |= LA_MODE;
1978                 }
1979         }
1980
1981         rc = mdd_name_check(m, lname);
1982         if (rc < 0)
1983                 RETURN(rc);
1984
1985         switch (cattr->la_mode & S_IFMT) {
1986         case S_IFLNK: {
1987                 unsigned int symlen = strlen(spec->u.sp_symname) + 1;
1988
1989                 if (symlen > (1 << m->mdd_dt_conf.ddp_block_shift))
1990                         RETURN(-ENAMETOOLONG);
1991                 else
1992                         RETURN(0);
1993         }
1994         case S_IFDIR:
1995         case S_IFREG:
1996         case S_IFCHR:
1997         case S_IFBLK:
1998         case S_IFIFO:
1999         case S_IFSOCK:
2000                 rc = 0;
2001                 break;
2002         default:
2003                 rc = -EINVAL;
2004                 break;
2005         }
2006         RETURN(rc);
2007 }
2008
2009 static int mdd_declare_object_create(const struct lu_env *env,
2010                                      struct mdd_device *mdd,
2011                                      struct mdd_object *p, struct mdd_object *c,
2012                                      struct lu_attr *attr,
2013                                      struct thandle *handle,
2014                                      const struct md_op_spec *spec,
2015                                      struct lu_buf *def_acl_buf,
2016                                      struct lu_buf *acl_buf,
2017                                      struct dt_allocation_hint *hint)
2018 {
2019         int rc;
2020
2021         rc = mdd_declare_object_create_internal(env, p, c, attr, handle, spec,
2022                                                 hint);
2023         if (rc)
2024                 GOTO(out, rc);
2025
2026 #ifdef CONFIG_FS_POSIX_ACL
2027         if (def_acl_buf->lb_len > 0 && S_ISDIR(attr->la_mode)) {
2028                 /* if dir, then can inherit default ACl */
2029                 rc = mdo_declare_xattr_set(env, c, def_acl_buf,
2030                                            XATTR_NAME_ACL_DEFAULT,
2031                                            0, handle);
2032                 if (rc)
2033                         GOTO(out, rc);
2034         }
2035
2036         if (acl_buf->lb_len > 0) {
2037                 rc = mdo_declare_attr_set(env, c, attr, handle);
2038                 if (rc)
2039                         GOTO(out, rc);
2040
2041                 rc = mdo_declare_xattr_set(env, c, acl_buf,
2042                                            XATTR_NAME_ACL_ACCESS, 0, handle);
2043                 if (rc)
2044                         GOTO(out, rc);
2045         }
2046 #endif
2047         rc = mdd_declare_object_initialize(env, p, c, attr, handle);
2048         if (rc)
2049                 GOTO(out, rc);
2050
2051         /* replay case, create LOV EA from client data */
2052         if (spec->no_create ||
2053             (spec->sp_cr_flags & MDS_OPEN_HAS_EA && S_ISREG(attr->la_mode))) {
2054                 const struct lu_buf *buf;
2055
2056                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
2057                                         spec->u.sp_ea.eadatalen);
2058                 rc = mdo_declare_xattr_set(env, c, buf, XATTR_NAME_LOV, 0,
2059                                            handle);
2060                 if (rc)
2061                         GOTO(out, rc);
2062         }
2063
2064         if (S_ISLNK(attr->la_mode)) {
2065                 const char *target_name = spec->u.sp_symname;
2066                 int sym_len = strlen(target_name);
2067                 const struct lu_buf *buf;
2068
2069                 buf = mdd_buf_get_const(env, target_name, sym_len);
2070                 rc = dt_declare_record_write(env, mdd_object_child(c),
2071                                              buf, 0, handle);
2072                 if (rc)
2073                         GOTO(out, rc);
2074         }
2075 out:
2076         return rc;
2077 }
2078
2079 static int mdd_declare_create(const struct lu_env *env, struct mdd_device *mdd,
2080                               struct mdd_object *p, struct mdd_object *c,
2081                               const struct lu_name *name,
2082                               struct lu_attr *attr,
2083                               struct thandle *handle,
2084                               const struct md_op_spec *spec,
2085                               struct linkea_data *ldata,
2086                               struct lu_buf *def_acl_buf,
2087                               struct lu_buf *acl_buf,
2088                               struct dt_allocation_hint *hint)
2089 {
2090         int rc;
2091
2092         rc = mdd_declare_object_create(env, mdd, p, c, attr, handle, spec,
2093                                        def_acl_buf, acl_buf, hint);
2094         if (rc)
2095                 GOTO(out, rc);
2096
2097         if (S_ISDIR(attr->la_mode)) {
2098                 rc = mdo_declare_ref_add(env, p, handle);
2099                 if (rc)
2100                         GOTO(out, rc);
2101         }
2102
2103         if (unlikely(spec->sp_cr_flags & MDS_OPEN_VOLATILE)) {
2104                 rc = orph_declare_index_insert(env, c, attr->la_mode, handle);
2105                 if (rc)
2106                         GOTO(out, rc);
2107         } else {
2108                 struct lu_attr  *la = &mdd_env_info(env)->mti_la_for_fix;
2109
2110                 rc = mdo_declare_index_insert(env, p, mdo2fid(c), attr->la_mode,
2111                                               name->ln_name, handle);
2112                 if (rc != 0)
2113                         return rc;
2114
2115                 rc = mdd_declare_links_add(env, c, handle, ldata, MLAO_IGNORE);
2116                 if (rc)
2117                         return rc;
2118
2119                 *la = *attr;
2120                 la->la_valid = LA_CTIME | LA_MTIME;
2121                 rc = mdo_declare_attr_set(env, p, la, handle);
2122                 if (rc)
2123                         return rc;
2124
2125                 rc = mdd_declare_changelog_store(env, mdd, name, NULL, handle);
2126                 if (rc)
2127                         return rc;
2128         }
2129 out:
2130         return rc;
2131 }
2132
2133 static int mdd_acl_init(const struct lu_env *env, struct mdd_object *pobj,
2134                         struct lu_attr *la, struct lu_buf *def_acl_buf,
2135                         struct lu_buf *acl_buf)
2136 {
2137         int     rc;
2138         ENTRY;
2139
2140         if (S_ISLNK(la->la_mode)) {
2141                 acl_buf->lb_len = 0;
2142                 def_acl_buf->lb_len = 0;
2143                 RETURN(0);
2144         }
2145
2146         mdd_read_lock(env, pobj, MOR_TGT_PARENT);
2147         rc = mdo_xattr_get(env, pobj, def_acl_buf,
2148                            XATTR_NAME_ACL_DEFAULT);
2149         mdd_read_unlock(env, pobj);
2150         if (rc > 0) {
2151                 /* If there are default ACL, fix mode/ACL by default ACL */
2152                 def_acl_buf->lb_len = rc;
2153                 LASSERT(def_acl_buf->lb_len <= acl_buf->lb_len);
2154                 memcpy(acl_buf->lb_buf, def_acl_buf->lb_buf, rc);
2155                 acl_buf->lb_len = rc;
2156                 rc = __mdd_fix_mode_acl(env, acl_buf, &la->la_mode);
2157                 if (rc < 0)
2158                         RETURN(rc);
2159         } else if (rc == -ENODATA || rc == -EOPNOTSUPP) {
2160                 /* If there are no default ACL, fix mode by mask */
2161                 struct lu_ucred *uc = lu_ucred(env);
2162
2163                 /* The create triggered by MDT internal events, such as
2164                  * LFSCK reset, will not contain valid "uc". */
2165                 if (unlikely(uc != NULL))
2166                         la->la_mode &= ~uc->uc_umask;
2167                 rc = 0;
2168                 acl_buf->lb_len = 0;
2169                 def_acl_buf->lb_len = 0;
2170         }
2171
2172         RETURN(rc);
2173 }
2174
2175 /**
2176  * Create a metadata object and initialize it, set acl, xattr.
2177  **/
2178 static int mdd_object_create(const struct lu_env *env, struct mdd_object *pobj,
2179                              struct mdd_object *son, struct lu_attr *attr,
2180                              struct md_op_spec *spec, struct lu_buf *acl_buf,
2181                              struct lu_buf *def_acl_buf,
2182                              struct dt_allocation_hint *hint,
2183                              struct thandle *handle)
2184 {
2185         int                     rc;
2186
2187         mdd_write_lock(env, son, MOR_TGT_CHILD);
2188         rc = mdd_object_create_internal(env, NULL, son, attr, handle, spec,
2189                                         hint);
2190         if (rc)
2191                 GOTO(unlock, rc);
2192
2193         /* Note: In DNE phase I, for striped dir, though sub-stripes will be
2194          * created in declare phase, they also needs to be added to master
2195          * object as sub-directory entry. So it has to initialize the master
2196          * object, then set dir striped EA.(in mdo_xattr_set) */
2197         rc = mdd_object_initialize(env, mdo2fid(pobj), son, attr, handle,
2198                                    spec);
2199         if (rc != 0)
2200                 GOTO(err_destroy, rc);
2201
2202         /*
2203          * in case of replay we just set LOVEA provided by the client
2204          * XXX: I think it would be interesting to try "old" way where
2205          *      MDT calls this xattr_set(LOV) in a different transaction.
2206          *      probably this way we code can be made better.
2207          */
2208
2209         /* During creation, there are only a few cases we need do xattr_set to
2210          * create stripes.
2211          * 1. regular file: see comments above.
2212          * 2. dir: inherit default striping or pool settings from parent.
2213          * 3. create striped directory with provided stripeEA.
2214          * 4. create striped directory because inherit default layout from the
2215          * parent.
2216          */
2217         if (spec->no_create ||
2218             (S_ISREG(attr->la_mode) && spec->sp_cr_flags & MDS_OPEN_HAS_EA) ||
2219             S_ISDIR(attr->la_mode)) {
2220                 const struct lu_buf *buf;
2221
2222                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
2223                                         spec->u.sp_ea.eadatalen);
2224                 rc = mdo_xattr_set(env, son, buf,
2225                                    S_ISDIR(attr->la_mode) ? XATTR_NAME_LMV :
2226                                                             XATTR_NAME_LOV, 0,
2227                                    handle);
2228                 if (rc != 0)
2229                         GOTO(err_destroy, rc);
2230         }
2231
2232 #ifdef CONFIG_FS_POSIX_ACL
2233         if (def_acl_buf != NULL && def_acl_buf->lb_len > 0 &&
2234             S_ISDIR(attr->la_mode)) {
2235                 /* set default acl */
2236                 rc = mdo_xattr_set(env, son, def_acl_buf,
2237                                    XATTR_NAME_ACL_DEFAULT, 0,
2238                                    handle);
2239                 if (rc)
2240                         GOTO(err_destroy, rc);
2241         }
2242         /* set its own acl */
2243         if (acl_buf != NULL && acl_buf->lb_len > 0) {
2244                 rc = mdo_xattr_set(env, son, acl_buf,
2245                                    XATTR_NAME_ACL_ACCESS,
2246                                    0, handle);
2247                 if (rc)
2248                         GOTO(err_destroy, rc);
2249         }
2250 #endif
2251
2252         if (S_ISLNK(attr->la_mode)) {
2253                 struct lu_ucred  *uc = lu_ucred_assert(env);
2254                 struct dt_object *dt = mdd_object_child(son);
2255                 const char *target_name = spec->u.sp_symname;
2256                 int sym_len = strlen(target_name);
2257                 const struct lu_buf *buf;
2258                 loff_t pos = 0;
2259
2260                 buf = mdd_buf_get_const(env, target_name, sym_len);
2261                 rc = dt->do_body_ops->dbo_write(env, dt, buf, &pos, handle,
2262                                                 uc->uc_cap &
2263                                                 CFS_CAP_SYS_RESOURCE_MASK);
2264
2265                 if (rc == sym_len)
2266                         rc = 0;
2267                 else
2268                         GOTO(err_initlized, rc = -EFAULT);
2269         }
2270
2271 err_initlized:
2272         if (unlikely(rc != 0)) {
2273                 int rc2;
2274                 if (S_ISDIR(attr->la_mode)) {
2275                         /* Drop the reference, no need to delete "."/"..",
2276                          * because the object to be destroied directly. */
2277                         rc2 = mdo_ref_del(env, son, handle);
2278                         if (rc2 != 0)
2279                                 GOTO(unlock, rc);
2280                 }
2281                 rc2 = mdo_ref_del(env, son, handle);
2282                 if (rc2 != 0)
2283                         GOTO(unlock, rc);
2284 err_destroy:
2285                 mdo_destroy(env, son, handle);
2286         }
2287 unlock:
2288         mdd_write_unlock(env, son);
2289         RETURN(rc);
2290 }
2291
2292 /*
2293  * Create object and insert it into namespace.
2294  */
2295 static int mdd_create(const struct lu_env *env, struct md_object *pobj,
2296                       const struct lu_name *lname, struct md_object *child,
2297                       struct md_op_spec *spec, struct md_attr* ma)
2298 {
2299         struct mdd_thread_info  *info = mdd_env_info(env);
2300         struct lu_attr          *la = &info->mti_la_for_fix;
2301         struct mdd_object       *mdd_pobj = md2mdd_obj(pobj);
2302         struct mdd_object       *son = md2mdd_obj(child);
2303         struct mdd_device       *mdd = mdo2mdd(pobj);
2304         struct lu_attr          *attr = &ma->ma_attr;
2305         struct thandle          *handle;
2306         struct lu_attr          *pattr = &info->mti_pattr;
2307         struct lu_buf           acl_buf;
2308         struct lu_buf           def_acl_buf;
2309         struct linkea_data      *ldata = &info->mti_link_data;
2310         const char              *name = lname->ln_name;
2311         struct dt_allocation_hint *hint = &mdd_env_info(env)->mti_hint;
2312         int                      rc;
2313         int                      rc2;
2314         ENTRY;
2315
2316         /*
2317          * Two operations have to be performed:
2318          *
2319          *  - an allocation of a new object (->do_create()), and
2320          *
2321          *  - an insertion into a parent index (->dio_insert()).
2322          *
2323          * Due to locking, operation order is not important, when both are
2324          * successful, *but* error handling cases are quite different:
2325          *
2326          *  - if insertion is done first, and following object creation fails,
2327          *  insertion has to be rolled back, but this operation might fail
2328          *  also leaving us with dangling index entry.
2329          *
2330          *  - if creation is done first, is has to be undone if insertion
2331          *  fails, leaving us with leaked space, which is neither good, nor
2332          *  fatal.
2333          *
2334          * It seems that creation-first is simplest solution, but it is
2335          * sub-optimal in the frequent
2336          *
2337          *         $ mkdir foo
2338          *         $ mkdir foo
2339          *
2340          * case, because second mkdir is bound to create object, only to
2341          * destroy it immediately.
2342          *
2343          * To avoid this follow local file systems that do double lookup:
2344          *
2345          *     0. lookup -> -EEXIST (mdd_create_sanity_check())
2346          *
2347          *     1. create            (mdd_object_create_internal())
2348          *
2349          *     2. insert            (__mdd_index_insert(), lookup again)
2350          */
2351
2352         rc = mdd_la_get(env, mdd_pobj, pattr);
2353         if (rc != 0)
2354                 RETURN(rc);
2355
2356         /* Sanity checks before big job. */
2357         rc = mdd_create_sanity_check(env, pobj, pattr, lname, attr, spec);
2358         if (rc)
2359                 RETURN(rc);
2360
2361         if (OBD_FAIL_CHECK(OBD_FAIL_MDS_DQACQ_NET))
2362                 GOTO(out_free, rc = -EINPROGRESS);
2363
2364         handle = mdd_trans_create(env, mdd);
2365         if (IS_ERR(handle))
2366                 GOTO(out_free, rc = PTR_ERR(handle));
2367
2368         acl_buf.lb_buf = info->mti_xattr_buf;
2369         acl_buf.lb_len = sizeof(info->mti_xattr_buf);
2370         def_acl_buf.lb_buf = info->mti_key;
2371         def_acl_buf.lb_len = sizeof(info->mti_key);
2372         rc = mdd_acl_init(env, mdd_pobj, attr, &def_acl_buf, &acl_buf);
2373         if (rc < 0)
2374                 GOTO(out_stop, rc);
2375
2376         mdd_object_make_hint(env, mdd_pobj, son, attr, spec, hint);
2377
2378         memset(ldata, 0, sizeof(*ldata));
2379         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_BAD_PARENT)) {
2380                 struct lu_fid tfid = *mdd_object_fid(mdd_pobj);
2381
2382                 tfid.f_oid--;
2383                 rc = mdd_linkea_prepare(env, son, NULL, NULL,
2384                                         &tfid, lname, 1, 0, ldata);
2385         } else {
2386                 rc = mdd_linkea_prepare(env, son, NULL, NULL,
2387                                         mdd_object_fid(mdd_pobj),
2388                                         lname, 1, 0, ldata);
2389         }
2390
2391         rc = mdd_declare_create(env, mdd, mdd_pobj, son, lname, attr,
2392                                 handle, spec, ldata, &def_acl_buf, &acl_buf,
2393                                 hint);
2394         if (rc)
2395                 GOTO(out_stop, rc);
2396
2397         rc = mdd_trans_start(env, mdd, handle);
2398         if (rc)
2399                 GOTO(out_stop, rc);
2400
2401         rc = mdd_object_create(env, mdd_pobj, son, attr, spec, &acl_buf,
2402                                &def_acl_buf, hint, handle);
2403         if (rc != 0)
2404                 GOTO(out_stop, rc);
2405
2406         if (unlikely(spec->sp_cr_flags & MDS_OPEN_VOLATILE)) {
2407                 mdd_write_lock(env, son, MOR_TGT_CHILD);
2408                 rc = __mdd_orphan_add(env, son, handle);
2409                 GOTO(out_volatile, rc);
2410         } else {
2411                 rc = __mdd_index_insert(env, mdd_pobj, mdo2fid(son),
2412                                         attr->la_mode, name, handle);
2413                 if (rc != 0)
2414                         GOTO(err_created, rc);
2415
2416                 mdd_links_add(env, son, mdo2fid(mdd_pobj), lname, handle,
2417                               ldata, 1);
2418
2419                 /* update parent directory mtime/ctime */
2420                 *la = *attr;
2421                 la->la_valid = LA_CTIME | LA_MTIME;
2422                 rc = mdd_update_time(env, mdd_pobj, pattr, la, handle);
2423                 if (rc)
2424                         GOTO(err_insert, rc);
2425         }
2426
2427         EXIT;
2428 err_insert:
2429         if (rc != 0) {
2430                 int rc2;
2431
2432                 if (spec->sp_cr_flags & MDS_OPEN_VOLATILE)
2433                         rc2 = __mdd_orphan_del(env, son, handle);
2434                 else
2435                         rc2 = __mdd_index_delete(env, mdd_pobj, name,
2436                                                  S_ISDIR(attr->la_mode),
2437                                                  handle);
2438                 if (rc2 != 0)
2439                         goto out_stop;
2440
2441 err_created:
2442                 mdd_write_lock(env, son, MOR_TGT_CHILD);
2443                 if (S_ISDIR(attr->la_mode)) {
2444                         /* Drop the reference, no need to delete "."/"..",
2445                          * because the object is to be destroyed directly. */
2446                         rc2 = mdo_ref_del(env, son, handle);
2447                         if (rc2 != 0) {
2448                                 mdd_write_unlock(env, son);
2449                                 goto out_stop;
2450                         }
2451                 }
2452 out_volatile:
2453                 /* For volatile files drop one link immediately, since there is
2454                  * no filename in the namespace, and save any error returned. */
2455                 rc2 = mdo_ref_del(env, son, handle);
2456                 if (rc2 != 0) {
2457                         mdd_write_unlock(env, son);
2458                         if (unlikely(rc == 0))
2459                                 rc = rc2;
2460                         goto out_stop;
2461                 }
2462
2463                 /* Don't destroy the volatile object on success */
2464                 if (likely(rc != 0))
2465                         mdo_destroy(env, son, handle);
2466                 mdd_write_unlock(env, son);
2467         }
2468
2469         if (rc == 0 && fid_is_namespace_visible(mdo2fid(son)) &&
2470             likely((spec->sp_cr_flags & MDS_OPEN_VOLATILE) == 0))
2471                 rc = mdd_changelog_ns_store(env, mdd,
2472                                 S_ISDIR(attr->la_mode) ? CL_MKDIR :
2473                                 S_ISREG(attr->la_mode) ? CL_CREATE :
2474                                 S_ISLNK(attr->la_mode) ? CL_SOFTLINK : CL_MKNOD,
2475                                 0, son, mdo2fid(mdd_pobj), NULL, NULL, lname,
2476                                 NULL, handle);
2477 out_stop:
2478         rc2 = mdd_trans_stop(env, mdd, rc, handle);
2479         if (rc == 0)
2480                 rc = rc2;
2481 out_free:
2482         if (is_vmalloc_addr(ldata->ld_buf))
2483                 /* if we vmalloced a large buffer drop it */
2484                 lu_buf_free(ldata->ld_buf);
2485
2486         /* The child object shouldn't be cached anymore */
2487         if (rc)
2488                 set_bit(LU_OBJECT_HEARD_BANSHEE,
2489                         &child->mo_lu.lo_header->loh_flags);
2490         return rc;
2491 }
2492
2493 /*
2494  * Get locks on parents in proper order
2495  * RETURN: < 0 - error, rename_order if successful
2496  */
2497 enum rename_order {
2498         MDD_RN_SAME,
2499         MDD_RN_SRCTGT,
2500         MDD_RN_TGTSRC
2501 };
2502
2503 static int mdd_rename_order(const struct lu_env *env,
2504                             struct mdd_device *mdd,
2505                             struct mdd_object *src_pobj,
2506                             const struct lu_attr *pattr,
2507                             struct mdd_object *tgt_pobj)
2508 {
2509         /* order of locking, 1 - tgt-src, 0 - src-tgt*/
2510         int rc;
2511         ENTRY;
2512
2513         if (src_pobj == tgt_pobj)
2514                 RETURN(MDD_RN_SAME);
2515
2516         /* compared the parent child relationship of src_p&tgt_p */
2517         if (lu_fid_eq(&mdd->mdd_root_fid, mdo2fid(src_pobj))){
2518                 rc = MDD_RN_SRCTGT;
2519         } else if (lu_fid_eq(&mdd->mdd_root_fid, mdo2fid(tgt_pobj))) {
2520                 rc = MDD_RN_TGTSRC;
2521         } else {
2522                 rc = mdd_is_parent(env, mdd, src_pobj, pattr, mdo2fid(tgt_pobj),
2523                                    NULL);
2524                 if (rc == -EREMOTE)
2525                         rc = 0;
2526
2527                 if (rc == 1)
2528                         rc = MDD_RN_TGTSRC;
2529                 else if (rc == 0)
2530                         rc = MDD_RN_SRCTGT;
2531         }
2532
2533         RETURN(rc);
2534 }
2535
2536 /* has not mdd_write{read}_lock on any obj yet. */
2537 static int mdd_rename_sanity_check(const struct lu_env *env,
2538                                    struct mdd_object *src_pobj,
2539                                    const struct lu_attr *pattr,
2540                                    struct mdd_object *tgt_pobj,
2541                                    const struct lu_attr *tpattr,
2542                                    struct mdd_object *sobj,
2543                                    const struct lu_attr *cattr,
2544                                    struct mdd_object *tobj,
2545                                    const struct lu_attr *tattr)
2546 {
2547         int rc = 0;
2548         ENTRY;
2549
2550         /* XXX: when get here, sobj must NOT be NULL,
2551          * the other case has been processed in cld_rename
2552          * before mdd_rename and enable MDS_PERM_BYPASS. */
2553         LASSERT(sobj);
2554
2555         rc = mdd_may_delete(env, src_pobj, pattr, sobj, cattr, NULL, 1, 0);
2556         if (rc)
2557                 RETURN(rc);
2558
2559         /* XXX: when get here, "tobj == NULL" means tobj must
2560          * NOT exist (neither on remote MDS, such case has been
2561          * processed in cld_rename before mdd_rename and enable
2562          * MDS_PERM_BYPASS).
2563          * So check may_create, but not check may_unlink. */
2564         if (tobj == NULL)
2565                 rc = mdd_may_create(env, tgt_pobj, tpattr, NULL,
2566                                     (src_pobj != tgt_pobj));
2567         else
2568                 rc = mdd_may_delete(env, tgt_pobj, tpattr, tobj, tattr, cattr,
2569                                     (src_pobj != tgt_pobj), 1);
2570
2571         if (!rc && !tobj && (src_pobj != tgt_pobj) && S_ISDIR(cattr->la_mode))
2572                 rc = __mdd_may_link(env, tgt_pobj, tpattr);
2573
2574         RETURN(rc);
2575 }
2576
2577 static int mdd_declare_rename(const struct lu_env *env,
2578                               struct mdd_device *mdd,
2579                               struct mdd_object *mdd_spobj,
2580                               struct mdd_object *mdd_tpobj,
2581                               struct mdd_object *mdd_sobj,
2582                               struct mdd_object *mdd_tobj,
2583                               const struct lu_name *tname,
2584                               const struct lu_name *sname,
2585                               struct md_attr *ma,
2586                               struct linkea_data *ldata,
2587                               struct thandle *handle)
2588 {
2589         struct lu_attr    *la = &mdd_env_info(env)->mti_la_for_fix;
2590         int rc;
2591
2592         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
2593         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
2594
2595         LASSERT(mdd_spobj);
2596         LASSERT(mdd_tpobj);
2597         LASSERT(mdd_sobj);
2598
2599         /* name from source dir */
2600         rc = mdo_declare_index_delete(env, mdd_spobj, sname->ln_name, handle);
2601         if (rc)
2602                 return rc;
2603
2604         /* .. from source child */
2605         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
2606                 /* source child can be directory,
2607                  * counted by source dir's nlink */
2608                 rc = mdo_declare_ref_del(env, mdd_spobj, handle);
2609                 if (rc)
2610                         return rc;
2611                 if (mdd_spobj != mdd_tpobj) {
2612                         rc = mdo_declare_index_delete(env, mdd_sobj, dotdot,
2613                                                       handle);
2614                         if (rc != 0)
2615                                 return rc;
2616
2617                         rc = mdo_declare_index_insert(env, mdd_sobj,
2618                                                       mdo2fid(mdd_tpobj),
2619                                                       S_IFDIR, dotdot, handle);
2620                         if (rc != 0)
2621                                 return rc;
2622                 }
2623
2624                 /* new target child can be directory,
2625                  * counted by target dir's nlink */
2626                 rc = mdo_declare_ref_add(env, mdd_tpobj, handle);
2627                 if (rc != 0)
2628                         return rc;
2629         }
2630
2631         la->la_valid = LA_CTIME | LA_MTIME;
2632         rc = mdo_declare_attr_set(env, mdd_spobj, la, handle);
2633         if (rc != 0)
2634                 return rc;
2635
2636         rc = mdo_declare_attr_set(env, mdd_tpobj, la, handle);
2637         if (rc != 0)
2638                 return rc;
2639
2640         la->la_valid = LA_CTIME;
2641         rc = mdo_declare_attr_set(env, mdd_sobj, la, handle);
2642         if (rc)
2643                 return rc;
2644
2645         rc = mdd_declare_links_add(env, mdd_sobj, handle, ldata,
2646                 S_ISREG(mdd_object_type(mdd_sobj)) ? MLAO_CHECK : MLAO_IGNORE);
2647         if (rc)
2648                 return rc;
2649
2650         /* new name */
2651         rc = mdo_declare_index_insert(env, mdd_tpobj, mdo2fid(mdd_sobj),
2652                                       mdd_object_type(mdd_sobj),
2653                                       tname->ln_name, handle);
2654         if (rc != 0)
2655                 return rc;
2656
2657         if (mdd_tobj && mdd_object_exists(mdd_tobj)) {
2658                 /* delete target child in target parent directory */
2659                 rc = mdo_declare_index_delete(env, mdd_tpobj, tname->ln_name,
2660                                               handle);
2661                 if (rc)
2662                         return rc;
2663
2664                 rc = mdo_declare_ref_del(env, mdd_tobj, handle);
2665                 if (rc)
2666                         return rc;
2667
2668                 if (S_ISDIR(mdd_object_type(mdd_tobj))) {
2669                         /* target child can be directory,
2670                          * delete "." reference in target child directory */
2671                         rc = mdo_declare_ref_del(env, mdd_tobj, handle);
2672                         if (rc)
2673                                 return rc;
2674
2675                         /* delete ".." reference in target parent directory */
2676                         rc = mdo_declare_ref_del(env, mdd_tpobj, handle);
2677                         if (rc)
2678                                 return rc;
2679                 }
2680
2681                 la->la_valid = LA_CTIME;
2682                 rc = mdo_declare_attr_set(env, mdd_tobj, la, handle);
2683                 if (rc)
2684                         return rc;
2685
2686                 rc = mdd_declare_finish_unlink(env, mdd_tobj, handle);
2687                 if (rc)
2688                         return rc;
2689         }
2690
2691         rc = mdd_declare_changelog_store(env, mdd, tname, sname, handle);
2692         if (rc)
2693                 return rc;
2694
2695         return rc;
2696 }
2697
2698 /* src object can be remote that is why we use only fid and type of object */
2699 static int mdd_rename(const struct lu_env *env,
2700                       struct md_object *src_pobj, struct md_object *tgt_pobj,
2701                       const struct lu_fid *lf, const struct lu_name *lsname,
2702                       struct md_object *tobj, const struct lu_name *ltname,
2703                       struct md_attr *ma)
2704 {
2705         const char *sname = lsname->ln_name;
2706         const char *tname = ltname->ln_name;
2707         struct lu_attr    *la = &mdd_env_info(env)->mti_la_for_fix;
2708         struct mdd_object *mdd_spobj = md2mdd_obj(src_pobj); /* source parent */
2709         struct mdd_object *mdd_tpobj = md2mdd_obj(tgt_pobj);
2710         struct mdd_device *mdd = mdo2mdd(src_pobj);
2711         struct mdd_object *mdd_sobj = NULL;                  /* source object */
2712         struct mdd_object *mdd_tobj = NULL;
2713         struct lu_attr *cattr = MDD_ENV_VAR(env, cattr);
2714         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
2715         struct lu_attr *tattr = MDD_ENV_VAR(env, tattr);
2716         struct lu_attr *tpattr = MDD_ENV_VAR(env, tpattr);
2717         struct thandle *handle;
2718         struct linkea_data  *ldata = &mdd_env_info(env)->mti_link_data;
2719         const struct lu_fid *tpobj_fid = mdo2fid(mdd_tpobj);
2720         const struct lu_fid *spobj_fid = mdo2fid(mdd_spobj);
2721         bool is_dir;
2722         bool tobj_ref = 0;
2723         bool tobj_locked = 0;
2724         unsigned cl_flags = 0;
2725         int rc, rc2;
2726         ENTRY;
2727
2728         if (tobj)
2729                 mdd_tobj = md2mdd_obj(tobj);
2730
2731         mdd_sobj = mdd_object_find(env, mdd, lf);
2732
2733         rc = mdd_la_get(env, mdd_sobj, cattr);
2734         if (rc)
2735                 GOTO(out_pending, rc);
2736
2737         rc = mdd_la_get(env, mdd_spobj, pattr);
2738         if (rc)
2739                 GOTO(out_pending, rc);
2740
2741         if (mdd_tobj) {
2742                 rc = mdd_la_get(env, mdd_tobj, tattr);
2743                 if (rc)
2744                         GOTO(out_pending, rc);
2745         }
2746
2747         rc = mdd_la_get(env, mdd_tpobj, tpattr);
2748         if (rc)
2749                 GOTO(out_pending, rc);
2750
2751         rc = mdd_rename_sanity_check(env, mdd_spobj, pattr, mdd_tpobj, tpattr,
2752                                      mdd_sobj, cattr, mdd_tobj, tattr);
2753         if (rc)
2754                 GOTO(out_pending, rc);
2755
2756         rc = mdd_name_check(mdd, ltname);
2757         if (rc < 0)
2758                 GOTO(out_pending, rc);
2759
2760         handle = mdd_trans_create(env, mdd);
2761         if (IS_ERR(handle))
2762                 GOTO(out_pending, rc = PTR_ERR(handle));
2763
2764         memset(ldata, 0, sizeof(*ldata));
2765         mdd_linkea_prepare(env, mdd_sobj, NULL, NULL, mdd_object_fid(mdd_tpobj),
2766                            ltname, 1, 0, ldata);
2767         rc = mdd_declare_rename(env, mdd, mdd_spobj, mdd_tpobj, mdd_sobj,
2768                                 mdd_tobj, lsname, ltname, ma, ldata, handle);
2769         if (rc)
2770                 GOTO(stop, rc);
2771
2772         rc = mdd_trans_start(env, mdd, handle);
2773         if (rc)
2774                 GOTO(stop, rc);
2775
2776         /* FIXME: Should consider tobj and sobj too in rename_lock. */
2777         rc = mdd_rename_order(env, mdd, mdd_spobj, pattr, mdd_tpobj);
2778         if (rc < 0)
2779                 GOTO(cleanup_unlocked, rc);
2780
2781         is_dir = S_ISDIR(cattr->la_mode);
2782
2783         /* Remove source name from source directory */
2784         rc = __mdd_index_delete(env, mdd_spobj, sname, is_dir, handle);
2785         if (rc)
2786                 GOTO(cleanup, rc);
2787
2788         /* "mv dir1 dir2" needs "dir1/.." link update */
2789         if (is_dir && mdd_sobj && !lu_fid_eq(spobj_fid, tpobj_fid)) {
2790                 rc = __mdd_index_delete_only(env, mdd_sobj, dotdot, handle);
2791                 if (rc != 0)
2792                         GOTO(fixup_spobj2, rc);
2793
2794                 rc = __mdd_index_insert_only(env, mdd_sobj, tpobj_fid, S_IFDIR,
2795                                              dotdot, handle);
2796                 if (rc != 0)
2797                         GOTO(fixup_spobj, rc);
2798         }
2799
2800         if (mdd_tobj != NULL && mdd_object_exists(mdd_tobj)) {
2801                 rc = __mdd_index_delete(env, mdd_tpobj, tname, is_dir, handle);
2802                 if (rc != 0)
2803                         /* tname might been renamed to something else */
2804                         GOTO(fixup_spobj, rc);
2805         }
2806
2807         /* Insert new fid with target name into target dir */
2808         rc = __mdd_index_insert(env, mdd_tpobj, lf, cattr->la_mode,
2809                                 tname, handle);
2810         if (rc != 0)
2811                 GOTO(fixup_tpobj, rc);
2812
2813         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
2814         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
2815
2816         /* XXX: mdd_sobj must be local one if it is NOT NULL. */
2817         if (mdd_sobj) {
2818                 la->la_valid = LA_CTIME;
2819                 rc = mdd_update_time(env, mdd_sobj, cattr, la, handle);
2820                 if (rc)
2821                         GOTO(fixup_tpobj, rc);
2822         }
2823
2824         /* Remove old target object
2825          * For tobj is remote case cmm layer has processed
2826          * and set tobj to NULL then. So when tobj is NOT NULL,
2827          * it must be local one.
2828          */
2829         if (tobj && mdd_object_exists(mdd_tobj)) {
2830                 mdd_write_lock(env, mdd_tobj, MOR_TGT_CHILD);
2831                 tobj_locked = 1;
2832                 if (mdd_is_dead_obj(mdd_tobj)) {
2833                         /* shld not be dead, something is wrong */
2834                         CERROR("tobj is dead, something is wrong\n");
2835                         rc = -EINVAL;
2836                         goto cleanup;
2837                 }
2838                 mdo_ref_del(env, mdd_tobj, handle);
2839
2840                 /* Remove dot reference. */
2841                 if (S_ISDIR(tattr->la_mode))
2842                         mdo_ref_del(env, mdd_tobj, handle);
2843                 tobj_ref = 1;
2844
2845                 /* fetch updated nlink */
2846                 rc = mdd_la_get(env, mdd_tobj, tattr);
2847                 if (rc != 0) {
2848                         CERROR("%s: Failed to get nlink for tobj "
2849                                 DFID": rc = %d\n",
2850                                 mdd2obd_dev(mdd)->obd_name,
2851                                 PFID(tpobj_fid), rc);
2852                         GOTO(fixup_tpobj, rc);
2853                 }
2854
2855                 la->la_valid = LA_CTIME;
2856                 rc = mdd_update_time(env, mdd_tobj, tattr, la, handle);
2857                 if (rc != 0) {
2858                         CERROR("%s: Failed to set ctime for tobj "
2859                                 DFID": rc = %d\n",
2860                                 mdd2obd_dev(mdd)->obd_name,
2861                                 PFID(tpobj_fid), rc);
2862                         GOTO(fixup_tpobj, rc);
2863                 }
2864
2865                 /* XXX: this transfer to ma will be removed with LOD/OSP */
2866                 ma->ma_attr = *tattr;
2867                 ma->ma_valid |= MA_INODE;
2868                 rc = mdd_finish_unlink(env, mdd_tobj, ma, mdd_tpobj, ltname,
2869                                        handle);
2870                 if (rc != 0) {
2871                         CERROR("%s: Failed to unlink tobj "
2872                                 DFID": rc = %d\n",
2873                                 mdd2obd_dev(mdd)->obd_name,
2874                                 PFID(tpobj_fid), rc);
2875                         GOTO(fixup_tpobj, rc);
2876                 }
2877
2878                 /* fetch updated nlink */
2879                 rc = mdd_la_get(env, mdd_tobj, tattr);
2880                 if (rc != 0) {
2881                         CERROR("%s: Failed to get nlink for tobj "
2882                                 DFID": rc = %d\n",
2883                                 mdd2obd_dev(mdd)->obd_name,
2884                                 PFID(tpobj_fid), rc);
2885                         GOTO(fixup_tpobj, rc);
2886                 }
2887                 /* XXX: this transfer to ma will be removed with LOD/OSP */
2888                 ma->ma_attr = *tattr;
2889                 ma->ma_valid |= MA_INODE;
2890
2891                 if (tattr->la_nlink == 0) {
2892                         cl_flags |= CLF_RENAME_LAST;
2893                         if (mdd_hsm_archive_exists(env, mdd_tobj, ma))
2894                                 cl_flags |= CLF_RENAME_LAST_EXISTS;
2895                 }
2896         }
2897
2898         la->la_valid = LA_CTIME | LA_MTIME;
2899         rc = mdd_update_time(env, mdd_spobj, pattr, la, handle);
2900         if (rc)
2901                 GOTO(fixup_tpobj, rc);
2902
2903         if (mdd_spobj != mdd_tpobj) {
2904                 la->la_valid = LA_CTIME | LA_MTIME;
2905                 rc = mdd_update_time(env, mdd_tpobj, tpattr, la, handle);
2906         }
2907
2908         if (rc == 0 && mdd_sobj) {
2909                 mdd_write_lock(env, mdd_sobj, MOR_SRC_CHILD);
2910                 rc = mdd_links_rename(env, mdd_sobj, mdo2fid(mdd_spobj), lsname,
2911                                       mdo2fid(mdd_tpobj), ltname, handle, NULL,
2912                                       0, 0);
2913                 if (rc == -ENOENT)
2914                         /* Old files might not have EA entry */
2915                         mdd_links_add(env, mdd_sobj, mdo2fid(mdd_spobj),
2916                                       lsname, handle, NULL, 0);
2917                 mdd_write_unlock(env, mdd_sobj);
2918                 /* We don't fail the transaction if the link ea can't be
2919                    updated -- fid2path will use alternate lookup method. */
2920                 rc = 0;
2921         }
2922
2923         EXIT;
2924
2925 fixup_tpobj:
2926         if (rc) {
2927                 rc2 = __mdd_index_delete(env, mdd_tpobj, tname, is_dir, handle);
2928                 if (rc2)
2929                         CWARN("tp obj fix error %d\n",rc2);
2930
2931                 if (mdd_tobj && mdd_object_exists(mdd_tobj) &&
2932                     !mdd_is_dead_obj(mdd_tobj)) {
2933                         if (tobj_ref) {
2934                                 mdo_ref_add(env, mdd_tobj, handle);
2935                                 if (is_dir)
2936                                         mdo_ref_add(env, mdd_tobj, handle);
2937                         }
2938
2939                         rc2 = __mdd_index_insert(env, mdd_tpobj,
2940                                                   mdo2fid(mdd_tobj),
2941                                                   mdd_object_type(mdd_tobj),
2942                                                   tname, handle);
2943                         if (rc2 != 0)
2944                                 CWARN("tp obj fix error: rc = %d\n", rc2);
2945                 }
2946         }
2947
2948 fixup_spobj:
2949         if (rc && is_dir && mdd_sobj && mdd_spobj != mdd_tpobj) {
2950                 rc2 = __mdd_index_delete_only(env, mdd_sobj, dotdot, handle);
2951                 if (rc2)
2952                         CWARN("%s: sp obj dotdot delete error: rc = %d\n",
2953                                mdd2obd_dev(mdd)->obd_name, rc2);
2954
2955
2956                 rc2 = __mdd_index_insert_only(env, mdd_sobj, spobj_fid, S_IFDIR,
2957                                               dotdot, handle);
2958                 if (rc2 != 0)
2959                         CWARN("%s: sp obj dotdot insert error: rc = %d\n",
2960                               mdd2obd_dev(mdd)->obd_name, rc2);
2961         }
2962
2963 fixup_spobj2:
2964         if (rc != 0) {
2965                 rc2 = __mdd_index_insert(env, mdd_spobj, lf,
2966                                          mdd_object_type(mdd_sobj), sname,
2967                                          handle);
2968                 if (rc2 != 0)
2969                         CWARN("sp obj fix error: rc = %d\n", rc2);
2970         }
2971
2972 cleanup:
2973         if (tobj_locked)
2974                 mdd_write_unlock(env, mdd_tobj);
2975
2976 cleanup_unlocked:
2977         if (rc == 0)
2978                 rc = mdd_changelog_ns_store(env, mdd, CL_RENAME, cl_flags,
2979                                             mdd_tobj, tpobj_fid, lf, spobj_fid,
2980                                             ltname, lsname, handle);
2981
2982 stop:
2983         mdd_trans_stop(env, mdd, rc, handle);
2984
2985 out_pending:
2986         mdd_object_put(env, mdd_sobj);
2987         return rc;
2988 }
2989
2990 /**
2991  * During migration once the parent FID has been changed,
2992  * we need update the parent FID in linkea.
2993  **/
2994 static int mdd_linkea_update_child_internal(const struct lu_env *env,
2995                                             struct mdd_object *parent,
2996                                             struct mdd_object *child,
2997                                             const char *name, int namelen,
2998                                             struct thandle *handle,
2999                                             bool declare)
3000 {
3001         struct mdd_thread_info  *info = mdd_env_info(env);
3002         struct linkea_data      ldata = { NULL };
3003         struct lu_buf           *buf = &info->mti_link_buf;
3004         int                     count;
3005         int                     rc = 0;
3006
3007         ENTRY;
3008
3009         buf = lu_buf_check_and_alloc(buf, PATH_MAX);
3010         if (buf->lb_buf == NULL)
3011                 RETURN(-ENOMEM);
3012
3013         ldata.ld_buf = buf;
3014         rc = mdd_links_read(env, child, &ldata);
3015         if (rc != 0) {
3016                 if (rc == -ENOENT || rc == -ENODATA)
3017                         rc = 0;
3018                 RETURN(rc);
3019         }
3020
3021         LASSERT(ldata.ld_leh != NULL);
3022         ldata.ld_lee = (struct link_ea_entry *)(ldata.ld_leh + 1);
3023         for (count = 0; count < ldata.ld_leh->leh_reccount; count++) {
3024                 struct mdd_device *mdd = mdo2mdd(&child->mod_obj);
3025                 struct lu_name lname;
3026                 struct lu_fid  fid;
3027
3028                 linkea_entry_unpack(ldata.ld_lee, &ldata.ld_reclen,
3029                                     &lname, &fid);
3030
3031                 if (strncmp(lname.ln_name, name, namelen) != 0 ||
3032                     lu_fid_eq(&fid, mdd_object_fid(parent))) {
3033                         ldata.ld_lee = (struct link_ea_entry *)
3034                                        ((char *)ldata.ld_lee +
3035                                         ldata.ld_reclen);
3036                         continue;
3037                 }
3038
3039                 CDEBUG(D_INFO, "%s: update "DFID" with %.*s:"DFID"\n",
3040                        mdd2obd_dev(mdd)->obd_name, PFID(mdd_object_fid(child)),
3041                        lname.ln_namelen, lname.ln_name,
3042                        PFID(mdd_object_fid(parent)));
3043                 /* update to the new parent fid */
3044                 linkea_entry_pack(ldata.ld_lee, &lname,
3045                                   mdd_object_fid(parent));
3046                 if (declare)
3047                         rc = mdd_declare_links_add(env, child, handle, &ldata,
3048                                                    MLAO_IGNORE);
3049                 else
3050                         rc = mdd_links_write(env, child, &ldata, handle);
3051                 break;
3052         }
3053         RETURN(rc);
3054 }
3055
3056 static int mdd_linkea_declare_update_child(const struct lu_env *env,
3057                                            struct mdd_object *parent,
3058                                            struct mdd_object *child,
3059                                            const char *name, int namelen,
3060                                            struct thandle *handle)
3061 {
3062         return mdd_linkea_update_child_internal(env, parent, child, name,
3063                                                 namelen, handle, true);
3064 }
3065
3066 static int mdd_linkea_update_child(const struct lu_env *env,
3067                                    struct mdd_object *parent,
3068                                    struct mdd_object *child,
3069                                    const char *name, int namelen,
3070                                    struct thandle *handle)
3071 {
3072         return mdd_linkea_update_child_internal(env, parent, child, name,
3073                                                 namelen, handle, false);
3074 }
3075
3076 static int mdd_update_linkea_internal(const struct lu_env *env,
3077                                       struct mdd_object *mdd_pobj,
3078                                       struct mdd_object *mdd_sobj,
3079                                       struct mdd_object *mdd_tobj,
3080                                       const struct lu_name *child_name,
3081                                       struct thandle *handle,
3082                                       int declare)
3083 {
3084         struct mdd_thread_info  *info = mdd_env_info(env);
3085         struct linkea_data      *ldata = &info->mti_link_data;
3086         int                     count;
3087         int                     rc = 0;
3088         ENTRY;
3089
3090         rc = mdd_links_read(env, mdd_sobj, ldata);
3091         if (rc != 0) {
3092                 if (rc == -ENOENT || rc == -ENODATA)
3093                         rc = 0;
3094                 RETURN(rc);
3095         }
3096
3097         /* If it is mulitple links file, we need update the name entry for
3098          * all parent */
3099         LASSERT(ldata->ld_leh != NULL);
3100         ldata->ld_lee = (struct link_ea_entry *)(ldata->ld_leh + 1);
3101         for (count = 0; count < ldata->ld_leh->leh_reccount; count++) {
3102                 struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3103                 struct mdd_object       *pobj;
3104                 struct lu_name          lname;
3105                 struct lu_fid           fid;
3106
3107                 linkea_entry_unpack(ldata->ld_lee, &ldata->ld_reclen,
3108                                     &lname, &fid);
3109                 ldata->ld_lee = (struct link_ea_entry *)((char *)ldata->ld_lee +
3110                                                          ldata->ld_reclen);
3111                 pobj = mdd_object_find(env, mdd, &fid);
3112                 if (IS_ERR(pobj)) {
3113                         CWARN("%s: cannot find obj "DFID": rc = %ld\n",
3114                               mdd2obd_dev(mdd)->obd_name, PFID(&fid),
3115                               PTR_ERR(pobj));
3116                         continue;
3117                 }
3118
3119                 if (!mdd_object_exists(pobj)) {
3120                         CDEBUG(D_INFO, "%s: obj "DFID" does not exist\n",
3121                               mdd2obd_dev(mdd)->obd_name, PFID(&fid));
3122                         GOTO(next_put, rc);
3123                 }
3124
3125                 if (pobj == mdd_pobj &&
3126                     lname.ln_namelen == child_name->ln_namelen &&
3127                     strncmp(lname.ln_name, child_name->ln_name,
3128                             lname.ln_namelen) == 0) {
3129                         CDEBUG(D_INFO, "%s: skip its own %s: "DFID"\n",
3130                               mdd2obd_dev(mdd)->obd_name, child_name->ln_name,
3131                               PFID(&fid));
3132                         GOTO(next_put, rc);
3133                 }
3134
3135                 CDEBUG(D_INFO, "%s: update "DFID" with "DNAME":"DFID"\n",
3136                        mdd2obd_dev(mdd)->obd_name, PFID(mdd_object_fid(pobj)),
3137                        PNAME(&lname), PFID(mdd_object_fid(mdd_tobj)));
3138
3139                 if (declare) {
3140                         /* Remove source name from source directory */
3141                         /* Insert new fid with target name into target dir */
3142                         rc = mdo_declare_index_delete(env, pobj, lname.ln_name,
3143                                                       handle);
3144                         if (rc != 0)
3145                                 GOTO(next_put, rc);
3146
3147                         rc = mdo_declare_index_insert(env, pobj,
3148                                         mdd_object_fid(mdd_tobj),
3149                                         mdd_object_type(mdd_tobj),
3150                                         lname.ln_name, handle);
3151                         if (rc != 0)
3152                                 GOTO(next_put, rc);
3153
3154                         rc = mdo_declare_ref_add(env, mdd_tobj, handle);
3155                         if (rc)
3156                                 GOTO(next_put, rc);
3157
3158                         rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3159                         if (rc)
3160                                 GOTO(next_put, rc);
3161                 } else {
3162                         rc = __mdd_index_delete(env, pobj, lname.ln_name,
3163                                                 0, handle);
3164                         if (rc)
3165                                 GOTO(next_put, rc);
3166
3167                         rc = __mdd_index_insert(env, pobj,
3168                                         mdd_object_fid(mdd_tobj),
3169                                         mdd_object_type(mdd_tobj),
3170                                         lname.ln_name, handle);
3171                         if (rc != 0)
3172                                 GOTO(next_put, rc);
3173
3174                         mdd_write_lock(env, mdd_tobj, MOR_SRC_CHILD);
3175                         rc = mdo_ref_add(env, mdd_tobj, handle);
3176                         mdd_write_unlock(env, mdd_tobj);
3177                         if (rc)
3178                                 GOTO(next_put, rc);
3179
3180                         mdd_write_lock(env, mdd_sobj, MOR_TGT_CHILD);
3181                         mdo_ref_del(env, mdd_sobj, handle);
3182                         mdd_write_unlock(env, mdd_sobj);
3183                 }
3184 next_put:
3185                 mdd_object_put(env, pobj);
3186                 if (rc != 0)
3187                         break;
3188         }
3189
3190         RETURN(rc);
3191 }
3192
3193 static int mdd_migrate_xattrs(const struct lu_env *env,
3194                               struct mdd_object *mdd_sobj,
3195                               struct mdd_object *mdd_tobj)
3196 {
3197         struct mdd_thread_info  *info = mdd_env_info(env);
3198         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3199         char                    *xname;
3200         struct thandle          *handle;
3201         struct lu_buf           xbuf;
3202         int                     xlen;
3203         int                     rem;
3204         int                     xsize;
3205         int                     list_xsize;
3206         struct lu_buf           list_xbuf;
3207         int                     rc;
3208
3209         /* retrieve xattr list from the old object */
3210         list_xsize = mdo_xattr_list(env, mdd_sobj, &LU_BUF_NULL);
3211         if (list_xsize == -ENODATA)
3212                 return 0;
3213
3214         if (list_xsize < 0)
3215                 return list_xsize;
3216
3217         lu_buf_check_and_alloc(&info->mti_big_buf, list_xsize);
3218         if (info->mti_big_buf.lb_buf == NULL)
3219                 return -ENOMEM;
3220
3221         list_xbuf.lb_buf = info->mti_big_buf.lb_buf;
3222         list_xbuf.lb_len = list_xsize;
3223         rc = mdo_xattr_list(env, mdd_sobj, &list_xbuf);
3224         if (rc < 0)
3225                 return rc;
3226         rc = 0;
3227         rem = list_xsize;
3228         xname = list_xbuf.lb_buf;
3229         while (rem > 0) {
3230                 xlen = strnlen(xname, rem - 1) + 1;
3231                 if (strcmp(XATTR_NAME_LINK, xname) == 0 ||
3232                     strcmp(XATTR_NAME_LMA, xname) == 0 ||
3233                     strcmp(XATTR_NAME_LMV, xname) == 0)
3234                         goto next;
3235
3236                 /* For directory, if there are default layout, migrate here */
3237                 if (strcmp(XATTR_NAME_LOV, xname) == 0 &&
3238                     !S_ISDIR(lu_object_attr(&mdd_sobj->mod_obj.mo_lu)))
3239                         goto next;
3240
3241                 xsize = mdo_xattr_get(env, mdd_sobj, &LU_BUF_NULL, xname);
3242                 if (xsize == -ENODATA)
3243                         goto next;
3244                 if (xsize < 0)
3245                         GOTO(out, rc);
3246
3247                 lu_buf_check_and_alloc(&info->mti_link_buf, xsize);
3248                 if (info->mti_link_buf.lb_buf == NULL)
3249                         GOTO(out, rc = -ENOMEM);
3250
3251                 xbuf.lb_len = xsize;
3252                 xbuf.lb_buf = info->mti_link_buf.lb_buf;
3253                 rc = mdo_xattr_get(env, mdd_sobj, &xbuf, xname);
3254                 if (rc == -ENODATA)
3255                         goto next;
3256                 if (rc < 0)
3257                         GOTO(out, rc);
3258
3259                 handle = mdd_trans_create(env, mdd);
3260                 if (IS_ERR(handle))
3261                         GOTO(out, rc = PTR_ERR(handle));
3262
3263                 rc = mdo_declare_xattr_set(env, mdd_tobj, &xbuf, xname, 0,
3264                                            handle);
3265                 if (rc != 0)
3266                         GOTO(stop_trans, rc);
3267                 /* Note: this transaction is part of migration, and it is not
3268                  * the last step of migration, so we set th_local = 1 to avoid
3269                  * update last rcvd for this transaction */
3270                 handle->th_local = 1;
3271                 rc = mdd_trans_start(env, mdd, handle);
3272                 if (rc != 0)
3273                         GOTO(stop_trans, rc);
3274
3275                 rc = mdo_xattr_set(env, mdd_tobj, &xbuf, xname, 0, handle);
3276                 if (rc == -EEXIST)
3277                         GOTO(stop_trans, rc = 0);
3278
3279                 if (rc != 0)
3280                         GOTO(stop_trans, rc);
3281 stop_trans:
3282                 mdd_trans_stop(env, mdd, rc, handle);
3283                 if (rc != 0)
3284                         GOTO(out, rc);
3285 next:
3286                 rem -= xlen;
3287                 memmove(xname, xname + xlen, rem);
3288         }
3289 out:
3290         return rc;
3291 }
3292
3293 static int mdd_declare_migrate_create(const struct lu_env *env,
3294                                       struct mdd_object *mdd_pobj,
3295                                       struct mdd_object *mdd_sobj,
3296                                       struct mdd_object *mdd_tobj,
3297                                       struct md_op_spec *spec,
3298                                       struct lu_attr *la,
3299                                       union lmv_mds_md *mgr_ea,
3300                                       struct linkea_data *ldata,
3301                                       struct thandle *handle)
3302 {
3303         struct lu_attr          *la_flag = MDD_ENV_VAR(env, la_for_fix);
3304         const struct lu_buf     *buf;
3305         int                     rc;
3306         int                     mgr_easize;
3307
3308         rc = mdd_declare_object_create_internal(env, mdd_pobj, mdd_tobj, la,
3309                                                 handle, spec, NULL);
3310         if (rc != 0)
3311                 return rc;
3312
3313         rc = mdd_declare_object_initialize(env, mdd_pobj, mdd_tobj, la,
3314                                            handle);
3315         if (rc != 0)
3316                 return rc;
3317
3318         if (S_ISLNK(la->la_mode)) {
3319                 const char *target_name = spec->u.sp_symname;
3320                 int sym_len = strlen(target_name);
3321                 const struct lu_buf *buf;
3322
3323                 buf = mdd_buf_get_const(env, target_name, sym_len);
3324                 rc = dt_declare_record_write(env, mdd_object_child(mdd_tobj),
3325                                              buf, 0, handle);
3326                 if (rc != 0)
3327                         return rc;
3328         } else if (S_ISDIR(la->la_mode)) {
3329                 rc = mdd_declare_links_add(env, mdd_tobj, handle, ldata,
3330                                            MLAO_IGNORE);
3331                 if (rc != 0)
3332                         return rc;
3333         }
3334
3335         if (spec->u.sp_ea.eadata != NULL && spec->u.sp_ea.eadatalen != 0) {
3336                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
3337                                         spec->u.sp_ea.eadatalen);
3338                 rc = mdo_declare_xattr_set(env, mdd_tobj, buf, XATTR_NAME_LOV,
3339                                            0, handle);
3340                 if (rc)
3341                         return rc;
3342         }
3343
3344         mgr_easize = lmv_mds_md_size(2, LMV_MAGIC_V1);
3345         buf = mdd_buf_get_const(env, mgr_ea, mgr_easize);
3346         rc = mdo_declare_xattr_set(env, mdd_sobj, buf, XATTR_NAME_LMV,
3347                                    0, handle);
3348         if (rc)
3349                 return rc;
3350
3351         la_flag->la_valid = LA_FLAGS;
3352         la_flag->la_flags = la->la_flags | LUSTRE_IMMUTABLE_FL;
3353         rc = mdo_declare_attr_set(env, mdd_sobj, la_flag, handle);
3354
3355         return rc;
3356 }
3357
3358 static int mdd_migrate_create(const struct lu_env *env,
3359                               struct mdd_object *mdd_pobj,
3360                               struct mdd_object *mdd_sobj,
3361                               struct mdd_object *mdd_tobj,
3362                               const struct lu_name *lname,
3363                               struct lu_attr *la)
3364 {
3365         struct mdd_thread_info  *info = mdd_env_info(env);
3366         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3367         struct md_op_spec       *spec = &info->mti_spec;
3368         struct lu_buf           lmm_buf = { NULL };
3369         struct lu_buf           link_buf = { NULL };
3370         const struct lu_buf     *buf;
3371         struct thandle          *handle;
3372         struct lmv_mds_md_v1    *mgr_ea;
3373         struct lu_attr          *la_flag = MDD_ENV_VAR(env, la_for_fix);
3374         struct dt_allocation_hint *hint = &mdd_env_info(env)->mti_hint;
3375         int                     mgr_easize;
3376         struct linkea_data      *ldata = &mdd_env_info(env)->mti_link_data;
3377         int                     rc;
3378         ENTRY;
3379
3380         /* prepare spec for create */
3381         memset(spec, 0, sizeof(*spec));
3382         spec->sp_cr_lookup = 0;
3383         spec->sp_feat = &dt_directory_features;
3384         if (S_ISLNK(la->la_mode)) {
3385                 buf = lu_buf_check_and_alloc(
3386                                 &mdd_env_info(env)->mti_big_buf,
3387                                 la->la_size + 1);
3388                 link_buf = *buf;
3389                 link_buf.lb_len = la->la_size + 1;
3390                 memset(link_buf.lb_buf, 0, link_buf.lb_len);
3391                 rc = mdd_readlink(env, &mdd_sobj->mod_obj, &link_buf);
3392                 if (rc <= 0) {
3393                         rc = rc != 0 ? rc : -EFAULT;
3394                         CERROR("%s: "DFID" readlink failed: rc = %d\n",
3395                                mdd2obd_dev(mdd)->obd_name,
3396                                PFID(mdd_object_fid(mdd_sobj)), rc);
3397                         RETURN(rc);
3398                 }
3399                 spec->u.sp_symname = link_buf.lb_buf;
3400         } else if S_ISREG(la->la_mode) {
3401                 /* retrieve lov of the old object */
3402                 rc = mdd_get_lov_ea(env, mdd_sobj, &lmm_buf);
3403                 if (rc != 0 && rc != -ENODATA)
3404                         RETURN(rc);
3405                 if (lmm_buf.lb_buf != NULL && lmm_buf.lb_len != 0) {
3406                         spec->u.sp_ea.eadata = lmm_buf.lb_buf;
3407                         spec->u.sp_ea.eadatalen = lmm_buf.lb_len;
3408                         spec->sp_cr_flags |= MDS_OPEN_HAS_EA;
3409                 }
3410         } else if (S_ISDIR(la->la_mode)) {
3411                 rc = mdd_links_read(env, mdd_sobj, ldata);
3412                 if (rc < 0 && rc != -ENODATA)
3413                         RETURN(rc);
3414         }
3415
3416         mgr_ea = (struct lmv_mds_md_v1 *)info->mti_xattr_buf;
3417         memset(mgr_ea, 0, sizeof(*mgr_ea));
3418         mgr_ea->lmv_magic = cpu_to_le32(LMV_MAGIC_V1);
3419         mgr_ea->lmv_stripe_count = cpu_to_le32(2);
3420         mgr_ea->lmv_master_mdt_index = mdd_seq_site(mdd)->ss_node_id;
3421         mgr_ea->lmv_hash_type = cpu_to_le32(LMV_HASH_FLAG_MIGRATION);
3422         fid_cpu_to_le(&mgr_ea->lmv_stripe_fids[0], mdd_object_fid(mdd_sobj));
3423         fid_cpu_to_le(&mgr_ea->lmv_stripe_fids[1], mdd_object_fid(mdd_tobj));
3424
3425         mdd_object_make_hint(env, mdd_pobj, mdd_tobj, la, spec, hint);
3426
3427         handle = mdd_trans_create(env, mdd);
3428         if (IS_ERR(handle))
3429                 GOTO(out_free, rc = PTR_ERR(handle));
3430
3431         /* Note: this transaction is part of migration, and it is not
3432          * the last step of migration, so we set th_local = 1 to avoid
3433          * update last rcvd for this transaction */
3434         handle->th_local = 1;
3435         rc = mdd_declare_migrate_create(env, mdd_pobj, mdd_sobj, mdd_tobj,
3436                                         spec, la,
3437                                         (union lmv_mds_md *)info->mti_xattr_buf,
3438                                         ldata, handle);
3439         if (rc != 0)
3440                 GOTO(stop_trans, rc);
3441
3442         rc = mdd_trans_start(env, mdd, handle);
3443         if (rc != 0)
3444                 GOTO(stop_trans, rc);
3445
3446         /* create the target object */
3447         rc = mdd_object_create(env, mdd_pobj, mdd_tobj, la, spec, NULL, NULL,
3448                                hint, handle);
3449         if (rc != 0)
3450                 GOTO(stop_trans, rc);
3451
3452         if (S_ISDIR(la->la_mode)) {
3453                 rc = mdd_links_write(env, mdd_tobj, ldata, handle);
3454                 if (rc != 0)
3455                         GOTO(stop_trans, rc);
3456         }
3457
3458         /* Set MIGRATE EA on the source inode, so once the migration needs
3459          * to be re-done during failover, the re-do process can locate the
3460          * target object which is already being created. */
3461         mgr_easize = lmv_mds_md_size(2, LMV_MAGIC_V1);
3462         buf = mdd_buf_get_const(env, mgr_ea, mgr_easize);
3463         rc = mdo_xattr_set(env, mdd_sobj, buf, XATTR_NAME_LMV, 0, handle);
3464         if (rc != 0)
3465                 GOTO(stop_trans, rc);
3466
3467         /* Set immutable flag, so any modification is disabled until
3468          * the migration is done. Once the migration is interrupted,
3469          * if the resume process find the migrating object has both
3470          * IMMUTALBE flag and MIGRATE EA, it need to clear IMMUTABLE
3471          * flag and approve the migration */
3472         la_flag->la_valid = LA_FLAGS;
3473         la_flag->la_flags = la->la_flags | LUSTRE_IMMUTABLE_FL;
3474         rc = mdo_attr_set(env, mdd_sobj, la_flag, handle);
3475 stop_trans:
3476         if (handle != NULL)
3477                 mdd_trans_stop(env, mdd, rc, handle);
3478 out_free:
3479         if (lmm_buf.lb_buf != NULL)
3480                 OBD_FREE(lmm_buf.lb_buf, lmm_buf.lb_len);
3481         RETURN(rc);
3482 }
3483
3484 static int mdd_migrate_entries(const struct lu_env *env,
3485                                struct mdd_object *mdd_sobj,
3486                                struct mdd_object *mdd_tobj)
3487 {
3488         struct dt_object        *next = mdd_object_child(mdd_sobj);
3489         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3490         struct dt_object        *dt_tobj = mdd_object_child(mdd_tobj);
3491         struct thandle          *handle;
3492         struct dt_it            *it;
3493         const struct dt_it_ops  *iops;
3494         int                      rc;
3495         int                      result;
3496         struct lu_dirent        *ent;
3497         ENTRY;
3498
3499         OBD_ALLOC(ent, NAME_MAX + sizeof(*ent) + 1);
3500         if (ent == NULL)
3501                 RETURN(-ENOMEM);
3502
3503         if (!dt_try_as_dir(env, next))
3504                 GOTO(out_ent, rc = -ENOTDIR);
3505         /*
3506          * iterate directories
3507          */
3508         iops = &next->do_index_ops->dio_it;
3509         it = iops->init(env, next, LUDA_FID | LUDA_TYPE);
3510         if (IS_ERR(it))
3511                 GOTO(out_ent, rc = PTR_ERR(it));
3512
3513         rc = iops->load(env, it, 0);
3514         if (rc == 0)
3515                 rc = iops->next(env, it);
3516         else if (rc > 0)
3517                 rc = 0;
3518         /*
3519          * At this point and across for-loop:
3520          *
3521          *  rc == 0 -> ok, proceed.
3522          *  rc >  0 -> end of directory.
3523          *  rc <  0 -> error.
3524          */
3525         do {
3526                 struct mdd_object       *child;
3527                 char                    *name = mdd_env_info(env)->mti_key;
3528                 int                     len;
3529                 int                     recsize;
3530                 int                     is_dir;
3531                 bool                    target_exist = false;
3532
3533                 len = iops->key_size(env, it);
3534                 if (len == 0)
3535                         goto next;
3536
3537                 result = iops->rec(env, it, (struct dt_rec *)ent,
3538                                    LUDA_FID | LUDA_TYPE);
3539                 if (result == -ESTALE)
3540                         goto next;
3541                 if (result != 0) {
3542                         rc = result;
3543                         goto out;
3544                 }
3545
3546                 fid_le_to_cpu(&ent->lde_fid, &ent->lde_fid);
3547                 recsize = le16_to_cpu(ent->lde_reclen);
3548
3549                 /* Insert new fid with target name into target dir */
3550                 if ((ent->lde_namelen == 1 && ent->lde_name[0] == '.') ||
3551                     (ent->lde_namelen == 2 && ent->lde_name[0] == '.' &&
3552                      ent->lde_name[1] == '.'))
3553                         goto next;
3554
3555                 child = mdd_object_find(env, mdd, &ent->lde_fid);
3556                 if (IS_ERR(child))
3557                         GOTO(out, rc = PTR_ERR(child));
3558
3559                 is_dir = S_ISDIR(mdd_object_type(child));
3560
3561                 snprintf(name, ent->lde_namelen + 1, "%s", ent->lde_name);
3562
3563                 /* Check whether the name has been inserted to the target */
3564                 if (dt_try_as_dir(env, dt_tobj)) {
3565                         struct lu_fid *fid = &mdd_env_info(env)->mti_fid2;
3566
3567                         rc = dt_lookup(env, dt_tobj, (struct dt_rec *)fid,
3568                                        (struct dt_key *)name);
3569                         if (unlikely(rc == 0))
3570                                 target_exist = true;
3571                 }
3572
3573                 handle = mdd_trans_create(env, mdd);
3574                 if (IS_ERR(handle))
3575                         GOTO(out, rc = PTR_ERR(handle));
3576
3577                 /* Note: this transaction is part of migration, and it is not
3578                  * the last step of migration, so we set th_local = 1 to avoid
3579                  * updating last rcvd for this transaction */
3580                 handle->th_local = 1;
3581                 if (likely(!target_exist)) {
3582                         rc = mdo_declare_index_insert(env, mdd_tobj,
3583                                                       &ent->lde_fid,
3584                                                       mdd_object_type(child),
3585                                                       name, handle);
3586                         if (rc != 0)
3587                                 GOTO(out_put, rc);
3588
3589                         if (is_dir) {
3590                                 rc = mdo_declare_ref_add(env, mdd_tobj, handle);
3591                                 if (rc != 0)
3592                                         GOTO(out_put, rc);
3593                         }
3594                 }
3595
3596                 rc = mdo_declare_index_delete(env, mdd_sobj, name, handle);
3597                 if (rc != 0)
3598                         GOTO(out_put, rc);
3599
3600                 if (is_dir) {
3601                         rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3602                         if (rc != 0)
3603                                 GOTO(out_put, rc);
3604
3605                         /* Update .. for child */
3606                         rc = mdo_declare_index_delete(env, child, dotdot,
3607                                                       handle);
3608                         if (rc != 0)
3609                                 GOTO(out_put, rc);
3610
3611                         rc = mdo_declare_index_insert(env, child,
3612                                                       mdd_object_fid(mdd_tobj),
3613                                                       S_IFDIR, dotdot, handle);
3614                         if (rc != 0)
3615                                 GOTO(out_put, rc);
3616                 }
3617
3618                 rc = mdd_linkea_declare_update_child(env, mdd_tobj,
3619                                                      child, name,
3620                                                      strlen(name),
3621                                                      handle);
3622                 if (rc != 0)
3623                         GOTO(out_put, rc);
3624
3625                 rc = mdd_trans_start(env, mdd, handle);
3626                 if (rc != 0) {
3627                         CERROR("%s: transaction start failed: rc = %d\n",
3628                                mdd2obd_dev(mdd)->obd_name, rc);
3629                         GOTO(out_put, rc);
3630                 }
3631
3632                 if (likely(!target_exist)) {
3633                         rc = __mdd_index_insert(env, mdd_tobj, &ent->lde_fid,
3634                                                 mdd_object_type(child),
3635                                                 name, handle);
3636                         if (rc != 0)
3637                                 GOTO(out_put, rc);
3638                 }
3639
3640                 rc = __mdd_index_delete(env, mdd_sobj, name, is_dir, handle);
3641                 if (rc != 0)
3642                         GOTO(out_put, rc);
3643
3644                 if (is_dir) {
3645                         rc = __mdd_index_delete_only(env, child, dotdot,
3646                                                      handle);
3647                         if (rc != 0)
3648                                 GOTO(out_put, rc);
3649
3650                         rc = __mdd_index_insert_only(env, child,
3651                                          mdd_object_fid(mdd_tobj), S_IFDIR,
3652                                          dotdot, handle);
3653                         if (rc != 0)
3654                                 GOTO(out_put, rc);
3655                 }
3656
3657                 rc = mdd_linkea_update_child(env, mdd_tobj, child, name,
3658                                              strlen(name), handle);
3659
3660 out_put:
3661                 mdd_object_put(env, child);
3662                 mdd_trans_stop(env, mdd, rc, handle);
3663                 if (rc != 0)
3664                         GOTO(out, rc);
3665 next:
3666                 result = iops->next(env, it);
3667                 if (OBD_FAIL_CHECK(OBD_FAIL_MIGRATE_ENTRIES))
3668                         GOTO(out, rc = -EINTR);
3669
3670                 if (result == -ESTALE)
3671                         goto next;
3672         } while (result == 0);
3673 out:
3674         iops->put(env, it);
3675         iops->fini(env, it);
3676 out_ent:
3677         OBD_FREE(ent, NAME_MAX + sizeof(*ent) + 1);
3678         RETURN(rc);
3679 }
3680
3681 static int mdd_declare_update_linkea(const struct lu_env *env,
3682                                      struct mdd_object *mdd_pobj,
3683                                      struct mdd_object *mdd_sobj,
3684                                      struct mdd_object *mdd_tobj,
3685                                      struct thandle *handle,
3686                                      const struct lu_name *child_name)
3687 {
3688         return mdd_update_linkea_internal(env, mdd_pobj, mdd_sobj, mdd_tobj,
3689                                           child_name, handle, 1);
3690 }
3691
3692 static int mdd_update_linkea(const struct lu_env *env,
3693                              struct mdd_object *mdd_pobj,
3694                              struct mdd_object *mdd_sobj,
3695                              struct mdd_object *mdd_tobj,
3696                              struct thandle *handle,
3697                              const struct lu_name *child_name)
3698 {
3699         return mdd_update_linkea_internal(env, mdd_pobj, mdd_sobj, mdd_tobj,
3700                                           child_name, handle, 0);
3701 }
3702
3703 static int mdd_declare_migrate_update_name(const struct lu_env *env,
3704                                            struct mdd_object *mdd_pobj,
3705                                            struct mdd_object *mdd_sobj,
3706                                            struct mdd_object *mdd_tobj,
3707                                            const struct lu_name *lname,
3708                                            struct lu_attr *la,
3709                                            struct lu_attr *parent_la,
3710                                            struct thandle *handle)
3711 {
3712         struct lu_attr  *la_flag = MDD_ENV_VAR(env, tattr);
3713         int             rc;
3714
3715         /* Revert IMMUTABLE flag */
3716         la_flag->la_valid = LA_FLAGS;
3717         la_flag->la_flags = la->la_flags & ~LUSTRE_IMMUTABLE_FL;
3718         rc = mdo_declare_attr_set(env, mdd_sobj, la_flag, handle);
3719         if (rc != 0)
3720                 return rc;
3721
3722         /* delete entry from source dir */
3723         rc = mdo_declare_index_delete(env, mdd_pobj, lname->ln_name, handle);
3724         if (rc != 0)
3725                 return rc;
3726
3727         rc = mdd_declare_update_linkea(env, mdd_pobj, mdd_sobj,
3728                                        mdd_tobj, handle, lname);
3729         if (rc != 0)
3730                 return rc;
3731
3732         if (S_ISREG(mdd_object_type(mdd_sobj))) {
3733                 rc = mdo_declare_xattr_del(env, mdd_sobj, XATTR_NAME_LOV,
3734                                            handle);
3735                 if (rc != 0)
3736                         return rc;
3737         }
3738
3739         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
3740                 rc = mdo_declare_ref_del(env, mdd_pobj, handle);
3741                 if (rc != 0)
3742                         return rc;
3743         }
3744
3745         /* new name */
3746         rc = mdo_declare_index_insert(env, mdd_pobj, mdo2fid(mdd_tobj),
3747                                       mdd_object_type(mdd_tobj),
3748                                       lname->ln_name, handle);
3749         if (rc != 0)
3750                 return rc;
3751
3752         rc = mdd_declare_links_add(env, mdd_tobj, handle, NULL, MLAO_IGNORE);
3753         if (rc != 0)
3754                 return rc;
3755
3756         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
3757                 rc = mdo_declare_ref_add(env, mdd_pobj, handle);
3758                 if (rc != 0)
3759                         return rc;
3760         }
3761
3762         /* delete old object */
3763         rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3764         if (rc != 0)
3765                 return rc;
3766
3767         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
3768                 /* delete old object */
3769                 rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3770                 if (rc != 0)
3771                         return rc;
3772                 /* set nlink to 0 */
3773                 rc = mdo_declare_attr_set(env, mdd_sobj, la, handle);
3774                 if (rc != 0)
3775                         return rc;
3776         }
3777
3778         rc = mdd_declare_finish_unlink(env, mdd_sobj, handle);
3779         if (rc)
3780                 return rc;
3781
3782         rc = mdo_declare_attr_set(env, mdd_pobj, parent_la, handle);
3783
3784         return rc;
3785 }
3786
3787 static int mdd_migrate_update_name(const struct lu_env *env,
3788                                    struct mdd_object *mdd_pobj,
3789                                    struct mdd_object *mdd_sobj,
3790                                    struct mdd_object *mdd_tobj,
3791                                    const struct lu_name *lname,
3792                                    struct md_attr *ma)
3793 {
3794         struct lu_attr          *p_la = MDD_ENV_VAR(env, la_for_fix);
3795         struct lu_attr          *so_attr = MDD_ENV_VAR(env, cattr);
3796         struct lu_attr          *la_flag = MDD_ENV_VAR(env, tattr);
3797         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3798         struct thandle          *handle;
3799         int                     is_dir = S_ISDIR(mdd_object_type(mdd_sobj));
3800         const char              *name = lname->ln_name;
3801         int                     rc;
3802         ENTRY;
3803
3804         /* update time for parent */
3805         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
3806         p_la->la_ctime = p_la->la_mtime = ma->ma_attr.la_ctime;
3807         p_la->la_valid = LA_CTIME;
3808
3809         rc = mdd_la_get(env, mdd_sobj, so_attr);
3810         if (rc != 0)
3811                 RETURN(rc);
3812
3813         handle = mdd_trans_create(env, mdd);
3814         if (IS_ERR(handle))
3815                 RETURN(PTR_ERR(handle));
3816
3817         rc = mdd_declare_migrate_update_name(env, mdd_pobj, mdd_sobj, mdd_tobj,
3818                                              lname, so_attr, p_la, handle);
3819         if (rc != 0) {
3820                 /* If the migration can not be fit in one transaction, just
3821                  * leave it in the original MDT */
3822                 if (rc == -E2BIG)
3823                         GOTO(stop_trans, rc = 0);
3824                 else
3825                         GOTO(stop_trans, rc);
3826         }
3827
3828         CDEBUG(D_INFO, "%s: update "DFID"/"DFID" with %s:"DFID"\n",
3829                mdd2obd_dev(mdd)->obd_name, PFID(mdd_object_fid(mdd_pobj)),
3830                PFID(mdd_object_fid(mdd_sobj)), lname->ln_name,
3831                PFID(mdd_object_fid(mdd_tobj)));
3832
3833         rc = mdd_trans_start(env, mdd, handle);
3834         if (rc != 0)
3835                 GOTO(stop_trans, rc);
3836
3837         /* Revert IMMUTABLE flag */
3838         la_flag->la_valid = LA_FLAGS;
3839         la_flag->la_flags = so_attr->la_flags & ~LUSTRE_IMMUTABLE_FL;
3840         rc = mdo_attr_set(env, mdd_sobj, la_flag, handle);
3841         if (rc != 0)
3842                 GOTO(stop_trans, rc);
3843
3844         /* Remove source name from source directory */
3845         rc = __mdd_index_delete(env, mdd_pobj, name, is_dir, handle);
3846         if (rc != 0)
3847                 GOTO(stop_trans, rc);
3848
3849         rc = mdd_update_linkea(env, mdd_pobj, mdd_sobj, mdd_tobj,
3850                                handle, lname);
3851         if (rc != 0)
3852                 GOTO(stop_trans, rc);
3853
3854         if (S_ISREG(so_attr->la_mode)) {
3855                 if (so_attr->la_nlink == 1) {
3856                         rc = mdo_xattr_del(env, mdd_sobj, XATTR_NAME_LOV,
3857                                            handle);
3858                         if (rc != 0 && rc != -ENODATA)
3859                                 GOTO(stop_trans, rc);
3860                 }
3861         }
3862
3863         /* Insert new fid with target name into target dir */
3864         rc = __mdd_index_insert(env, mdd_pobj, mdd_object_fid(mdd_tobj),
3865                                 mdd_object_type(mdd_tobj), name, handle);
3866         if (rc != 0)
3867                 GOTO(stop_trans, rc);
3868
3869         rc = mdd_links_add(env, mdd_tobj, mdo2fid(mdd_pobj), lname, handle,
3870                            NULL, 1);
3871         if (rc != 0)
3872                 GOTO(stop_trans, rc);
3873
3874         mdd_write_lock(env, mdd_sobj, MOR_SRC_CHILD);
3875         mdo_ref_del(env, mdd_sobj, handle);
3876         if (is_dir)
3877                 mdo_ref_del(env, mdd_sobj, handle);
3878
3879         /* Get the attr again after ref_del */
3880         rc = mdd_la_get(env, mdd_sobj, so_attr);
3881         if (rc != 0)
3882                 GOTO(out_unlock, rc);
3883
3884         ma->ma_attr = *so_attr;
3885         ma->ma_valid |= MA_INODE;
3886         rc = mdd_finish_unlink(env, mdd_sobj, ma, mdd_pobj, lname, handle);
3887         if (rc != 0)
3888                 GOTO(out_unlock, rc);
3889
3890         rc = mdd_attr_set_internal(env, mdd_pobj, p_la, handle, 0);
3891         if (rc != 0)
3892                 GOTO(out_unlock, rc);
3893
3894 out_unlock:
3895         mdd_write_unlock(env, mdd_sobj);
3896
3897 stop_trans:
3898         mdd_trans_stop(env, mdd, rc, handle);
3899
3900         RETURN(rc);
3901 }
3902
3903 /**
3904  * Check whether we should migrate the file/dir
3905  * return val
3906  *      < 0  permission check failed or other error.
3907  *      = 0  the file can be migrated.
3908  *      > 0  the file does not need to be migrated, mostly
3909  *           for multiple link file
3910  **/
3911 static int mdd_migrate_sanity_check(const struct lu_env *env,
3912                                     struct mdd_object *pobj,
3913                                     const struct lu_attr *pattr,
3914                                     struct mdd_object *sobj,
3915                                     struct lu_attr *sattr)
3916 {
3917         struct mdd_thread_info  *info = mdd_env_info(env);
3918         struct linkea_data      *ldata = &info->mti_link_data;
3919         int                     mgr_easize;
3920         struct lu_buf           *mgr_buf;
3921         int                     count;
3922         int                     rc;
3923
3924         ENTRY;
3925
3926         mgr_easize = lmv_mds_md_size(2, LMV_MAGIC_V1);
3927         mgr_buf = lu_buf_check_and_alloc(&info->mti_big_buf, mgr_easize);
3928         if (mgr_buf->lb_buf == NULL)
3929                 RETURN(-ENOMEM);
3930
3931         rc = mdo_xattr_get(env, sobj, mgr_buf, XATTR_NAME_LMV);
3932         if (rc > 0) {
3933                 union lmv_mds_md *lmm = mgr_buf->lb_buf;
3934
3935                 /* If the object has migrateEA, it means IMMUTE flag
3936                  * is being set by previous migration process, so it
3937                  * needs to override the IMMUTE flag, otherwise the
3938                  * following sanity check will fail */
3939                 if (le32_to_cpu(lmm->lmv_md_v1.lmv_hash_type) &
3940                                                 LMV_HASH_FLAG_MIGRATION) {
3941                         struct mdd_device *mdd = mdo2mdd(&sobj->mod_obj);
3942
3943                         sattr->la_flags &= ~LUSTRE_IMMUTABLE_FL;
3944                         CDEBUG(D_HA, "%s: "DFID" override IMMUTE FLAG\n",
3945                                mdd2obd_dev(mdd)->obd_name,
3946                                PFID(mdd_object_fid(sobj)));
3947                 }
3948         }
3949
3950         rc = mdd_rename_sanity_check(env, pobj, pattr, pobj, pattr,
3951                                      sobj, sattr, NULL, NULL);
3952         if (rc != 0)
3953                 RETURN(rc);
3954
3955         /* Then it will check if the file should be migrated. If the file
3956          * has mulitple links, we only need migrate the file if all of its
3957          * entries has been migrated to the remote MDT */
3958         if (!S_ISREG(sattr->la_mode) || sattr->la_nlink < 2)
3959                 RETURN(0);
3960
3961         rc = mdd_links_read(env, sobj, ldata);
3962         if (rc != 0) {
3963                 /* For multiple links files, if there are no linkEA data at all,
3964                  * means the file might be created before linkEA is enabled, and
3965                  * all all of its links should not be migrated yet, otherwise
3966                  * it should have some linkEA there */
3967                 if (rc == -ENOENT || rc == -ENODATA)
3968                         RETURN(1);
3969                 RETURN(rc);
3970         }
3971
3972         /* If it is mulitple links file, we need update the name entry for
3973          * all parent */
3974         LASSERT(ldata->ld_leh != NULL);
3975         ldata->ld_lee = (struct link_ea_entry *)(ldata->ld_leh + 1);
3976         for (count = 0; count < ldata->ld_leh->leh_reccount; count++) {
3977                 struct mdd_device       *mdd = mdo2mdd(&sobj->mod_obj);
3978                 struct mdd_object       *lpobj;
3979                 struct lu_name          lname;
3980                 struct lu_fid           fid;
3981
3982                 linkea_entry_unpack(ldata->ld_lee, &ldata->ld_reclen,
3983                                     &lname, &fid);
3984                 ldata->ld_lee = (struct link_ea_entry *)((char *)ldata->ld_lee +
3985                                                          ldata->ld_reclen);
3986                 lpobj = mdd_object_find(env, mdd, &fid);
3987                 if (IS_ERR(lpobj)) {
3988                         CWARN("%s: cannot find obj "DFID": rc = %ld\n",
3989                               mdd2obd_dev(mdd)->obd_name, PFID(&fid),
3990                               PTR_ERR(lpobj));
3991                         continue;
3992                 }
3993
3994                 if (!mdd_object_exists(lpobj) || mdd_object_remote(lpobj)) {
3995                         CDEBUG(D_INFO, DFID"%.*s: is on remote MDT.\n",
3996                                PFID(&fid), lname.ln_namelen, lname.ln_name);
3997                         mdd_object_put(env, lpobj);
3998                         continue;
3999                 }
4000
4001                 CDEBUG(D_INFO, DFID"still has local entry %.*s "DFID"\n",
4002                        PFID(mdd_object_fid(sobj)), lname.ln_namelen,
4003                        lname.ln_name, PFID(&fid));
4004                 mdd_object_put(env, lpobj);
4005                 rc = 1;
4006                 break;
4007         }
4008
4009         RETURN(rc);
4010 }
4011
4012 static int mdd_migrate(const struct lu_env *env, struct md_object *pobj,
4013                        struct md_object *sobj, const struct lu_name *lname,
4014                        struct md_object *tobj, struct md_attr *ma)
4015 {
4016         struct mdd_object       *mdd_pobj = md2mdd_obj(pobj);
4017         struct mdd_device       *mdd = mdo2mdd(pobj);
4018         struct mdd_object       *mdd_sobj = md2mdd_obj(sobj);
4019         struct mdd_object       *mdd_tobj = NULL;
4020         struct lu_attr          *so_attr = MDD_ENV_VAR(env, cattr);
4021         struct lu_attr          *pattr = MDD_ENV_VAR(env, pattr);
4022         int                     rc;
4023
4024         ENTRY;
4025         /* If the file will being migrated, it will check whether
4026          * the file is being opened by someone else right now */
4027         mdd_read_lock(env, mdd_sobj, MOR_SRC_CHILD);
4028         if (mdd_sobj->mod_count >= 1) {
4029                 CERROR("%s: "DFID"%s is already opened count %d: rc = %d\n",
4030                        mdd2obd_dev(mdd)->obd_name,
4031                        PFID(mdd_object_fid(mdd_sobj)), lname->ln_name,
4032                        mdd_sobj->mod_count, -EBUSY);
4033                 mdd_read_unlock(env, mdd_sobj);
4034                 GOTO(put, rc = -EBUSY);
4035         }
4036         mdd_read_unlock(env, mdd_sobj);
4037
4038         rc = mdd_la_get(env, mdd_sobj, so_attr);
4039         if (rc != 0)
4040                 GOTO(put, rc);
4041
4042         rc = mdd_la_get(env, mdd_pobj, pattr);
4043         if (rc != 0)
4044                 GOTO(put, rc);
4045
4046         rc = mdd_migrate_sanity_check(env, mdd_pobj, pattr, mdd_sobj, so_attr);
4047         if (rc != 0) {
4048                 if (rc > 0)
4049                         rc = 0;
4050                 GOTO(put, rc);
4051         }
4052
4053         /* Sigh, it is impossible to finish all of migration in a single
4054          * transaction, for example migrating big directory entries to the
4055          * new MDT, it needs insert all of name entries of children in the
4056          * new directory.
4057          *
4058          * So migration will be done in multiple steps and transactions.
4059          *
4060          * 1. create an orphan object on the remote MDT in one transaction.
4061          * 2. migrate extend attributes to the new target file/directory.
4062          * 3. For directory, migrate the entries to the new MDT and update
4063          * linkEA of each children. Because we can not migrate all entries
4064          * in a single transaction, so the migrating directory will become
4065          * a striped directory during migration, so once the process is
4066          * interrupted, the directory is still accessible. (During lookup,
4067          * client will locate the name by searching both original and target
4068          * object).
4069          * 4. Finally, update the name/FID to point to the new file/directory
4070          * in a separate transaction.
4071          */
4072
4073         /* step 1: Check whether the orphan object has been created, and create
4074          * orphan object on the remote MDT if needed */
4075         mdd_tobj = md2mdd_obj(tobj);
4076         if (!mdd_object_exists(mdd_tobj)) {
4077                 rc = mdd_migrate_create(env, mdd_pobj, mdd_sobj, mdd_tobj,
4078                                         lname, so_attr);
4079                 if (rc != 0)
4080                         GOTO(put, rc);
4081         }
4082
4083         /* step 2: migrate xattr */
4084         rc = mdd_migrate_xattrs(env, mdd_sobj, mdd_tobj);
4085         if (rc != 0)
4086                 GOTO(put, rc);
4087
4088         /* step 3: migrate name entries to the orphan object */
4089         if (S_ISDIR(lu_object_attr(&mdd_sobj->mod_obj.mo_lu))) {
4090                 rc = mdd_migrate_entries(env, mdd_sobj, mdd_tobj);
4091                 if (rc != 0)
4092                         GOTO(put, rc);
4093                 if (unlikely(OBD_FAIL_CHECK_RESET(OBD_FAIL_MIGRATE_NET_REP,
4094                                                   OBD_FAIL_MDS_REINT_NET_REP)))
4095                         GOTO(put, rc = 0);
4096         } else {
4097                 OBD_FAIL_TIMEOUT(OBD_FAIL_MIGRATE_DELAY, cfs_fail_val);
4098         }
4099
4100         /* step 4: update name entry to the new object */
4101         rc = mdd_migrate_update_name(env, mdd_pobj, mdd_sobj, mdd_tobj, lname,
4102                                      ma);
4103         if (rc != 0)
4104                 GOTO(put, rc);
4105 put:
4106         RETURN(rc);
4107 }
4108
4109 const struct md_dir_operations mdd_dir_ops = {
4110         .mdo_is_subdir     = mdd_is_subdir,
4111         .mdo_lookup        = mdd_lookup,
4112         .mdo_create        = mdd_create,
4113         .mdo_rename        = mdd_rename,
4114         .mdo_link          = mdd_link,
4115         .mdo_unlink        = mdd_unlink,
4116         .mdo_create_data   = mdd_create_data,
4117         .mdo_migrate       = mdd_migrate,
4118 };