lustre/mdd/mdd_dir.c

   1 /*
   2  * GPL HEADER START
   3  *
   4  * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
   5  *
   6  * This program is free software; you can redistribute it and/or modify
   7  * it under the terms of the GNU General Public License version 2 only,
   8  * as published by the Free Software Foundation.
   9  *
  10  * This program is distributed in the hope that it will be useful, but
  11  * WITHOUT ANY WARRANTY; without even the implied warranty of
  12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13  * General Public License version 2 for more details (a copy is included
  14  * in the LICENSE file that accompanied this code).
  15  *
  16  * You should have received a copy of the GNU General Public License
  17  * version 2 along with this program; If not, see
  18  * http://www.sun.com/software/products/lustre/docs/GPLv2.pdf
  19  *
  20  * Please contact Sun Microsystems, Inc., 4150 Network Circle, Santa Clara,
  21  * CA 95054 USA or visit www.sun.com if you need additional information or
  22  * have any questions.
  23  *
  24  * GPL HEADER END
  25  */
  26 /*
  27  * Copyright (c) 2007, 2010, Oracle and/or its affiliates. All rights reserved.
  28  * Use is subject to license terms.
  29  *
  30  * Copyright (c) 2011, 2013, Intel Corporation.
  31  */
  32 /*
  33  * This file is part of Lustre, http://www.lustre.org/
  34  * Lustre is a trademark of Sun Microsystems, Inc.
  35  *
  36  * lustre/mdd/mdd_dir.c
  37  *
  38  * Lustre Metadata Server (mdd) routines
  39  *
  40  * Author: Wang Di <wangdi@intel.com>
  41  */
  42
  43 #define DEBUG_SUBSYSTEM S_MDS
  44
  45 #include <obd_class.h>
  46 #include <obd_support.h>
  47 #include <lustre_mds.h>
  48 #include <lustre_fid.h>
  49
  50 #include "mdd_internal.h"
  51
  52 static const char dot[] = ".";
  53 static const char dotdot[] = "..";
  54
  55 static struct lu_name lname_dotdot = {
  56         (char *) dotdot,
  57         sizeof(dotdot) - 1
  58 };
  59
  60 static inline int
  61 mdd_name_check(struct mdd_device *m, const struct lu_name *ln)
  62 {
  63         if (!lu_name_is_valid(ln))
  64                 return -EINVAL;
  65         else if (ln->ln_namelen > m->mdd_dt_conf.ddp_max_name_len)
  66                 return -ENAMETOOLONG;
  67         else
  68                 return 0;
  69 }
  70
  71 /* Get FID from name and parent */
  72 static int
  73 __mdd_lookup(const struct lu_env *env, struct md_object *pobj,
  74              const struct lu_attr *pattr, const struct lu_name *lname,
  75              struct lu_fid* fid, int mask)
  76 {
  77         const char *name                = lname->ln_name;
  78         const struct dt_key *key        = (const struct dt_key *)name;
  79         struct mdd_object *mdd_obj      = md2mdd_obj(pobj);
  80         struct mdd_device *m            = mdo2mdd(pobj);
  81         struct dt_object *dir           = mdd_object_child(mdd_obj);
  82         int rc;
  83         ENTRY;
  84
  85         if (unlikely(mdd_is_dead_obj(mdd_obj)))
  86                 RETURN(-ESTALE);
  87
  88         if (mdd_object_remote(mdd_obj)) {
  89                 CDEBUG(D_INFO, "%s: Object "DFID" locates on remote server\n",
  90                        mdd2obd_dev(m)->obd_name, PFID(mdo2fid(mdd_obj)));
  91         } else if (!mdd_object_exists(mdd_obj)) {
  92                 RETURN(-ESTALE);
  93         }
  94
  95         rc = mdd_permission_internal_locked(env, mdd_obj, pattr, mask,
  96                                             MOR_TGT_PARENT);
  97         if (rc)
  98                 RETURN(rc);
  99
 100         if (likely(S_ISDIR(mdd_object_type(mdd_obj)) &&
 101                    dt_try_as_dir(env, dir)))
 102                 rc = dt_lookup(env, dir, (struct dt_rec *)fid, key,
 103                                mdd_object_capa(env, mdd_obj));
 104         else
 105                 rc = -ENOTDIR;
 106
 107         RETURN(rc);
 108 }
 109
 110 int mdd_lookup(const struct lu_env *env,
 111                struct md_object *pobj, const struct lu_name *lname,
 112                struct lu_fid *fid, struct md_op_spec *spec)
 113 {
 114         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
 115         int rc;
 116         ENTRY;
 117
 118         rc = mdd_la_get(env, md2mdd_obj(pobj), pattr, BYPASS_CAPA);
 119         if (rc != 0)
 120                 RETURN(rc);
 121
 122         rc = __mdd_lookup(env, pobj, pattr, lname, fid, MAY_EXEC);
 123         RETURN(rc);
 124 }
 125
 126 static inline int mdd_parent_fid(const struct lu_env *env,
 127                                  struct mdd_object *obj,
 128                                  const struct lu_attr *attr,
 129                                  struct lu_fid *fid)
 130 {
 131         return __mdd_lookup(env, &obj->mod_obj, attr, &lname_dotdot, fid, 0);
 132 }
 133
 134 /*
 135  * For root fid use special function, which does not compare version component
 136  * of fid. Version component is different for root fids on all MDTs.
 137  */
 138 int mdd_is_root(struct mdd_device *mdd, const struct lu_fid *fid)
 139 {
 140         return fid_seq(&mdd->mdd_root_fid) == fid_seq(fid) &&
 141                 fid_oid(&mdd->mdd_root_fid) == fid_oid(fid);
 142 }
 143
 144 /*
 145  * return 1: if lf is the fid of the ancestor of p1;
 146  * return 0: if not;
 147  *
 148  * return -EREMOTE: if remote object is found, in this
 149  * case fid of remote object is saved to @pf;
 150  *
 151  * otherwise: values < 0, errors.
 152  */
 153 static int mdd_is_parent(const struct lu_env *env,
 154                         struct mdd_device *mdd,
 155                         struct mdd_object *p1,
 156                         const struct lu_attr *attr,
 157                         const struct lu_fid *lf,
 158                         struct lu_fid *pf)
 159 {
 160         struct mdd_object *parent = NULL;
 161         struct lu_fid *pfid;
 162         int rc;
 163         ENTRY;
 164
 165         LASSERT(!lu_fid_eq(mdo2fid(p1), lf));
 166         pfid = &mdd_env_info(env)->mti_fid;
 167
 168         /* Check for root first. */
 169         if (mdd_is_root(mdd, mdo2fid(p1)))
 170                 RETURN(0);
 171
 172         for(;;) {
 173                 /* this is done recursively, bypass capa for each obj */
 174                 mdd_set_capainfo(env, 4, p1, BYPASS_CAPA);
 175                 rc = mdd_parent_fid(env, p1, attr, pfid);
 176                 if (rc)
 177                         GOTO(out, rc);
 178                 if (mdd_is_root(mdd, pfid))
 179                         GOTO(out, rc = 0);
 180                 if (lu_fid_eq(pfid, &mdd->mdd_local_root_fid))
 181                         GOTO(out, rc = 0);
 182                 if (lu_fid_eq(pfid, lf))
 183                         GOTO(out, rc = 1);
 184                 if (parent)
 185                         mdd_object_put(env, parent);
 186
 187                 parent = mdd_object_find(env, mdd, pfid);
 188                 if (IS_ERR(parent)) {
 189                         GOTO(out, rc = PTR_ERR(parent));
 190                 } else if (mdd_object_remote(parent)) {
 191                         /*FIXME: Because of the restriction of rename in Phase I.
 192                          * If the parent is remote, we just assumed lf is not the
 193                          * parent of P1 for now */
 194                         GOTO(out, rc = 0);
 195                 }
 196                 p1 = parent;
 197         }
 198         EXIT;
 199 out:
 200         if (parent && !IS_ERR(parent))
 201                 mdd_object_put(env, parent);
 202         return rc;
 203 }
 204
 205 /*
 206  * No permission check is needed.
 207  *
 208  * returns 1: if fid is ancestor of @mo;
 209  * returns 0: if fid is not a ancestor of @mo;
 210  *
 211  * returns EREMOTE if remote object is found, fid of remote object is saved to
 212  * @fid;
 213  *
 214  * returns < 0: if error
 215  */
 216 int mdd_is_subdir(const struct lu_env *env, struct md_object *mo,
 217                   const struct lu_fid *fid, struct lu_fid *sfid)
 218 {
 219         struct mdd_device *mdd = mdo2mdd(mo);
 220         struct lu_attr *attr = MDD_ENV_VAR(env, cattr);
 221         int rc;
 222         ENTRY;
 223
 224         if (!S_ISDIR(mdd_object_type(md2mdd_obj(mo))))
 225                 RETURN(0);
 226
 227         rc = mdd_la_get(env, md2mdd_obj(mo), attr, BYPASS_CAPA);
 228         if (rc != 0)
 229                 RETURN(rc);
 230
 231         rc = mdd_is_parent(env, mdd, md2mdd_obj(mo), attr, fid, sfid);
 232         if (rc == 0) {
 233                 /* found root */
 234                 fid_zero(sfid);
 235         } else if (rc == 1) {
 236                 /* found @fid is parent */
 237                 *sfid = *fid;
 238                 rc = 0;
 239         }
 240         RETURN(rc);
 241 }
 242
 243 /*
 244  * Check that @dir contains no entries except (possibly) dot and dotdot.
 245  *
 246  * Returns:
 247  *
 248  *             0        empty
 249  *      -ENOTDIR        not a directory object
 250  *    -ENOTEMPTY        not empty
 251  *           -ve        other error
 252  *
 253  */
 254 static int mdd_dir_is_empty(const struct lu_env *env,
 255                             struct mdd_object *dir)
 256 {
 257         struct dt_it     *it;
 258         struct dt_object *obj;
 259         const struct dt_it_ops *iops;
 260         int result;
 261         ENTRY;
 262
 263         obj = mdd_object_child(dir);
 264         if (!dt_try_as_dir(env, obj))
 265                 RETURN(-ENOTDIR);
 266
 267         iops = &obj->do_index_ops->dio_it;
 268         it = iops->init(env, obj, LUDA_64BITHASH, BYPASS_CAPA);
 269         if (!IS_ERR(it)) {
 270                 result = iops->get(env, it, (const struct dt_key *)"");
 271                 if (result > 0) {
 272                         int i;
 273                         for (result = 0, i = 0; result == 0 && i < 3; ++i)
 274                                 result = iops->next(env, it);
 275                         if (result == 0)
 276                                 result = -ENOTEMPTY;
 277                         else if (result == 1)
 278                                 result = 0;
 279                 } else if (result == 0)
 280                         /*
 281                          * Huh? Index contains no zero key?
 282                          */
 283                         result = -EIO;
 284
 285                 iops->put(env, it);
 286                 iops->fini(env, it);
 287         } else
 288                 result = PTR_ERR(it);
 289         RETURN(result);
 290 }
 291
 292 /**
 293  * Determine if the target object can be hard linked, and right now it only
 294  * checks if the link count reach the maximum limit. Note: for ldiskfs, the
 295  * directory nlink count might exceed the maximum link count(see
 296  * osd_object_ref_add), so it only check nlink for non-directories.
 297  *
 298  * \param[in] env       thread environment
 299  * \param[in] obj       object being linked to
 300  * \param[in] la        attributes of \a obj
 301  *
 302  * \retval              0 if \a obj can be hard linked
 303  * \retval              negative error if \a obj is a directory or has too
 304  *                      many links
 305  */
 306 static int __mdd_may_link(const struct lu_env *env, struct mdd_object *obj,
 307                           const struct lu_attr *la)
 308 {
 309         struct mdd_device *m = mdd_obj2mdd_dev(obj);
 310         ENTRY;
 311
 312         LASSERT(la != NULL);
 313
 314         /* Subdir count limitation can be broken through
 315          * (see osd_object_ref_add), so only check non-directory here. */
 316         if (!S_ISDIR(la->la_mode) &&
 317             la->la_nlink >= m->mdd_dt_conf.ddp_max_nlink)
 318                 RETURN(-EMLINK);
 319
 320         RETURN(0);
 321 }
 322
 323 /**
 324  * Check whether it may create the cobj under the pobj.
 325  *
 326  * \param[in] env       execution environment
 327  * \param[in] pobj      the parent directory
 328  * \param[in] pattr     the attribute of the parent directory
 329  * \param[in] cobj      the child to be created
 330  * \param[in] check_perm        if check WRITE|EXEC permission for parent
 331  *
 332  * \retval              = 0 create the child under this dir is allowed
 333  * \retval              negative errno create the child under this dir is
 334  *                      not allowed
 335  */
 336 int mdd_may_create(const struct lu_env *env, struct mdd_object *pobj,
 337                    const struct lu_attr *pattr, struct mdd_object *cobj,
 338                    bool check_perm)
 339 {
 340         struct mdd_thread_info *info = mdd_env_info(env);
 341         struct lu_buf   *xbuf;
 342         int rc = 0;
 343         ENTRY;
 344
 345         if (cobj && mdd_object_exists(cobj))
 346                 RETURN(-EEXIST);
 347
 348         if (mdd_is_dead_obj(pobj))
 349                 RETURN(-ENOENT);
 350
 351         /* If the parent is a sub-stripe, check whether it is dead */
 352         xbuf = mdd_buf_get(env, info->mti_key, sizeof(info->mti_key));
 353         rc = mdo_xattr_get(env, pobj, xbuf, XATTR_NAME_LMV,
 354                            mdd_object_capa(env, pobj));
 355         if (unlikely(rc > 0)) {
 356                 struct lmv_mds_md_v1  *lmv1 = xbuf->lb_buf;
 357
 358                 if (le32_to_cpu(lmv1->lmv_magic) == LMV_MAGIC_STRIPE &&
 359                     le32_to_cpu(lmv1->lmv_hash_type) & LMV_HASH_FLAG_DEAD)
 360                         RETURN(-ESTALE);
 361         }
 362         rc = 0;
 363
 364         if (check_perm)
 365                 rc = mdd_permission_internal_locked(env, pobj, pattr,
 366                                                     MAY_WRITE | MAY_EXEC,
 367                                                     MOR_TGT_PARENT);
 368         RETURN(rc);
 369 }
 370
 371 /*
 372  * Check whether can unlink from the pobj in the case of "cobj == NULL".
 373  */
 374 int mdd_may_unlink(const struct lu_env *env, struct mdd_object *pobj,
 375                    const struct lu_attr *pattr, const struct lu_attr *attr)
 376 {
 377         int rc;
 378         ENTRY;
 379
 380         if (mdd_is_dead_obj(pobj))
 381                 RETURN(-ENOENT);
 382
 383         if (attr->la_flags & (LUSTRE_APPEND_FL | LUSTRE_IMMUTABLE_FL))
 384                 RETURN(-EPERM);
 385
 386         rc = mdd_permission_internal_locked(env, pobj, pattr,
 387                                             MAY_WRITE | MAY_EXEC,
 388                                             MOR_TGT_PARENT);
 389         if (rc != 0)
 390                 RETURN(rc);
 391
 392         if (pattr->la_flags & LUSTRE_APPEND_FL)
 393                 RETURN(-EPERM);
 394
 395         RETURN(rc);
 396 }
 397
 398 /*
 399  * pobj == NULL is remote ops case, under such case, pobj's
 400  * VTX feature has been checked already, no need check again.
 401  */
 402 static inline int mdd_is_sticky(const struct lu_env *env,
 403                                 struct mdd_object *pobj,
 404                                 const struct lu_attr *pattr,
 405                                 struct mdd_object *cobj,
 406                                 const struct lu_attr *cattr)
 407 {
 408         struct lu_ucred *uc = lu_ucred_assert(env);
 409
 410         if (pobj != NULL) {
 411                 LASSERT(pattr != NULL);
 412                 if (!(pattr->la_mode & S_ISVTX) ||
 413                     (pattr->la_uid == uc->uc_fsuid))
 414                         return 0;
 415         }
 416
 417         LASSERT(cattr != NULL);
 418         if (cattr->la_uid == uc->uc_fsuid)
 419                 return 0;
 420
 421         return !md_capable(uc, CFS_CAP_FOWNER);
 422 }
 423
 424 static int mdd_may_delete_entry(const struct lu_env *env,
 425                                 struct mdd_object *pobj,
 426                                 const struct lu_attr *pattr,
 427                                 int check_perm)
 428 {
 429         ENTRY;
 430
 431         LASSERT(pobj != NULL);
 432         if (!mdd_object_exists(pobj))
 433                 RETURN(-ENOENT);
 434
 435         if (mdd_is_dead_obj(pobj))
 436                 RETURN(-ENOENT);
 437
 438         if (check_perm) {
 439                 int rc;
 440                 rc = mdd_permission_internal_locked(env, pobj, pattr,
 441                                             MAY_WRITE | MAY_EXEC,
 442                                             MOR_TGT_PARENT);
 443                 if (rc)
 444                         RETURN(rc);
 445         }
 446
 447         if (pattr->la_flags & LUSTRE_APPEND_FL)
 448                 RETURN(-EPERM);
 449
 450         RETURN(0);
 451 }
 452
 453 /*
 454  * Check whether it may delete the cobj from the pobj.
 455  * pobj maybe NULL
 456  */
 457 int mdd_may_delete(const struct lu_env *env, struct mdd_object *tpobj,
 458                    const struct lu_attr *tpattr, struct mdd_object *tobj,
 459                    const struct lu_attr *tattr, const struct lu_attr *cattr,
 460                    int check_perm, int check_empty)
 461 {
 462         int rc = 0;
 463         ENTRY;
 464
 465         if (tpobj) {
 466                 LASSERT(tpattr != NULL);
 467                 rc = mdd_may_delete_entry(env, tpobj, tpattr, check_perm);
 468                 if (rc != 0)
 469                         RETURN(rc);
 470         }
 471
 472         if (tobj == NULL)
 473                 RETURN(0);
 474
 475         if (!mdd_object_exists(tobj))
 476                 RETURN(-ENOENT);
 477
 478         if (mdd_is_dead_obj(tobj))
 479                 RETURN(-ESTALE);
 480
 481         if (mdd_is_sticky(env, tpobj, tpattr, tobj, tattr))
 482                 RETURN(-EPERM);
 483
 484         if (tattr->la_flags & (LUSTRE_APPEND_FL | LUSTRE_IMMUTABLE_FL))
 485                 RETURN(-EPERM);
 486
 487         /* additional check the rename case */
 488         if (cattr) {
 489                 if (S_ISDIR(cattr->la_mode)) {
 490                         struct mdd_device *mdd = mdo2mdd(&tobj->mod_obj);
 491
 492                         if (!S_ISDIR(tattr->la_mode))
 493                                 RETURN(-ENOTDIR);
 494
 495                         if (lu_fid_eq(mdo2fid(tobj), &mdd->mdd_root_fid))
 496                                 RETURN(-EBUSY);
 497                 } else if (S_ISDIR(tattr->la_mode))
 498                         RETURN(-EISDIR);
 499         }
 500
 501         if (S_ISDIR(tattr->la_mode) && check_empty)
 502                 rc = mdd_dir_is_empty(env, tobj);
 503
 504         RETURN(rc);
 505 }
 506
 507 /**
 508  * Check whether it can create the link file(linked to @src_obj) under
 509  * the target directory(@tgt_obj), and src_obj has been locked by
 510  * mdd_write_lock.
 511  *
 512  * \param[in] env       execution environment
 513  * \param[in] tgt_obj   the target directory
 514  * \param[in] tattr     attributes of target directory
 515  * \param[in] lname     the link name
 516  * \param[in] src_obj   source object for link
 517  * \param[in] cattr     attributes for source object
 518  *
 519  * \retval              = 0 it is allowed to create the link file under tgt_obj
 520  * \retval              negative error not allowed to create the link file
 521  */
 522 static int mdd_link_sanity_check(const struct lu_env *env,
 523                                  struct mdd_object *tgt_obj,
 524                                  const struct lu_attr *tattr,
 525                                  const struct lu_name *lname,
 526                                  struct mdd_object *src_obj,
 527                                  const struct lu_attr *cattr)
 528 {
 529         struct mdd_device *m = mdd_obj2mdd_dev(src_obj);
 530         int rc = 0;
 531         ENTRY;
 532
 533         if (!mdd_object_exists(src_obj))
 534                 RETURN(-ENOENT);
 535
 536         if (mdd_is_dead_obj(src_obj))
 537                 RETURN(-ESTALE);
 538
 539         /* Local ops, no lookup before link, check filename length here. */
 540         rc = mdd_name_check(m, lname);
 541         if (rc < 0)
 542                 RETURN(rc);
 543
 544         if (cattr->la_flags & (LUSTRE_IMMUTABLE_FL | LUSTRE_APPEND_FL))
 545                 RETURN(-EPERM);
 546
 547         if (S_ISDIR(mdd_object_type(src_obj)))
 548                 RETURN(-EPERM);
 549
 550         LASSERT(src_obj != tgt_obj);
 551         rc = mdd_may_create(env, tgt_obj, tattr, NULL, true);
 552         if (rc != 0)
 553                 RETURN(rc);
 554
 555         rc = __mdd_may_link(env, src_obj, cattr);
 556
 557         RETURN(rc);
 558 }
 559
 560 static int __mdd_index_delete_only(const struct lu_env *env, struct mdd_object *pobj,
 561                                    const char *name, struct thandle *handle,
 562                                    struct lustre_capa *capa)
 563 {
 564         struct dt_object *next = mdd_object_child(pobj);
 565         int rc;
 566         ENTRY;
 567
 568         if (dt_try_as_dir(env, next))
 569                 rc = dt_delete(env, next, (struct dt_key *)name, handle, capa);
 570         else
 571                 rc = -ENOTDIR;
 572
 573         RETURN(rc);
 574 }
 575
 576 static int __mdd_index_insert_only(const struct lu_env *env,
 577                                    struct mdd_object *pobj,
 578                                    const struct lu_fid *lf, __u32 type,
 579                                    const char *name,
 580                                    struct thandle *handle,
 581                                    struct lustre_capa *capa)
 582 {
 583         struct dt_object *next = mdd_object_child(pobj);
 584         int               rc;
 585         ENTRY;
 586
 587         if (dt_try_as_dir(env, next)) {
 588                 struct dt_insert_rec    *rec = &mdd_env_info(env)->mti_dt_rec;
 589                 struct lu_ucred         *uc  = lu_ucred_check(env);
 590                 int                      ignore_quota;
 591
 592                 rec->rec_fid = lf;
 593                 rec->rec_type = type;
 594                 ignore_quota = uc ? uc->uc_cap & CFS_CAP_SYS_RESOURCE_MASK : 1;
 595                 rc = dt_insert(env, next, (const struct dt_rec *)rec,
 596                                (const struct dt_key *)name, handle, capa,
 597                                ignore_quota);
 598         } else {
 599                 rc = -ENOTDIR;
 600         }
 601         RETURN(rc);
 602 }
 603
 604 /* insert named index, add reference if isdir */
 605 static int __mdd_index_insert(const struct lu_env *env, struct mdd_object *pobj,
 606                               const struct lu_fid *lf, __u32 type,
 607                               const char *name, struct thandle *handle,
 608                               struct lustre_capa *capa)
 609 {
 610         int rc;
 611         ENTRY;
 612
 613         rc = __mdd_index_insert_only(env, pobj, lf, type, name, handle, capa);
 614         if (rc == 0 && S_ISDIR(type)) {
 615                 mdd_write_lock(env, pobj, MOR_TGT_PARENT);
 616                 mdo_ref_add(env, pobj, handle);
 617                 mdd_write_unlock(env, pobj);
 618         }
 619
 620         RETURN(rc);
 621 }
 622
 623 /* delete named index, drop reference if isdir */
 624 static int __mdd_index_delete(const struct lu_env *env, struct mdd_object *pobj,
 625                               const char *name, int is_dir, struct thandle *handle,
 626                               struct lustre_capa *capa)
 627 {
 628         int               rc;
 629         ENTRY;
 630
 631         rc = __mdd_index_delete_only(env, pobj, name, handle, capa);
 632         if (rc == 0 && is_dir) {
 633                 mdd_write_lock(env, pobj, MOR_TGT_PARENT);
 634                 mdo_ref_del(env, pobj, handle);
 635                 mdd_write_unlock(env, pobj);
 636         }
 637
 638         RETURN(rc);
 639 }
 640
 641 static int mdd_llog_record_calc_size(const struct lu_env *env,
 642                                      const struct lu_name *tname,
 643                                      const struct lu_name *sname)
 644 {
 645         const struct lu_ucred   *uc = lu_ucred(env);
 646         enum changelog_rec_flags crf = 0;
 647         size_t                   hdr_size = sizeof(struct llog_changelog_rec) -
 648                                             sizeof(struct changelog_rec);
 649
 650         if (sname != NULL)
 651                 crf |= CLF_RENAME;
 652
 653         if (uc != NULL && uc->uc_jobid[0] != '\0')
 654                 crf |= CLF_JOBID;
 655
 656         return llog_data_len(hdr_size + changelog_rec_offset(crf) +
 657                              (tname != NULL ? tname->ln_namelen : 0) +
 658                              (sname != NULL ? 1 + sname->ln_namelen : 0));
 659 }
 660
 661 int mdd_declare_changelog_store(const struct lu_env *env,
 662                                 struct mdd_device *mdd,
 663                                 const struct lu_name *tname,
 664                                 const struct lu_name *sname,
 665                                 struct thandle *handle)
 666 {
 667         struct obd_device               *obd = mdd2obd_dev(mdd);
 668         struct llog_ctxt                *ctxt;
 669         struct llog_changelog_rec       *rec;
 670         struct lu_buf                   *buf;
 671         int                              reclen;
 672         int                              rc;
 673
 674         /* Not recording */
 675         if (!(mdd->mdd_cl.mc_flags & CLM_ON))
 676                 return 0;
 677
 678         reclen = mdd_llog_record_calc_size(env, tname, sname);
 679         buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_big_buf, reclen);
 680         if (buf->lb_buf == NULL)
 681                 return -ENOMEM;
 682
 683         rec = buf->lb_buf;
 684         rec->cr_hdr.lrh_len = reclen;
 685         rec->cr_hdr.lrh_type = CHANGELOG_REC;
 686
 687         ctxt = llog_get_context(obd, LLOG_CHANGELOG_ORIG_CTXT);
 688         if (ctxt == NULL)
 689                 return -ENXIO;
 690
 691         rc = llog_declare_add(env, ctxt->loc_handle, &rec->cr_hdr, handle);
 692         llog_ctxt_put(ctxt);
 693
 694         return rc;
 695 }
 696
 697 /** Add a changelog entry \a rec to the changelog llog
 698  * \param mdd
 699  * \param rec
 700  * \param handle - currently ignored since llogs start their own transaction;
 701  *              this will hopefully be fixed in llog rewrite
 702  * \retval 0 ok
 703  */
 704 int mdd_changelog_store(const struct lu_env *env, struct mdd_device *mdd,
 705                         struct llog_changelog_rec *rec, struct thandle *th)
 706 {
 707         struct obd_device       *obd = mdd2obd_dev(mdd);
 708         struct llog_ctxt        *ctxt;
 709         int                      rc;
 710
 711         rec->cr_hdr.lrh_len = llog_data_len(sizeof(*rec) +
 712                                             changelog_rec_varsize(&rec->cr));
 713
 714         /* llog_lvfs_write_rec sets the llog tail len */
 715         rec->cr_hdr.lrh_type = CHANGELOG_REC;
 716         rec->cr.cr_time = cl_time();
 717
 718         spin_lock(&mdd->mdd_cl.mc_lock);
 719         /* NB: I suppose it's possible llog_add adds out of order wrt cr_index,
 720          * but as long as the MDD transactions are ordered correctly for e.g.
 721          * rename conflicts, I don't think this should matter. */
 722         rec->cr.cr_index = ++mdd->mdd_cl.mc_index;
 723         spin_unlock(&mdd->mdd_cl.mc_lock);
 724
 725         ctxt = llog_get_context(obd, LLOG_CHANGELOG_ORIG_CTXT);
 726         if (ctxt == NULL)
 727                 return -ENXIO;
 728
 729         /* nested journal transaction */
 730         rc = llog_add(env, ctxt->loc_handle, &rec->cr_hdr, NULL, th);
 731         llog_ctxt_put(ctxt);
 732         if (rc > 0)
 733                 rc = 0;
 734
 735         return rc;
 736 }
 737
 738 static void mdd_changelog_rec_ext_rename(struct changelog_rec *rec,
 739                                          const struct lu_fid *sfid,
 740                                          const struct lu_fid *spfid,
 741                                          const struct lu_name *sname)
 742 {
 743         struct changelog_ext_rename     *rnm = changelog_rec_rename(rec);
 744         size_t                           extsize = sname->ln_namelen + 1;
 745
 746         LASSERT(sfid != NULL);
 747         LASSERT(spfid != NULL);
 748         LASSERT(sname != NULL);
 749
 750         rnm->cr_sfid = *sfid;
 751         rnm->cr_spfid = *spfid;
 752
 753         changelog_rec_name(rec)[rec->cr_namelen] = '\0';
 754         strlcpy(changelog_rec_sname(rec), sname->ln_name, extsize);
 755         rec->cr_namelen += extsize;
 756 }
 757
 758 void mdd_changelog_rec_ext_jobid(struct changelog_rec *rec, const char *jobid)
 759 {
 760         struct changelog_ext_jobid      *jid = changelog_rec_jobid(rec);
 761
 762         if (jobid == NULL || jobid[0] == '\0')
 763                 return;
 764
 765         strlcpy(jid->cr_jobid, jobid, sizeof(jid->cr_jobid));
 766 }
 767
 768 /** Store a namespace change changelog record
 769  * If this fails, we must fail the whole transaction; we don't
 770  * want the change to commit without the log entry.
 771  * \param target - mdd_object of change
 772  * \param tpfid - target parent dir/object fid
 773  * \param sfid - source object fid
 774  * \param spfid - source parent fid
 775  * \param tname - target name string
 776  * \param sname - source name string
 777  * \param handle - transacion handle
 778  */
 779 int mdd_changelog_ns_store(const struct lu_env *env,
 780                            struct mdd_device *mdd,
 781                            enum changelog_rec_type type,
 782                            enum changelog_rec_flags crf,
 783                            struct mdd_object *target,
 784                            const struct lu_fid *tpfid,
 785                            const struct lu_fid *sfid,
 786                            const struct lu_fid *spfid,
 787                            const struct lu_name *tname,
 788                            const struct lu_name *sname,
 789                            struct thandle *handle)
 790 {
 791         const struct lu_ucred           *uc = lu_ucred(env);
 792         struct llog_changelog_rec       *rec;
 793         struct lu_buf                   *buf;
 794         int                              reclen;
 795         int                              rc;
 796         ENTRY;
 797
 798         /* Not recording */
 799         if (!(mdd->mdd_cl.mc_flags & CLM_ON))
 800                 RETURN(0);
 801
 802         if ((mdd->mdd_cl.mc_mask & (1 << type)) == 0)
 803                 RETURN(0);
 804
 805         LASSERT(tpfid != NULL);
 806         LASSERT(tname != NULL);
 807         LASSERT(handle != NULL);
 808
 809         reclen = mdd_llog_record_calc_size(env, tname, sname);
 810         buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_big_buf, reclen);
 811         if (buf->lb_buf == NULL)
 812                 RETURN(-ENOMEM);
 813         rec = buf->lb_buf;
 814
 815         crf = (crf & CLF_FLAGMASK);
 816
 817         if (uc->uc_jobid[0] != '\0')
 818                 crf |= CLF_JOBID;
 819
 820         if (sname != NULL)
 821                 crf |= CLF_RENAME;
 822         else
 823                 crf |= CLF_VERSION;
 824
 825         rec->cr.cr_flags = crf;
 826         rec->cr.cr_type = (__u32)type;
 827         rec->cr.cr_pfid = *tpfid;
 828         rec->cr.cr_namelen = tname->ln_namelen;
 829         memcpy(changelog_rec_name(&rec->cr), tname->ln_name, tname->ln_namelen);
 830
 831         if (crf & CLF_RENAME)
 832                 mdd_changelog_rec_ext_rename(&rec->cr, sfid, spfid, sname);
 833
 834         if (crf & CLF_JOBID)
 835                 mdd_changelog_rec_ext_jobid(&rec->cr, uc->uc_jobid);
 836
 837         if (likely(target != NULL)) {
 838                 rec->cr.cr_tfid = *mdo2fid(target);
 839                 target->mod_cltime = cfs_time_current_64();
 840         } else {
 841                 fid_zero(&rec->cr.cr_tfid);
 842         }
 843
 844         rc = mdd_changelog_store(env, mdd, rec, handle);
 845         if (rc < 0) {
 846                 CERROR("changelog failed: rc=%d, op%d %s c"DFID" p"DFID"\n",
 847                         rc, type, tname->ln_name, PFID(sfid), PFID(tpfid));
 848                 return -EFAULT;
 849         }
 850
 851         return 0;
 852 }
 853
 854 static int __mdd_links_add(const struct lu_env *env,
 855                            struct mdd_object *mdd_obj,
 856                            struct linkea_data *ldata,
 857                            const struct lu_name *lname,
 858                            const struct lu_fid *pfid,
 859                            int first, int check)
 860 {
 861         int rc;
 862
 863         if (ldata->ld_leh == NULL) {
 864                 rc = first ? -ENODATA : mdd_links_read(env, mdd_obj, ldata);
 865                 if (rc) {
 866                         if (rc != -ENODATA)
 867                                 return rc;
 868                         rc = linkea_data_new(ldata,
 869                                              &mdd_env_info(env)->mti_link_buf);
 870                         if (rc)
 871                                 return rc;
 872                 }
 873         }
 874
 875         if (check) {
 876                 rc = linkea_links_find(ldata, lname, pfid);
 877                 if (rc && rc != -ENOENT)
 878                         return rc;
 879                 if (rc == 0)
 880                         return -EEXIST;
 881         }
 882
 883         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_LINKEA_MORE)) {
 884                 struct lu_fid *tfid = &mdd_env_info(env)->mti_fid2;
 885
 886                 *tfid = *pfid;
 887                 tfid->f_ver = ~0;
 888                 linkea_add_buf(ldata, lname, tfid);
 889         }
 890
 891         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_LINKEA_MORE2))
 892                 linkea_add_buf(ldata, lname, pfid);
 893
 894         return linkea_add_buf(ldata, lname, pfid);
 895 }
 896
 897 static int __mdd_links_del(const struct lu_env *env,
 898                            struct mdd_object *mdd_obj,
 899                            struct linkea_data *ldata,
 900                            const struct lu_name *lname,
 901                            const struct lu_fid *pfid)
 902 {
 903         int rc;
 904
 905         if (ldata->ld_leh == NULL) {
 906                 rc = mdd_links_read(env, mdd_obj, ldata);
 907                 if (rc)
 908                         return rc;
 909         }
 910
 911         rc = linkea_links_find(ldata, lname, pfid);
 912         if (rc)
 913                 return rc;
 914
 915         linkea_del_buf(ldata, lname);
 916         return 0;
 917 }
 918
 919 static int mdd_linkea_prepare(const struct lu_env *env,
 920                               struct mdd_object *mdd_obj,
 921                               const struct lu_fid *oldpfid,
 922                               const struct lu_name *oldlname,
 923                               const struct lu_fid *newpfid,
 924                               const struct lu_name *newlname,
 925                               int first, int check,
 926                               struct linkea_data *ldata)
 927 {
 928         int rc = 0;
 929         int rc2 = 0;
 930         ENTRY;
 931
 932         if (OBD_FAIL_CHECK(OBD_FAIL_FID_IGIF))
 933                 return 0;
 934
 935         LASSERT(oldpfid != NULL || newpfid != NULL);
 936
 937         if (mdd_obj->mod_flags & DEAD_OBJ) {
 938                 /* Prevent linkea to be updated which is NOT necessary. */
 939                 ldata->ld_reclen = 0;
 940                 /* No more links, don't bother */
 941                 RETURN(0);
 942         }
 943
 944         if (oldpfid != NULL) {
 945                 rc = __mdd_links_del(env, mdd_obj, ldata, oldlname, oldpfid);
 946                 if (rc) {
 947                         if ((check == 1) ||
 948                             (rc != -ENODATA && rc != -ENOENT))
 949                                 RETURN(rc);
 950                         /* No changes done. */
 951                         rc = 0;
 952                 }
 953         }
 954
 955         /* If renaming, add the new record */
 956         if (newpfid != NULL) {
 957                 /* even if the add fails, we still delete the out-of-date
 958                  * old link */
 959                 rc2 = __mdd_links_add(env, mdd_obj, ldata, newlname, newpfid,
 960                                       first, check);
 961         }
 962
 963         rc = rc != 0 ? rc : rc2;
 964
 965         RETURN(rc);
 966 }
 967
 968 int mdd_links_rename(const struct lu_env *env,
 969                      struct mdd_object *mdd_obj,
 970                      const struct lu_fid *oldpfid,
 971                      const struct lu_name *oldlname,
 972                      const struct lu_fid *newpfid,
 973                      const struct lu_name *newlname,
 974                      struct thandle *handle,
 975                      struct linkea_data *ldata,
 976                      int first, int check)
 977 {
 978         int rc = 0;
 979         ENTRY;
 980
 981         if (ldata == NULL) {
 982                 ldata = &mdd_env_info(env)->mti_link_data;
 983                 memset(ldata, 0, sizeof(*ldata));
 984                 rc = mdd_linkea_prepare(env, mdd_obj, oldpfid, oldlname,
 985                                         newpfid, newlname, first, check,
 986                                         ldata);
 987                 if (rc != 0)
 988                         GOTO(out, rc);
 989         }
 990
 991         if (ldata->ld_reclen != 0)
 992                 rc = mdd_links_write(env, mdd_obj, ldata, handle);
 993         EXIT;
 994 out:
 995         if (rc != 0) {
 996                 int error = 1;
 997                 if (rc == -EOVERFLOW || rc == -ENOSPC)
 998                         error = 0;
 999                 if (oldpfid == NULL)
1000                         CDEBUG(error ? D_ERROR : D_OTHER,
1001                                "link_ea add '%.*s' failed %d "DFID"\n",
1002                                newlname->ln_namelen, newlname->ln_name,
1003                                rc, PFID(mdd_object_fid(mdd_obj)));
1004                 else if (newpfid == NULL)
1005                         CDEBUG(error ? D_ERROR : D_OTHER,
1006                                "link_ea del '%.*s' failed %d "DFID"\n",
1007                                oldlname->ln_namelen, oldlname->ln_name,
1008                                rc, PFID(mdd_object_fid(mdd_obj)));
1009                 else
1010                         CDEBUG(error ? D_ERROR : D_OTHER,
1011                                "link_ea rename '%.*s'->'%.*s' failed %d "
1012                                DFID"\n",
1013                                oldlname->ln_namelen, oldlname->ln_name,
1014                                newlname->ln_namelen, newlname->ln_name,
1015                                rc, PFID(mdd_object_fid(mdd_obj)));
1016         }
1017
1018         if (ldata->ld_buf && ldata->ld_buf->lb_len > OBD_ALLOC_BIG)
1019                 /* if we vmalloced a large buffer drop it */
1020                 lu_buf_free(ldata->ld_buf);
1021
1022         return rc;
1023 }
1024
1025 static inline int mdd_links_add(const struct lu_env *env,
1026                                 struct mdd_object *mdd_obj,
1027                                 const struct lu_fid *pfid,
1028                                 const struct lu_name *lname,
1029                                 struct thandle *handle,
1030                                 struct linkea_data *ldata, int first)
1031 {
1032         return mdd_links_rename(env, mdd_obj, NULL, NULL,
1033                                 pfid, lname, handle, ldata, first, 0);
1034 }
1035
1036 static inline int mdd_links_del(const struct lu_env *env,
1037                                 struct mdd_object *mdd_obj,
1038                                 const struct lu_fid *pfid,
1039                                 const struct lu_name *lname,
1040                                 struct thandle *handle)
1041 {
1042         return mdd_links_rename(env, mdd_obj, pfid, lname,
1043                                 NULL, NULL, handle, NULL, 0, 0);
1044 }
1045
1046 /** Read the link EA into a temp buffer.
1047  * Uses the mdd_thread_info::mti_big_buf since it is generally large.
1048  * A pointer to the buffer is stored in \a ldata::ld_buf.
1049  *
1050  * \retval 0 or error
1051  */
1052 int mdd_links_read(const struct lu_env *env, struct mdd_object *mdd_obj,
1053                    struct linkea_data *ldata)
1054 {
1055         int rc;
1056
1057         if (!mdd_object_exists(mdd_obj))
1058                 return -ENODATA;
1059
1060         /* First try a small buf */
1061         LASSERT(env != NULL);
1062         ldata->ld_buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_link_buf,
1063                                                PAGE_CACHE_SIZE);
1064         if (ldata->ld_buf->lb_buf == NULL)
1065                 return -ENOMEM;
1066
1067         rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf, XATTR_NAME_LINK,
1068                           BYPASS_CAPA);
1069         if (rc == -ERANGE) {
1070                 /* Buf was too small, figure out what we need. */
1071                 lu_buf_free(ldata->ld_buf);
1072                 rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf,
1073                                    XATTR_NAME_LINK, BYPASS_CAPA);
1074                 if (rc < 0)
1075                         return rc;
1076                 ldata->ld_buf = lu_buf_check_and_alloc(ldata->ld_buf, rc);
1077                 if (ldata->ld_buf->lb_buf == NULL)
1078                         return -ENOMEM;
1079                 rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf,
1080                                   XATTR_NAME_LINK, BYPASS_CAPA);
1081         }
1082         if (rc < 0) {
1083                 lu_buf_free(ldata->ld_buf);
1084                 ldata->ld_buf = NULL;
1085                 return rc;
1086         }
1087
1088         return linkea_init(ldata);
1089 }
1090
1091 /** Read the link EA into a temp buffer.
1092  * Uses the name_buf since it is generally large.
1093  * \retval IS_ERR err
1094  * \retval ptr to \a lu_buf (always \a mti_big_buf)
1095  */
1096 struct lu_buf *mdd_links_get(const struct lu_env *env,
1097                              struct mdd_object *mdd_obj)
1098 {
1099         struct linkea_data ldata = { 0 };
1100         int rc;
1101
1102         rc = mdd_links_read(env, mdd_obj, &ldata);
1103         return rc ? ERR_PTR(rc) : ldata.ld_buf;
1104 }
1105
1106 int mdd_links_write(const struct lu_env *env, struct mdd_object *mdd_obj,
1107                     struct linkea_data *ldata, struct thandle *handle)
1108 {
1109         const struct lu_buf *buf = mdd_buf_get_const(env, ldata->ld_buf->lb_buf,
1110                                                      ldata->ld_leh->leh_len);
1111         int                 rc;
1112
1113         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_NO_LINKEA))
1114                 return 0;
1115
1116         rc = mdo_xattr_set(env, mdd_obj, buf, XATTR_NAME_LINK, 0, handle,
1117                            mdd_object_capa(env, mdd_obj));
1118         if (unlikely(rc == -ENOSPC) && S_ISREG(mdd_object_type(mdd_obj)) &&
1119             mdd_object_remote(mdd_obj) == 0) {
1120                 struct lfsck_request *lr = &mdd_env_info(env)->mti_lr;
1121
1122                 /* XXX: If the linkEA is overflow, then we need to notify the
1123                  *      namespace LFSCK to skip "nlink" attribute verification
1124                  *      on this object to avoid the "nlink" to be shrinked by
1125                  *      wrong. It may be not good an interaction with LFSCK
1126                  *      like this. We will consider to replace it with other
1127                  *      mechanism in future. LU-5802. */
1128                 lfsck_pack_rfa(lr, mdo2fid(mdd_obj), LE_SKIP_NLINK,
1129                                LFSCK_TYPE_NAMESPACE);
1130                 lfsck_in_notify(env, mdo2mdd(&mdd_obj->mod_obj)->mdd_bottom,
1131                                 lr, handle);
1132         }
1133
1134         return rc;
1135 }
1136
1137 int mdd_declare_links_add(const struct lu_env *env, struct mdd_object *mdd_obj,
1138                           struct thandle *handle, struct linkea_data *ldata,
1139                           enum mdd_links_add_overflow overflow)
1140 {
1141         int     rc;
1142         int     ea_len;
1143         void    *linkea;
1144
1145         if (ldata != NULL && ldata->ld_leh != NULL) {
1146                 ea_len = ldata->ld_leh->leh_len;
1147                 linkea = ldata->ld_buf->lb_buf;
1148         } else {
1149                 ea_len = DEFAULT_LINKEA_SIZE;
1150                 linkea = NULL;
1151         }
1152
1153         /* XXX: max size? */
1154         rc = mdo_declare_xattr_set(env, mdd_obj,
1155                                    mdd_buf_get_const(env, linkea, ea_len),
1156                                    XATTR_NAME_LINK, 0, handle);
1157         if (rc != 0)
1158                 return rc;
1159
1160         if (mdd_object_remote(mdd_obj) == 0 && overflow == MLAO_CHECK) {
1161                 struct lfsck_request *lr = &mdd_env_info(env)->mti_lr;
1162
1163                 /* XXX: If the linkEA is overflow, then we need to notify the
1164                  *      namespace LFSCK to skip "nlink" attribute verification
1165                  *      on this object to avoid the "nlink" to be shrinked by
1166                  *      wrong. It may be not good an interaction with LFSCK
1167                  *      like this. We will consider to replace it with other
1168                  *      mechanism in future. LU-5802. */
1169                 lfsck_pack_rfa(lr, mdo2fid(mdd_obj), LE_SKIP_NLINK_DECLARE,
1170                                LFSCK_TYPE_NAMESPACE);
1171                 rc = lfsck_in_notify(env,
1172                                      mdo2mdd(&mdd_obj->mod_obj)->mdd_bottom,
1173                                      lr, handle);
1174         }
1175
1176         return rc;
1177 }
1178
1179 static inline int mdd_declare_links_del(const struct lu_env *env,
1180                                         struct mdd_object *c,
1181                                         struct thandle *handle)
1182 {
1183         int rc = 0;
1184
1185         /* For directory, the linkEA will be removed together
1186          * with the object. */
1187         if (!S_ISDIR(mdd_object_type(c)))
1188                 rc = mdd_declare_links_add(env, c, handle, NULL, MLAO_IGNORE);
1189
1190         return rc;
1191 }
1192
1193 static int mdd_declare_link(const struct lu_env *env,
1194                             struct mdd_device *mdd,
1195                             struct mdd_object *p,
1196                             struct mdd_object *c,
1197                             const struct lu_name *name,
1198                             struct thandle *handle,
1199                             struct lu_attr *la,
1200                             struct linkea_data *data)
1201 {
1202         int rc;
1203
1204         rc = mdo_declare_index_insert(env, p, mdo2fid(c), mdd_object_type(c),
1205                                       name->ln_name, handle);
1206         if (rc != 0)
1207                 return rc;
1208
1209         rc = mdo_declare_ref_add(env, c, handle);
1210         if (rc != 0)
1211                 return rc;
1212
1213         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_MORE_NLINK)) {
1214                 rc = mdo_declare_ref_add(env, c, handle);
1215                 if (rc != 0)
1216                         return rc;
1217         }
1218
1219         la->la_valid = LA_CTIME | LA_MTIME;
1220         rc = mdo_declare_attr_set(env, p, la, handle);
1221         if (rc != 0)
1222                 return rc;
1223
1224         la->la_valid = LA_CTIME;
1225         rc = mdo_declare_attr_set(env, c, la, handle);
1226         if (rc != 0)
1227                 return rc;
1228
1229         rc = mdd_declare_links_add(env, c, handle, data,
1230                         S_ISREG(mdd_object_type(c)) ? MLAO_CHECK : MLAO_IGNORE);
1231         if (rc != 0)
1232                 return rc;
1233
1234         rc = mdd_declare_changelog_store(env, mdd, name, NULL, handle);
1235
1236         return rc;
1237 }
1238
1239 static int mdd_link(const struct lu_env *env, struct md_object *tgt_obj,
1240                     struct md_object *src_obj, const struct lu_name *lname,
1241                     struct md_attr *ma)
1242 {
1243         const char *name = lname->ln_name;
1244         struct lu_attr    *la = &mdd_env_info(env)->mti_la_for_fix;
1245         struct mdd_object *mdd_tobj = md2mdd_obj(tgt_obj);
1246         struct mdd_object *mdd_sobj = md2mdd_obj(src_obj);
1247         struct lu_attr    *cattr = MDD_ENV_VAR(env, cattr);
1248         struct lu_attr    *tattr = MDD_ENV_VAR(env, tattr);
1249         struct mdd_device *mdd = mdo2mdd(src_obj);
1250         struct thandle *handle;
1251         struct linkea_data *ldata = &mdd_env_info(env)->mti_link_data;
1252         int rc;
1253         ENTRY;
1254
1255         rc = mdd_la_get(env, mdd_sobj, cattr, BYPASS_CAPA);
1256         if (rc != 0)
1257                 RETURN(rc);
1258
1259         rc = mdd_la_get(env, mdd_tobj, tattr, BYPASS_CAPA);
1260         if (rc != 0)
1261                 RETURN(rc);
1262
1263         handle = mdd_trans_create(env, mdd);
1264         if (IS_ERR(handle))
1265                 GOTO(out_pending, rc = PTR_ERR(handle));
1266
1267         memset(ldata, 0, sizeof(*ldata));
1268
1269         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1270         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1271
1272         rc = mdd_declare_link(env, mdd, mdd_tobj, mdd_sobj, lname, handle,
1273                               la, ldata);
1274         if (rc)
1275                 GOTO(stop, rc);
1276
1277         rc = mdd_trans_start(env, mdd, handle);
1278         if (rc)
1279                 GOTO(stop, rc);
1280
1281         mdd_write_lock(env, mdd_sobj, MOR_TGT_CHILD);
1282         rc = mdd_link_sanity_check(env, mdd_tobj, tattr, lname, mdd_sobj,
1283                                    cattr);
1284         if (rc)
1285                 GOTO(out_unlock, rc);
1286
1287         if (!OBD_FAIL_CHECK(OBD_FAIL_LFSCK_LESS_NLINK)) {
1288                 rc = mdo_ref_add(env, mdd_sobj, handle);
1289                 if (rc != 0)
1290                         GOTO(out_unlock, rc);
1291         }
1292
1293         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_MORE_NLINK)) {
1294                 rc = mdo_ref_add(env, mdd_sobj, handle);
1295                 if (rc != 0)
1296                         GOTO(out_unlock, rc);
1297         }
1298
1299         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_DANGLING3)) {
1300                 struct lu_fid tfid = *mdo2fid(mdd_sobj);
1301
1302                 tfid.f_oid++;
1303                 rc = __mdd_index_insert_only(env, mdd_tobj, &tfid,
1304                                              mdd_object_type(mdd_sobj),
1305                                              name, handle,
1306                                              mdd_object_capa(env, mdd_tobj));
1307         } else {
1308                 rc = __mdd_index_insert_only(env, mdd_tobj, mdo2fid(mdd_sobj),
1309                                              mdd_object_type(mdd_sobj),
1310                                              name, handle,
1311                                              mdd_object_capa(env, mdd_tobj));
1312         }
1313
1314         if (rc != 0) {
1315                 mdo_ref_del(env, mdd_sobj, handle);
1316                 GOTO(out_unlock, rc);
1317         }
1318
1319         la->la_valid = LA_CTIME | LA_MTIME;
1320         rc = mdd_update_time(env, mdd_tobj, tattr, la, handle);
1321         if (rc)
1322                 GOTO(out_unlock, rc);
1323
1324         la->la_valid = LA_CTIME;
1325         rc = mdd_update_time(env, mdd_sobj, cattr, la, handle);
1326         if (rc == 0) {
1327                 rc = mdd_linkea_prepare(env, mdd_sobj, NULL, NULL,
1328                                         mdo2fid(mdd_tobj), lname, 0, 0,
1329                                         ldata);
1330                 if (rc == 0)
1331                         mdd_links_add(env, mdd_sobj, mdo2fid(mdd_tobj),
1332                                       lname, handle, ldata, 0);
1333                 /* The failure of links_add should not cause the link
1334                  * failure, reset rc here */
1335                 rc = 0;
1336         }
1337         EXIT;
1338 out_unlock:
1339         mdd_write_unlock(env, mdd_sobj);
1340         if (rc == 0)
1341                 rc = mdd_changelog_ns_store(env, mdd, CL_HARDLINK, 0, mdd_sobj,
1342                                             mdo2fid(mdd_tobj), NULL, NULL,
1343                                             lname, NULL, handle);
1344 stop:
1345         mdd_trans_stop(env, mdd, rc, handle);
1346
1347         if (ldata->ld_buf && ldata->ld_buf->lb_len > OBD_ALLOC_BIG)
1348                 /* if we vmalloced a large buffer drop it */
1349                 lu_buf_free(ldata->ld_buf);
1350 out_pending:
1351         return rc;
1352 }
1353
1354 static int mdd_mark_dead_object(const struct lu_env *env,
1355                                 struct mdd_object *obj, struct thandle *handle,
1356                                 bool declare)
1357 {
1358         struct lu_attr *attr = MDD_ENV_VAR(env, la_for_start);
1359         int rc;
1360
1361         if (!declare)
1362                 obj->mod_flags |= DEAD_OBJ;
1363
1364         if (!S_ISDIR(mdd_object_type(obj)))
1365                 return 0;
1366
1367         attr->la_valid = LA_FLAGS;
1368         attr->la_flags = LUSTRE_SLAVE_DEAD_FL;
1369
1370         if (declare)
1371                 rc = mdo_declare_attr_set(env, obj, attr, handle);
1372         else
1373                 rc = mdo_attr_set(env, obj, attr, handle,
1374                                   mdd_object_capa(env, obj));
1375
1376         return rc;
1377 }
1378
1379 static int mdd_declare_finish_unlink(const struct lu_env *env,
1380                                      struct mdd_object *obj,
1381                                      struct thandle *handle)
1382 {
1383         int     rc;
1384
1385         rc = mdd_mark_dead_object(env, obj, handle, true);
1386         if (rc != 0)
1387                 return rc;
1388
1389         rc = orph_declare_index_insert(env, obj, mdd_object_type(obj), handle);
1390         if (rc != 0)
1391                 return rc;
1392
1393         rc = mdo_declare_destroy(env, obj, handle);
1394         if (rc != 0)
1395                 return rc;
1396
1397         return mdd_declare_links_del(env, obj, handle);
1398 }
1399
1400 /* caller should take a lock before calling */
1401 int mdd_finish_unlink(const struct lu_env *env,
1402                       struct mdd_object *obj, struct md_attr *ma,
1403                       const struct mdd_object *pobj,
1404                       const struct lu_name *lname,
1405                       struct thandle *th)
1406 {
1407         int rc = 0;
1408         int is_dir = S_ISDIR(ma->ma_attr.la_mode);
1409         ENTRY;
1410
1411         LASSERT(mdd_write_locked(env, obj) != 0);
1412
1413         if (ma->ma_attr.la_nlink == 0 || is_dir) {
1414                 rc = mdd_mark_dead_object(env, obj, th, false);
1415                 if (rc != 0)
1416                         RETURN(rc);
1417
1418                 /* add new orphan and the object
1419                  * will be deleted during mdd_close() */
1420                 if (obj->mod_count) {
1421                         rc = __mdd_orphan_add(env, obj, th);
1422                         if (rc == 0)
1423                                 CDEBUG(D_HA, "Object "DFID" is inserted into "
1424                                         "orphan list, open count = %d\n",
1425                                         PFID(mdd_object_fid(obj)),
1426                                         obj->mod_count);
1427                         else
1428                                 CERROR("Object "DFID" fail to be an orphan, "
1429                                        "open count = %d, maybe cause failed "
1430                                        "open replay\n",
1431                                         PFID(mdd_object_fid(obj)),
1432                                         obj->mod_count);
1433                 } else {
1434                         rc = mdo_destroy(env, obj, th);
1435                 }
1436         } else if (!is_dir) {
1437                 /* old files may not have link ea; ignore errors */
1438                 mdd_links_del(env, obj, mdo2fid(pobj), lname, th);
1439         }
1440
1441         RETURN(rc);
1442 }
1443
1444 /*
1445  * pobj maybe NULL
1446  * has mdd_write_lock on cobj already, but not on pobj yet
1447  */
1448 int mdd_unlink_sanity_check(const struct lu_env *env, struct mdd_object *pobj,
1449                             const struct lu_attr *pattr,
1450                             struct mdd_object *cobj,
1451                             const struct lu_attr *cattr)
1452 {
1453         int rc;
1454         ENTRY;
1455
1456         rc = mdd_may_delete(env, pobj, pattr, cobj, cattr, NULL, 1, 1);
1457
1458         RETURN(rc);
1459 }
1460
1461 static int mdd_declare_unlink(const struct lu_env *env, struct mdd_device *mdd,
1462                               struct mdd_object *p, struct mdd_object *c,
1463                               const struct lu_name *name, struct md_attr *ma,
1464                               struct thandle *handle, int no_name, int is_dir)
1465 {
1466         struct lu_attr  *la = &mdd_env_info(env)->mti_la_for_fix;
1467         int              rc;
1468
1469         if (!OBD_FAIL_CHECK(OBD_FAIL_LFSCK_DANGLING2)) {
1470                 if (likely(no_name == 0)) {
1471                         rc = mdo_declare_index_delete(env, p, name->ln_name,
1472                                                       handle);
1473                         if (rc != 0)
1474                                 return rc;
1475                 }
1476
1477                 if (is_dir != 0) {
1478                         rc = mdo_declare_ref_del(env, p, handle);
1479                         if (rc != 0)
1480                                 return rc;
1481                 }
1482         }
1483
1484         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1485         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1486         la->la_valid = LA_CTIME | LA_MTIME;
1487         rc = mdo_declare_attr_set(env, p, la, handle);
1488         if (rc)
1489                 return rc;
1490
1491         if (c != NULL) {
1492                 rc = mdo_declare_ref_del(env, c, handle);
1493                 if (rc)
1494                         return rc;
1495
1496                 rc = mdo_declare_ref_del(env, c, handle);
1497                 if (rc)
1498                         return rc;
1499
1500                 la->la_valid = LA_CTIME;
1501                 rc = mdo_declare_attr_set(env, c, la, handle);
1502                 if (rc)
1503                         return rc;
1504
1505                 rc = mdd_declare_finish_unlink(env, c, handle);
1506                 if (rc)
1507                         return rc;
1508
1509                 /* FIXME: need changelog for remove entry */
1510                 rc = mdd_declare_changelog_store(env, mdd, name, NULL, handle);
1511         }
1512
1513         return rc;
1514 }
1515
1516 /*
1517  * test if a file has an HSM archive
1518  * if HSM attributes are not found in ma update them from
1519  * HSM xattr
1520  */
1521 static bool mdd_hsm_archive_exists(const struct lu_env *env,
1522                                    struct mdd_object *obj,
1523                                    struct md_attr *ma)
1524 {
1525         ENTRY;
1526
1527         if (!(ma->ma_valid & MA_HSM)) {
1528                 /* no HSM MD provided, read xattr */
1529                 struct lu_buf   *hsm_buf;
1530                 const size_t     buflen = sizeof(struct hsm_attrs);
1531                 int              rc;
1532
1533                 hsm_buf = mdd_buf_get(env, NULL, 0);
1534                 lu_buf_alloc(hsm_buf, buflen);
1535                 rc = mdo_xattr_get(env, obj, hsm_buf, XATTR_NAME_HSM,
1536                                    mdd_object_capa(env, obj));
1537                 rc = lustre_buf2hsm(hsm_buf->lb_buf, rc, &ma->ma_hsm);
1538                 lu_buf_free(hsm_buf);
1539                 if (rc < 0)
1540                         RETURN(false);
1541
1542                 ma->ma_valid = MA_HSM;
1543         }
1544         if (ma->ma_hsm.mh_flags & HS_EXISTS)
1545                 RETURN(true);
1546         RETURN(false);
1547 }
1548
1549 /**
1550  * Delete name entry and the object.
1551  * Note: no_name == 1 means it only destory the object, i.e. name_entry
1552  * does not exist for this object, and it could only happen during resending
1553  * of remote unlink. see the comments in mdt_reint_unlink. Unfortunately, lname
1554  * is also needed in this case(needed by changelog), so we have to add another
1555  * parameter(no_name)here. XXX: this is only needed in DNE phase I, on Phase II,
1556  * the ENOENT failure should be able to be fixed by redo mechanism.
1557  */
1558 static int mdd_unlink(const struct lu_env *env, struct md_object *pobj,
1559                       struct md_object *cobj, const struct lu_name *lname,
1560                       struct md_attr *ma, int no_name)
1561 {
1562         const char *name = lname->ln_name;
1563         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
1564         struct lu_attr *cattr = MDD_ENV_VAR(env, cattr);
1565         struct lu_attr *la = &mdd_env_info(env)->mti_la_for_fix;
1566         struct mdd_object *mdd_pobj = md2mdd_obj(pobj);
1567         struct mdd_object *mdd_cobj = NULL;
1568         struct mdd_device *mdd = mdo2mdd(pobj);
1569         struct thandle    *handle;
1570         int rc, is_dir = 0;
1571         ENTRY;
1572
1573         /* cobj == NULL means only delete name entry */
1574         if (likely(cobj != NULL)) {
1575                 mdd_cobj = md2mdd_obj(cobj);
1576                 if (mdd_object_exists(mdd_cobj) == 0)
1577                         RETURN(-ENOENT);
1578         }
1579
1580         rc = mdd_la_get(env, mdd_pobj, pattr, BYPASS_CAPA);
1581         if (rc)
1582                 RETURN(rc);
1583
1584         if (likely(mdd_cobj != NULL)) {
1585                 /* fetch cattr */
1586                 rc = mdd_la_get(env, mdd_cobj, cattr, BYPASS_CAPA);
1587                 if (rc)
1588                         RETURN(rc);
1589
1590                 is_dir = S_ISDIR(cattr->la_mode);
1591         }
1592
1593         rc = mdd_unlink_sanity_check(env, mdd_pobj, pattr, mdd_cobj, cattr);
1594         if (rc)
1595                 RETURN(rc);
1596
1597         handle = mdd_trans_create(env, mdd);
1598         if (IS_ERR(handle))
1599                 RETURN(PTR_ERR(handle));
1600
1601         rc = mdd_declare_unlink(env, mdd, mdd_pobj, mdd_cobj,
1602                                 lname, ma, handle, no_name, is_dir);
1603         if (rc)
1604                 GOTO(stop, rc);
1605
1606         rc = mdd_trans_start(env, mdd, handle);
1607         if (rc)
1608                 GOTO(stop, rc);
1609
1610         if (likely(mdd_cobj != NULL))
1611                 mdd_write_lock(env, mdd_cobj, MOR_TGT_CHILD);
1612
1613         if (likely(no_name == 0) && !OBD_FAIL_CHECK(OBD_FAIL_LFSCK_DANGLING2)) {
1614                 rc = __mdd_index_delete(env, mdd_pobj, name, is_dir, handle,
1615                                         mdd_object_capa(env, mdd_pobj));
1616                 if (rc)
1617                         GOTO(cleanup, rc);
1618         }
1619
1620         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_MUL_REF) ||
1621             OBD_FAIL_CHECK(OBD_FAIL_LFSCK_NO_NAMEENTRY))
1622                 GOTO(cleanup, rc = 0);
1623
1624         if (likely(mdd_cobj != NULL)) {
1625                 rc = mdo_ref_del(env, mdd_cobj, handle);
1626                 if (rc != 0) {
1627                         __mdd_index_insert_only(env, mdd_pobj,
1628                                                 mdo2fid(mdd_cobj),
1629                                                 mdd_object_type(mdd_cobj),
1630                                                 name, handle,
1631                                                 mdd_object_capa(env, mdd_pobj));
1632                         GOTO(cleanup, rc);
1633                 }
1634
1635                 if (is_dir)
1636                         /* unlink dot */
1637                         mdo_ref_del(env, mdd_cobj, handle);
1638
1639                 /* fetch updated nlink */
1640                 rc = mdd_la_get(env, mdd_cobj, cattr, BYPASS_CAPA);
1641                 if (rc)
1642                         GOTO(cleanup, rc);
1643         }
1644
1645         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1646         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1647
1648         la->la_valid = LA_CTIME | LA_MTIME;
1649         rc = mdd_update_time(env, mdd_pobj, pattr, la, handle);
1650         if (rc)
1651                 GOTO(cleanup, rc);
1652
1653         /* Enough for only unlink the entry */
1654         if (unlikely(mdd_cobj == NULL))
1655                 GOTO(stop, rc);
1656
1657         if (cattr->la_nlink > 0 || mdd_cobj->mod_count > 0) {
1658                 /* update ctime of an unlinked file only if it is still
1659                  * opened or a link still exists */
1660                 la->la_valid = LA_CTIME;
1661                 rc = mdd_update_time(env, mdd_cobj, cattr, la, handle);
1662                 if (rc)
1663                         GOTO(cleanup, rc);
1664         }
1665
1666         /* XXX: this transfer to ma will be removed with LOD/OSP */
1667         ma->ma_attr = *cattr;
1668         ma->ma_valid |= MA_INODE;
1669         rc = mdd_finish_unlink(env, mdd_cobj, ma, mdd_pobj, lname, handle);
1670
1671         /* fetch updated nlink */
1672         if (rc == 0)
1673                 rc = mdd_la_get(env, mdd_cobj, cattr, BYPASS_CAPA);
1674
1675         /* if object is removed then we can't get its attrs, use last get */
1676         if (cattr->la_nlink == 0) {
1677                 ma->ma_attr = *cattr;
1678                 ma->ma_valid |= MA_INODE;
1679         }
1680         EXIT;
1681 cleanup:
1682         if (likely(mdd_cobj != NULL))
1683                 mdd_write_unlock(env, mdd_cobj);
1684
1685         if (rc == 0) {
1686                 int cl_flags = 0;
1687
1688                 if (cattr->la_nlink == 0) {
1689                         cl_flags |= CLF_UNLINK_LAST;
1690                         /* search for an existing archive */
1691                         if (mdd_hsm_archive_exists(env, mdd_cobj, ma))
1692                                 cl_flags |= CLF_UNLINK_HSM_EXISTS;
1693                 }
1694
1695                 rc = mdd_changelog_ns_store(env, mdd,
1696                         is_dir ? CL_RMDIR : CL_UNLINK, cl_flags,
1697                         mdd_cobj, mdo2fid(mdd_pobj), NULL, NULL, lname, NULL,
1698                         handle);
1699         }
1700
1701 stop:
1702         mdd_trans_stop(env, mdd, rc, handle);
1703
1704         return rc;
1705 }
1706
1707 /*
1708  * The permission has been checked when obj created, no need check again.
1709  */
1710 static int mdd_cd_sanity_check(const struct lu_env *env,
1711                                struct mdd_object *obj)
1712 {
1713         ENTRY;
1714
1715         /* EEXIST check */
1716         if (!obj || mdd_is_dead_obj(obj))
1717                 RETURN(-ENOENT);
1718
1719         RETURN(0);
1720 }
1721
1722 static int mdd_create_data(const struct lu_env *env, struct md_object *pobj,
1723                            struct md_object *cobj, const struct md_op_spec *spec,
1724                            struct md_attr *ma)
1725 {
1726         struct mdd_device *mdd = mdo2mdd(cobj);
1727         struct mdd_object *mdd_pobj = md2mdd_obj(pobj);
1728         struct mdd_object *son = md2mdd_obj(cobj);
1729         struct thandle    *handle;
1730         const struct lu_buf *buf;
1731         struct lu_attr    *attr = MDD_ENV_VAR(env, cattr);
1732         struct dt_allocation_hint *hint = &mdd_env_info(env)->mti_hint;
1733         int                rc;
1734         ENTRY;
1735
1736         rc = mdd_cd_sanity_check(env, son);
1737         if (rc)
1738                 RETURN(rc);
1739
1740         if (!md_should_create(spec->sp_cr_flags))
1741                 RETURN(0);
1742
1743         /*
1744          * there are following use cases for this function:
1745          * 1) late striping - file was created with MDS_OPEN_DELAY_CREATE
1746          *    striping can be specified or not
1747          * 2) CMD?
1748          */
1749         rc = mdd_la_get(env, son, attr, BYPASS_CAPA);
1750         if (rc)
1751                 RETURN(rc);
1752
1753         /* calling ->ah_make_hint() is used to transfer information from parent */
1754         mdd_object_make_hint(env, mdd_pobj, son, attr, spec, hint);
1755
1756         handle = mdd_trans_create(env, mdd);
1757         if (IS_ERR(handle))
1758                 GOTO(out_free, rc = PTR_ERR(handle));
1759
1760         /*
1761          * XXX: Setting the lov ea is not locked but setting the attr is locked?
1762          * Should this be fixed?
1763          */
1764         CDEBUG(D_OTHER, "ea %p/%u, cr_flags "LPO64", no_create %u\n",
1765                spec->u.sp_ea.eadata, spec->u.sp_ea.eadatalen,
1766                spec->sp_cr_flags, spec->no_create);
1767
1768         if (spec->no_create || (spec->sp_cr_flags & MDS_OPEN_HAS_EA)) {
1769                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
1770                                         spec->u.sp_ea.eadatalen);
1771         } else {
1772                 buf = &LU_BUF_NULL;
1773         }
1774
1775         rc = dt_declare_xattr_set(env, mdd_object_child(son), buf,
1776                                   XATTR_NAME_LOV, 0, handle);
1777         if (rc)
1778                 GOTO(stop, rc);
1779
1780         rc = mdd_declare_changelog_store(env, mdd, NULL, NULL, handle);
1781         if (rc)
1782                 GOTO(stop, rc);
1783
1784         rc = mdd_trans_start(env, mdd, handle);
1785         if (rc)
1786                 GOTO(stop, rc);
1787
1788         rc = dt_xattr_set(env, mdd_object_child(son), buf, XATTR_NAME_LOV,
1789                           0, handle, mdd_object_capa(env, son));
1790
1791         if (rc)
1792                 GOTO(stop, rc);
1793
1794         rc = mdd_changelog_data_store(env, mdd, CL_LAYOUT, 0, son, handle);
1795
1796 stop:
1797         mdd_trans_stop(env, mdd, rc, handle);
1798 out_free:
1799         RETURN(rc);
1800 }
1801
1802 static int mdd_declare_object_initialize(const struct lu_env *env,
1803                                          struct mdd_object *parent,
1804                                          struct mdd_object *child,
1805                                          struct lu_attr *attr,
1806                                          struct thandle *handle)
1807 {
1808         int rc;
1809         ENTRY;
1810
1811         /*
1812          * inode mode has been set in creation time, and it's based on umask,
1813          * la_mode and acl, don't set here again! (which will go wrong
1814          * because below function doesn't consider umask).
1815          * I'd suggest set all object attributes in creation time, see above.
1816          */
1817         LASSERT(attr->la_valid & (LA_MODE | LA_TYPE));
1818         attr->la_valid &= ~(LA_MODE | LA_TYPE);
1819         rc = mdo_declare_attr_set(env, child, attr, handle);
1820         attr->la_valid |= LA_MODE | LA_TYPE;
1821         if (rc != 0 || !S_ISDIR(attr->la_mode))
1822                 RETURN(rc);
1823
1824         rc = mdo_declare_index_insert(env, child, mdo2fid(child), S_IFDIR,
1825                                       dot, handle);
1826         if (rc != 0)
1827                 RETURN(rc);
1828
1829         rc = mdo_declare_ref_add(env, child, handle);
1830         if (rc != 0)
1831                 RETURN(rc);
1832
1833         rc = mdo_declare_index_insert(env, child, mdo2fid(parent), S_IFDIR,
1834                                       dotdot, handle);
1835
1836         RETURN(rc);
1837 }
1838
1839 static int mdd_object_initialize(const struct lu_env *env,
1840                                  const struct lu_fid *pfid,
1841                                  struct mdd_object *child,
1842                                  struct lu_attr *attr, struct thandle *handle,
1843                                  const struct md_op_spec *spec)
1844 {
1845         int rc = 0;
1846         ENTRY;
1847
1848         if (S_ISDIR(attr->la_mode)) {
1849                 /* Add "." and ".." for newly created dir */
1850                 mdo_ref_add(env, child, handle);
1851                 rc = __mdd_index_insert_only(env, child, mdo2fid(child),
1852                                              S_IFDIR, dot, handle, BYPASS_CAPA);
1853                 if (rc == 0)
1854                         rc = __mdd_index_insert_only(env, child, pfid, S_IFDIR,
1855                                                      dotdot, handle,
1856                                                      BYPASS_CAPA);
1857                 if (rc != 0)
1858                         mdo_ref_del(env, child, handle);
1859         }
1860
1861         RETURN(rc);
1862 }
1863
1864 /**
1865  * This function checks whether it can create a file/dir under the
1866  * directory(@pobj). The directory(@pobj) is not being locked by
1867  * mdd lock.
1868  *
1869  * \param[in] env       execution environment
1870  * \param[in] pobj      the directory to create files
1871  * \param[in] pattr     the attributes of the directory
1872  * \param[in] lname     the name of the created file/dir
1873  * \param[in] cattr     the attributes of the file/dir
1874  * \param[in] spec      create specification
1875  *
1876  * \retval              = 0 it is allowed to create file/dir under
1877  *                      the directory
1878  * \retval              negative error not allowed to create file/dir
1879  *                      under the directory
1880  */
1881 static int mdd_create_sanity_check(const struct lu_env *env,
1882                                    struct md_object *pobj,
1883                                    const struct lu_attr *pattr,
1884                                    const struct lu_name *lname,
1885                                    struct lu_attr *cattr,
1886                                    struct md_op_spec *spec)
1887 {
1888         struct mdd_thread_info *info = mdd_env_info(env);
1889         struct lu_fid     *fid       = &info->mti_fid;
1890         struct mdd_object *obj       = md2mdd_obj(pobj);
1891         struct mdd_device *m         = mdo2mdd(pobj);
1892         bool            check_perm = true;
1893         int rc;
1894         ENTRY;
1895
1896         /* EEXIST check */
1897         if (mdd_is_dead_obj(obj))
1898                 RETURN(-ENOENT);
1899
1900         /*
1901          * In some cases this lookup is not needed - we know before if name
1902          * exists or not because MDT performs lookup for it.
1903          * name length check is done in lookup.
1904          */
1905         if (spec->sp_cr_lookup) {
1906                 /*
1907                  * Check if the name already exist, though it will be checked in
1908                  * _index_insert also, for avoiding rolling back if exists
1909                  * _index_insert.
1910                  */
1911                 rc = __mdd_lookup(env, pobj, pattr, lname, fid,
1912                                   MAY_WRITE | MAY_EXEC);
1913                 if (rc != -ENOENT)
1914                         RETURN(rc ? : -EEXIST);
1915
1916                 /* Permission is already being checked in mdd_lookup */
1917                 check_perm = false;
1918         }
1919
1920         rc = mdd_may_create(env, obj, pattr, NULL, check_perm);
1921         if (rc != 0)
1922                 RETURN(rc);
1923
1924         /* sgid check */
1925         if (pattr->la_mode & S_ISGID) {
1926                 cattr->la_gid = pattr->la_gid;
1927                 if (S_ISDIR(cattr->la_mode)) {
1928                         cattr->la_mode |= S_ISGID;
1929                         cattr->la_valid |= LA_MODE;
1930                 }
1931         }
1932
1933         rc = mdd_name_check(m, lname);
1934         if (rc < 0)
1935                 RETURN(rc);
1936
1937         switch (cattr->la_mode & S_IFMT) {
1938         case S_IFLNK: {
1939                 unsigned int symlen = strlen(spec->u.sp_symname) + 1;
1940
1941                 if (symlen > (1 << m->mdd_dt_conf.ddp_block_shift))
1942                         RETURN(-ENAMETOOLONG);
1943                 else
1944                         RETURN(0);
1945         }
1946         case S_IFDIR:
1947         case S_IFREG:
1948         case S_IFCHR:
1949         case S_IFBLK:
1950         case S_IFIFO:
1951         case S_IFSOCK:
1952                 rc = 0;
1953                 break;
1954         default:
1955                 rc = -EINVAL;
1956                 break;
1957         }
1958         RETURN(rc);
1959 }
1960
1961 static int mdd_declare_object_create(const struct lu_env *env,
1962                                      struct mdd_device *mdd,
1963                                      struct mdd_object *p, struct mdd_object *c,
1964                                      struct lu_attr *attr,
1965                                      struct thandle *handle,
1966                                      const struct md_op_spec *spec,
1967                                      struct lu_buf *def_acl_buf,
1968                                      struct lu_buf *acl_buf,
1969                                      struct dt_allocation_hint *hint)
1970 {
1971         int rc;
1972
1973         rc = mdd_declare_object_create_internal(env, p, c, attr, handle, spec,
1974                                                 hint);
1975         if (rc)
1976                 GOTO(out, rc);
1977
1978 #ifdef CONFIG_FS_POSIX_ACL
1979         if (def_acl_buf->lb_len > 0 && S_ISDIR(attr->la_mode)) {
1980                 /* if dir, then can inherit default ACl */
1981                 rc = mdo_declare_xattr_set(env, c, def_acl_buf,
1982                                            XATTR_NAME_ACL_DEFAULT,
1983                                            0, handle);
1984                 if (rc)
1985                         GOTO(out, rc);
1986         }
1987
1988         if (acl_buf->lb_len > 0) {
1989                 rc = mdo_declare_attr_set(env, c, attr, handle);
1990                 if (rc)
1991                         GOTO(out, rc);
1992
1993                 rc = mdo_declare_xattr_set(env, c, acl_buf,
1994                                            XATTR_NAME_ACL_ACCESS, 0, handle);
1995                 if (rc)
1996                         GOTO(out, rc);
1997         }
1998 #endif
1999         rc = mdd_declare_object_initialize(env, p, c, attr, handle);
2000         if (rc)
2001                 GOTO(out, rc);
2002
2003         /* replay case, create LOV EA from client data */
2004         if (spec->no_create ||
2005             (spec->sp_cr_flags & MDS_OPEN_HAS_EA && S_ISREG(attr->la_mode))) {
2006                 const struct lu_buf *buf;
2007
2008                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
2009                                         spec->u.sp_ea.eadatalen);
2010                 rc = mdo_declare_xattr_set(env, c, buf, XATTR_NAME_LOV, 0,
2011                                            handle);
2012                 if (rc)
2013                         GOTO(out, rc);
2014         }
2015
2016         if (S_ISLNK(attr->la_mode)) {
2017                 const char *target_name = spec->u.sp_symname;
2018                 int sym_len = strlen(target_name);
2019                 const struct lu_buf *buf;
2020
2021                 buf = mdd_buf_get_const(env, target_name, sym_len);
2022                 rc = dt_declare_record_write(env, mdd_object_child(c),
2023                                              buf, 0, handle);
2024                 if (rc)
2025                         GOTO(out, rc);
2026         }
2027 out:
2028         return rc;
2029 }
2030
2031 static int mdd_declare_create(const struct lu_env *env, struct mdd_device *mdd,
2032                               struct mdd_object *p, struct mdd_object *c,
2033                               const struct lu_name *name,
2034                               struct lu_attr *attr,
2035                               struct thandle *handle,
2036                               const struct md_op_spec *spec,
2037                               struct linkea_data *ldata,
2038                               struct lu_buf *def_acl_buf,
2039                               struct lu_buf *acl_buf,
2040                               struct dt_allocation_hint *hint)
2041 {
2042         int rc;
2043
2044         rc = mdd_declare_object_create(env, mdd, p, c, attr, handle, spec,
2045                                        def_acl_buf, acl_buf, hint);
2046         if (rc)
2047                 GOTO(out, rc);
2048
2049         if (S_ISDIR(attr->la_mode)) {
2050                 rc = mdo_declare_ref_add(env, p, handle);
2051                 if (rc)
2052                         GOTO(out, rc);
2053         }
2054
2055         if (unlikely(spec->sp_cr_flags & MDS_OPEN_VOLATILE)) {
2056                 rc = orph_declare_index_insert(env, c, attr->la_mode, handle);
2057                 if (rc)
2058                         GOTO(out, rc);
2059         } else {
2060                 struct lu_attr  *la = &mdd_env_info(env)->mti_la_for_fix;
2061
2062                 rc = mdo_declare_index_insert(env, p, mdo2fid(c), attr->la_mode,
2063                                               name->ln_name, handle);
2064                 if (rc != 0)
2065                         return rc;
2066
2067                 rc = mdd_declare_links_add(env, c, handle, ldata, MLAO_IGNORE);
2068                 if (rc)
2069                         return rc;
2070
2071                 *la = *attr;
2072                 la->la_valid = LA_CTIME | LA_MTIME;
2073                 rc = mdo_declare_attr_set(env, p, la, handle);
2074                 if (rc)
2075                         return rc;
2076
2077                 rc = mdd_declare_changelog_store(env, mdd, name, NULL, handle);
2078                 if (rc)
2079                         return rc;
2080         }
2081
2082         /* XXX: For remote create, it should indicate the remote RPC
2083          * will be sent after local transaction is finished, which
2084          * is not very nice, but it will be removed once we fully support
2085          * async update */
2086         if (mdd_object_remote(p) && handle->th_update != NULL)
2087                 handle->th_update->tu_sent_after_local_trans = 1;
2088 out:
2089         return rc;
2090 }
2091
2092 static int mdd_acl_init(const struct lu_env *env, struct mdd_object *pobj,
2093                         struct lu_attr *la, struct lu_buf *def_acl_buf,
2094                         struct lu_buf *acl_buf)
2095 {
2096         int     rc;
2097         ENTRY;
2098
2099         if (S_ISLNK(la->la_mode)) {
2100                 acl_buf->lb_len = 0;
2101                 def_acl_buf->lb_len = 0;
2102                 RETURN(0);
2103         }
2104
2105         mdd_read_lock(env, pobj, MOR_TGT_PARENT);
2106         rc = mdo_xattr_get(env, pobj, def_acl_buf,
2107                            XATTR_NAME_ACL_DEFAULT, BYPASS_CAPA);
2108         mdd_read_unlock(env, pobj);
2109         if (rc > 0) {
2110                 /* If there are default ACL, fix mode/ACL by default ACL */
2111                 def_acl_buf->lb_len = rc;
2112                 LASSERT(def_acl_buf->lb_len <= acl_buf->lb_len);
2113                 memcpy(acl_buf->lb_buf, def_acl_buf->lb_buf, rc);
2114                 acl_buf->lb_len = rc;
2115                 rc = __mdd_fix_mode_acl(env, acl_buf, &la->la_mode);
2116                 if (rc < 0)
2117                         RETURN(rc);
2118         } else if (rc == -ENODATA || rc == -EOPNOTSUPP) {
2119                 /* If there are no default ACL, fix mode by mask */
2120                 struct lu_ucred *uc = lu_ucred(env);
2121
2122                 /* The create triggered by MDT internal events, such as
2123                  * LFSCK reset, will not contain valid "uc". */
2124                 if (unlikely(uc != NULL))
2125                         la->la_mode &= ~uc->uc_umask;
2126                 rc = 0;
2127                 acl_buf->lb_len = 0;
2128                 def_acl_buf->lb_len = 0;
2129         }
2130
2131         RETURN(rc);
2132 }
2133
2134 /**
2135  * Create a metadata object and initialize it, set acl, xattr.
2136  **/
2137 static int mdd_object_create(const struct lu_env *env, struct mdd_object *pobj,
2138                              struct mdd_object *son, struct lu_attr *attr,
2139                              struct md_op_spec *spec, struct lu_buf *acl_buf,
2140                              struct lu_buf *def_acl_buf,
2141                              struct dt_allocation_hint *hint,
2142                              struct thandle *handle)
2143 {
2144         int                     rc;
2145
2146         mdd_write_lock(env, son, MOR_TGT_CHILD);
2147         rc = mdd_object_create_internal(env, NULL, son, attr, handle, spec,
2148                                         hint);
2149         if (rc)
2150                 GOTO(unlock, rc);
2151
2152         /* Note: In DNE phase I, for striped dir, though sub-stripes will be
2153          * created in declare phase, they also needs to be added to master
2154          * object as sub-directory entry. So it has to initialize the master
2155          * object, then set dir striped EA.(in mdo_xattr_set) */
2156         rc = mdd_object_initialize(env, mdo2fid(pobj), son, attr, handle,
2157                                    spec);
2158         if (rc != 0)
2159                 GOTO(err_destroy, rc);
2160
2161         /*
2162          * in case of replay we just set LOVEA provided by the client
2163          * XXX: I think it would be interesting to try "old" way where
2164          *      MDT calls this xattr_set(LOV) in a different transaction.
2165          *      probably this way we code can be made better.
2166          */
2167
2168         /* During creation, there are only a few cases we need do xattr_set to
2169          * create stripes.
2170          * 1. regular file: see comments above.
2171          * 2. dir: inherit default striping or pool settings from parent.
2172          * 3. create striped directory with provided stripeEA.
2173          * 4. create striped directory because inherit default layout from the
2174          * parent.
2175          */
2176         if (spec->no_create ||
2177             (S_ISREG(attr->la_mode) && spec->sp_cr_flags & MDS_OPEN_HAS_EA) ||
2178             S_ISDIR(attr->la_mode)) {
2179                 const struct lu_buf *buf;
2180
2181                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
2182                                         spec->u.sp_ea.eadatalen);
2183                 rc = mdo_xattr_set(env, son, buf,
2184                                    S_ISDIR(attr->la_mode) ? XATTR_NAME_LMV :
2185                                                             XATTR_NAME_LOV, 0,
2186                                    handle, BYPASS_CAPA);
2187                 if (rc != 0)
2188                         GOTO(err_destroy, rc);
2189         }
2190
2191 #ifdef CONFIG_FS_POSIX_ACL
2192         if (def_acl_buf != NULL && def_acl_buf->lb_len > 0 &&
2193             S_ISDIR(attr->la_mode)) {
2194                 /* set default acl */
2195                 rc = mdo_xattr_set(env, son, def_acl_buf,
2196                                    XATTR_NAME_ACL_DEFAULT, 0,
2197                                    handle, BYPASS_CAPA);
2198                 if (rc)
2199                         GOTO(err_destroy, rc);
2200         }
2201         /* set its own acl */
2202         if (acl_buf != NULL && acl_buf->lb_len > 0) {
2203                 rc = mdo_xattr_set(env, son, acl_buf,
2204                                    XATTR_NAME_ACL_ACCESS,
2205                                    0, handle, BYPASS_CAPA);
2206                 if (rc)
2207                         GOTO(err_destroy, rc);
2208         }
2209 #endif
2210
2211         if (S_ISLNK(attr->la_mode)) {
2212                 struct lu_ucred  *uc = lu_ucred_assert(env);
2213                 struct dt_object *dt = mdd_object_child(son);
2214                 const char *target_name = spec->u.sp_symname;
2215                 int sym_len = strlen(target_name);
2216                 const struct lu_buf *buf;
2217                 loff_t pos = 0;
2218
2219                 buf = mdd_buf_get_const(env, target_name, sym_len);
2220                 rc = dt->do_body_ops->dbo_write(env, dt, buf, &pos, handle,
2221                                                 mdd_object_capa(env, son),
2222                                                 uc->uc_cap &
2223                                                 CFS_CAP_SYS_RESOURCE_MASK);
2224
2225                 if (rc == sym_len)
2226                         rc = 0;
2227                 else
2228                         GOTO(err_initlized, rc = -EFAULT);
2229         }
2230
2231 err_initlized:
2232         if (unlikely(rc != 0)) {
2233                 int rc2;
2234                 if (S_ISDIR(attr->la_mode)) {
2235                         /* Drop the reference, no need to delete "."/"..",
2236                          * because the object to be destroied directly. */
2237                         rc2 = mdo_ref_del(env, son, handle);
2238                         if (rc2 != 0)
2239                                 GOTO(unlock, rc);
2240                 }
2241                 rc2 = mdo_ref_del(env, son, handle);
2242                 if (rc2 != 0)
2243                         GOTO(unlock, rc);
2244 err_destroy:
2245                 mdo_destroy(env, son, handle);
2246         }
2247 unlock:
2248         mdd_write_unlock(env, son);
2249         RETURN(rc);
2250 }
2251
2252 /*
2253  * Create object and insert it into namespace.
2254  */
2255 static int mdd_create(const struct lu_env *env, struct md_object *pobj,
2256                       const struct lu_name *lname, struct md_object *child,
2257                       struct md_op_spec *spec, struct md_attr* ma)
2258 {
2259         struct mdd_thread_info  *info = mdd_env_info(env);
2260         struct lu_attr          *la = &info->mti_la_for_fix;
2261         struct mdd_object       *mdd_pobj = md2mdd_obj(pobj);
2262         struct mdd_object       *son = md2mdd_obj(child);
2263         struct mdd_device       *mdd = mdo2mdd(pobj);
2264         struct lu_attr          *attr = &ma->ma_attr;
2265         struct thandle          *handle;
2266         struct lu_attr          *pattr = &info->mti_pattr;
2267         struct lu_buf           acl_buf;
2268         struct lu_buf           def_acl_buf;
2269         struct linkea_data      *ldata = &info->mti_link_data;
2270         const char              *name = lname->ln_name;
2271         struct dt_allocation_hint *hint = &mdd_env_info(env)->mti_hint;
2272         int                      rc;
2273         int                      rc2;
2274         ENTRY;
2275
2276         /*
2277          * Two operations have to be performed:
2278          *
2279          *  - an allocation of a new object (->do_create()), and
2280          *
2281          *  - an insertion into a parent index (->dio_insert()).
2282          *
2283          * Due to locking, operation order is not important, when both are
2284          * successful, *but* error handling cases are quite different:
2285          *
2286          *  - if insertion is done first, and following object creation fails,
2287          *  insertion has to be rolled back, but this operation might fail
2288          *  also leaving us with dangling index entry.
2289          *
2290          *  - if creation is done first, is has to be undone if insertion
2291          *  fails, leaving us with leaked space, which is neither good, nor
2292          *  fatal.
2293          *
2294          * It seems that creation-first is simplest solution, but it is
2295          * sub-optimal in the frequent
2296          *
2297          *         $ mkdir foo
2298          *         $ mkdir foo
2299          *
2300          * case, because second mkdir is bound to create object, only to
2301          * destroy it immediately.
2302          *
2303          * To avoid this follow local file systems that do double lookup:
2304          *
2305          *     0. lookup -> -EEXIST (mdd_create_sanity_check())
2306          *
2307          *     1. create            (mdd_object_create_internal())
2308          *
2309          *     2. insert            (__mdd_index_insert(), lookup again)
2310          */
2311
2312         rc = mdd_la_get(env, mdd_pobj, pattr, BYPASS_CAPA);
2313         if (rc != 0)
2314                 RETURN(rc);
2315
2316         /* Sanity checks before big job. */
2317         rc = mdd_create_sanity_check(env, pobj, pattr, lname, attr, spec);
2318         if (rc)
2319                 RETURN(rc);
2320
2321         if (OBD_FAIL_CHECK(OBD_FAIL_MDS_DQACQ_NET))
2322                 GOTO(out_free, rc = -EINPROGRESS);
2323
2324         handle = mdd_trans_create(env, mdd);
2325         if (IS_ERR(handle))
2326                 GOTO(out_free, rc = PTR_ERR(handle));
2327
2328         acl_buf.lb_buf = info->mti_xattr_buf;
2329         acl_buf.lb_len = sizeof(info->mti_xattr_buf);
2330         def_acl_buf.lb_buf = info->mti_key;
2331         def_acl_buf.lb_len = sizeof(info->mti_key);
2332         rc = mdd_acl_init(env, mdd_pobj, attr, &def_acl_buf, &acl_buf);
2333         if (rc < 0)
2334                 GOTO(out_stop, rc);
2335
2336         mdd_object_make_hint(env, mdd_pobj, son, attr, spec, hint);
2337
2338         memset(ldata, 0, sizeof(*ldata));
2339         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_BAD_PARENT)) {
2340                 struct lu_fid tfid = *mdd_object_fid(mdd_pobj);
2341
2342                 tfid.f_oid--;
2343                 rc = mdd_linkea_prepare(env, son, NULL, NULL,
2344                                         &tfid, lname, 1, 0, ldata);
2345         } else {
2346                 rc = mdd_linkea_prepare(env, son, NULL, NULL,
2347                                         mdd_object_fid(mdd_pobj),
2348                                         lname, 1, 0, ldata);
2349         }
2350
2351         rc = mdd_declare_create(env, mdd, mdd_pobj, son, lname, attr,
2352                                 handle, spec, ldata, &def_acl_buf, &acl_buf,
2353                                 hint);
2354         if (rc)
2355                 GOTO(out_stop, rc);
2356
2357         rc = mdd_trans_start(env, mdd, handle);
2358         if (rc)
2359                 GOTO(out_stop, rc);
2360
2361         rc = mdd_object_create(env, mdd_pobj, son, attr, spec, &acl_buf,
2362                                &def_acl_buf, hint, handle);
2363         if (rc != 0)
2364                 GOTO(out_stop, rc);
2365
2366         if (unlikely(spec->sp_cr_flags & MDS_OPEN_VOLATILE)) {
2367                 mdd_write_lock(env, son, MOR_TGT_CHILD);
2368                 rc = __mdd_orphan_add(env, son, handle);
2369                 GOTO(out_volatile, rc);
2370         } else {
2371                 rc = __mdd_index_insert(env, mdd_pobj, mdo2fid(son),
2372                                         attr->la_mode, name, handle,
2373                                         mdd_object_capa(env, mdd_pobj));
2374                 if (rc != 0)
2375                         GOTO(err_created, rc);
2376
2377                 mdd_links_add(env, son, mdo2fid(mdd_pobj), lname, handle,
2378                               ldata, 1);
2379
2380                 /* update parent directory mtime/ctime */
2381                 *la = *attr;
2382                 la->la_valid = LA_CTIME | LA_MTIME;
2383                 rc = mdd_update_time(env, mdd_pobj, pattr, la, handle);
2384                 if (rc)
2385                         GOTO(err_insert, rc);
2386         }
2387
2388         EXIT;
2389 err_insert:
2390         if (rc != 0) {
2391                 int rc2;
2392
2393                 if (spec->sp_cr_flags & MDS_OPEN_VOLATILE)
2394                         rc2 = __mdd_orphan_del(env, son, handle);
2395                 else
2396                         rc2 = __mdd_index_delete(env, mdd_pobj, name,
2397                                                  S_ISDIR(attr->la_mode),
2398                                                  handle, BYPASS_CAPA);
2399                 if (rc2 != 0)
2400                         goto out_stop;
2401
2402 err_created:
2403                 mdd_write_lock(env, son, MOR_TGT_CHILD);
2404                 if (S_ISDIR(attr->la_mode)) {
2405                         /* Drop the reference, no need to delete "."/"..",
2406                          * because the object is to be destroyed directly. */
2407                         rc2 = mdo_ref_del(env, son, handle);
2408                         if (rc2 != 0) {
2409                                 mdd_write_unlock(env, son);
2410                                 goto out_stop;
2411                         }
2412                 }
2413 out_volatile:
2414                 /* For volatile files drop one link immediately, since there is
2415                  * no filename in the namespace, and save any error returned. */
2416                 rc2 = mdo_ref_del(env, son, handle);
2417                 if (rc2 != 0) {
2418                         mdd_write_unlock(env, son);
2419                         if (unlikely(rc == 0))
2420                                 rc = rc2;
2421                         goto out_stop;
2422                 }
2423
2424                 /* Don't destroy the volatile object on success */
2425                 if (likely(rc != 0))
2426                         mdo_destroy(env, son, handle);
2427                 mdd_write_unlock(env, son);
2428         }
2429
2430         if (rc == 0 && fid_is_namespace_visible(mdo2fid(son)) &&
2431             likely((spec->sp_cr_flags & MDS_OPEN_VOLATILE) == 0))
2432                 rc = mdd_changelog_ns_store(env, mdd,
2433                                 S_ISDIR(attr->la_mode) ? CL_MKDIR :
2434                                 S_ISREG(attr->la_mode) ? CL_CREATE :
2435                                 S_ISLNK(attr->la_mode) ? CL_SOFTLINK : CL_MKNOD,
2436                                 0, son, mdo2fid(mdd_pobj), NULL, NULL, lname,
2437                                 NULL, handle);
2438 out_stop:
2439         rc2 = mdd_trans_stop(env, mdd, rc, handle);
2440         if (rc == 0)
2441                 rc = rc2;
2442 out_free:
2443         if (ldata->ld_buf && ldata->ld_buf->lb_len > OBD_ALLOC_BIG)
2444                 /* if we vmalloced a large buffer drop it */
2445                 lu_buf_free(ldata->ld_buf);
2446
2447         /* The child object shouldn't be cached anymore */
2448         if (rc)
2449                 set_bit(LU_OBJECT_HEARD_BANSHEE,
2450                         &child->mo_lu.lo_header->loh_flags);
2451         return rc;
2452 }
2453
2454 /*
2455  * Get locks on parents in proper order
2456  * RETURN: < 0 - error, rename_order if successful
2457  */
2458 enum rename_order {
2459         MDD_RN_SAME,
2460         MDD_RN_SRCTGT,
2461         MDD_RN_TGTSRC
2462 };
2463
2464 static int mdd_rename_order(const struct lu_env *env,
2465                             struct mdd_device *mdd,
2466                             struct mdd_object *src_pobj,
2467                             const struct lu_attr *pattr,
2468                             struct mdd_object *tgt_pobj)
2469 {
2470         /* order of locking, 1 - tgt-src, 0 - src-tgt*/
2471         int rc;
2472         ENTRY;
2473
2474         if (src_pobj == tgt_pobj)
2475                 RETURN(MDD_RN_SAME);
2476
2477         /* compared the parent child relationship of src_p&tgt_p */
2478         if (lu_fid_eq(&mdd->mdd_root_fid, mdo2fid(src_pobj))){
2479                 rc = MDD_RN_SRCTGT;
2480         } else if (lu_fid_eq(&mdd->mdd_root_fid, mdo2fid(tgt_pobj))) {
2481                 rc = MDD_RN_TGTSRC;
2482         } else {
2483                 rc = mdd_is_parent(env, mdd, src_pobj, pattr, mdo2fid(tgt_pobj),
2484                                    NULL);
2485                 if (rc == -EREMOTE)
2486                         rc = 0;
2487
2488                 if (rc == 1)
2489                         rc = MDD_RN_TGTSRC;
2490                 else if (rc == 0)
2491                         rc = MDD_RN_SRCTGT;
2492         }
2493
2494         RETURN(rc);
2495 }
2496
2497 /* has not mdd_write{read}_lock on any obj yet. */
2498 static int mdd_rename_sanity_check(const struct lu_env *env,
2499                                    struct mdd_object *src_pobj,
2500                                    const struct lu_attr *pattr,
2501                                    struct mdd_object *tgt_pobj,
2502                                    const struct lu_attr *tpattr,
2503                                    struct mdd_object *sobj,
2504                                    const struct lu_attr *cattr,
2505                                    struct mdd_object *tobj,
2506                                    const struct lu_attr *tattr)
2507 {
2508         int rc = 0;
2509         ENTRY;
2510
2511         /* XXX: when get here, sobj must NOT be NULL,
2512          * the other case has been processed in cld_rename
2513          * before mdd_rename and enable MDS_PERM_BYPASS. */
2514         LASSERT(sobj);
2515
2516         rc = mdd_may_delete(env, src_pobj, pattr, sobj, cattr, NULL, 1, 0);
2517         if (rc)
2518                 RETURN(rc);
2519
2520         /* XXX: when get here, "tobj == NULL" means tobj must
2521          * NOT exist (neither on remote MDS, such case has been
2522          * processed in cld_rename before mdd_rename and enable
2523          * MDS_PERM_BYPASS).
2524          * So check may_create, but not check may_unlink. */
2525         if (tobj == NULL)
2526                 rc = mdd_may_create(env, tgt_pobj, tpattr, NULL,
2527                                     (src_pobj != tgt_pobj));
2528         else
2529                 rc = mdd_may_delete(env, tgt_pobj, tpattr, tobj, tattr, cattr,
2530                                     (src_pobj != tgt_pobj), 1);
2531
2532         if (!rc && !tobj && (src_pobj != tgt_pobj) && S_ISDIR(cattr->la_mode))
2533                 rc = __mdd_may_link(env, tgt_pobj, tpattr);
2534
2535         RETURN(rc);
2536 }
2537
2538 static int mdd_declare_rename(const struct lu_env *env,
2539                               struct mdd_device *mdd,
2540                               struct mdd_object *mdd_spobj,
2541                               struct mdd_object *mdd_tpobj,
2542                               struct mdd_object *mdd_sobj,
2543                               struct mdd_object *mdd_tobj,
2544                               const struct lu_name *tname,
2545                               const struct lu_name *sname,
2546                               struct md_attr *ma,
2547                               struct linkea_data *ldata,
2548                               struct thandle *handle)
2549 {
2550         struct lu_attr    *la = &mdd_env_info(env)->mti_la_for_fix;
2551         int rc;
2552
2553         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
2554         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
2555
2556         LASSERT(mdd_spobj);
2557         LASSERT(mdd_tpobj);
2558         LASSERT(mdd_sobj);
2559
2560         /* name from source dir */
2561         rc = mdo_declare_index_delete(env, mdd_spobj, sname->ln_name, handle);
2562         if (rc)
2563                 return rc;
2564
2565         /* .. from source child */
2566         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
2567                 /* source child can be directory,
2568                  * counted by source dir's nlink */
2569                 rc = mdo_declare_ref_del(env, mdd_spobj, handle);
2570                 if (rc)
2571                         return rc;
2572                 if (mdd_spobj != mdd_tpobj) {
2573                         rc = mdo_declare_index_delete(env, mdd_sobj, dotdot,
2574                                                       handle);
2575                         if (rc != 0)
2576                                 return rc;
2577
2578                         rc = mdo_declare_index_insert(env, mdd_sobj,
2579                                                       mdo2fid(mdd_tpobj),
2580                                                       S_IFDIR, dotdot, handle);
2581                         if (rc != 0)
2582                                 return rc;
2583                 }
2584
2585                 /* new target child can be directory,
2586                  * counted by target dir's nlink */
2587                 rc = mdo_declare_ref_add(env, mdd_tpobj, handle);
2588                 if (rc != 0)
2589                         return rc;
2590         }
2591
2592         la->la_valid = LA_CTIME | LA_MTIME;
2593         rc = mdo_declare_attr_set(env, mdd_spobj, la, handle);
2594         if (rc != 0)
2595                 return rc;
2596
2597         rc = mdo_declare_attr_set(env, mdd_tpobj, la, handle);
2598         if (rc != 0)
2599                 return rc;
2600
2601         la->la_valid = LA_CTIME;
2602         rc = mdo_declare_attr_set(env, mdd_sobj, la, handle);
2603         if (rc)
2604                 return rc;
2605
2606         rc = mdd_declare_links_add(env, mdd_sobj, handle, ldata,
2607                 S_ISREG(mdd_object_type(mdd_sobj)) ? MLAO_CHECK : MLAO_IGNORE);
2608         if (rc)
2609                 return rc;
2610
2611         /* new name */
2612         rc = mdo_declare_index_insert(env, mdd_tpobj, mdo2fid(mdd_sobj),
2613                                       mdd_object_type(mdd_sobj),
2614                                       tname->ln_name, handle);
2615         if (rc != 0)
2616                 return rc;
2617
2618         /* name from target dir (old name), we declare it unconditionally
2619          * as mdd_rename() calls delete unconditionally as well. so just
2620          * to balance declarations vs calls to change ... */
2621         rc = mdo_declare_index_delete(env, mdd_tpobj, tname->ln_name, handle);
2622         if (rc)
2623                 return rc;
2624
2625         if (mdd_tobj && mdd_object_exists(mdd_tobj)) {
2626                 /* delete target child in target parent directory */
2627                 rc = mdo_declare_ref_del(env, mdd_tobj, handle);
2628                 if (rc)
2629                         return rc;
2630
2631                 if (S_ISDIR(mdd_object_type(mdd_tobj))) {
2632                         /* target child can be directory,
2633                          * delete "." reference in target child directory */
2634                         rc = mdo_declare_ref_del(env, mdd_tobj, handle);
2635                         if (rc)
2636                                 return rc;
2637
2638                         /* delete ".." reference in target parent directory */
2639                         rc = mdo_declare_ref_del(env, mdd_tpobj, handle);
2640                         if (rc)
2641                                 return rc;
2642                 }
2643
2644                 la->la_valid = LA_CTIME;
2645                 rc = mdo_declare_attr_set(env, mdd_tobj, la, handle);
2646                 if (rc)
2647                         return rc;
2648
2649                 rc = mdd_declare_finish_unlink(env, mdd_tobj, handle);
2650                 if (rc)
2651                         return rc;
2652         }
2653
2654         rc = mdd_declare_changelog_store(env, mdd, tname, sname, handle);
2655         if (rc)
2656                 return rc;
2657
2658         return rc;
2659 }
2660
2661 /* src object can be remote that is why we use only fid and type of object */
2662 static int mdd_rename(const struct lu_env *env,
2663                       struct md_object *src_pobj, struct md_object *tgt_pobj,
2664                       const struct lu_fid *lf, const struct lu_name *lsname,
2665                       struct md_object *tobj, const struct lu_name *ltname,
2666                       struct md_attr *ma)
2667 {
2668         const char *sname = lsname->ln_name;
2669         const char *tname = ltname->ln_name;
2670         struct lu_attr    *la = &mdd_env_info(env)->mti_la_for_fix;
2671         struct mdd_object *mdd_spobj = md2mdd_obj(src_pobj); /* source parent */
2672         struct mdd_object *mdd_tpobj = md2mdd_obj(tgt_pobj);
2673         struct mdd_device *mdd = mdo2mdd(src_pobj);
2674         struct mdd_object *mdd_sobj = NULL;                  /* source object */
2675         struct mdd_object *mdd_tobj = NULL;
2676         struct lu_attr *cattr = MDD_ENV_VAR(env, cattr);
2677         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
2678         struct lu_attr *tattr = MDD_ENV_VAR(env, tattr);
2679         struct lu_attr *tpattr = MDD_ENV_VAR(env, tpattr);
2680         struct thandle *handle;
2681         struct linkea_data  *ldata = &mdd_env_info(env)->mti_link_data;
2682         const struct lu_fid *tpobj_fid = mdo2fid(mdd_tpobj);
2683         const struct lu_fid *spobj_fid = mdo2fid(mdd_spobj);
2684         bool is_dir;
2685         bool tobj_ref = 0;
2686         bool tobj_locked = 0;
2687         unsigned cl_flags = 0;
2688         int rc, rc2;
2689         ENTRY;
2690
2691         if (tobj)
2692                 mdd_tobj = md2mdd_obj(tobj);
2693
2694         mdd_sobj = mdd_object_find(env, mdd, lf);
2695
2696         rc = mdd_la_get(env, mdd_sobj, cattr, BYPASS_CAPA);
2697         if (rc)
2698                 GOTO(out_pending, rc);
2699
2700         rc = mdd_la_get(env, mdd_spobj, pattr, BYPASS_CAPA);
2701         if (rc)
2702                 GOTO(out_pending, rc);
2703
2704         if (mdd_tobj) {
2705                 rc = mdd_la_get(env, mdd_tobj, tattr, BYPASS_CAPA);
2706                 if (rc)
2707                         GOTO(out_pending, rc);
2708         }
2709
2710         rc = mdd_la_get(env, mdd_tpobj, tpattr, BYPASS_CAPA);
2711         if (rc)
2712                 GOTO(out_pending, rc);
2713
2714         rc = mdd_rename_sanity_check(env, mdd_spobj, pattr, mdd_tpobj, tpattr,
2715                                      mdd_sobj, cattr, mdd_tobj, tattr);
2716         if (rc)
2717                 GOTO(out_pending, rc);
2718
2719         rc = mdd_name_check(mdd, ltname);
2720         if (rc < 0)
2721                 GOTO(out_pending, rc);
2722
2723         handle = mdd_trans_create(env, mdd);
2724         if (IS_ERR(handle))
2725                 GOTO(out_pending, rc = PTR_ERR(handle));
2726
2727         memset(ldata, 0, sizeof(*ldata));
2728         mdd_linkea_prepare(env, mdd_sobj, NULL, NULL, mdd_object_fid(mdd_tpobj),
2729                            ltname, 1, 0, ldata);
2730         rc = mdd_declare_rename(env, mdd, mdd_spobj, mdd_tpobj, mdd_sobj,
2731                                 mdd_tobj, lsname, ltname, ma, ldata, handle);
2732         if (rc)
2733                 GOTO(stop, rc);
2734
2735         rc = mdd_trans_start(env, mdd, handle);
2736         if (rc)
2737                 GOTO(stop, rc);
2738
2739         /* FIXME: Should consider tobj and sobj too in rename_lock. */
2740         rc = mdd_rename_order(env, mdd, mdd_spobj, pattr, mdd_tpobj);
2741         if (rc < 0)
2742                 GOTO(cleanup_unlocked, rc);
2743
2744         is_dir = S_ISDIR(cattr->la_mode);
2745
2746         /* Remove source name from source directory */
2747         rc = __mdd_index_delete(env, mdd_spobj, sname, is_dir, handle,
2748                                 mdd_object_capa(env, mdd_spobj));
2749         if (rc)
2750                 GOTO(cleanup, rc);
2751
2752         /* "mv dir1 dir2" needs "dir1/.." link update */
2753         if (is_dir && mdd_sobj && !lu_fid_eq(spobj_fid, tpobj_fid)) {
2754                 rc = __mdd_index_delete_only(env, mdd_sobj, dotdot, handle,
2755                                         mdd_object_capa(env, mdd_sobj));
2756                 if (rc != 0)
2757                         GOTO(fixup_spobj2, rc);
2758
2759                 rc = __mdd_index_insert_only(env, mdd_sobj, tpobj_fid, S_IFDIR,
2760                                              dotdot, handle,
2761                                              mdd_object_capa(env, mdd_sobj));
2762                 if (rc != 0)
2763                         GOTO(fixup_spobj, rc);
2764         }
2765
2766         /* Remove target name from target directory
2767          * Here tobj can be remote one, so we do index_delete unconditionally
2768          * and -ENOENT is allowed.
2769          */
2770         rc = __mdd_index_delete(env, mdd_tpobj, tname, is_dir, handle,
2771                                 mdd_object_capa(env, mdd_tpobj));
2772         if (rc != 0) {
2773                 if (mdd_tobj) {
2774                         /* tname might been renamed to something else */
2775                         GOTO(fixup_spobj, rc);
2776                 }
2777                 if (rc != -ENOENT)
2778                         GOTO(fixup_spobj, rc);
2779         }
2780
2781         /* Insert new fid with target name into target dir */
2782         rc = __mdd_index_insert(env, mdd_tpobj, lf, cattr->la_mode,
2783                                 tname, handle, mdd_object_capa(env, mdd_tpobj));
2784         if (rc != 0)
2785                 GOTO(fixup_tpobj, rc);
2786
2787         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
2788         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
2789
2790         /* XXX: mdd_sobj must be local one if it is NOT NULL. */
2791         if (mdd_sobj) {
2792                 la->la_valid = LA_CTIME;
2793                 rc = mdd_update_time(env, mdd_sobj, cattr, la, handle);
2794                 if (rc)
2795                         GOTO(fixup_tpobj, rc);
2796         }
2797
2798         /* Remove old target object
2799          * For tobj is remote case cmm layer has processed
2800          * and set tobj to NULL then. So when tobj is NOT NULL,
2801          * it must be local one.
2802          */
2803         if (tobj && mdd_object_exists(mdd_tobj)) {
2804                 mdd_write_lock(env, mdd_tobj, MOR_TGT_CHILD);
2805                 tobj_locked = 1;
2806                 if (mdd_is_dead_obj(mdd_tobj)) {
2807                         /* shld not be dead, something is wrong */
2808                         CERROR("tobj is dead, something is wrong\n");
2809                         rc = -EINVAL;
2810                         goto cleanup;
2811                 }
2812                 mdo_ref_del(env, mdd_tobj, handle);
2813
2814                 /* Remove dot reference. */
2815                 if (S_ISDIR(tattr->la_mode))
2816                         mdo_ref_del(env, mdd_tobj, handle);
2817                 tobj_ref = 1;
2818
2819                 /* fetch updated nlink */
2820                 rc = mdd_la_get(env, mdd_tobj, tattr, BYPASS_CAPA);
2821                 if (rc != 0) {
2822                         CERROR("%s: Failed to get nlink for tobj "
2823                                 DFID": rc = %d\n",
2824                                 mdd2obd_dev(mdd)->obd_name,
2825                                 PFID(tpobj_fid), rc);
2826                         GOTO(fixup_tpobj, rc);
2827                 }
2828
2829                 la->la_valid = LA_CTIME;
2830                 rc = mdd_update_time(env, mdd_tobj, tattr, la, handle);
2831                 if (rc != 0) {
2832                         CERROR("%s: Failed to set ctime for tobj "
2833                                 DFID": rc = %d\n",
2834                                 mdd2obd_dev(mdd)->obd_name,
2835                                 PFID(tpobj_fid), rc);
2836                         GOTO(fixup_tpobj, rc);
2837                 }
2838
2839                 /* XXX: this transfer to ma will be removed with LOD/OSP */
2840                 ma->ma_attr = *tattr;
2841                 ma->ma_valid |= MA_INODE;
2842                 rc = mdd_finish_unlink(env, mdd_tobj, ma, mdd_tpobj, ltname,
2843                                        handle);
2844                 if (rc != 0) {
2845                         CERROR("%s: Failed to unlink tobj "
2846                                 DFID": rc = %d\n",
2847                                 mdd2obd_dev(mdd)->obd_name,
2848                                 PFID(tpobj_fid), rc);
2849                         GOTO(fixup_tpobj, rc);
2850                 }
2851
2852                 /* fetch updated nlink */
2853                 rc = mdd_la_get(env, mdd_tobj, tattr, BYPASS_CAPA);
2854                 if (rc != 0) {
2855                         CERROR("%s: Failed to get nlink for tobj "
2856                                 DFID": rc = %d\n",
2857                                 mdd2obd_dev(mdd)->obd_name,
2858                                 PFID(tpobj_fid), rc);
2859                         GOTO(fixup_tpobj, rc);
2860                 }
2861                 /* XXX: this transfer to ma will be removed with LOD/OSP */
2862                 ma->ma_attr = *tattr;
2863                 ma->ma_valid |= MA_INODE;
2864
2865                 if (tattr->la_nlink == 0) {
2866                         cl_flags |= CLF_RENAME_LAST;
2867                         if (mdd_hsm_archive_exists(env, mdd_tobj, ma))
2868                                 cl_flags |= CLF_RENAME_LAST_EXISTS;
2869                 }
2870         }
2871
2872         la->la_valid = LA_CTIME | LA_MTIME;
2873         rc = mdd_update_time(env, mdd_spobj, pattr, la, handle);
2874         if (rc)
2875                 GOTO(fixup_tpobj, rc);
2876
2877         if (mdd_spobj != mdd_tpobj) {
2878                 la->la_valid = LA_CTIME | LA_MTIME;
2879                 rc = mdd_update_time(env, mdd_tpobj, tpattr, la, handle);
2880         }
2881
2882         if (rc == 0 && mdd_sobj) {
2883                 mdd_write_lock(env, mdd_sobj, MOR_SRC_CHILD);
2884                 rc = mdd_links_rename(env, mdd_sobj, mdo2fid(mdd_spobj), lsname,
2885                                       mdo2fid(mdd_tpobj), ltname, handle, NULL,
2886                                       0, 0);
2887                 if (rc == -ENOENT)
2888                         /* Old files might not have EA entry */
2889                         mdd_links_add(env, mdd_sobj, mdo2fid(mdd_spobj),
2890                                       lsname, handle, NULL, 0);
2891                 mdd_write_unlock(env, mdd_sobj);
2892                 /* We don't fail the transaction if the link ea can't be
2893                    updated -- fid2path will use alternate lookup method. */
2894                 rc = 0;
2895         }
2896
2897         EXIT;
2898
2899 fixup_tpobj:
2900         if (rc) {
2901                 rc2 = __mdd_index_delete(env, mdd_tpobj, tname, is_dir, handle,
2902                                          BYPASS_CAPA);
2903                 if (rc2)
2904                         CWARN("tp obj fix error %d\n",rc2);
2905
2906                 if (mdd_tobj && mdd_object_exists(mdd_tobj) &&
2907                     !mdd_is_dead_obj(mdd_tobj)) {
2908                         if (tobj_ref) {
2909                                 mdo_ref_add(env, mdd_tobj, handle);
2910                                 if (is_dir)
2911                                         mdo_ref_add(env, mdd_tobj, handle);
2912                         }
2913
2914                         rc2 = __mdd_index_insert(env, mdd_tpobj,
2915                                                   mdo2fid(mdd_tobj),
2916                                                   mdd_object_type(mdd_tobj),
2917                                                   tname, handle, BYPASS_CAPA);
2918                         if (rc2 != 0)
2919                                 CWARN("tp obj fix error: rc = %d\n", rc2);
2920                 }
2921         }
2922
2923 fixup_spobj:
2924         if (rc && is_dir && mdd_sobj && mdd_spobj != mdd_tpobj) {
2925                 rc2 = __mdd_index_delete_only(env, mdd_sobj, dotdot, handle,
2926                                               BYPASS_CAPA);
2927
2928                 if (rc2)
2929                         CWARN("%s: sp obj dotdot delete error: rc = %d\n",
2930                                mdd2obd_dev(mdd)->obd_name, rc2);
2931
2932
2933                 rc2 = __mdd_index_insert_only(env, mdd_sobj, spobj_fid, S_IFDIR,
2934                                               dotdot, handle, BYPASS_CAPA);
2935                 if (rc2 != 0)
2936                         CWARN("%s: sp obj dotdot insert error: rc = %d\n",
2937                               mdd2obd_dev(mdd)->obd_name, rc2);
2938         }
2939
2940 fixup_spobj2:
2941         if (rc != 0) {
2942                 rc2 = __mdd_index_insert(env, mdd_spobj, lf,
2943                                          mdd_object_type(mdd_sobj), sname,
2944                                          handle, BYPASS_CAPA);
2945                 if (rc2 != 0)
2946                         CWARN("sp obj fix error: rc = %d\n", rc2);
2947         }
2948
2949 cleanup:
2950         if (tobj_locked)
2951                 mdd_write_unlock(env, mdd_tobj);
2952
2953 cleanup_unlocked:
2954         if (rc == 0)
2955                 rc = mdd_changelog_ns_store(env, mdd, CL_RENAME, cl_flags,
2956                                             mdd_tobj, tpobj_fid, lf, spobj_fid,
2957                                             ltname, lsname, handle);
2958
2959 stop:
2960         mdd_trans_stop(env, mdd, rc, handle);
2961
2962 out_pending:
2963         mdd_object_put(env, mdd_sobj);
2964         return rc;
2965 }
2966
2967 /**
2968  * During migration once the parent FID has been changed,
2969  * we need update the parent FID in linkea.
2970  **/
2971 static int mdd_linkea_update_child_internal(const struct lu_env *env,
2972                                             struct mdd_object *parent,
2973                                             struct mdd_object *child,
2974                                             const char *name, int namelen,
2975                                             struct thandle *handle,
2976                                             bool declare)
2977 {
2978         struct mdd_thread_info  *info = mdd_env_info(env);
2979         struct linkea_data      ldata = {0};
2980         struct lu_buf           *buf = &info->mti_link_buf;
2981         int                     count;
2982         int                     rc = 0;
2983
2984         ENTRY;
2985
2986         buf = lu_buf_check_and_alloc(buf, PATH_MAX);
2987         if (buf->lb_buf == NULL)
2988                 RETURN(-ENOMEM);
2989
2990         ldata.ld_buf = buf;
2991         rc = mdd_links_read(env, child, &ldata);
2992         if (rc != 0) {
2993                 if (rc == -ENOENT || rc == -ENODATA)
2994                         rc = 0;
2995                 RETURN(rc);
2996         }
2997
2998         LASSERT(ldata.ld_leh != NULL);
2999         ldata.ld_lee = (struct link_ea_entry *)(ldata.ld_leh + 1);
3000         for (count = 0; count < ldata.ld_leh->leh_reccount; count++) {
3001                 struct mdd_device *mdd = mdo2mdd(&child->mod_obj);
3002                 struct lu_name lname;
3003                 struct lu_fid  fid;
3004
3005                 linkea_entry_unpack(ldata.ld_lee, &ldata.ld_reclen,
3006                                     &lname, &fid);
3007
3008                 if (strncmp(lname.ln_name, name, namelen) != 0 ||
3009                     lu_fid_eq(&fid, mdd_object_fid(parent))) {
3010                         ldata.ld_lee = (struct link_ea_entry *)
3011                                        ((char *)ldata.ld_lee +
3012                                         ldata.ld_reclen);
3013                         continue;
3014                 }
3015
3016                 CDEBUG(D_INFO, "%s: update "DFID" with %.*s:"DFID"\n",
3017                        mdd2obd_dev(mdd)->obd_name, PFID(mdd_object_fid(child)),
3018                        lname.ln_namelen, lname.ln_name,
3019                        PFID(mdd_object_fid(parent)));
3020                 /* update to the new parent fid */
3021                 linkea_entry_pack(ldata.ld_lee, &lname,
3022                                   mdd_object_fid(parent));
3023                 if (declare)
3024                         rc = mdd_declare_links_add(env, child, handle, &ldata,
3025                                                    MLAO_IGNORE);
3026                 else
3027                         rc = mdd_links_write(env, child, &ldata, handle);
3028                 break;
3029         }
3030         RETURN(rc);
3031 }
3032
3033 static int mdd_linkea_declare_update_child(const struct lu_env *env,
3034                                            struct mdd_object *parent,
3035                                            struct mdd_object *child,
3036                                            const char *name, int namelen,
3037                                            struct thandle *handle)
3038 {
3039         return mdd_linkea_update_child_internal(env, parent, child, name,
3040                                                 namelen, handle, true);
3041 }
3042
3043 static int mdd_linkea_update_child(const struct lu_env *env,
3044                                    struct mdd_object *parent,
3045                                    struct mdd_object *child,
3046                                    const char *name, int namelen,
3047                                    struct thandle *handle)
3048 {
3049         return mdd_linkea_update_child_internal(env, parent, child, name,
3050                                                 namelen, handle, false);
3051 }
3052
3053 static int mdd_update_linkea_internal(const struct lu_env *env,
3054                                       struct mdd_object *mdd_pobj,
3055                                       struct mdd_object *mdd_sobj,
3056                                       struct mdd_object *mdd_tobj,
3057                                       const struct lu_name *child_name,
3058                                       struct thandle *handle,
3059                                       int declare)
3060 {
3061         struct mdd_thread_info  *info = mdd_env_info(env);
3062         struct linkea_data      *ldata = &info->mti_link_data;
3063         int                     count;
3064         int                     rc = 0;
3065         ENTRY;
3066
3067         rc = mdd_links_read(env, mdd_sobj, ldata);
3068         if (rc != 0) {
3069                 if (rc == -ENOENT || rc == -ENODATA)
3070                         rc = 0;
3071                 RETURN(rc);
3072         }
3073
3074         if (declare)
3075                 rc = mdd_declare_links_add(env, mdd_tobj, handle, ldata,
3076                                            MLAO_IGNORE);
3077         else
3078                 rc = mdd_links_write(env, mdd_tobj, ldata, handle);
3079
3080         if (rc != 0)
3081                 RETURN(rc);
3082
3083         /* If it is mulitple links file, we need update the name entry for
3084          * all parent */
3085         LASSERT(ldata->ld_leh != NULL);
3086         ldata->ld_lee = (struct link_ea_entry *)(ldata->ld_leh + 1);
3087         for (count = 0; count < ldata->ld_leh->leh_reccount; count++) {
3088                 struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3089                 struct mdd_object       *pobj;
3090                 struct lu_name          lname;
3091                 struct lu_fid           fid;
3092
3093                 linkea_entry_unpack(ldata->ld_lee, &ldata->ld_reclen,
3094                                     &lname, &fid);
3095                 ldata->ld_lee = (struct link_ea_entry *)((char *)ldata->ld_lee +
3096                                                          ldata->ld_reclen);
3097                 pobj = mdd_object_find(env, mdd, &fid);
3098                 if (IS_ERR(pobj)) {
3099                         CWARN("%s: cannot find obj "DFID": rc = %ld\n",
3100                               mdd2obd_dev(mdd)->obd_name, PFID(&fid),
3101                               PTR_ERR(pobj));
3102                         continue;
3103                 }
3104
3105                 if (!mdd_object_exists(pobj)) {
3106                         CDEBUG(D_INFO, "%s: obj "DFID" does not exist\n",
3107                               mdd2obd_dev(mdd)->obd_name, PFID(&fid));
3108                         GOTO(next_put, rc);
3109                 }
3110
3111                 if (pobj == mdd_pobj &&
3112                     lname.ln_namelen == child_name->ln_namelen &&
3113                     strncmp(lname.ln_name, child_name->ln_name,
3114                             lname.ln_namelen) == 0) {
3115                         CDEBUG(D_INFO, "%s: skip its own %s: "DFID"\n",
3116                               mdd2obd_dev(mdd)->obd_name, child_name->ln_name,
3117                               PFID(&fid));
3118                         GOTO(next_put, rc);
3119                 }
3120
3121                 CDEBUG(D_INFO, "%s: update "DFID" with "DNAME":"DFID"\n",
3122                        mdd2obd_dev(mdd)->obd_name, PFID(mdd_object_fid(pobj)),
3123                        PNAME(&lname), PFID(mdd_object_fid(mdd_tobj)));
3124
3125                 if (declare) {
3126                         /* Remove source name from source directory */
3127                         /* Insert new fid with target name into target dir */
3128                         rc = mdo_declare_index_delete(env, pobj, lname.ln_name,
3129                                                       handle);
3130                         if (rc != 0)
3131                                 GOTO(next_put, rc);
3132
3133                         rc = mdo_declare_index_insert(env, pobj,
3134                                         mdd_object_fid(mdd_tobj),
3135                                         mdd_object_type(mdd_tobj),
3136                                         lname.ln_name, handle);
3137                         if (rc != 0)
3138                                 GOTO(next_put, rc);
3139
3140                         rc = mdo_declare_ref_add(env, mdd_tobj, handle);
3141                         if (rc)
3142                                 GOTO(next_put, rc);
3143
3144                         rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3145                         if (rc)
3146                                 GOTO(next_put, rc);
3147                 } else {
3148                         rc = __mdd_index_delete(env, pobj, lname.ln_name,
3149                                                 0, handle,
3150                                                 mdd_object_capa(env, pobj));
3151                         if (rc)
3152                                 GOTO(next_put, rc);
3153
3154                         rc = __mdd_index_insert(env, pobj,
3155                                         mdd_object_fid(mdd_tobj),
3156                                         mdd_object_type(mdd_tobj),
3157                                         lname.ln_name, handle,
3158                                         mdd_object_capa(env, pobj));
3159                         if (rc != 0)
3160                                 GOTO(next_put, rc);
3161
3162                         mdd_write_lock(env, mdd_tobj, MOR_SRC_CHILD);
3163                         rc = mdo_ref_add(env, mdd_tobj, handle);
3164                         mdd_write_unlock(env, mdd_tobj);
3165                         if (rc)
3166                                 GOTO(next_put, rc);
3167
3168                         mdd_write_lock(env, mdd_sobj, MOR_TGT_CHILD);
3169                         mdo_ref_del(env, mdd_sobj, handle);
3170                         mdd_write_unlock(env, mdd_sobj);
3171                 }
3172 next_put:
3173                 mdd_object_put(env, pobj);
3174                 if (rc != 0)
3175                         break;
3176         }
3177
3178         RETURN(rc);
3179 }
3180
3181 static int mdd_migrate_xattrs(const struct lu_env *env,
3182                               struct mdd_object *mdd_sobj,
3183                               struct mdd_object *mdd_tobj)
3184 {
3185         struct mdd_thread_info  *info = mdd_env_info(env);
3186         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3187         char                    *xname;
3188         struct thandle          *handle;
3189         struct lu_buf           xbuf;
3190         int                     xlen;
3191         int                     rem;
3192         int                     xsize;
3193         int                     list_xsize;
3194         struct lu_buf           list_xbuf;
3195         int                     rc;
3196
3197         /* retrieve xattr list from the old object */
3198         list_xsize = mdo_xattr_list(env, mdd_sobj, &LU_BUF_NULL,
3199                                     mdd_object_capa(env, mdd_sobj));
3200         if (list_xsize == -ENODATA)
3201                 return 0;
3202
3203         if (list_xsize < 0)
3204                 return list_xsize;
3205
3206         lu_buf_check_and_alloc(&info->mti_big_buf, list_xsize);
3207         if (info->mti_big_buf.lb_buf == NULL)
3208                 return -ENOMEM;
3209
3210         list_xbuf.lb_buf = info->mti_big_buf.lb_buf;
3211         list_xbuf.lb_len = list_xsize;
3212         rc = mdo_xattr_list(env, mdd_sobj, &list_xbuf,
3213                             mdd_object_capa(env, mdd_sobj));
3214         if (rc < 0)
3215                 return rc;
3216         rc = 0;
3217         rem = list_xsize;
3218         xname = list_xbuf.lb_buf;
3219         while (rem > 0) {
3220                 xlen = strnlen(xname, rem - 1) + 1;
3221                 if (strcmp(XATTR_NAME_LINK, xname) == 0 ||
3222                     strcmp(XATTR_NAME_LMA, xname) == 0 ||
3223                     strcmp(XATTR_NAME_LMV, xname) == 0)
3224                         goto next;
3225
3226                 /* For directory, if there are default layout, migrate here */
3227                 if (strcmp(XATTR_NAME_LOV, xname) == 0 &&
3228                     !S_ISDIR(lu_object_attr(&mdd_sobj->mod_obj.mo_lu)))
3229                         goto next;
3230
3231                 xsize = mdo_xattr_get(env, mdd_sobj, &LU_BUF_NULL,
3232                                       xname,
3233                                       mdd_object_capa(env, mdd_sobj));
3234                 if (xsize == -ENODATA)
3235                         goto next;
3236                 if (xsize < 0)
3237                         GOTO(out, rc);
3238
3239                 lu_buf_check_and_alloc(&info->mti_link_buf, xsize);
3240                 if (info->mti_link_buf.lb_buf == NULL)
3241                         GOTO(out, rc = -ENOMEM);
3242
3243                 xbuf.lb_len = xsize;
3244                 xbuf.lb_buf = info->mti_link_buf.lb_buf;
3245                 rc = mdo_xattr_get(env, mdd_sobj, &xbuf, xname,
3246                                    mdd_object_capa(env, mdd_sobj));
3247                 if (rc == -ENODATA)
3248                         goto next;
3249                 if (rc < 0)
3250                         GOTO(out, rc);
3251
3252                 handle = mdd_trans_create(env, mdd);
3253                 if (IS_ERR(handle))
3254                         GOTO(out, rc = PTR_ERR(handle));
3255
3256                 rc = mdo_declare_xattr_set(env, mdd_tobj, &xbuf, xname, 0,
3257                                            handle);
3258                 if (rc != 0)
3259                         GOTO(stop_trans, rc);
3260                 /* Note: this transaction is part of migration, and it is not
3261                  * the last step of migration, so we set th_local = 1 to avoid
3262                  * update last rcvd for this transaction */
3263                 handle->th_local = 1;
3264                 rc = mdd_trans_start(env, mdd, handle);
3265                 if (rc != 0)
3266                         GOTO(stop_trans, rc);
3267
3268                 rc = mdo_xattr_set(env, mdd_tobj, &xbuf, xname, 0, handle,
3269                                    mdd_object_capa(env, mdd_sobj));
3270                 if (rc == -EEXIST)
3271                         GOTO(stop_trans, rc = 0);
3272
3273                 if (rc != 0)
3274                         GOTO(stop_trans, rc);
3275 stop_trans:
3276                 mdd_trans_stop(env, mdd, rc, handle);
3277                 if (rc != 0)
3278                         GOTO(out, rc);
3279 next:
3280                 rem -= xlen;
3281                 memmove(xname, xname + xlen, rem);
3282         }
3283 out:
3284         return rc;
3285 }
3286
3287 static int mdd_declare_migrate_create(const struct lu_env *env,
3288                                       struct mdd_object *mdd_pobj,
3289                                       struct mdd_object *mdd_sobj,
3290                                       struct mdd_object *mdd_tobj,
3291                                       struct md_op_spec *spec,
3292                                       struct lu_attr *la,
3293                                       union lmv_mds_md *mgr_ea,
3294                                       struct thandle *handle)
3295 {
3296         struct lu_attr          *la_flag = MDD_ENV_VAR(env, la_for_fix);
3297         const struct lu_buf     *buf;
3298         int                     rc;
3299         int                     mgr_easize;
3300
3301         rc = mdd_declare_object_create_internal(env, mdd_pobj, mdd_tobj, la,
3302                                                 handle, spec, NULL);
3303         if (rc != 0)
3304                 return rc;
3305
3306         rc = mdd_declare_object_initialize(env, mdd_pobj, mdd_tobj, la,
3307                                            handle);
3308         if (rc != 0)
3309                 return rc;
3310
3311         if (S_ISLNK(la->la_mode)) {
3312                 const char *target_name = spec->u.sp_symname;
3313                 int sym_len = strlen(target_name);
3314                 const struct lu_buf *buf;
3315
3316                 buf = mdd_buf_get_const(env, target_name, sym_len);
3317                 rc = dt_declare_record_write(env, mdd_object_child(mdd_tobj),
3318                                              buf, 0, handle);
3319                 if (rc != 0)
3320                         return rc;
3321         }
3322
3323         if (spec->u.sp_ea.eadata != NULL && spec->u.sp_ea.eadatalen != 0) {
3324                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
3325                                         spec->u.sp_ea.eadatalen);
3326                 rc = mdo_declare_xattr_set(env, mdd_tobj, buf, XATTR_NAME_LOV,
3327                                            0, handle);
3328                 if (rc)
3329                         return rc;
3330         }
3331
3332         mgr_easize = lmv_mds_md_size(2, LMV_MAGIC_V1);
3333         buf = mdd_buf_get_const(env, mgr_ea, mgr_easize);
3334         rc = mdo_declare_xattr_set(env, mdd_sobj, buf, XATTR_NAME_LMV,
3335                                    0, handle);
3336         if (rc)
3337                 return rc;
3338
3339         la_flag->la_valid = LA_FLAGS;
3340         la_flag->la_flags = la->la_flags | LUSTRE_IMMUTABLE_FL;
3341         rc = mdo_declare_attr_set(env, mdd_sobj, la_flag, handle);
3342
3343         return rc;
3344 }
3345
3346 static int mdd_migrate_create(const struct lu_env *env,
3347                               struct mdd_object *mdd_pobj,
3348                               struct mdd_object *mdd_sobj,
3349                               struct mdd_object *mdd_tobj,
3350                               struct lu_attr *la)
3351 {
3352         struct mdd_thread_info  *info = mdd_env_info(env);
3353         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3354         struct md_op_spec       *spec = &info->mti_spec;
3355         struct lu_buf           lmm_buf = { 0 };
3356         struct lu_buf           link_buf = { 0 };
3357         const struct lu_buf     *buf;
3358         struct thandle          *handle;
3359         struct lmv_mds_md_v1    *mgr_ea;
3360         struct lu_attr          *la_flag = MDD_ENV_VAR(env, la_for_fix);
3361         struct dt_allocation_hint *hint = &mdd_env_info(env)->mti_hint;
3362         int                     mgr_easize;
3363         int                     rc;
3364         ENTRY;
3365
3366         /* prepare spec for create */
3367         memset(spec, 0, sizeof(*spec));
3368         spec->sp_cr_lookup = 0;
3369         spec->sp_feat = &dt_directory_features;
3370         if (S_ISLNK(la->la_mode)) {
3371                 buf = lu_buf_check_and_alloc(
3372                                 &mdd_env_info(env)->mti_big_buf,
3373                                 la->la_size + 1);
3374                 link_buf = *buf;
3375                 link_buf.lb_len = la->la_size + 1;
3376                 rc = mdd_readlink(env, &mdd_sobj->mod_obj, &link_buf);
3377                 if (rc <= 0) {
3378                         rc = rc != 0 ? rc : -EFAULT;
3379                         CERROR("%s: "DFID" readlink failed: rc = %d\n",
3380                                mdd2obd_dev(mdd)->obd_name,
3381                                PFID(mdd_object_fid(mdd_sobj)), rc);
3382                         RETURN(rc);
3383                 }
3384                 spec->u.sp_symname = link_buf.lb_buf;
3385         } else if S_ISREG(la->la_mode) {
3386                 /* retrieve lov of the old object */
3387                 rc = mdd_get_lov_ea(env, mdd_sobj, &lmm_buf);
3388                 if (rc != 0 && rc != -ENODATA)
3389                         RETURN(rc);
3390                 if (lmm_buf.lb_buf != NULL && lmm_buf.lb_len != 0) {
3391                         spec->u.sp_ea.eadata = lmm_buf.lb_buf;
3392                         spec->u.sp_ea.eadatalen = lmm_buf.lb_len;
3393                         spec->sp_cr_flags |= MDS_OPEN_HAS_EA;
3394                 }
3395         }
3396
3397         mgr_ea = (struct lmv_mds_md_v1 *)info->mti_xattr_buf;
3398         memset(mgr_ea, 0, sizeof(*mgr_ea));
3399         mgr_ea->lmv_magic = cpu_to_le32(LMV_MAGIC_V1);
3400         mgr_ea->lmv_stripe_count = cpu_to_le32(2);
3401         mgr_ea->lmv_master_mdt_index = mdd_seq_site(mdd)->ss_node_id;
3402         mgr_ea->lmv_hash_type = cpu_to_le32(LMV_HASH_FLAG_MIGRATION);
3403         fid_cpu_to_le(&mgr_ea->lmv_stripe_fids[0], mdd_object_fid(mdd_sobj));
3404         fid_cpu_to_le(&mgr_ea->lmv_stripe_fids[1], mdd_object_fid(mdd_tobj));
3405
3406         mdd_object_make_hint(env, mdd_pobj, mdd_tobj, la, spec, hint);
3407
3408         handle = mdd_trans_create(env, mdd);
3409         if (IS_ERR(handle))
3410                 GOTO(out_free, rc = PTR_ERR(handle));
3411
3412         /* Note: this transaction is part of migration, and it is not
3413          * the last step of migration, so we set th_local = 1 to avoid
3414          * update last rcvd for this transaction */
3415         handle->th_local = 1;
3416         rc = mdd_declare_migrate_create(env, mdd_pobj, mdd_sobj, mdd_tobj,
3417                                         spec, la,
3418                                         (union lmv_mds_md *)info->mti_xattr_buf,
3419                                         handle);
3420         if (rc != 0)
3421                 GOTO(stop_trans, rc);
3422
3423         rc = mdd_trans_start(env, mdd, handle);
3424         if (rc != 0)
3425                 GOTO(stop_trans, rc);
3426
3427         /* create the target object */
3428         rc = mdd_object_create(env, mdd_pobj, mdd_tobj, la, spec, NULL, NULL,
3429                                hint, handle);
3430         if (rc != 0)
3431                 GOTO(stop_trans, rc);
3432
3433         /* Set MIGRATE EA on the source inode, so once the migration needs
3434          * to be re-done during failover, the re-do process can locate the
3435          * target object which is already being created. */
3436         mgr_easize = lmv_mds_md_size(2, LMV_MAGIC_V1);
3437         buf = mdd_buf_get_const(env, mgr_ea, mgr_easize);
3438         rc = mdo_xattr_set(env, mdd_sobj, buf, XATTR_NAME_LMV, 0,
3439                            handle, mdd_object_capa(env, mdd_sobj));
3440         if (rc != 0)
3441                 GOTO(stop_trans, rc);
3442
3443         /* Set immutable flag, so any modification is disabled until
3444          * the migration is done. Once the migration is interrupted,
3445          * if the resume process find the migrating object has both
3446          * IMMUTALBE flag and MIGRATE EA, it need to clear IMMUTABLE
3447          * flag and approve the migration */
3448         la_flag->la_valid = LA_FLAGS;
3449         la_flag->la_flags = la->la_flags | LUSTRE_IMMUTABLE_FL;
3450         rc = mdo_attr_set(env, mdd_sobj, la_flag, handle,
3451                           mdd_object_capa(env, mdd_sobj));
3452 stop_trans:
3453         if (handle != NULL)
3454                 mdd_trans_stop(env, mdd, rc, handle);
3455 out_free:
3456         if (lmm_buf.lb_buf != NULL)
3457                 OBD_FREE(lmm_buf.lb_buf, lmm_buf.lb_len);
3458         RETURN(rc);
3459 }
3460
3461 static int mdd_migrate_entries(const struct lu_env *env,
3462                                struct mdd_object *mdd_sobj,
3463                                struct mdd_object *mdd_tobj)
3464 {
3465         struct dt_object        *next = mdd_object_child(mdd_sobj);
3466         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3467         struct dt_object        *dt_tobj = mdd_object_child(mdd_tobj);
3468         struct thandle          *handle;
3469         struct dt_it            *it;
3470         const struct dt_it_ops  *iops;
3471         int                      rc;
3472         int                      result;
3473         struct lu_dirent        *ent;
3474         ENTRY;
3475
3476         OBD_ALLOC(ent, NAME_MAX + sizeof(*ent) + 1);
3477         if (ent == NULL)
3478                 RETURN(-ENOMEM);
3479
3480         if (!dt_try_as_dir(env, next))
3481                 GOTO(out_ent, rc = -ENOTDIR);
3482         /*
3483          * iterate directories
3484          */
3485         iops = &next->do_index_ops->dio_it;
3486         it = iops->init(env, next, LUDA_FID | LUDA_TYPE,
3487                         mdd_object_capa(env, mdd_sobj));
3488         if (IS_ERR(it))
3489                 GOTO(out_ent, rc = PTR_ERR(it));
3490
3491         rc = iops->load(env, it, 0);
3492         if (rc == 0)
3493                 rc = iops->next(env, it);
3494         else if (rc > 0)
3495                 rc = 0;
3496         /*
3497          * At this point and across for-loop:
3498          *
3499          *  rc == 0 -> ok, proceed.
3500          *  rc >  0 -> end of directory.
3501          *  rc <  0 -> error.
3502          */
3503         do {
3504                 struct mdd_object       *child;
3505                 char                    *name = mdd_env_info(env)->mti_key;
3506                 int                     len;
3507                 int                     recsize;
3508                 int                     is_dir;
3509                 bool                    target_exist = false;
3510
3511                 len = iops->key_size(env, it);
3512                 if (len == 0)
3513                         goto next;
3514
3515                 result = iops->rec(env, it, (struct dt_rec *)ent,
3516                                    LUDA_FID | LUDA_TYPE);
3517                 if (result == -ESTALE)
3518                         goto next;
3519                 if (result != 0) {
3520                         rc = result;
3521                         goto out;
3522                 }
3523
3524                 fid_le_to_cpu(&ent->lde_fid, &ent->lde_fid);
3525                 recsize = le16_to_cpu(ent->lde_reclen);
3526
3527                 /* Insert new fid with target name into target dir */
3528                 if ((ent->lde_namelen == 1 && ent->lde_name[0] == '.') ||
3529                     (ent->lde_namelen == 2 && ent->lde_name[0] == '.' &&
3530                      ent->lde_name[1] == '.'))
3531                         goto next;
3532
3533                 child = mdd_object_find(env, mdd, &ent->lde_fid);
3534                 if (IS_ERR(child))
3535                         GOTO(out, rc = PTR_ERR(child));
3536
3537                 is_dir = S_ISDIR(mdd_object_type(child));
3538
3539                 snprintf(name, ent->lde_namelen + 1, "%s", ent->lde_name);
3540
3541                 /* Check whether the name has been inserted to the target */
3542                 if (dt_try_as_dir(env, dt_tobj)) {
3543                         struct lu_fid *fid = &mdd_env_info(env)->mti_fid2;
3544
3545                         rc = dt_lookup(env, dt_tobj, (struct dt_rec *)fid,
3546                                        (struct dt_key *)name,
3547                                        mdd_object_capa(env, mdd_tobj));
3548                         if (unlikely(rc == 0))
3549                                 target_exist = true;
3550                 }
3551
3552                 handle = mdd_trans_create(env, mdd);
3553                 if (IS_ERR(handle))
3554                         GOTO(out, rc = PTR_ERR(handle));
3555
3556                 /* Note: this transaction is part of migration, and it is not
3557                  * the last step of migration, so we set th_local = 1 to avoid
3558                  * updating last rcvd for this transaction */
3559                 handle->th_local = 1;
3560                 if (likely(!target_exist)) {
3561                         rc = mdo_declare_index_insert(env, mdd_tobj,
3562                                                       &ent->lde_fid,
3563                                                       mdd_object_type(child),
3564                                                       name, handle);
3565                         if (rc != 0)
3566                                 GOTO(out_put, rc);
3567
3568                         if (is_dir) {
3569                                 rc = mdo_declare_ref_add(env, mdd_tobj, handle);
3570                                 if (rc != 0)
3571                                         GOTO(out_put, rc);
3572                         }
3573                 }
3574
3575                 rc = mdo_declare_index_delete(env, mdd_sobj, name, handle);
3576                 if (rc != 0)
3577                         GOTO(out_put, rc);
3578
3579                 if (is_dir) {
3580                         rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3581                         if (rc != 0)
3582                                 GOTO(out_put, rc);
3583
3584                         /* Update .. for child */
3585                         rc = mdo_declare_index_delete(env, child, dotdot,
3586                                                       handle);
3587                         if (rc != 0)
3588                                 GOTO(out_put, rc);
3589
3590                         rc = mdo_declare_index_insert(env, child,
3591                                                       mdd_object_fid(mdd_tobj),
3592                                                       S_IFDIR, dotdot, handle);
3593                         if (rc != 0)
3594                                 GOTO(out_put, rc);
3595                 }
3596
3597                 rc = mdd_linkea_declare_update_child(env, mdd_tobj,
3598                                                      child, name,
3599                                                      strlen(name),
3600                                                      handle);
3601                 if (rc != 0)
3602                         GOTO(out_put, rc);
3603
3604                 rc = mdd_trans_start(env, mdd, handle);
3605                 if (rc != 0) {
3606                         CERROR("%s: transaction start failed: rc = %d\n",
3607                                mdd2obd_dev(mdd)->obd_name, rc);
3608                         GOTO(out_put, rc);
3609                 }
3610
3611                 if (likely(!target_exist)) {
3612                         rc = __mdd_index_insert(env, mdd_tobj, &ent->lde_fid,
3613                                                 mdd_object_type(child),
3614                                                 name, handle,
3615                                                 mdd_object_capa(env, mdd_tobj));
3616                         if (rc != 0)
3617                                 GOTO(out_put, rc);
3618
3619                         if (is_dir) {
3620                                 rc = mdo_ref_add(env, mdd_tobj, handle);
3621                                 if (rc != 0)
3622                                         GOTO(out_put, rc);
3623
3624                         }
3625                 }
3626
3627                 rc = __mdd_index_delete(env, mdd_sobj, name, is_dir, handle,
3628                                         mdd_object_capa(env, mdd_sobj));
3629                 if (rc != 0)
3630                         GOTO(out_put, rc);
3631
3632                 if (is_dir) {
3633                         rc = __mdd_index_delete_only(env, child, dotdot, handle,
3634                                                    mdd_object_capa(env, child));
3635                         if (rc != 0)
3636                                 GOTO(out_put, rc);
3637
3638                         rc = __mdd_index_insert_only(env, child,
3639                                          mdd_object_fid(mdd_tobj), S_IFDIR,
3640                                          dotdot, handle,
3641                                          mdd_object_capa(env, child));
3642                         if (rc != 0)
3643                                 GOTO(out_put, rc);
3644                 }
3645
3646                 rc = mdd_linkea_update_child(env, mdd_tobj, child, name,
3647                                              strlen(name), handle);
3648
3649 out_put:
3650                 mdd_object_put(env, child);
3651                 mdd_trans_stop(env, mdd, rc, handle);
3652                 if (rc != 0)
3653                         GOTO(out, rc);
3654 next:
3655                 result = iops->next(env, it);
3656                 if (OBD_FAIL_CHECK(OBD_FAIL_MIGRATE_ENTRIES))
3657                         GOTO(out, rc = -EINTR);
3658
3659                 if (result == -ESTALE)
3660                         goto next;
3661         } while (result == 0);
3662 out:
3663         iops->put(env, it);
3664         iops->fini(env, it);
3665 out_ent:
3666         OBD_FREE(ent, NAME_MAX + sizeof(*ent) + 1);
3667         RETURN(rc);
3668 }
3669
3670 static int mdd_declare_update_linkea(const struct lu_env *env,
3671                                      struct mdd_object *mdd_pobj,
3672                                      struct mdd_object *mdd_sobj,
3673                                      struct mdd_object *mdd_tobj,
3674                                      struct thandle *handle,
3675                                      const struct lu_name *child_name)
3676 {
3677         return mdd_update_linkea_internal(env, mdd_pobj, mdd_sobj, mdd_tobj,
3678                                           child_name, handle, 1);
3679 }
3680
3681 static int mdd_update_linkea(const struct lu_env *env,
3682                              struct mdd_object *mdd_pobj,
3683                              struct mdd_object *mdd_sobj,
3684                              struct mdd_object *mdd_tobj,
3685                              struct thandle *handle,
3686                              const struct lu_name *child_name)
3687 {
3688         return mdd_update_linkea_internal(env, mdd_pobj, mdd_sobj, mdd_tobj,
3689                                           child_name, handle, 0);
3690 }
3691
3692 static int mdd_declare_migrate_update_name(const struct lu_env *env,
3693                                            struct mdd_object *mdd_pobj,
3694                                            struct mdd_object *mdd_sobj,
3695                                            struct mdd_object *mdd_tobj,
3696                                            const struct lu_name *lname,
3697                                            struct lu_attr *la,
3698                                            struct lu_attr *parent_la,
3699                                            struct thandle *handle)
3700 {
3701         struct lu_attr  *la_flag = MDD_ENV_VAR(env, tattr);
3702         int             rc;
3703
3704         /* Revert IMMUTABLE flag */
3705         la_flag->la_valid = LA_FLAGS;
3706         la_flag->la_flags = la->la_flags & ~LUSTRE_IMMUTABLE_FL;
3707         rc = mdo_declare_attr_set(env, mdd_sobj, la_flag, handle);
3708         if (rc != 0)
3709                 return rc;
3710
3711         /* delete entry from source dir */
3712         rc = mdo_declare_index_delete(env, mdd_pobj, lname->ln_name, handle);
3713         if (rc != 0)
3714                 return rc;
3715
3716         rc = mdd_declare_update_linkea(env, mdd_pobj, mdd_sobj,
3717                                        mdd_tobj, handle, lname);
3718         if (rc != 0)
3719                 return rc;
3720
3721         if (S_ISREG(mdd_object_type(mdd_sobj))) {
3722                 rc = mdo_declare_xattr_del(env, mdd_sobj, XATTR_NAME_LOV,
3723                                            handle);
3724                 if (rc != 0)
3725                         return rc;
3726         }
3727
3728         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
3729                 rc = mdo_declare_ref_del(env, mdd_pobj, handle);
3730                 if (rc != 0)
3731                         return rc;
3732         }
3733
3734         /* new name */
3735         rc = mdo_declare_index_insert(env, mdd_pobj, mdo2fid(mdd_tobj),
3736                                       mdd_object_type(mdd_tobj),
3737                                       lname->ln_name, handle);
3738         if (rc != 0)
3739                 return rc;
3740
3741         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
3742                 rc = mdo_declare_ref_add(env, mdd_pobj, handle);
3743                 if (rc != 0)
3744                         return rc;
3745         }
3746
3747         /* delete old object */
3748         rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3749         if (rc != 0)
3750                 return rc;
3751
3752         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
3753                 /* delete old object */
3754                 rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3755                 if (rc != 0)
3756                         return rc;
3757                 /* set nlink to 0 */
3758                 rc = mdo_declare_attr_set(env, mdd_sobj, la, handle);
3759                 if (rc != 0)
3760                         return rc;
3761         }
3762
3763         rc = mdd_declare_finish_unlink(env, mdd_sobj, handle);
3764         if (rc)
3765                 return rc;
3766
3767         rc = mdo_declare_attr_set(env, mdd_pobj, parent_la, handle);
3768
3769         return rc;
3770 }
3771
3772 static int mdd_migrate_update_name(const struct lu_env *env,
3773                                    struct mdd_object *mdd_pobj,
3774                                    struct mdd_object *mdd_sobj,
3775                                    struct mdd_object *mdd_tobj,
3776                                    const struct lu_name *lname,
3777                                    struct md_attr *ma)
3778 {
3779         struct lu_attr          *p_la = MDD_ENV_VAR(env, la_for_fix);
3780         struct lu_attr          *so_attr = MDD_ENV_VAR(env, cattr);
3781         struct lu_attr          *la_flag = MDD_ENV_VAR(env, tattr);
3782         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3783         struct thandle          *handle;
3784         int                     is_dir = S_ISDIR(mdd_object_type(mdd_sobj));
3785         const char              *name = lname->ln_name;
3786         int                     rc;
3787         ENTRY;
3788
3789         /* update time for parent */
3790         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
3791         p_la->la_ctime = p_la->la_mtime = ma->ma_attr.la_ctime;
3792         p_la->la_valid = LA_CTIME;
3793
3794         rc = mdd_la_get(env, mdd_sobj, so_attr, mdd_object_capa(env, mdd_sobj));
3795         if (rc != 0)
3796                 RETURN(rc);
3797
3798         handle = mdd_trans_create(env, mdd);
3799         if (IS_ERR(handle))
3800                 RETURN(PTR_ERR(handle));
3801
3802         rc = mdd_declare_migrate_update_name(env, mdd_pobj, mdd_sobj, mdd_tobj,
3803                                              lname, so_attr, p_la, handle);
3804         if (rc != 0) {
3805                 /* If the migration can not be fit in one transaction, just
3806                  * leave it in the original MDT */
3807                 if (rc == -E2BIG)
3808                         GOTO(stop_trans, rc = 0);
3809                 else
3810                         GOTO(stop_trans, rc);
3811         }
3812
3813         CDEBUG(D_INFO, "%s: update "DFID"/"DFID" with %s:"DFID"\n",
3814                mdd2obd_dev(mdd)->obd_name, PFID(mdd_object_fid(mdd_pobj)),
3815                PFID(mdd_object_fid(mdd_sobj)), lname->ln_name,
3816                PFID(mdd_object_fid(mdd_tobj)));
3817
3818         rc = mdd_trans_start(env, mdd, handle);
3819         if (rc != 0)
3820                 GOTO(stop_trans, rc);
3821
3822         /* Revert IMMUTABLE flag */
3823         la_flag->la_valid = LA_FLAGS;
3824         la_flag->la_flags = so_attr->la_flags & ~LUSTRE_IMMUTABLE_FL;
3825         rc = mdo_attr_set(env, mdd_sobj, la_flag, handle,
3826                           mdd_object_capa(env, mdd_pobj));
3827         if (rc != 0)
3828                 GOTO(stop_trans, rc);
3829
3830         /* Remove source name from source directory */
3831         rc = __mdd_index_delete(env, mdd_pobj, name, is_dir, handle,
3832                                 mdd_object_capa(env, mdd_pobj));
3833         if (rc != 0)
3834                 GOTO(stop_trans, rc);
3835
3836         rc = mdd_update_linkea(env, mdd_pobj, mdd_sobj, mdd_tobj,
3837                                handle, lname);
3838         if (rc != 0)
3839                 GOTO(stop_trans, rc);
3840
3841         if (S_ISREG(so_attr->la_mode)) {
3842                 if (so_attr->la_nlink == 1) {
3843                         rc = mdo_xattr_del(env, mdd_sobj, XATTR_NAME_LOV,
3844                                            handle,
3845                                            mdd_object_capa(env, mdd_sobj));
3846                         if (rc != 0 && rc != -ENODATA)
3847                                 GOTO(stop_trans, rc);
3848                 }
3849         }
3850
3851         /* Insert new fid with target name into target dir */
3852         rc = __mdd_index_insert(env, mdd_pobj, mdd_object_fid(mdd_tobj),
3853                                 mdd_object_type(mdd_tobj), name,
3854                                 handle, mdd_object_capa(env, mdd_pobj));
3855         if (rc != 0)
3856                 GOTO(stop_trans, rc);
3857
3858         rc = mdd_links_add(env, mdd_tobj, mdo2fid(mdd_pobj), lname, handle,
3859                            NULL, 1);
3860         if (rc != 0)
3861                 GOTO(stop_trans, rc);
3862
3863         mdd_write_lock(env, mdd_sobj, MOR_SRC_CHILD);
3864         mdo_ref_del(env, mdd_sobj, handle);
3865         if (is_dir)
3866                 mdo_ref_del(env, mdd_sobj, handle);
3867
3868         /* Get the attr again after ref_del */
3869         rc = mdd_la_get(env, mdd_sobj, so_attr,
3870                         mdd_object_capa(env, mdd_sobj));
3871         if (rc != 0)
3872                 GOTO(out_unlock, rc);
3873
3874         ma->ma_attr = *so_attr;
3875         ma->ma_valid |= MA_INODE;
3876         rc = mdd_finish_unlink(env, mdd_sobj, ma, mdd_pobj, lname, handle);
3877         if (rc != 0)
3878                 GOTO(out_unlock, rc);
3879
3880         rc = mdd_attr_set_internal(env, mdd_pobj, p_la, handle, 0);
3881         if (rc != 0)
3882                 GOTO(out_unlock, rc);
3883
3884 out_unlock:
3885         mdd_write_unlock(env, mdd_sobj);
3886
3887 stop_trans:
3888         mdd_trans_stop(env, mdd, rc, handle);
3889
3890         RETURN(rc);
3891 }
3892
3893 /**
3894  * Check whether we should migrate the file/dir
3895  * return val
3896  *      < 0  permission check failed or other error.
3897  *      = 0  the file can be migrated.
3898  *      > 0  the file does not need to be migrated, mostly
3899  *           for multiple link file
3900  **/
3901 static int mdd_migrate_sanity_check(const struct lu_env *env,
3902                                     struct mdd_object *pobj,
3903                                     const struct lu_attr *pattr,
3904                                     struct mdd_object *sobj,
3905                                     struct lu_attr *sattr)
3906 {
3907         struct mdd_thread_info  *info = mdd_env_info(env);
3908         struct linkea_data      *ldata = &info->mti_link_data;
3909         int                     mgr_easize;
3910         struct lu_buf           *mgr_buf;
3911         int                     count;
3912         int                     rc;
3913
3914         ENTRY;
3915
3916         mgr_easize = lmv_mds_md_size(2, LMV_MAGIC_V1);
3917         mgr_buf = lu_buf_check_and_alloc(&info->mti_big_buf, mgr_easize);
3918         if (mgr_buf->lb_buf == NULL)
3919                 RETURN(-ENOMEM);
3920
3921         rc = mdo_xattr_get(env, sobj, mgr_buf, XATTR_NAME_LMV,
3922                            mdd_object_capa(env, sobj));
3923         if (rc > 0) {
3924                 union lmv_mds_md *lmm = mgr_buf->lb_buf;
3925
3926                 /* If the object has migrateEA, it means IMMUTE flag
3927                  * is being set by previous migration process, so it
3928                  * needs to override the IMMUTE flag, otherwise the
3929                  * following sanity check will fail */
3930                 if (le32_to_cpu(lmm->lmv_md_v1.lmv_hash_type) &
3931                                                 LMV_HASH_FLAG_MIGRATION) {
3932                         struct mdd_device *mdd = mdo2mdd(&sobj->mod_obj);
3933
3934                         sattr->la_flags &= ~LUSTRE_IMMUTABLE_FL;
3935                         CDEBUG(D_HA, "%s: "DFID" override IMMUTE FLAG\n",
3936                                mdd2obd_dev(mdd)->obd_name,
3937                                PFID(mdd_object_fid(sobj)));
3938                 }
3939         }
3940
3941         rc = mdd_rename_sanity_check(env, pobj, pattr, pobj, pattr,
3942                                      sobj, sattr, NULL, NULL);
3943         if (rc != 0)
3944                 RETURN(rc);
3945
3946         /* Then it will check if the file should be migrated. If the file
3947          * has mulitple links, we only need migrate the file if all of its
3948          * entries has been migrated to the remote MDT */
3949         if (!S_ISREG(sattr->la_mode) || sattr->la_nlink < 2)
3950                 RETURN(0);
3951
3952         rc = mdd_links_read(env, sobj, ldata);
3953         if (rc != 0) {
3954                 /* For multiple links files, if there are no linkEA data at all,
3955                  * means the file might be created before linkEA is enabled, and
3956                  * all all of its links should not be migrated yet, otherwise
3957                  * it should have some linkEA there */
3958                 if (rc == -ENOENT || rc == -ENODATA)
3959                         RETURN(1);
3960                 RETURN(rc);
3961         }
3962
3963         /* If it is mulitple links file, we need update the name entry for
3964          * all parent */
3965         LASSERT(ldata->ld_leh != NULL);
3966         ldata->ld_lee = (struct link_ea_entry *)(ldata->ld_leh + 1);
3967         for (count = 0; count < ldata->ld_leh->leh_reccount; count++) {
3968                 struct mdd_device       *mdd = mdo2mdd(&sobj->mod_obj);
3969                 struct mdd_object       *lpobj;
3970                 struct lu_name          lname;
3971                 struct lu_fid           fid;
3972
3973                 linkea_entry_unpack(ldata->ld_lee, &ldata->ld_reclen,
3974                                     &lname, &fid);
3975                 ldata->ld_lee = (struct link_ea_entry *)((char *)ldata->ld_lee +
3976                                                          ldata->ld_reclen);
3977                 lpobj = mdd_object_find(env, mdd, &fid);
3978                 if (IS_ERR(lpobj)) {
3979                         CWARN("%s: cannot find obj "DFID": rc = %ld\n",
3980                               mdd2obd_dev(mdd)->obd_name, PFID(&fid),
3981                               PTR_ERR(lpobj));
3982                         continue;
3983                 }
3984
3985                 if (!mdd_object_exists(lpobj) || mdd_object_remote(lpobj)) {
3986                         CDEBUG(D_INFO, DFID"%.*s: is on remote MDT.\n",
3987                                PFID(&fid), lname.ln_namelen, lname.ln_name);
3988                         mdd_object_put(env, lpobj);
3989                         continue;
3990                 }
3991
3992                 CDEBUG(D_INFO, DFID"still has local entry %.*s "DFID"\n",
3993                        PFID(mdd_object_fid(sobj)), lname.ln_namelen,
3994                        lname.ln_name, PFID(&fid));
3995                 mdd_object_put(env, lpobj);
3996                 rc = 1;
3997                 break;
3998         }
3999
4000         RETURN(rc);
4001 }
4002
4003 static int mdd_migrate(const struct lu_env *env, struct md_object *pobj,
4004                        struct md_object *sobj, const struct lu_name *lname,
4005                        struct md_object *tobj, struct md_attr *ma)
4006 {
4007         struct mdd_object       *mdd_pobj = md2mdd_obj(pobj);
4008         struct mdd_device       *mdd = mdo2mdd(pobj);
4009         struct mdd_object       *mdd_sobj = md2mdd_obj(sobj);
4010         struct mdd_object       *mdd_tobj = NULL;
4011         struct lu_attr          *so_attr = MDD_ENV_VAR(env, cattr);
4012         struct lu_attr          *pattr = MDD_ENV_VAR(env, pattr);
4013         int                     rc;
4014
4015         ENTRY;
4016         /* If the file will being migrated, it will check whether
4017          * the file is being opened by someone else right now */
4018         mdd_read_lock(env, mdd_sobj, MOR_SRC_CHILD);
4019         if (mdd_sobj->mod_count >= 1) {
4020                 CERROR("%s: "DFID"%s is already opened count %d: rc = %d\n",
4021                        mdd2obd_dev(mdd)->obd_name,
4022                        PFID(mdd_object_fid(mdd_sobj)), lname->ln_name,
4023                        mdd_sobj->mod_count, -EBUSY);
4024                 mdd_read_unlock(env, mdd_sobj);
4025                 GOTO(put, rc = -EBUSY);
4026         }
4027         mdd_read_unlock(env, mdd_sobj);
4028
4029         rc = mdd_la_get(env, mdd_sobj, so_attr, mdd_object_capa(env, mdd_sobj));
4030         if (rc != 0)
4031                 GOTO(put, rc);
4032
4033         rc = mdd_la_get(env, mdd_pobj, pattr, BYPASS_CAPA);
4034         if (rc != 0)
4035                 GOTO(put, rc);
4036
4037         rc = mdd_migrate_sanity_check(env, mdd_pobj, pattr, mdd_sobj, so_attr);
4038         if (rc != 0) {
4039                 if (rc > 0)
4040                         rc = 0;
4041                 GOTO(put, rc);
4042         }
4043
4044         /* Sigh, it is impossible to finish all of migration in a single
4045          * transaction, for example migrating big directory entries to the
4046          * new MDT, it needs insert all of name entries of children in the
4047          * new directory.
4048          *
4049          * So migration will be done in multiple steps and transactions.
4050          *
4051          * 1. create an orphan object on the remote MDT in one transaction.
4052          * 2. migrate extend attributes to the new target file/directory.
4053          * 3. For directory, migrate the entries to the new MDT and update
4054          * linkEA of each children. Because we can not migrate all entries
4055          * in a single transaction, so the migrating directory will become
4056          * a striped directory during migration, so once the process is
4057          * interrupted, the directory is still accessible. (During lookup,
4058          * client will locate the name by searching both original and target
4059          * object).
4060          * 4. Finally, update the name/FID to point to the new file/directory
4061          * in a separate transaction.
4062          */
4063
4064         /* step 1: Check whether the orphan object has been created, and create
4065          * orphan object on the remote MDT if needed */
4066         mdd_tobj = md2mdd_obj(tobj);
4067         if (!mdd_object_exists(mdd_tobj)) {
4068                 rc = mdd_migrate_create(env, mdd_pobj, mdd_sobj, mdd_tobj,
4069                                         so_attr);
4070                 if (rc != 0)
4071                         GOTO(put, rc);
4072         }
4073
4074         /* step 2: migrate xattr */
4075         rc = mdd_migrate_xattrs(env, mdd_sobj, mdd_tobj);
4076         if (rc != 0)
4077                 GOTO(put, rc);
4078
4079         /* step 3: migrate name entries to the orphan object */
4080         if (S_ISDIR(lu_object_attr(&mdd_sobj->mod_obj.mo_lu))) {
4081                 rc = mdd_migrate_entries(env, mdd_sobj, mdd_tobj);
4082                 if (rc != 0)
4083                         GOTO(put, rc);
4084                 if (unlikely(OBD_FAIL_CHECK_RESET(OBD_FAIL_MIGRATE_NET_REP,
4085                                                   OBD_FAIL_MDS_REINT_NET_REP)))
4086                         GOTO(put, rc = 0);
4087         }
4088
4089         /* step 4: update name entry to the new object */
4090         rc = mdd_migrate_update_name(env, mdd_pobj, mdd_sobj, mdd_tobj, lname,
4091                                      ma);
4092         if (rc != 0)
4093                 GOTO(put, rc);
4094 put:
4095         RETURN(rc);
4096 }
4097
4098 const struct md_dir_operations mdd_dir_ops = {
4099         .mdo_is_subdir     = mdd_is_subdir,
4100         .mdo_lookup        = mdd_lookup,
4101         .mdo_create        = mdd_create,
4102         .mdo_rename        = mdd_rename,
4103         .mdo_link          = mdd_link,
4104         .mdo_unlink        = mdd_unlink,
4105         .mdo_create_data   = mdd_create_data,
4106         .mdo_migrate       = mdd_migrate,
4107 };