lustre/mdd/mdd_dir.c

   1 /*
   2  * GPL HEADER START
   3  *
   4  * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
   5  *
   6  * This program is free software; you can redistribute it and/or modify
   7  * it under the terms of the GNU General Public License version 2 only,
   8  * as published by the Free Software Foundation.
   9  *
  10  * This program is distributed in the hope that it will be useful, but
  11  * WITHOUT ANY WARRANTY; without even the implied warranty of
  12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13  * General Public License version 2 for more details (a copy is included
  14  * in the LICENSE file that accompanied this code).
  15  *
  16  * You should have received a copy of the GNU General Public License
  17  * version 2 along with this program; If not, see
  18  * http://www.sun.com/software/products/lustre/docs/GPLv2.pdf
  19  *
  20  * Please contact Sun Microsystems, Inc., 4150 Network Circle, Santa Clara,
  21  * CA 95054 USA or visit www.sun.com if you need additional information or
  22  * have any questions.
  23  *
  24  * GPL HEADER END
  25  */
  26 /*
  27  * Copyright (c) 2007, 2010, Oracle and/or its affiliates. All rights reserved.
  28  * Use is subject to license terms.
  29  *
  30  * Copyright (c) 2011, 2013, Intel Corporation.
  31  */
  32 /*
  33  * This file is part of Lustre, http://www.lustre.org/
  34  * Lustre is a trademark of Sun Microsystems, Inc.
  35  *
  36  * lustre/mdd/mdd_dir.c
  37  *
  38  * Lustre Metadata Server (mdd) routines
  39  *
  40  * Author: Wang Di <wangdi@intel.com>
  41  */
  42
  43 #define DEBUG_SUBSYSTEM S_MDS
  44
  45 #include <obd_class.h>
  46 #include <obd_support.h>
  47 #include <lustre_mds.h>
  48 #include <lustre_fid.h>
  49
  50 #include "mdd_internal.h"
  51
  52 static const char dot[] = ".";
  53 static const char dotdot[] = "..";
  54
  55 static struct lu_name lname_dotdot = {
  56         (char *) dotdot,
  57         sizeof(dotdot) - 1
  58 };
  59
  60 static inline int
  61 mdd_name_check(struct mdd_device *m, const struct lu_name *ln)
  62 {
  63         if (!lu_name_is_valid(ln))
  64                 return -EINVAL;
  65         else if (ln->ln_namelen > m->mdd_dt_conf.ddp_max_name_len)
  66                 return -ENAMETOOLONG;
  67         else
  68                 return 0;
  69 }
  70
  71 /* Get FID from name and parent */
  72 static int
  73 __mdd_lookup(const struct lu_env *env, struct md_object *pobj,
  74              const struct lu_attr *pattr, const struct lu_name *lname,
  75              struct lu_fid* fid, int mask)
  76 {
  77         const char *name                = lname->ln_name;
  78         const struct dt_key *key        = (const struct dt_key *)name;
  79         struct mdd_object *mdd_obj      = md2mdd_obj(pobj);
  80         struct mdd_device *m            = mdo2mdd(pobj);
  81         struct dt_object *dir           = mdd_object_child(mdd_obj);
  82         int rc;
  83         ENTRY;
  84
  85         if (unlikely(mdd_is_dead_obj(mdd_obj)))
  86                 RETURN(-ESTALE);
  87
  88         if (mdd_object_remote(mdd_obj)) {
  89                 CDEBUG(D_INFO, "%s: Object "DFID" locates on remote server\n",
  90                        mdd2obd_dev(m)->obd_name, PFID(mdo2fid(mdd_obj)));
  91         } else if (!mdd_object_exists(mdd_obj)) {
  92                 RETURN(-ESTALE);
  93         }
  94
  95         rc = mdd_permission_internal_locked(env, mdd_obj, pattr, mask,
  96                                             MOR_TGT_PARENT);
  97         if (rc)
  98                 RETURN(rc);
  99
 100         if (likely(S_ISDIR(mdd_object_type(mdd_obj)) &&
 101                    dt_try_as_dir(env, dir)))
 102                 rc = dt_lookup(env, dir, (struct dt_rec *)fid, key,
 103                                mdd_object_capa(env, mdd_obj));
 104         else
 105                 rc = -ENOTDIR;
 106
 107         RETURN(rc);
 108 }
 109
 110 int mdd_lookup(const struct lu_env *env,
 111                struct md_object *pobj, const struct lu_name *lname,
 112                struct lu_fid *fid, struct md_op_spec *spec)
 113 {
 114         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
 115         int rc;
 116         ENTRY;
 117
 118         rc = mdd_la_get(env, md2mdd_obj(pobj), pattr, BYPASS_CAPA);
 119         if (rc != 0)
 120                 RETURN(rc);
 121
 122         rc = __mdd_lookup(env, pobj, pattr, lname, fid, MAY_EXEC);
 123         RETURN(rc);
 124 }
 125
 126 static inline int mdd_parent_fid(const struct lu_env *env,
 127                                  struct mdd_object *obj,
 128                                  const struct lu_attr *attr,
 129                                  struct lu_fid *fid)
 130 {
 131         return __mdd_lookup(env, &obj->mod_obj, attr, &lname_dotdot, fid, 0);
 132 }
 133
 134 /*
 135  * For root fid use special function, which does not compare version component
 136  * of fid. Version component is different for root fids on all MDTs.
 137  */
 138 int mdd_is_root(struct mdd_device *mdd, const struct lu_fid *fid)
 139 {
 140         return fid_seq(&mdd->mdd_root_fid) == fid_seq(fid) &&
 141                 fid_oid(&mdd->mdd_root_fid) == fid_oid(fid);
 142 }
 143
 144 /*
 145  * return 1: if lf is the fid of the ancestor of p1;
 146  * return 0: if not;
 147  *
 148  * return -EREMOTE: if remote object is found, in this
 149  * case fid of remote object is saved to @pf;
 150  *
 151  * otherwise: values < 0, errors.
 152  */
 153 static int mdd_is_parent(const struct lu_env *env,
 154                         struct mdd_device *mdd,
 155                         struct mdd_object *p1,
 156                         const struct lu_attr *attr,
 157                         const struct lu_fid *lf,
 158                         struct lu_fid *pf)
 159 {
 160         struct mdd_object *parent = NULL;
 161         struct lu_fid *pfid;
 162         int rc;
 163         ENTRY;
 164
 165         LASSERT(!lu_fid_eq(mdo2fid(p1), lf));
 166         pfid = &mdd_env_info(env)->mti_fid;
 167
 168         /* Check for root first. */
 169         if (mdd_is_root(mdd, mdo2fid(p1)))
 170                 RETURN(0);
 171
 172         for(;;) {
 173                 /* this is done recursively, bypass capa for each obj */
 174                 mdd_set_capainfo(env, 4, p1, BYPASS_CAPA);
 175                 rc = mdd_parent_fid(env, p1, attr, pfid);
 176                 if (rc)
 177                         GOTO(out, rc);
 178                 if (mdd_is_root(mdd, pfid))
 179                         GOTO(out, rc = 0);
 180                 if (lu_fid_eq(pfid, &mdd->mdd_local_root_fid))
 181                         GOTO(out, rc = 0);
 182                 if (lu_fid_eq(pfid, lf))
 183                         GOTO(out, rc = 1);
 184                 if (parent)
 185                         mdd_object_put(env, parent);
 186
 187                 parent = mdd_object_find(env, mdd, pfid);
 188                 if (IS_ERR(parent)) {
 189                         GOTO(out, rc = PTR_ERR(parent));
 190                 } else if (mdd_object_remote(parent)) {
 191                         /*FIXME: Because of the restriction of rename in Phase I.
 192                          * If the parent is remote, we just assumed lf is not the
 193                          * parent of P1 for now */
 194                         GOTO(out, rc = 0);
 195                 }
 196                 p1 = parent;
 197         }
 198         EXIT;
 199 out:
 200         if (parent && !IS_ERR(parent))
 201                 mdd_object_put(env, parent);
 202         return rc;
 203 }
 204
 205 /*
 206  * No permission check is needed.
 207  *
 208  * returns 1: if fid is ancestor of @mo;
 209  * returns 0: if fid is not a ancestor of @mo;
 210  *
 211  * returns EREMOTE if remote object is found, fid of remote object is saved to
 212  * @fid;
 213  *
 214  * returns < 0: if error
 215  */
 216 int mdd_is_subdir(const struct lu_env *env, struct md_object *mo,
 217                   const struct lu_fid *fid, struct lu_fid *sfid)
 218 {
 219         struct mdd_device *mdd = mdo2mdd(mo);
 220         struct lu_attr *attr = MDD_ENV_VAR(env, cattr);
 221         int rc;
 222         ENTRY;
 223
 224         if (!S_ISDIR(mdd_object_type(md2mdd_obj(mo))))
 225                 RETURN(0);
 226
 227         rc = mdd_la_get(env, md2mdd_obj(mo), attr, BYPASS_CAPA);
 228         if (rc != 0)
 229                 RETURN(rc);
 230
 231         rc = mdd_is_parent(env, mdd, md2mdd_obj(mo), attr, fid, sfid);
 232         if (rc == 0) {
 233                 /* found root */
 234                 fid_zero(sfid);
 235         } else if (rc == 1) {
 236                 /* found @fid is parent */
 237                 *sfid = *fid;
 238                 rc = 0;
 239         }
 240         RETURN(rc);
 241 }
 242
 243 /*
 244  * Check that @dir contains no entries except (possibly) dot and dotdot.
 245  *
 246  * Returns:
 247  *
 248  *             0        empty
 249  *      -ENOTDIR        not a directory object
 250  *    -ENOTEMPTY        not empty
 251  *           -ve        other error
 252  *
 253  */
 254 static int mdd_dir_is_empty(const struct lu_env *env,
 255                             struct mdd_object *dir)
 256 {
 257         struct dt_it     *it;
 258         struct dt_object *obj;
 259         const struct dt_it_ops *iops;
 260         int result;
 261         ENTRY;
 262
 263         obj = mdd_object_child(dir);
 264         if (!dt_try_as_dir(env, obj))
 265                 RETURN(-ENOTDIR);
 266
 267         iops = &obj->do_index_ops->dio_it;
 268         it = iops->init(env, obj, LUDA_64BITHASH, BYPASS_CAPA);
 269         if (!IS_ERR(it)) {
 270                 result = iops->get(env, it, (const struct dt_key *)"");
 271                 if (result > 0) {
 272                         int i;
 273                         for (result = 0, i = 0; result == 0 && i < 3; ++i)
 274                                 result = iops->next(env, it);
 275                         if (result == 0)
 276                                 result = -ENOTEMPTY;
 277                         else if (result == 1)
 278                                 result = 0;
 279                 } else if (result == 0)
 280                         /*
 281                          * Huh? Index contains no zero key?
 282                          */
 283                         result = -EIO;
 284
 285                 iops->put(env, it);
 286                 iops->fini(env, it);
 287         } else
 288                 result = PTR_ERR(it);
 289         RETURN(result);
 290 }
 291
 292 /**
 293  * Determine if the target object can be hard linked, and right now it only
 294  * checks if the link count reach the maximum limit. Note: for ldiskfs, the
 295  * directory nlink count might exceed the maximum link count(see
 296  * osd_object_ref_add), so it only check nlink for non-directories.
 297  *
 298  * \param[in] env       thread environment
 299  * \param[in] obj       object being linked to
 300  * \param[in] la        attributes of \a obj
 301  *
 302  * \retval              0 if \a obj can be hard linked
 303  * \retval              negative error if \a obj is a directory or has too
 304  *                      many links
 305  */
 306 static int __mdd_may_link(const struct lu_env *env, struct mdd_object *obj,
 307                           const struct lu_attr *la)
 308 {
 309         struct mdd_device *m = mdd_obj2mdd_dev(obj);
 310         ENTRY;
 311
 312         LASSERT(la != NULL);
 313
 314         /* Subdir count limitation can be broken through
 315          * (see osd_object_ref_add), so only check non-directory here. */
 316         if (!S_ISDIR(la->la_mode) &&
 317             la->la_nlink >= m->mdd_dt_conf.ddp_max_nlink)
 318                 RETURN(-EMLINK);
 319
 320         RETURN(0);
 321 }
 322
 323 /**
 324  * Check whether it may create the cobj under the pobj.
 325  *
 326  * \param[in] env       execution environment
 327  * \param[in] pobj      the parent directory
 328  * \param[in] pattr     the attribute of the parent directory
 329  * \param[in] cobj      the child to be created
 330  * \param[in] check_perm        if check WRITE|EXEC permission for parent
 331  *
 332  * \retval              = 0 create the child under this dir is allowed
 333  * \retval              negative errno create the child under this dir is
 334  *                      not allowed
 335  */
 336 int mdd_may_create(const struct lu_env *env, struct mdd_object *pobj,
 337                    const struct lu_attr *pattr, struct mdd_object *cobj,
 338                    bool check_perm)
 339 {
 340         struct mdd_thread_info *info = mdd_env_info(env);
 341         struct lu_buf   *xbuf;
 342         int rc = 0;
 343         ENTRY;
 344
 345         if (cobj && mdd_object_exists(cobj))
 346                 RETURN(-EEXIST);
 347
 348         if (mdd_is_dead_obj(pobj))
 349                 RETURN(-ENOENT);
 350
 351         /* If the parent is a sub-stripe, check whether it is dead */
 352         xbuf = mdd_buf_get(env, info->mti_key, sizeof(info->mti_key));
 353         rc = mdo_xattr_get(env, pobj, xbuf, XATTR_NAME_LMV,
 354                            mdd_object_capa(env, pobj));
 355         if (unlikely(rc > 0)) {
 356                 struct lmv_mds_md_v1  *lmv1 = xbuf->lb_buf;
 357
 358                 if (le32_to_cpu(lmv1->lmv_magic) == LMV_MAGIC_STRIPE &&
 359                     le32_to_cpu(lmv1->lmv_hash_type) & LMV_HASH_FLAG_DEAD)
 360                         RETURN(-ESTALE);
 361         }
 362         rc = 0;
 363
 364         if (check_perm)
 365                 rc = mdd_permission_internal_locked(env, pobj, pattr,
 366                                                     MAY_WRITE | MAY_EXEC,
 367                                                     MOR_TGT_PARENT);
 368         RETURN(rc);
 369 }
 370
 371 /*
 372  * Check whether can unlink from the pobj in the case of "cobj == NULL".
 373  */
 374 int mdd_may_unlink(const struct lu_env *env, struct mdd_object *pobj,
 375                    const struct lu_attr *pattr, const struct lu_attr *attr)
 376 {
 377         int rc;
 378         ENTRY;
 379
 380         if (mdd_is_dead_obj(pobj))
 381                 RETURN(-ENOENT);
 382
 383         if (attr->la_flags & (LUSTRE_APPEND_FL | LUSTRE_IMMUTABLE_FL))
 384                 RETURN(-EPERM);
 385
 386         rc = mdd_permission_internal_locked(env, pobj, pattr,
 387                                             MAY_WRITE | MAY_EXEC,
 388                                             MOR_TGT_PARENT);
 389         if (rc != 0)
 390                 RETURN(rc);
 391
 392         if (pattr->la_flags & LUSTRE_APPEND_FL)
 393                 RETURN(-EPERM);
 394
 395         RETURN(rc);
 396 }
 397
 398 /*
 399  * pobj == NULL is remote ops case, under such case, pobj's
 400  * VTX feature has been checked already, no need check again.
 401  */
 402 static inline int mdd_is_sticky(const struct lu_env *env,
 403                                 struct mdd_object *pobj,
 404                                 const struct lu_attr *pattr,
 405                                 struct mdd_object *cobj,
 406                                 const struct lu_attr *cattr)
 407 {
 408         struct lu_ucred *uc = lu_ucred_assert(env);
 409
 410         if (pobj != NULL) {
 411                 LASSERT(pattr != NULL);
 412                 if (!(pattr->la_mode & S_ISVTX) ||
 413                     (pattr->la_uid == uc->uc_fsuid))
 414                         return 0;
 415         }
 416
 417         LASSERT(cattr != NULL);
 418         if (cattr->la_uid == uc->uc_fsuid)
 419                 return 0;
 420
 421         return !md_capable(uc, CFS_CAP_FOWNER);
 422 }
 423
 424 static int mdd_may_delete_entry(const struct lu_env *env,
 425                                 struct mdd_object *pobj,
 426                                 const struct lu_attr *pattr,
 427                                 int check_perm)
 428 {
 429         ENTRY;
 430
 431         LASSERT(pobj != NULL);
 432         if (!mdd_object_exists(pobj))
 433                 RETURN(-ENOENT);
 434
 435         if (mdd_is_dead_obj(pobj))
 436                 RETURN(-ENOENT);
 437
 438         if (check_perm) {
 439                 int rc;
 440                 rc = mdd_permission_internal_locked(env, pobj, pattr,
 441                                             MAY_WRITE | MAY_EXEC,
 442                                             MOR_TGT_PARENT);
 443                 if (rc)
 444                         RETURN(rc);
 445         }
 446
 447         if (pattr->la_flags & LUSTRE_APPEND_FL)
 448                 RETURN(-EPERM);
 449
 450         RETURN(0);
 451 }
 452
 453 /*
 454  * Check whether it may delete the cobj from the pobj.
 455  * pobj maybe NULL
 456  */
 457 int mdd_may_delete(const struct lu_env *env, struct mdd_object *tpobj,
 458                    const struct lu_attr *tpattr, struct mdd_object *tobj,
 459                    const struct lu_attr *tattr, const struct lu_attr *cattr,
 460                    int check_perm, int check_empty)
 461 {
 462         int rc = 0;
 463         ENTRY;
 464
 465         if (tpobj) {
 466                 LASSERT(tpattr != NULL);
 467                 rc = mdd_may_delete_entry(env, tpobj, tpattr, check_perm);
 468                 if (rc != 0)
 469                         RETURN(rc);
 470         }
 471
 472         if (tobj == NULL)
 473                 RETURN(0);
 474
 475         if (!mdd_object_exists(tobj))
 476                 RETURN(-ENOENT);
 477
 478         if (mdd_is_dead_obj(tobj))
 479                 RETURN(-ESTALE);
 480
 481         if (mdd_is_sticky(env, tpobj, tpattr, tobj, tattr))
 482                 RETURN(-EPERM);
 483
 484         if (tattr->la_flags & (LUSTRE_APPEND_FL | LUSTRE_IMMUTABLE_FL))
 485                 RETURN(-EPERM);
 486
 487         /* additional check the rename case */
 488         if (cattr) {
 489                 if (S_ISDIR(cattr->la_mode)) {
 490                         struct mdd_device *mdd = mdo2mdd(&tobj->mod_obj);
 491
 492                         if (!S_ISDIR(tattr->la_mode))
 493                                 RETURN(-ENOTDIR);
 494
 495                         if (lu_fid_eq(mdo2fid(tobj), &mdd->mdd_root_fid))
 496                                 RETURN(-EBUSY);
 497                 } else if (S_ISDIR(tattr->la_mode))
 498                         RETURN(-EISDIR);
 499         }
 500
 501         if (S_ISDIR(tattr->la_mode) && check_empty)
 502                 rc = mdd_dir_is_empty(env, tobj);
 503
 504         RETURN(rc);
 505 }
 506
 507 /**
 508  * Check whether it can create the link file(linked to @src_obj) under
 509  * the target directory(@tgt_obj), and src_obj has been locked by
 510  * mdd_write_lock.
 511  *
 512  * \param[in] env       execution environment
 513  * \param[in] tgt_obj   the target directory
 514  * \param[in] tattr     attributes of target directory
 515  * \param[in] lname     the link name
 516  * \param[in] src_obj   source object for link
 517  * \param[in] cattr     attributes for source object
 518  *
 519  * \retval              = 0 it is allowed to create the link file under tgt_obj
 520  * \retval              negative error not allowed to create the link file
 521  */
 522 static int mdd_link_sanity_check(const struct lu_env *env,
 523                                  struct mdd_object *tgt_obj,
 524                                  const struct lu_attr *tattr,
 525                                  const struct lu_name *lname,
 526                                  struct mdd_object *src_obj,
 527                                  const struct lu_attr *cattr)
 528 {
 529         struct mdd_device *m = mdd_obj2mdd_dev(src_obj);
 530         int rc = 0;
 531         ENTRY;
 532
 533         if (!mdd_object_exists(src_obj))
 534                 RETURN(-ENOENT);
 535
 536         if (mdd_is_dead_obj(src_obj))
 537                 RETURN(-ESTALE);
 538
 539         /* Local ops, no lookup before link, check filename length here. */
 540         rc = mdd_name_check(m, lname);
 541         if (rc < 0)
 542                 RETURN(rc);
 543
 544         if (cattr->la_flags & (LUSTRE_IMMUTABLE_FL | LUSTRE_APPEND_FL))
 545                 RETURN(-EPERM);
 546
 547         if (S_ISDIR(mdd_object_type(src_obj)))
 548                 RETURN(-EPERM);
 549
 550         LASSERT(src_obj != tgt_obj);
 551         rc = mdd_may_create(env, tgt_obj, tattr, NULL, true);
 552         if (rc != 0)
 553                 RETURN(rc);
 554
 555         rc = __mdd_may_link(env, src_obj, cattr);
 556
 557         RETURN(rc);
 558 }
 559
 560 static int __mdd_index_delete_only(const struct lu_env *env, struct mdd_object *pobj,
 561                                    const char *name, struct thandle *handle,
 562                                    struct lustre_capa *capa)
 563 {
 564         struct dt_object *next = mdd_object_child(pobj);
 565         int rc;
 566         ENTRY;
 567
 568         if (dt_try_as_dir(env, next))
 569                 rc = dt_delete(env, next, (struct dt_key *)name, handle, capa);
 570         else
 571                 rc = -ENOTDIR;
 572
 573         RETURN(rc);
 574 }
 575
 576 static int __mdd_index_insert_only(const struct lu_env *env,
 577                                    struct mdd_object *pobj,
 578                                    const struct lu_fid *lf, __u32 type,
 579                                    const char *name,
 580                                    struct thandle *handle,
 581                                    struct lustre_capa *capa)
 582 {
 583         struct dt_object *next = mdd_object_child(pobj);
 584         int               rc;
 585         ENTRY;
 586
 587         if (dt_try_as_dir(env, next)) {
 588                 struct dt_insert_rec    *rec = &mdd_env_info(env)->mti_dt_rec;
 589                 struct lu_ucred         *uc  = lu_ucred_check(env);
 590                 int                      ignore_quota;
 591
 592                 rec->rec_fid = lf;
 593                 rec->rec_type = type;
 594                 ignore_quota = uc ? uc->uc_cap & CFS_CAP_SYS_RESOURCE_MASK : 1;
 595                 rc = dt_insert(env, next, (const struct dt_rec *)rec,
 596                                (const struct dt_key *)name, handle, capa,
 597                                ignore_quota);
 598         } else {
 599                 rc = -ENOTDIR;
 600         }
 601         RETURN(rc);
 602 }
 603
 604 /* insert named index, add reference if isdir */
 605 static int __mdd_index_insert(const struct lu_env *env, struct mdd_object *pobj,
 606                               const struct lu_fid *lf, __u32 type,
 607                               const char *name, struct thandle *handle,
 608                               struct lustre_capa *capa)
 609 {
 610         int rc;
 611         ENTRY;
 612
 613         rc = __mdd_index_insert_only(env, pobj, lf, type, name, handle, capa);
 614         if (rc == 0 && S_ISDIR(type)) {
 615                 mdd_write_lock(env, pobj, MOR_TGT_PARENT);
 616                 mdo_ref_add(env, pobj, handle);
 617                 mdd_write_unlock(env, pobj);
 618         }
 619
 620         RETURN(rc);
 621 }
 622
 623 /* delete named index, drop reference if isdir */
 624 static int __mdd_index_delete(const struct lu_env *env, struct mdd_object *pobj,
 625                               const char *name, int is_dir, struct thandle *handle,
 626                               struct lustre_capa *capa)
 627 {
 628         int               rc;
 629         ENTRY;
 630
 631         rc = __mdd_index_delete_only(env, pobj, name, handle, capa);
 632         if (rc == 0 && is_dir) {
 633                 mdd_write_lock(env, pobj, MOR_TGT_PARENT);
 634                 mdo_ref_del(env, pobj, handle);
 635                 mdd_write_unlock(env, pobj);
 636         }
 637
 638         RETURN(rc);
 639 }
 640
 641 static int mdd_llog_record_calc_size(const struct lu_env *env,
 642                                      const struct lu_name *tname,
 643                                      const struct lu_name *sname)
 644 {
 645         const struct lu_ucred   *uc = lu_ucred(env);
 646         enum changelog_rec_flags crf = 0;
 647         size_t                   hdr_size = sizeof(struct llog_changelog_rec) -
 648                                             sizeof(struct changelog_rec);
 649
 650         if (sname != NULL)
 651                 crf |= CLF_RENAME;
 652
 653         if (uc != NULL && uc->uc_jobid[0] != '\0')
 654                 crf |= CLF_JOBID;
 655
 656         return llog_data_len(hdr_size + changelog_rec_offset(crf) +
 657                              (tname != NULL ? tname->ln_namelen : 0) +
 658                              (sname != NULL ? 1 + sname->ln_namelen : 0));
 659 }
 660
 661 int mdd_declare_changelog_store(const struct lu_env *env,
 662                                 struct mdd_device *mdd,
 663                                 const struct lu_name *tname,
 664                                 const struct lu_name *sname,
 665                                 struct thandle *handle)
 666 {
 667         struct obd_device               *obd = mdd2obd_dev(mdd);
 668         struct llog_ctxt                *ctxt;
 669         struct llog_changelog_rec       *rec;
 670         struct lu_buf                   *buf;
 671         int                              reclen;
 672         int                              rc;
 673
 674         /* Not recording */
 675         if (!(mdd->mdd_cl.mc_flags & CLM_ON))
 676                 return 0;
 677
 678         reclen = mdd_llog_record_calc_size(env, tname, sname);
 679         buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_big_buf, reclen);
 680         if (buf->lb_buf == NULL)
 681                 return -ENOMEM;
 682
 683         rec = buf->lb_buf;
 684         rec->cr_hdr.lrh_len = reclen;
 685         rec->cr_hdr.lrh_type = CHANGELOG_REC;
 686
 687         ctxt = llog_get_context(obd, LLOG_CHANGELOG_ORIG_CTXT);
 688         if (ctxt == NULL)
 689                 return -ENXIO;
 690
 691         rc = llog_declare_add(env, ctxt->loc_handle, &rec->cr_hdr, handle);
 692         llog_ctxt_put(ctxt);
 693
 694         return rc;
 695 }
 696
 697 /** Add a changelog entry \a rec to the changelog llog
 698  * \param mdd
 699  * \param rec
 700  * \param handle - currently ignored since llogs start their own transaction;
 701  *              this will hopefully be fixed in llog rewrite
 702  * \retval 0 ok
 703  */
 704 int mdd_changelog_store(const struct lu_env *env, struct mdd_device *mdd,
 705                         struct llog_changelog_rec *rec, struct thandle *th)
 706 {
 707         struct obd_device       *obd = mdd2obd_dev(mdd);
 708         struct llog_ctxt        *ctxt;
 709         int                      rc;
 710
 711         rec->cr_hdr.lrh_len = llog_data_len(sizeof(*rec) +
 712                                             changelog_rec_varsize(&rec->cr));
 713
 714         /* llog_lvfs_write_rec sets the llog tail len */
 715         rec->cr_hdr.lrh_type = CHANGELOG_REC;
 716         rec->cr.cr_time = cl_time();
 717
 718         spin_lock(&mdd->mdd_cl.mc_lock);
 719         /* NB: I suppose it's possible llog_add adds out of order wrt cr_index,
 720          * but as long as the MDD transactions are ordered correctly for e.g.
 721          * rename conflicts, I don't think this should matter. */
 722         rec->cr.cr_index = ++mdd->mdd_cl.mc_index;
 723         spin_unlock(&mdd->mdd_cl.mc_lock);
 724
 725         ctxt = llog_get_context(obd, LLOG_CHANGELOG_ORIG_CTXT);
 726         if (ctxt == NULL)
 727                 return -ENXIO;
 728
 729         /* nested journal transaction */
 730         rc = llog_add(env, ctxt->loc_handle, &rec->cr_hdr, NULL, th);
 731         llog_ctxt_put(ctxt);
 732         if (rc > 0)
 733                 rc = 0;
 734
 735         return rc;
 736 }
 737
 738 static void mdd_changelog_rec_ext_rename(struct changelog_rec *rec,
 739                                          const struct lu_fid *sfid,
 740                                          const struct lu_fid *spfid,
 741                                          const struct lu_name *sname)
 742 {
 743         struct changelog_ext_rename     *rnm = changelog_rec_rename(rec);
 744         size_t                           extsize = sname->ln_namelen + 1;
 745
 746         LASSERT(sfid != NULL);
 747         LASSERT(spfid != NULL);
 748         LASSERT(sname != NULL);
 749
 750         rnm->cr_sfid = *sfid;
 751         rnm->cr_spfid = *spfid;
 752
 753         changelog_rec_name(rec)[rec->cr_namelen] = '\0';
 754         strlcpy(changelog_rec_sname(rec), sname->ln_name, extsize);
 755         rec->cr_namelen += extsize;
 756 }
 757
 758 void mdd_changelog_rec_ext_jobid(struct changelog_rec *rec, const char *jobid)
 759 {
 760         struct changelog_ext_jobid      *jid = changelog_rec_jobid(rec);
 761
 762         if (jobid == NULL || jobid[0] == '\0')
 763                 return;
 764
 765         strlcpy(jid->cr_jobid, jobid, sizeof(jid->cr_jobid));
 766 }
 767
 768 /** Store a namespace change changelog record
 769  * If this fails, we must fail the whole transaction; we don't
 770  * want the change to commit without the log entry.
 771  * \param target - mdd_object of change
 772  * \param tpfid - target parent dir/object fid
 773  * \param sfid - source object fid
 774  * \param spfid - source parent fid
 775  * \param tname - target name string
 776  * \param sname - source name string
 777  * \param handle - transacion handle
 778  */
 779 int mdd_changelog_ns_store(const struct lu_env *env,
 780                            struct mdd_device *mdd,
 781                            enum changelog_rec_type type,
 782                            enum changelog_rec_flags crf,
 783                            struct mdd_object *target,
 784                            const struct lu_fid *tpfid,
 785                            const struct lu_fid *sfid,
 786                            const struct lu_fid *spfid,
 787                            const struct lu_name *tname,
 788                            const struct lu_name *sname,
 789                            struct thandle *handle)
 790 {
 791         const struct lu_ucred           *uc = lu_ucred(env);
 792         struct llog_changelog_rec       *rec;
 793         struct lu_buf                   *buf;
 794         int                              reclen;
 795         int                              rc;
 796         ENTRY;
 797
 798         /* Not recording */
 799         if (!(mdd->mdd_cl.mc_flags & CLM_ON))
 800                 RETURN(0);
 801
 802         if ((mdd->mdd_cl.mc_mask & (1 << type)) == 0)
 803                 RETURN(0);
 804
 805         LASSERT(tpfid != NULL);
 806         LASSERT(tname != NULL);
 807         LASSERT(handle != NULL);
 808
 809         reclen = mdd_llog_record_calc_size(env, tname, sname);
 810         buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_big_buf, reclen);
 811         if (buf->lb_buf == NULL)
 812                 RETURN(-ENOMEM);
 813         rec = buf->lb_buf;
 814
 815         crf = (crf & CLF_FLAGMASK);
 816
 817         if (uc->uc_jobid[0] != '\0')
 818                 crf |= CLF_JOBID;
 819
 820         if (sname != NULL)
 821                 crf |= CLF_RENAME;
 822         else
 823                 crf |= CLF_VERSION;
 824
 825         rec->cr.cr_flags = crf;
 826         rec->cr.cr_type = (__u32)type;
 827         rec->cr.cr_pfid = *tpfid;
 828         rec->cr.cr_namelen = tname->ln_namelen;
 829         memcpy(changelog_rec_name(&rec->cr), tname->ln_name, tname->ln_namelen);
 830
 831         if (crf & CLF_RENAME)
 832                 mdd_changelog_rec_ext_rename(&rec->cr, sfid, spfid, sname);
 833
 834         if (crf & CLF_JOBID)
 835                 mdd_changelog_rec_ext_jobid(&rec->cr, uc->uc_jobid);
 836
 837         if (likely(target != NULL)) {
 838                 rec->cr.cr_tfid = *mdo2fid(target);
 839                 target->mod_cltime = cfs_time_current_64();
 840         } else {
 841                 fid_zero(&rec->cr.cr_tfid);
 842         }
 843
 844         rc = mdd_changelog_store(env, mdd, rec, handle);
 845         if (rc < 0) {
 846                 CERROR("changelog failed: rc=%d, op%d %s c"DFID" p"DFID"\n",
 847                         rc, type, tname->ln_name, PFID(sfid), PFID(tpfid));
 848                 return -EFAULT;
 849         }
 850
 851         return 0;
 852 }
 853
 854 static int __mdd_links_add(const struct lu_env *env,
 855                            struct mdd_object *mdd_obj,
 856                            struct linkea_data *ldata,
 857                            const struct lu_name *lname,
 858                            const struct lu_fid *pfid,
 859                            int first, int check)
 860 {
 861         int rc;
 862
 863         if (ldata->ld_leh == NULL) {
 864                 rc = first ? -ENODATA : mdd_links_read(env, mdd_obj, ldata);
 865                 if (rc) {
 866                         if (rc != -ENODATA)
 867                                 return rc;
 868                         rc = linkea_data_new(ldata,
 869                                              &mdd_env_info(env)->mti_link_buf);
 870                         if (rc)
 871                                 return rc;
 872                 }
 873         }
 874
 875         if (check) {
 876                 rc = linkea_links_find(ldata, lname, pfid);
 877                 if (rc && rc != -ENOENT)
 878                         return rc;
 879                 if (rc == 0)
 880                         return -EEXIST;
 881         }
 882
 883         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_LINKEA_MORE)) {
 884                 struct lu_fid *tfid = &mdd_env_info(env)->mti_fid2;
 885
 886                 *tfid = *pfid;
 887                 tfid->f_ver = ~0;
 888                 linkea_add_buf(ldata, lname, tfid);
 889         }
 890
 891         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_LINKEA_MORE2))
 892                 linkea_add_buf(ldata, lname, pfid);
 893
 894         return linkea_add_buf(ldata, lname, pfid);
 895 }
 896
 897 static int __mdd_links_del(const struct lu_env *env,
 898                            struct mdd_object *mdd_obj,
 899                            struct linkea_data *ldata,
 900                            const struct lu_name *lname,
 901                            const struct lu_fid *pfid)
 902 {
 903         int rc;
 904
 905         if (ldata->ld_leh == NULL) {
 906                 rc = mdd_links_read(env, mdd_obj, ldata);
 907                 if (rc)
 908                         return rc;
 909         }
 910
 911         rc = linkea_links_find(ldata, lname, pfid);
 912         if (rc)
 913                 return rc;
 914
 915         linkea_del_buf(ldata, lname);
 916         return 0;
 917 }
 918
 919 static int mdd_linkea_prepare(const struct lu_env *env,
 920                               struct mdd_object *mdd_obj,
 921                               const struct lu_fid *oldpfid,
 922                               const struct lu_name *oldlname,
 923                               const struct lu_fid *newpfid,
 924                               const struct lu_name *newlname,
 925                               int first, int check,
 926                               struct linkea_data *ldata)
 927 {
 928         int rc = 0;
 929         int rc2 = 0;
 930         ENTRY;
 931
 932         if (OBD_FAIL_CHECK(OBD_FAIL_FID_IGIF))
 933                 return 0;
 934
 935         LASSERT(oldpfid != NULL || newpfid != NULL);
 936
 937         if (mdd_obj->mod_flags & DEAD_OBJ) {
 938                 /* Prevent linkea to be updated which is NOT necessary. */
 939                 ldata->ld_reclen = 0;
 940                 /* No more links, don't bother */
 941                 RETURN(0);
 942         }
 943
 944         if (oldpfid != NULL) {
 945                 rc = __mdd_links_del(env, mdd_obj, ldata, oldlname, oldpfid);
 946                 if (rc) {
 947                         if ((check == 1) ||
 948                             (rc != -ENODATA && rc != -ENOENT))
 949                                 RETURN(rc);
 950                         /* No changes done. */
 951                         rc = 0;
 952                 }
 953         }
 954
 955         /* If renaming, add the new record */
 956         if (newpfid != NULL) {
 957                 /* even if the add fails, we still delete the out-of-date
 958                  * old link */
 959                 rc2 = __mdd_links_add(env, mdd_obj, ldata, newlname, newpfid,
 960                                       first, check);
 961         }
 962
 963         rc = rc != 0 ? rc : rc2;
 964
 965         RETURN(rc);
 966 }
 967
 968 int mdd_links_rename(const struct lu_env *env,
 969                      struct mdd_object *mdd_obj,
 970                      const struct lu_fid *oldpfid,
 971                      const struct lu_name *oldlname,
 972                      const struct lu_fid *newpfid,
 973                      const struct lu_name *newlname,
 974                      struct thandle *handle,
 975                      struct linkea_data *ldata,
 976                      int first, int check)
 977 {
 978         int rc = 0;
 979         ENTRY;
 980
 981         if (ldata == NULL) {
 982                 ldata = &mdd_env_info(env)->mti_link_data;
 983                 memset(ldata, 0, sizeof(*ldata));
 984                 rc = mdd_linkea_prepare(env, mdd_obj, oldpfid, oldlname,
 985                                         newpfid, newlname, first, check,
 986                                         ldata);
 987                 if (rc != 0)
 988                         GOTO(out, rc);
 989         }
 990
 991         if (ldata->ld_reclen != 0)
 992                 rc = mdd_links_write(env, mdd_obj, ldata, handle);
 993         EXIT;
 994 out:
 995         if (rc != 0) {
 996                 int error = 1;
 997                 if (rc == -EOVERFLOW || rc == -ENOSPC)
 998                         error = 0;
 999                 if (oldpfid == NULL)
1000                         CDEBUG(error ? D_ERROR : D_OTHER,
1001                                "link_ea add '%.*s' failed %d "DFID"\n",
1002                                newlname->ln_namelen, newlname->ln_name,
1003                                rc, PFID(mdd_object_fid(mdd_obj)));
1004                 else if (newpfid == NULL)
1005                         CDEBUG(error ? D_ERROR : D_OTHER,
1006                                "link_ea del '%.*s' failed %d "DFID"\n",
1007                                oldlname->ln_namelen, oldlname->ln_name,
1008                                rc, PFID(mdd_object_fid(mdd_obj)));
1009                 else
1010                         CDEBUG(error ? D_ERROR : D_OTHER,
1011                                "link_ea rename '%.*s'->'%.*s' failed %d "
1012                                DFID"\n",
1013                                oldlname->ln_namelen, oldlname->ln_name,
1014                                newlname->ln_namelen, newlname->ln_name,
1015                                rc, PFID(mdd_object_fid(mdd_obj)));
1016         }
1017
1018         if (ldata->ld_buf && ldata->ld_buf->lb_len > OBD_ALLOC_BIG)
1019                 /* if we vmalloced a large buffer drop it */
1020                 lu_buf_free(ldata->ld_buf);
1021
1022         return rc;
1023 }
1024
1025 static inline int mdd_links_add(const struct lu_env *env,
1026                                 struct mdd_object *mdd_obj,
1027                                 const struct lu_fid *pfid,
1028                                 const struct lu_name *lname,
1029                                 struct thandle *handle,
1030                                 struct linkea_data *ldata, int first)
1031 {
1032         return mdd_links_rename(env, mdd_obj, NULL, NULL,
1033                                 pfid, lname, handle, ldata, first, 0);
1034 }
1035
1036 static inline int mdd_links_del(const struct lu_env *env,
1037                                 struct mdd_object *mdd_obj,
1038                                 const struct lu_fid *pfid,
1039                                 const struct lu_name *lname,
1040                                 struct thandle *handle)
1041 {
1042         return mdd_links_rename(env, mdd_obj, pfid, lname,
1043                                 NULL, NULL, handle, NULL, 0, 0);
1044 }
1045
1046 /** Read the link EA into a temp buffer.
1047  * Uses the mdd_thread_info::mti_big_buf since it is generally large.
1048  * A pointer to the buffer is stored in \a ldata::ld_buf.
1049  *
1050  * \retval 0 or error
1051  */
1052 int mdd_links_read(const struct lu_env *env, struct mdd_object *mdd_obj,
1053                    struct linkea_data *ldata)
1054 {
1055         int rc;
1056
1057         if (!mdd_object_exists(mdd_obj))
1058                 return -ENODATA;
1059
1060         /* First try a small buf */
1061         LASSERT(env != NULL);
1062         ldata->ld_buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_link_buf,
1063                                                PAGE_CACHE_SIZE);
1064         if (ldata->ld_buf->lb_buf == NULL)
1065                 return -ENOMEM;
1066
1067         rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf, XATTR_NAME_LINK,
1068                           BYPASS_CAPA);
1069         if (rc == -ERANGE) {
1070                 /* Buf was too small, figure out what we need. */
1071                 lu_buf_free(ldata->ld_buf);
1072                 rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf,
1073                                    XATTR_NAME_LINK, BYPASS_CAPA);
1074                 if (rc < 0)
1075                         return rc;
1076                 ldata->ld_buf = lu_buf_check_and_alloc(ldata->ld_buf, rc);
1077                 if (ldata->ld_buf->lb_buf == NULL)
1078                         return -ENOMEM;
1079                 rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf,
1080                                   XATTR_NAME_LINK, BYPASS_CAPA);
1081         }
1082         if (rc < 0) {
1083                 lu_buf_free(ldata->ld_buf);
1084                 ldata->ld_buf = NULL;
1085                 return rc;
1086         }
1087
1088         return linkea_init(ldata);
1089 }
1090
1091 /** Read the link EA into a temp buffer.
1092  * Uses the name_buf since it is generally large.
1093  * \retval IS_ERR err
1094  * \retval ptr to \a lu_buf (always \a mti_big_buf)
1095  */
1096 struct lu_buf *mdd_links_get(const struct lu_env *env,
1097                              struct mdd_object *mdd_obj)
1098 {
1099         struct linkea_data ldata = { 0 };
1100         int rc;
1101
1102         rc = mdd_links_read(env, mdd_obj, &ldata);
1103         return rc ? ERR_PTR(rc) : ldata.ld_buf;
1104 }
1105
1106 int mdd_links_write(const struct lu_env *env, struct mdd_object *mdd_obj,
1107                     struct linkea_data *ldata, struct thandle *handle)
1108 {
1109         const struct lu_buf *buf = mdd_buf_get_const(env, ldata->ld_buf->lb_buf,
1110                                                      ldata->ld_leh->leh_len);
1111         int                 rc;
1112
1113         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_NO_LINKEA))
1114                 return 0;
1115
1116         rc = mdo_xattr_set(env, mdd_obj, buf, XATTR_NAME_LINK, 0, handle,
1117                            mdd_object_capa(env, mdd_obj));
1118         if (unlikely(rc == -ENOSPC) && S_ISREG(mdd_object_type(mdd_obj)) &&
1119             mdd_object_remote(mdd_obj) == 0) {
1120                 struct lfsck_request *lr = &mdd_env_info(env)->mti_lr;
1121
1122                 /* XXX: If the linkEA is overflow, then we need to notify the
1123                  *      namespace LFSCK to skip "nlink" attribute verification
1124                  *      on this object to avoid the "nlink" to be shrinked by
1125                  *      wrong. It may be not good an interaction with LFSCK
1126                  *      like this. We will consider to replace it with other
1127                  *      mechanism in future. LU-5802. */
1128                 lfsck_pack_rfa(lr, mdo2fid(mdd_obj), LE_SKIP_NLINK,
1129                                LFSCK_TYPE_NAMESPACE);
1130                 lfsck_in_notify(env, mdo2mdd(&mdd_obj->mod_obj)->mdd_bottom,
1131                                 lr, handle);
1132         }
1133
1134         return rc;
1135 }
1136
1137 int mdd_declare_links_add(const struct lu_env *env, struct mdd_object *mdd_obj,
1138                           struct thandle *handle, struct linkea_data *ldata,
1139                           enum mdd_links_add_overflow overflow)
1140 {
1141         int     rc;
1142         int     ea_len;
1143         void    *linkea;
1144
1145         if (ldata != NULL && ldata->ld_leh != NULL) {
1146                 ea_len = ldata->ld_leh->leh_len;
1147                 linkea = ldata->ld_buf->lb_buf;
1148         } else {
1149                 ea_len = DEFAULT_LINKEA_SIZE;
1150                 linkea = NULL;
1151         }
1152
1153         /* XXX: max size? */
1154         rc = mdo_declare_xattr_set(env, mdd_obj,
1155                                    mdd_buf_get_const(env, linkea, ea_len),
1156                                    XATTR_NAME_LINK, 0, handle);
1157         if (rc != 0)
1158                 return rc;
1159
1160         if (mdd_object_remote(mdd_obj) == 0 && overflow == MLAO_CHECK) {
1161                 struct lfsck_request *lr = &mdd_env_info(env)->mti_lr;
1162
1163                 /* XXX: If the linkEA is overflow, then we need to notify the
1164                  *      namespace LFSCK to skip "nlink" attribute verification
1165                  *      on this object to avoid the "nlink" to be shrinked by
1166                  *      wrong. It may be not good an interaction with LFSCK
1167                  *      like this. We will consider to replace it with other
1168                  *      mechanism in future. LU-5802. */
1169                 lfsck_pack_rfa(lr, mdo2fid(mdd_obj), LE_SKIP_NLINK_DECLARE,
1170                                LFSCK_TYPE_NAMESPACE);
1171                 rc = lfsck_in_notify(env,
1172                                      mdo2mdd(&mdd_obj->mod_obj)->mdd_bottom,
1173                                      lr, handle);
1174         }
1175
1176         return rc;
1177 }
1178
1179 static inline int mdd_declare_links_del(const struct lu_env *env,
1180                                         struct mdd_object *c,
1181                                         struct thandle *handle)
1182 {
1183         int rc = 0;
1184
1185         /* For directory, the linkEA will be removed together
1186          * with the object. */
1187         if (!S_ISDIR(mdd_object_type(c)))
1188                 rc = mdd_declare_links_add(env, c, handle, NULL, MLAO_IGNORE);
1189
1190         return rc;
1191 }
1192
1193 static int mdd_declare_link(const struct lu_env *env,
1194                             struct mdd_device *mdd,
1195                             struct mdd_object *p,
1196                             struct mdd_object *c,
1197                             const struct lu_name *name,
1198                             struct thandle *handle,
1199                             struct lu_attr *la,
1200                             struct linkea_data *data)
1201 {
1202         int rc;
1203
1204         rc = mdo_declare_index_insert(env, p, mdo2fid(c), mdd_object_type(c),
1205                                       name->ln_name, handle);
1206         if (rc != 0)
1207                 return rc;
1208
1209         rc = mdo_declare_ref_add(env, c, handle);
1210         if (rc != 0)
1211                 return rc;
1212
1213         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_MORE_NLINK)) {
1214                 rc = mdo_declare_ref_add(env, c, handle);
1215                 if (rc != 0)
1216                         return rc;
1217         }
1218
1219         la->la_valid = LA_CTIME | LA_MTIME;
1220         rc = mdo_declare_attr_set(env, p, la, handle);
1221         if (rc != 0)
1222                 return rc;
1223
1224         la->la_valid = LA_CTIME;
1225         rc = mdo_declare_attr_set(env, c, la, handle);
1226         if (rc != 0)
1227                 return rc;
1228
1229         rc = mdd_declare_links_add(env, c, handle, data,
1230                         S_ISREG(mdd_object_type(c)) ? MLAO_CHECK : MLAO_IGNORE);
1231         if (rc != 0)
1232                 return rc;
1233
1234         rc = mdd_declare_changelog_store(env, mdd, name, NULL, handle);
1235
1236         return rc;
1237 }
1238
1239 static int mdd_link(const struct lu_env *env, struct md_object *tgt_obj,
1240                     struct md_object *src_obj, const struct lu_name *lname,
1241                     struct md_attr *ma)
1242 {
1243         const char *name = lname->ln_name;
1244         struct lu_attr    *la = &mdd_env_info(env)->mti_la_for_fix;
1245         struct mdd_object *mdd_tobj = md2mdd_obj(tgt_obj);
1246         struct mdd_object *mdd_sobj = md2mdd_obj(src_obj);
1247         struct lu_attr    *cattr = MDD_ENV_VAR(env, cattr);
1248         struct lu_attr    *tattr = MDD_ENV_VAR(env, tattr);
1249         struct mdd_device *mdd = mdo2mdd(src_obj);
1250         struct thandle *handle;
1251         struct linkea_data *ldata = &mdd_env_info(env)->mti_link_data;
1252         int rc;
1253         ENTRY;
1254
1255         rc = mdd_la_get(env, mdd_sobj, cattr, BYPASS_CAPA);
1256         if (rc != 0)
1257                 RETURN(rc);
1258
1259         rc = mdd_la_get(env, mdd_tobj, tattr, BYPASS_CAPA);
1260         if (rc != 0)
1261                 RETURN(rc);
1262
1263         handle = mdd_trans_create(env, mdd);
1264         if (IS_ERR(handle))
1265                 GOTO(out_pending, rc = PTR_ERR(handle));
1266
1267         memset(ldata, 0, sizeof(*ldata));
1268
1269         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1270         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1271
1272         rc = mdd_declare_link(env, mdd, mdd_tobj, mdd_sobj, lname, handle,
1273                               la, ldata);
1274         if (rc)
1275                 GOTO(stop, rc);
1276
1277         rc = mdd_trans_start(env, mdd, handle);
1278         if (rc)
1279                 GOTO(stop, rc);
1280
1281         mdd_write_lock(env, mdd_sobj, MOR_TGT_CHILD);
1282         rc = mdd_link_sanity_check(env, mdd_tobj, tattr, lname, mdd_sobj,
1283                                    cattr);
1284         if (rc)
1285                 GOTO(out_unlock, rc);
1286
1287         if (!OBD_FAIL_CHECK(OBD_FAIL_LFSCK_LESS_NLINK)) {
1288                 rc = mdo_ref_add(env, mdd_sobj, handle);
1289                 if (rc != 0)
1290                         GOTO(out_unlock, rc);
1291         }
1292
1293         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_MORE_NLINK)) {
1294                 rc = mdo_ref_add(env, mdd_sobj, handle);
1295                 if (rc != 0)
1296                         GOTO(out_unlock, rc);
1297         }
1298
1299         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_DANGLING3)) {
1300                 struct lu_fid tfid = *mdo2fid(mdd_sobj);
1301
1302                 tfid.f_oid++;
1303                 rc = __mdd_index_insert_only(env, mdd_tobj, &tfid,
1304                                              mdd_object_type(mdd_sobj),
1305                                              name, handle,
1306                                              mdd_object_capa(env, mdd_tobj));
1307         } else {
1308                 rc = __mdd_index_insert_only(env, mdd_tobj, mdo2fid(mdd_sobj),
1309                                              mdd_object_type(mdd_sobj),
1310                                              name, handle,
1311                                              mdd_object_capa(env, mdd_tobj));
1312         }
1313
1314         if (rc != 0) {
1315                 mdo_ref_del(env, mdd_sobj, handle);
1316                 GOTO(out_unlock, rc);
1317         }
1318
1319         la->la_valid = LA_CTIME | LA_MTIME;
1320         rc = mdd_update_time(env, mdd_tobj, tattr, la, handle);
1321         if (rc)
1322                 GOTO(out_unlock, rc);
1323
1324         la->la_valid = LA_CTIME;
1325         rc = mdd_update_time(env, mdd_sobj, cattr, la, handle);
1326         if (rc == 0) {
1327                 rc = mdd_linkea_prepare(env, mdd_sobj, NULL, NULL,
1328                                         mdo2fid(mdd_tobj), lname, 0, 0,
1329                                         ldata);
1330                 if (rc == 0)
1331                         mdd_links_add(env, mdd_sobj, mdo2fid(mdd_tobj),
1332                                       lname, handle, ldata, 0);
1333                 /* The failure of links_add should not cause the link
1334                  * failure, reset rc here */
1335                 rc = 0;
1336         }
1337         EXIT;
1338 out_unlock:
1339         mdd_write_unlock(env, mdd_sobj);
1340         if (rc == 0)
1341                 rc = mdd_changelog_ns_store(env, mdd, CL_HARDLINK, 0, mdd_sobj,
1342                                             mdo2fid(mdd_tobj), NULL, NULL,
1343                                             lname, NULL, handle);
1344 stop:
1345         mdd_trans_stop(env, mdd, rc, handle);
1346
1347         if (ldata->ld_buf && ldata->ld_buf->lb_len > OBD_ALLOC_BIG)
1348                 /* if we vmalloced a large buffer drop it */
1349                 lu_buf_free(ldata->ld_buf);
1350 out_pending:
1351         return rc;
1352 }
1353
1354 static int mdd_mark_dead_object(const struct lu_env *env,
1355                                 struct mdd_object *obj, struct thandle *handle,
1356                                 bool declare)
1357 {
1358         struct lu_attr *attr = MDD_ENV_VAR(env, la_for_start);
1359         int rc;
1360
1361         if (!declare)
1362                 obj->mod_flags |= DEAD_OBJ;
1363
1364         if (!S_ISDIR(mdd_object_type(obj)))
1365                 return 0;
1366
1367         attr->la_valid = LA_FLAGS;
1368         attr->la_flags = LUSTRE_SLAVE_DEAD_FL;
1369
1370         if (declare)
1371                 rc = mdo_declare_attr_set(env, obj, attr, handle);
1372         else
1373                 rc = mdo_attr_set(env, obj, attr, handle,
1374                                   mdd_object_capa(env, obj));
1375
1376         return rc;
1377 }
1378
1379 static int mdd_declare_finish_unlink(const struct lu_env *env,
1380                                      struct mdd_object *obj,
1381                                      struct thandle *handle)
1382 {
1383         int     rc;
1384
1385         rc = mdd_mark_dead_object(env, obj, handle, true);
1386         if (rc != 0)
1387                 return rc;
1388
1389         rc = orph_declare_index_insert(env, obj, mdd_object_type(obj), handle);
1390         if (rc != 0)
1391                 return rc;
1392
1393         rc = mdo_declare_destroy(env, obj, handle);
1394         if (rc != 0)
1395                 return rc;
1396
1397         return mdd_declare_links_del(env, obj, handle);
1398 }
1399
1400 /* caller should take a lock before calling */
1401 int mdd_finish_unlink(const struct lu_env *env,
1402                       struct mdd_object *obj, struct md_attr *ma,
1403                       const struct mdd_object *pobj,
1404                       const struct lu_name *lname,
1405                       struct thandle *th)
1406 {
1407         int rc = 0;
1408         int is_dir = S_ISDIR(ma->ma_attr.la_mode);
1409         ENTRY;
1410
1411         LASSERT(mdd_write_locked(env, obj) != 0);
1412
1413         if (ma->ma_attr.la_nlink == 0 || is_dir) {
1414                 rc = mdd_mark_dead_object(env, obj, th, false);
1415                 if (rc != 0)
1416                         RETURN(rc);
1417
1418                 /* add new orphan and the object
1419                  * will be deleted during mdd_close() */
1420                 if (obj->mod_count) {
1421                         rc = __mdd_orphan_add(env, obj, th);
1422                         if (rc == 0)
1423                                 CDEBUG(D_HA, "Object "DFID" is inserted into "
1424                                         "orphan list, open count = %d\n",
1425                                         PFID(mdd_object_fid(obj)),
1426                                         obj->mod_count);
1427                         else
1428                                 CERROR("Object "DFID" fail to be an orphan, "
1429                                        "open count = %d, maybe cause failed "
1430                                        "open replay\n",
1431                                         PFID(mdd_object_fid(obj)),
1432                                         obj->mod_count);
1433                 } else {
1434                         rc = mdo_destroy(env, obj, th);
1435                 }
1436         } else if (!is_dir) {
1437                 /* old files may not have link ea; ignore errors */
1438                 mdd_links_del(env, obj, mdo2fid(pobj), lname, th);
1439         }
1440
1441         RETURN(rc);
1442 }
1443
1444 /*
1445  * pobj maybe NULL
1446  * has mdd_write_lock on cobj already, but not on pobj yet
1447  */
1448 int mdd_unlink_sanity_check(const struct lu_env *env, struct mdd_object *pobj,
1449                             const struct lu_attr *pattr,
1450                             struct mdd_object *cobj,
1451                             const struct lu_attr *cattr)
1452 {
1453         int rc;
1454         ENTRY;
1455
1456         rc = mdd_may_delete(env, pobj, pattr, cobj, cattr, NULL, 1, 1);
1457
1458         RETURN(rc);
1459 }
1460
1461 static int mdd_declare_unlink(const struct lu_env *env, struct mdd_device *mdd,
1462                               struct mdd_object *p, struct mdd_object *c,
1463                               const struct lu_name *name, struct md_attr *ma,
1464                               struct thandle *handle, int no_name, int is_dir)
1465 {
1466         struct lu_attr  *la = &mdd_env_info(env)->mti_la_for_fix;
1467         int              rc;
1468
1469         if (!OBD_FAIL_CHECK(OBD_FAIL_LFSCK_DANGLING2)) {
1470                 if (likely(no_name == 0)) {
1471                         rc = mdo_declare_index_delete(env, p, name->ln_name,
1472                                                       handle);
1473                         if (rc != 0)
1474                                 return rc;
1475                 }
1476
1477                 if (is_dir != 0) {
1478                         rc = mdo_declare_ref_del(env, p, handle);
1479                         if (rc != 0)
1480                                 return rc;
1481                 }
1482         }
1483
1484         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1485         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1486         la->la_valid = LA_CTIME | LA_MTIME;
1487         rc = mdo_declare_attr_set(env, p, la, handle);
1488         if (rc)
1489                 return rc;
1490
1491         if (c != NULL) {
1492                 rc = mdo_declare_ref_del(env, c, handle);
1493                 if (rc)
1494                         return rc;
1495
1496                 rc = mdo_declare_ref_del(env, c, handle);
1497                 if (rc)
1498                         return rc;
1499
1500                 la->la_valid = LA_CTIME;
1501                 rc = mdo_declare_attr_set(env, c, la, handle);
1502                 if (rc)
1503                         return rc;
1504
1505                 rc = mdd_declare_finish_unlink(env, c, handle);
1506                 if (rc)
1507                         return rc;
1508
1509                 /* FIXME: need changelog for remove entry */
1510                 rc = mdd_declare_changelog_store(env, mdd, name, NULL, handle);
1511         }
1512
1513         return rc;
1514 }
1515
1516 /*
1517  * test if a file has an HSM archive
1518  * if HSM attributes are not found in ma update them from
1519  * HSM xattr
1520  */
1521 static bool mdd_hsm_archive_exists(const struct lu_env *env,
1522                                    struct mdd_object *obj,
1523                                    struct md_attr *ma)
1524 {
1525         ENTRY;
1526
1527         if (!(ma->ma_valid & MA_HSM)) {
1528                 /* no HSM MD provided, read xattr */
1529                 struct lu_buf   *hsm_buf;
1530                 const size_t     buflen = sizeof(struct hsm_attrs);
1531                 int              rc;
1532
1533                 hsm_buf = mdd_buf_get(env, NULL, 0);
1534                 lu_buf_alloc(hsm_buf, buflen);
1535                 rc = mdo_xattr_get(env, obj, hsm_buf, XATTR_NAME_HSM,
1536                                    mdd_object_capa(env, obj));
1537                 rc = lustre_buf2hsm(hsm_buf->lb_buf, rc, &ma->ma_hsm);
1538                 lu_buf_free(hsm_buf);
1539                 if (rc < 0)
1540                         RETURN(false);
1541
1542                 ma->ma_valid = MA_HSM;
1543         }
1544         if (ma->ma_hsm.mh_flags & HS_EXISTS)
1545                 RETURN(true);
1546         RETURN(false);
1547 }
1548
1549 /**
1550  * Delete name entry and the object.
1551  * Note: no_name == 1 means it only destory the object, i.e. name_entry
1552  * does not exist for this object, and it could only happen during resending
1553  * of remote unlink. see the comments in mdt_reint_unlink. Unfortunately, lname
1554  * is also needed in this case(needed by changelog), so we have to add another
1555  * parameter(no_name)here. XXX: this is only needed in DNE phase I, on Phase II,
1556  * the ENOENT failure should be able to be fixed by redo mechanism.
1557  */
1558 static int mdd_unlink(const struct lu_env *env, struct md_object *pobj,
1559                       struct md_object *cobj, const struct lu_name *lname,
1560                       struct md_attr *ma, int no_name)
1561 {
1562         const char *name = lname->ln_name;
1563         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
1564         struct lu_attr *cattr = MDD_ENV_VAR(env, cattr);
1565         struct lu_attr *la = &mdd_env_info(env)->mti_la_for_fix;
1566         struct mdd_object *mdd_pobj = md2mdd_obj(pobj);
1567         struct mdd_object *mdd_cobj = NULL;
1568         struct mdd_device *mdd = mdo2mdd(pobj);
1569         struct thandle    *handle;
1570         int rc, is_dir = 0;
1571         ENTRY;
1572
1573         /* cobj == NULL means only delete name entry */
1574         if (likely(cobj != NULL)) {
1575                 mdd_cobj = md2mdd_obj(cobj);
1576                 if (mdd_object_exists(mdd_cobj) == 0)
1577                         RETURN(-ENOENT);
1578         }
1579
1580         rc = mdd_la_get(env, mdd_pobj, pattr, BYPASS_CAPA);
1581         if (rc)
1582                 RETURN(rc);
1583
1584         if (likely(mdd_cobj != NULL)) {
1585                 /* fetch cattr */
1586                 rc = mdd_la_get(env, mdd_cobj, cattr, BYPASS_CAPA);
1587                 if (rc)
1588                         RETURN(rc);
1589
1590                 is_dir = S_ISDIR(cattr->la_mode);
1591         }
1592
1593         rc = mdd_unlink_sanity_check(env, mdd_pobj, pattr, mdd_cobj, cattr);
1594         if (rc)
1595                 RETURN(rc);
1596
1597         handle = mdd_trans_create(env, mdd);
1598         if (IS_ERR(handle))
1599                 RETURN(PTR_ERR(handle));
1600
1601         rc = mdd_declare_unlink(env, mdd, mdd_pobj, mdd_cobj,
1602                                 lname, ma, handle, no_name, is_dir);
1603         if (rc)
1604                 GOTO(stop, rc);
1605
1606         rc = mdd_trans_start(env, mdd, handle);
1607         if (rc)
1608                 GOTO(stop, rc);
1609
1610         if (likely(mdd_cobj != NULL))
1611                 mdd_write_lock(env, mdd_cobj, MOR_TGT_CHILD);
1612
1613         if (likely(no_name == 0) && !OBD_FAIL_CHECK(OBD_FAIL_LFSCK_DANGLING2)) {
1614                 rc = __mdd_index_delete(env, mdd_pobj, name, is_dir, handle,
1615                                         mdd_object_capa(env, mdd_pobj));
1616                 if (rc)
1617                         GOTO(cleanup, rc);
1618         }
1619
1620         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_MUL_REF) ||
1621             OBD_FAIL_CHECK(OBD_FAIL_LFSCK_NO_NAMEENTRY))
1622                 GOTO(cleanup, rc = 0);
1623
1624         if (likely(mdd_cobj != NULL)) {
1625                 rc = mdo_ref_del(env, mdd_cobj, handle);
1626                 if (rc != 0) {
1627                         __mdd_index_insert_only(env, mdd_pobj,
1628                                                 mdo2fid(mdd_cobj),
1629                                                 mdd_object_type(mdd_cobj),
1630                                                 name, handle,
1631                                                 mdd_object_capa(env, mdd_pobj));
1632                         GOTO(cleanup, rc);
1633                 }
1634
1635                 if (is_dir)
1636                         /* unlink dot */
1637                         mdo_ref_del(env, mdd_cobj, handle);
1638
1639                 /* fetch updated nlink */
1640                 rc = mdd_la_get(env, mdd_cobj, cattr, BYPASS_CAPA);
1641                 if (rc)
1642                         GOTO(cleanup, rc);
1643         }
1644
1645         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1646         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1647
1648         la->la_valid = LA_CTIME | LA_MTIME;
1649         rc = mdd_update_time(env, mdd_pobj, pattr, la, handle);
1650         if (rc)
1651                 GOTO(cleanup, rc);
1652
1653         /* Enough for only unlink the entry */
1654         if (unlikely(mdd_cobj == NULL))
1655                 GOTO(stop, rc);
1656
1657         if (cattr->la_nlink > 0 || mdd_cobj->mod_count > 0) {
1658                 /* update ctime of an unlinked file only if it is still
1659                  * opened or a link still exists */
1660                 la->la_valid = LA_CTIME;
1661                 rc = mdd_update_time(env, mdd_cobj, cattr, la, handle);
1662                 if (rc)
1663                         GOTO(cleanup, rc);
1664         }
1665
1666         /* XXX: this transfer to ma will be removed with LOD/OSP */
1667         ma->ma_attr = *cattr;
1668         ma->ma_valid |= MA_INODE;
1669         rc = mdd_finish_unlink(env, mdd_cobj, ma, mdd_pobj, lname, handle);
1670
1671         /* fetch updated nlink */
1672         if (rc == 0)
1673                 rc = mdd_la_get(env, mdd_cobj, cattr, BYPASS_CAPA);
1674
1675         /* if object is removed then we can't get its attrs, use last get */
1676         if (cattr->la_nlink == 0) {
1677                 ma->ma_attr = *cattr;
1678                 ma->ma_valid |= MA_INODE;
1679         }
1680         EXIT;
1681 cleanup:
1682         if (likely(mdd_cobj != NULL))
1683                 mdd_write_unlock(env, mdd_cobj);
1684
1685         if (rc == 0) {
1686                 int cl_flags = 0;
1687
1688                 if (cattr->la_nlink == 0) {
1689                         cl_flags |= CLF_UNLINK_LAST;
1690                         /* search for an existing archive */
1691                         if (mdd_hsm_archive_exists(env, mdd_cobj, ma))
1692                                 cl_flags |= CLF_UNLINK_HSM_EXISTS;
1693                 }
1694
1695                 rc = mdd_changelog_ns_store(env, mdd,
1696                         is_dir ? CL_RMDIR : CL_UNLINK, cl_flags,
1697                         mdd_cobj, mdo2fid(mdd_pobj), NULL, NULL, lname, NULL,
1698                         handle);
1699         }
1700
1701 stop:
1702         mdd_trans_stop(env, mdd, rc, handle);
1703
1704         return rc;
1705 }
1706
1707 /*
1708  * The permission has been checked when obj created, no need check again.
1709  */
1710 static int mdd_cd_sanity_check(const struct lu_env *env,
1711                                struct mdd_object *obj)
1712 {
1713         ENTRY;
1714
1715         /* EEXIST check */
1716         if (!obj || mdd_is_dead_obj(obj))
1717                 RETURN(-ENOENT);
1718
1719         RETURN(0);
1720 }
1721
1722 static int mdd_create_data(const struct lu_env *env, struct md_object *pobj,
1723                            struct md_object *cobj, const struct md_op_spec *spec,
1724                            struct md_attr *ma)
1725 {
1726         struct mdd_device *mdd = mdo2mdd(cobj);
1727         struct mdd_object *mdd_pobj = md2mdd_obj(pobj);
1728         struct mdd_object *son = md2mdd_obj(cobj);
1729         struct thandle    *handle;
1730         const struct lu_buf *buf;
1731         struct lu_attr    *attr = MDD_ENV_VAR(env, cattr);
1732         struct dt_allocation_hint *hint = &mdd_env_info(env)->mti_hint;
1733         int                rc;
1734         ENTRY;
1735
1736         rc = mdd_cd_sanity_check(env, son);
1737         if (rc)
1738                 RETURN(rc);
1739
1740         if (!md_should_create(spec->sp_cr_flags))
1741                 RETURN(0);
1742
1743         /*
1744          * there are following use cases for this function:
1745          * 1) late striping - file was created with MDS_OPEN_DELAY_CREATE
1746          *    striping can be specified or not
1747          * 2) CMD?
1748          */
1749         rc = mdd_la_get(env, son, attr, BYPASS_CAPA);
1750         if (rc)
1751                 RETURN(rc);
1752
1753         /* calling ->ah_make_hint() is used to transfer information from parent */
1754         mdd_object_make_hint(env, mdd_pobj, son, attr, spec, hint);
1755
1756         handle = mdd_trans_create(env, mdd);
1757         if (IS_ERR(handle))
1758                 GOTO(out_free, rc = PTR_ERR(handle));
1759
1760         /*
1761          * XXX: Setting the lov ea is not locked but setting the attr is locked?
1762          * Should this be fixed?
1763          */
1764         CDEBUG(D_OTHER, "ea %p/%u, cr_flags "LPO64", no_create %u\n",
1765                spec->u.sp_ea.eadata, spec->u.sp_ea.eadatalen,
1766                spec->sp_cr_flags, spec->no_create);
1767
1768         if (spec->no_create || (spec->sp_cr_flags & MDS_OPEN_HAS_EA)) {
1769                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
1770                                         spec->u.sp_ea.eadatalen);
1771         } else {
1772                 buf = &LU_BUF_NULL;
1773         }
1774
1775         rc = dt_declare_xattr_set(env, mdd_object_child(son), buf,
1776                                   XATTR_NAME_LOV, 0, handle);
1777         if (rc)
1778                 GOTO(stop, rc);
1779
1780         rc = mdd_declare_changelog_store(env, mdd, NULL, NULL, handle);
1781         if (rc)
1782                 GOTO(stop, rc);
1783
1784         rc = mdd_trans_start(env, mdd, handle);
1785         if (rc)
1786                 GOTO(stop, rc);
1787
1788         rc = dt_xattr_set(env, mdd_object_child(son), buf, XATTR_NAME_LOV,
1789                           0, handle, mdd_object_capa(env, son));
1790
1791         if (rc)
1792                 GOTO(stop, rc);
1793
1794         rc = mdd_changelog_data_store(env, mdd, CL_LAYOUT, 0, son, handle);
1795
1796 stop:
1797         mdd_trans_stop(env, mdd, rc, handle);
1798 out_free:
1799         RETURN(rc);
1800 }
1801
1802 static int mdd_declare_object_initialize(const struct lu_env *env,
1803                                          struct mdd_object *parent,
1804                                          struct mdd_object *child,
1805                                          struct lu_attr *attr,
1806                                          struct thandle *handle)
1807 {
1808         int rc;
1809         ENTRY;
1810
1811         /*
1812          * inode mode has been set in creation time, and it's based on umask,
1813          * la_mode and acl, don't set here again! (which will go wrong
1814          * because below function doesn't consider umask).
1815          * I'd suggest set all object attributes in creation time, see above.
1816          */
1817         LASSERT(attr->la_valid & (LA_MODE | LA_TYPE));
1818         attr->la_valid &= ~(LA_MODE | LA_TYPE);
1819         rc = mdo_declare_attr_set(env, child, attr, handle);
1820         attr->la_valid |= LA_MODE | LA_TYPE;
1821         if (rc != 0 || !S_ISDIR(attr->la_mode))
1822                 RETURN(rc);
1823
1824         rc = mdo_declare_index_insert(env, child, mdo2fid(child), S_IFDIR,
1825                                       dot, handle);
1826         if (rc != 0)
1827                 RETURN(rc);
1828
1829         rc = mdo_declare_ref_add(env, child, handle);
1830         if (rc != 0)
1831                 RETURN(rc);
1832
1833         rc = mdo_declare_index_insert(env, child, mdo2fid(parent), S_IFDIR,
1834                                       dotdot, handle);
1835
1836         RETURN(rc);
1837 }
1838
1839 static int mdd_object_initialize(const struct lu_env *env,
1840                                  const struct lu_fid *pfid,
1841                                  struct mdd_object *child,
1842                                  struct lu_attr *attr, struct thandle *handle,
1843                                  const struct md_op_spec *spec)
1844 {
1845         int rc = 0;
1846         ENTRY;
1847
1848         if (S_ISDIR(attr->la_mode)) {
1849                 /* Add "." and ".." for newly created dir */
1850                 mdo_ref_add(env, child, handle);
1851                 rc = __mdd_index_insert_only(env, child, mdo2fid(child),
1852                                              S_IFDIR, dot, handle, BYPASS_CAPA);
1853                 if (rc == 0)
1854                         rc = __mdd_index_insert_only(env, child, pfid, S_IFDIR,
1855                                                      dotdot, handle,
1856                                                      BYPASS_CAPA);
1857                 if (rc != 0)
1858                         mdo_ref_del(env, child, handle);
1859         }
1860
1861         RETURN(rc);
1862 }
1863
1864 /**
1865  * This function checks whether it can create a file/dir under the
1866  * directory(@pobj). The directory(@pobj) is not being locked by
1867  * mdd lock.
1868  *
1869  * \param[in] env       execution environment
1870  * \param[in] pobj      the directory to create files
1871  * \param[in] pattr     the attributes of the directory
1872  * \param[in] lname     the name of the created file/dir
1873  * \param[in] cattr     the attributes of the file/dir
1874  * \param[in] spec      create specification
1875  *
1876  * \retval              = 0 it is allowed to create file/dir under
1877  *                      the directory
1878  * \retval              negative error not allowed to create file/dir
1879  *                      under the directory
1880  */
1881 static int mdd_create_sanity_check(const struct lu_env *env,
1882                                    struct md_object *pobj,
1883                                    const struct lu_attr *pattr,
1884                                    const struct lu_name *lname,
1885                                    struct lu_attr *cattr,
1886                                    struct md_op_spec *spec)
1887 {
1888         struct mdd_thread_info *info = mdd_env_info(env);
1889         struct lu_fid     *fid       = &info->mti_fid;
1890         struct mdd_object *obj       = md2mdd_obj(pobj);
1891         struct mdd_device *m         = mdo2mdd(pobj);
1892         bool            check_perm = true;
1893         int rc;
1894         ENTRY;
1895
1896         /* EEXIST check */
1897         if (mdd_is_dead_obj(obj))
1898                 RETURN(-ENOENT);
1899
1900         /*
1901          * In some cases this lookup is not needed - we know before if name
1902          * exists or not because MDT performs lookup for it.
1903          * name length check is done in lookup.
1904          */
1905         if (spec->sp_cr_lookup) {
1906                 /*
1907                  * Check if the name already exist, though it will be checked in
1908                  * _index_insert also, for avoiding rolling back if exists
1909                  * _index_insert.
1910                  */
1911                 rc = __mdd_lookup(env, pobj, pattr, lname, fid,
1912                                   MAY_WRITE | MAY_EXEC);
1913                 if (rc != -ENOENT)
1914                         RETURN(rc ? : -EEXIST);
1915
1916                 /* Permission is already being checked in mdd_lookup */
1917                 check_perm = false;
1918         }
1919
1920         rc = mdd_may_create(env, obj, pattr, NULL, check_perm);
1921         if (rc != 0)
1922                 RETURN(rc);
1923
1924         /* sgid check */
1925         if (pattr->la_mode & S_ISGID) {
1926                 cattr->la_gid = pattr->la_gid;
1927                 if (S_ISDIR(cattr->la_mode)) {
1928                         cattr->la_mode |= S_ISGID;
1929                         cattr->la_valid |= LA_MODE;
1930                 }
1931         }
1932
1933         rc = mdd_name_check(m, lname);
1934         if (rc < 0)
1935                 RETURN(rc);
1936
1937         switch (cattr->la_mode & S_IFMT) {
1938         case S_IFLNK: {
1939                 unsigned int symlen = strlen(spec->u.sp_symname) + 1;
1940
1941                 if (symlen > (1 << m->mdd_dt_conf.ddp_block_shift))
1942                         RETURN(-ENAMETOOLONG);
1943                 else
1944                         RETURN(0);
1945         }
1946         case S_IFDIR:
1947         case S_IFREG:
1948         case S_IFCHR:
1949         case S_IFBLK:
1950         case S_IFIFO:
1951         case S_IFSOCK:
1952                 rc = 0;
1953                 break;
1954         default:
1955                 rc = -EINVAL;
1956                 break;
1957         }
1958         RETURN(rc);
1959 }
1960
1961 static int mdd_declare_object_create(const struct lu_env *env,
1962                                      struct mdd_device *mdd,
1963                                      struct mdd_object *p, struct mdd_object *c,
1964                                      struct lu_attr *attr,
1965                                      struct thandle *handle,
1966                                      const struct md_op_spec *spec,
1967                                      struct lu_buf *def_acl_buf,
1968                                      struct lu_buf *acl_buf,
1969                                      struct dt_allocation_hint *hint)
1970 {
1971         int rc;
1972
1973         rc = mdd_declare_object_create_internal(env, p, c, attr, handle, spec,
1974                                                 hint);
1975         if (rc)
1976                 GOTO(out, rc);
1977
1978 #ifdef CONFIG_FS_POSIX_ACL
1979         if (def_acl_buf->lb_len > 0 && S_ISDIR(attr->la_mode)) {
1980                 /* if dir, then can inherit default ACl */
1981                 rc = mdo_declare_xattr_set(env, c, def_acl_buf,
1982                                            XATTR_NAME_ACL_DEFAULT,
1983                                            0, handle);
1984                 if (rc)
1985                         GOTO(out, rc);
1986         }
1987
1988         if (acl_buf->lb_len > 0) {
1989                 rc = mdo_declare_attr_set(env, c, attr, handle);
1990                 if (rc)
1991                         GOTO(out, rc);
1992
1993                 rc = mdo_declare_xattr_set(env, c, acl_buf,
1994                                            XATTR_NAME_ACL_ACCESS, 0, handle);
1995                 if (rc)
1996                         GOTO(out, rc);
1997         }
1998 #endif
1999         rc = mdd_declare_object_initialize(env, p, c, attr, handle);
2000         if (rc)
2001                 GOTO(out, rc);
2002
2003         /* replay case, create LOV EA from client data */
2004         if (spec->no_create ||
2005             (spec->sp_cr_flags & MDS_OPEN_HAS_EA && S_ISREG(attr->la_mode))) {
2006                 const struct lu_buf *buf;
2007
2008                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
2009                                         spec->u.sp_ea.eadatalen);
2010                 rc = mdo_declare_xattr_set(env, c, buf, XATTR_NAME_LOV, 0,
2011                                            handle);
2012                 if (rc)
2013                         GOTO(out, rc);
2014         }
2015
2016         if (S_ISLNK(attr->la_mode)) {
2017                 const char *target_name = spec->u.sp_symname;
2018                 int sym_len = strlen(target_name);
2019                 const struct lu_buf *buf;
2020
2021                 buf = mdd_buf_get_const(env, target_name, sym_len);
2022                 rc = dt_declare_record_write(env, mdd_object_child(c),
2023                                              buf, 0, handle);
2024                 if (rc)
2025                         GOTO(out, rc);
2026         }
2027 out:
2028         return rc;
2029 }
2030
2031 static int mdd_declare_create(const struct lu_env *env, struct mdd_device *mdd,
2032                               struct mdd_object *p, struct mdd_object *c,
2033                               const struct lu_name *name,
2034                               struct lu_attr *attr,
2035                               struct thandle *handle,
2036                               const struct md_op_spec *spec,
2037                               struct linkea_data *ldata,
2038                               struct lu_buf *def_acl_buf,
2039                               struct lu_buf *acl_buf,
2040                               struct dt_allocation_hint *hint)
2041 {
2042         int rc;
2043
2044         rc = mdd_declare_object_create(env, mdd, p, c, attr, handle, spec,
2045                                        def_acl_buf, acl_buf, hint);
2046         if (rc)
2047                 GOTO(out, rc);
2048
2049         if (S_ISDIR(attr->la_mode)) {
2050                 rc = mdo_declare_ref_add(env, p, handle);
2051                 if (rc)
2052                         GOTO(out, rc);
2053         }
2054
2055         if (unlikely(spec->sp_cr_flags & MDS_OPEN_VOLATILE)) {
2056                 rc = orph_declare_index_insert(env, c, attr->la_mode, handle);
2057                 if (rc)
2058                         GOTO(out, rc);
2059         } else {
2060                 struct lu_attr  *la = &mdd_env_info(env)->mti_la_for_fix;
2061
2062                 rc = mdo_declare_index_insert(env, p, mdo2fid(c), attr->la_mode,
2063                                               name->ln_name, handle);
2064                 if (rc != 0)
2065                         return rc;
2066
2067                 rc = mdd_declare_links_add(env, c, handle, ldata, MLAO_IGNORE);
2068                 if (rc)
2069                         return rc;
2070
2071                 *la = *attr;
2072                 la->la_valid = LA_CTIME | LA_MTIME;
2073                 rc = mdo_declare_attr_set(env, p, la, handle);
2074                 if (rc)
2075                         return rc;
2076
2077                 rc = mdd_declare_changelog_store(env, mdd, name, NULL, handle);
2078                 if (rc)
2079                         return rc;
2080         }
2081
2082         /* XXX: For remote create, it should indicate the remote RPC
2083          * will be sent after local transaction is finished, which
2084          * is not very nice, but it will be removed once we fully support
2085          * async update */
2086         if (mdd_object_remote(p) && handle->th_update != NULL)
2087                 handle->th_update->tu_sent_after_local_trans = 1;
2088 out:
2089         return rc;
2090 }
2091
2092 static int mdd_acl_init(const struct lu_env *env, struct mdd_object *pobj,
2093                         struct lu_attr *la, struct lu_buf *def_acl_buf,
2094                         struct lu_buf *acl_buf)
2095 {
2096         int     rc;
2097         ENTRY;
2098
2099         if (S_ISLNK(la->la_mode)) {
2100                 acl_buf->lb_len = 0;
2101                 def_acl_buf->lb_len = 0;
2102                 RETURN(0);
2103         }
2104
2105         mdd_read_lock(env, pobj, MOR_TGT_PARENT);
2106         rc = mdo_xattr_get(env, pobj, def_acl_buf,
2107                            XATTR_NAME_ACL_DEFAULT, BYPASS_CAPA);
2108         mdd_read_unlock(env, pobj);
2109         if (rc > 0) {
2110                 /* If there are default ACL, fix mode/ACL by default ACL */
2111                 def_acl_buf->lb_len = rc;
2112                 LASSERT(def_acl_buf->lb_len <= acl_buf->lb_len);
2113                 memcpy(acl_buf->lb_buf, def_acl_buf->lb_buf, rc);
2114                 acl_buf->lb_len = rc;
2115                 rc = __mdd_fix_mode_acl(env, acl_buf, &la->la_mode);
2116                 if (rc < 0)
2117                         RETURN(rc);
2118         } else if (rc == -ENODATA || rc == -EOPNOTSUPP) {
2119                 /* If there are no default ACL, fix mode by mask */
2120                 struct lu_ucred *uc = lu_ucred(env);
2121
2122                 /* The create triggered by MDT internal events, such as
2123                  * LFSCK reset, will not contain valid "uc". */
2124                 if (unlikely(uc != NULL))
2125                         la->la_mode &= ~uc->uc_umask;
2126                 rc = 0;
2127                 acl_buf->lb_len = 0;
2128                 def_acl_buf->lb_len = 0;
2129         }
2130
2131         RETURN(rc);
2132 }
2133
2134 /**
2135  * Create a metadata object and initialize it, set acl, xattr.
2136  **/
2137 static int mdd_object_create(const struct lu_env *env, struct mdd_object *pobj,
2138                              struct mdd_object *son, struct lu_attr *attr,
2139                              struct md_op_spec *spec, struct lu_buf *acl_buf,
2140                              struct lu_buf *def_acl_buf,
2141                              struct dt_allocation_hint *hint,
2142                              struct thandle *handle)
2143 {
2144         int                     rc;
2145
2146         mdd_write_lock(env, son, MOR_TGT_CHILD);
2147         rc = mdd_object_create_internal(env, NULL, son, attr, handle, spec,
2148                                         hint);
2149         if (rc)
2150                 GOTO(unlock, rc);
2151
2152         /* Note: In DNE phase I, for striped dir, though sub-stripes will be
2153          * created in declare phase, they also needs to be added to master
2154          * object as sub-directory entry. So it has to initialize the master
2155          * object, then set dir striped EA.(in mdo_xattr_set) */
2156         rc = mdd_object_initialize(env, mdo2fid(pobj), son, attr, handle,
2157                                    spec);
2158         if (rc != 0)
2159                 GOTO(err_destroy, rc);
2160
2161         /*
2162          * in case of replay we just set LOVEA provided by the client
2163          * XXX: I think it would be interesting to try "old" way where
2164          *      MDT calls this xattr_set(LOV) in a different transaction.
2165          *      probably this way we code can be made better.
2166          */
2167
2168         /* During creation, there are only a few cases we need do xattr_set to
2169          * create stripes.
2170          * 1. regular file: see comments above.
2171          * 2. create striped directory with provided stripeEA.
2172          * 3. create striped directory because inherit default layout from the
2173          * parent. */
2174         if (spec->no_create ||
2175             (S_ISREG(attr->la_mode) && spec->sp_cr_flags & MDS_OPEN_HAS_EA) ||
2176             S_ISDIR(attr->la_mode)) {
2177                 const struct lu_buf *buf;
2178
2179                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
2180                                         spec->u.sp_ea.eadatalen);
2181                 rc = mdo_xattr_set(env, son, buf,
2182                                    S_ISDIR(attr->la_mode) ? XATTR_NAME_LMV :
2183                                                             XATTR_NAME_LOV, 0,
2184                                    handle, BYPASS_CAPA);
2185                 if (rc != 0)
2186                         GOTO(err_destroy, rc);
2187         }
2188
2189 #ifdef CONFIG_FS_POSIX_ACL
2190         if (def_acl_buf != NULL && def_acl_buf->lb_len > 0 &&
2191             S_ISDIR(attr->la_mode)) {
2192                 /* set default acl */
2193                 rc = mdo_xattr_set(env, son, def_acl_buf,
2194                                    XATTR_NAME_ACL_DEFAULT, 0,
2195                                    handle, BYPASS_CAPA);
2196                 if (rc)
2197                         GOTO(err_destroy, rc);
2198         }
2199         /* set its own acl */
2200         if (acl_buf != NULL && acl_buf->lb_len > 0) {
2201                 rc = mdo_xattr_set(env, son, acl_buf,
2202                                    XATTR_NAME_ACL_ACCESS,
2203                                    0, handle, BYPASS_CAPA);
2204                 if (rc)
2205                         GOTO(err_destroy, rc);
2206         }
2207 #endif
2208
2209         if (S_ISLNK(attr->la_mode)) {
2210                 struct lu_ucred  *uc = lu_ucred_assert(env);
2211                 struct dt_object *dt = mdd_object_child(son);
2212                 const char *target_name = spec->u.sp_symname;
2213                 int sym_len = strlen(target_name);
2214                 const struct lu_buf *buf;
2215                 loff_t pos = 0;
2216
2217                 buf = mdd_buf_get_const(env, target_name, sym_len);
2218                 rc = dt->do_body_ops->dbo_write(env, dt, buf, &pos, handle,
2219                                                 mdd_object_capa(env, son),
2220                                                 uc->uc_cap &
2221                                                 CFS_CAP_SYS_RESOURCE_MASK);
2222
2223                 if (rc == sym_len)
2224                         rc = 0;
2225                 else
2226                         GOTO(err_initlized, rc = -EFAULT);
2227         }
2228
2229 err_initlized:
2230         if (unlikely(rc != 0)) {
2231                 int rc2;
2232                 if (S_ISDIR(attr->la_mode)) {
2233                         /* Drop the reference, no need to delete "."/"..",
2234                          * because the object to be destroied directly. */
2235                         rc2 = mdo_ref_del(env, son, handle);
2236                         if (rc2 != 0)
2237                                 GOTO(unlock, rc);
2238                 }
2239                 rc2 = mdo_ref_del(env, son, handle);
2240                 if (rc2 != 0)
2241                         GOTO(unlock, rc);
2242 err_destroy:
2243                 mdo_destroy(env, son, handle);
2244         }
2245 unlock:
2246         mdd_write_unlock(env, son);
2247         RETURN(rc);
2248 }
2249
2250 /*
2251  * Create object and insert it into namespace.
2252  */
2253 static int mdd_create(const struct lu_env *env, struct md_object *pobj,
2254                       const struct lu_name *lname, struct md_object *child,
2255                       struct md_op_spec *spec, struct md_attr* ma)
2256 {
2257         struct mdd_thread_info  *info = mdd_env_info(env);
2258         struct lu_attr          *la = &info->mti_la_for_fix;
2259         struct mdd_object       *mdd_pobj = md2mdd_obj(pobj);
2260         struct mdd_object       *son = md2mdd_obj(child);
2261         struct mdd_device       *mdd = mdo2mdd(pobj);
2262         struct lu_attr          *attr = &ma->ma_attr;
2263         struct thandle          *handle;
2264         struct lu_attr          *pattr = &info->mti_pattr;
2265         struct lu_buf           acl_buf;
2266         struct lu_buf           def_acl_buf;
2267         struct linkea_data      *ldata = &info->mti_link_data;
2268         const char              *name = lname->ln_name;
2269         struct dt_allocation_hint *hint = &mdd_env_info(env)->mti_hint;
2270         int                      rc;
2271         int                      rc2;
2272         ENTRY;
2273
2274         /*
2275          * Two operations have to be performed:
2276          *
2277          *  - an allocation of a new object (->do_create()), and
2278          *
2279          *  - an insertion into a parent index (->dio_insert()).
2280          *
2281          * Due to locking, operation order is not important, when both are
2282          * successful, *but* error handling cases are quite different:
2283          *
2284          *  - if insertion is done first, and following object creation fails,
2285          *  insertion has to be rolled back, but this operation might fail
2286          *  also leaving us with dangling index entry.
2287          *
2288          *  - if creation is done first, is has to be undone if insertion
2289          *  fails, leaving us with leaked space, which is neither good, nor
2290          *  fatal.
2291          *
2292          * It seems that creation-first is simplest solution, but it is
2293          * sub-optimal in the frequent
2294          *
2295          *         $ mkdir foo
2296          *         $ mkdir foo
2297          *
2298          * case, because second mkdir is bound to create object, only to
2299          * destroy it immediately.
2300          *
2301          * To avoid this follow local file systems that do double lookup:
2302          *
2303          *     0. lookup -> -EEXIST (mdd_create_sanity_check())
2304          *
2305          *     1. create            (mdd_object_create_internal())
2306          *
2307          *     2. insert            (__mdd_index_insert(), lookup again)
2308          */
2309
2310         rc = mdd_la_get(env, mdd_pobj, pattr, BYPASS_CAPA);
2311         if (rc != 0)
2312                 RETURN(rc);
2313
2314         /* Sanity checks before big job. */
2315         rc = mdd_create_sanity_check(env, pobj, pattr, lname, attr, spec);
2316         if (rc)
2317                 RETURN(rc);
2318
2319         if (OBD_FAIL_CHECK(OBD_FAIL_MDS_DQACQ_NET))
2320                 GOTO(out_free, rc = -EINPROGRESS);
2321
2322         handle = mdd_trans_create(env, mdd);
2323         if (IS_ERR(handle))
2324                 GOTO(out_free, rc = PTR_ERR(handle));
2325
2326         acl_buf.lb_buf = info->mti_xattr_buf;
2327         acl_buf.lb_len = sizeof(info->mti_xattr_buf);
2328         def_acl_buf.lb_buf = info->mti_key;
2329         def_acl_buf.lb_len = sizeof(info->mti_key);
2330         rc = mdd_acl_init(env, mdd_pobj, attr, &def_acl_buf, &acl_buf);
2331         if (rc < 0)
2332                 GOTO(out_stop, rc);
2333
2334         mdd_object_make_hint(env, mdd_pobj, son, attr, spec, hint);
2335
2336         memset(ldata, 0, sizeof(*ldata));
2337         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_BAD_PARENT2)) {
2338                 struct lu_fid tfid = *mdd_object_fid(mdd_pobj);
2339
2340                 tfid.f_oid--;
2341                 rc = mdd_linkea_prepare(env, son, NULL, NULL,
2342                                         &tfid, lname, 1, 0, ldata);
2343         } else {
2344                 rc = mdd_linkea_prepare(env, son, NULL, NULL,
2345                                         mdd_object_fid(mdd_pobj),
2346                                         lname, 1, 0, ldata);
2347         }
2348
2349         rc = mdd_declare_create(env, mdd, mdd_pobj, son, lname, attr,
2350                                 handle, spec, ldata, &def_acl_buf, &acl_buf,
2351                                 hint);
2352         if (rc)
2353                 GOTO(out_stop, rc);
2354
2355         rc = mdd_trans_start(env, mdd, handle);
2356         if (rc)
2357                 GOTO(out_stop, rc);
2358
2359         rc = mdd_object_create(env, mdd_pobj, son, attr, spec, &acl_buf,
2360                                &def_acl_buf, hint, handle);
2361         if (rc != 0)
2362                 GOTO(out_stop, rc);
2363
2364         if (unlikely(spec->sp_cr_flags & MDS_OPEN_VOLATILE)) {
2365                 mdd_write_lock(env, son, MOR_TGT_CHILD);
2366                 rc = __mdd_orphan_add(env, son, handle);
2367                 GOTO(out_volatile, rc);
2368         } else {
2369                 rc = __mdd_index_insert(env, mdd_pobj, mdo2fid(son),
2370                                         attr->la_mode, name, handle,
2371                                         mdd_object_capa(env, mdd_pobj));
2372                 if (rc != 0)
2373                         GOTO(err_created, rc);
2374
2375                 mdd_links_add(env, son, mdo2fid(mdd_pobj), lname, handle,
2376                               ldata, 1);
2377
2378                 /* update parent directory mtime/ctime */
2379                 *la = *attr;
2380                 la->la_valid = LA_CTIME | LA_MTIME;
2381                 rc = mdd_update_time(env, mdd_pobj, pattr, la, handle);
2382                 if (rc)
2383                         GOTO(err_insert, rc);
2384         }
2385
2386         EXIT;
2387 err_insert:
2388         if (rc != 0) {
2389                 int rc2;
2390
2391                 if (spec->sp_cr_flags & MDS_OPEN_VOLATILE)
2392                         rc2 = __mdd_orphan_del(env, son, handle);
2393                 else
2394                         rc2 = __mdd_index_delete(env, mdd_pobj, name,
2395                                                  S_ISDIR(attr->la_mode),
2396                                                  handle, BYPASS_CAPA);
2397                 if (rc2 != 0)
2398                         goto out_stop;
2399
2400 err_created:
2401                 mdd_write_lock(env, son, MOR_TGT_CHILD);
2402                 if (S_ISDIR(attr->la_mode)) {
2403                         /* Drop the reference, no need to delete "."/"..",
2404                          * because the object is to be destroyed directly. */
2405                         rc2 = mdo_ref_del(env, son, handle);
2406                         if (rc2 != 0) {
2407                                 mdd_write_unlock(env, son);
2408                                 goto out_stop;
2409                         }
2410                 }
2411 out_volatile:
2412                 /* For volatile files drop one link immediately, since there is
2413                  * no filename in the namespace, and save any error returned. */
2414                 rc2 = mdo_ref_del(env, son, handle);
2415                 if (rc2 != 0) {
2416                         mdd_write_unlock(env, son);
2417                         if (unlikely(rc == 0))
2418                                 rc = rc2;
2419                         goto out_stop;
2420                 }
2421
2422                 /* Don't destroy the volatile object on success */
2423                 if (likely(rc != 0))
2424                         mdo_destroy(env, son, handle);
2425                 mdd_write_unlock(env, son);
2426         }
2427
2428         if (rc == 0 && fid_is_namespace_visible(mdo2fid(son)) &&
2429             likely((spec->sp_cr_flags & MDS_OPEN_VOLATILE) == 0))
2430                 rc = mdd_changelog_ns_store(env, mdd,
2431                                 S_ISDIR(attr->la_mode) ? CL_MKDIR :
2432                                 S_ISREG(attr->la_mode) ? CL_CREATE :
2433                                 S_ISLNK(attr->la_mode) ? CL_SOFTLINK : CL_MKNOD,
2434                                 0, son, mdo2fid(mdd_pobj), NULL, NULL, lname,
2435                                 NULL, handle);
2436 out_stop:
2437         rc2 = mdd_trans_stop(env, mdd, rc, handle);
2438         if (rc == 0)
2439                 rc = rc2;
2440 out_free:
2441         if (ldata->ld_buf && ldata->ld_buf->lb_len > OBD_ALLOC_BIG)
2442                 /* if we vmalloced a large buffer drop it */
2443                 lu_buf_free(ldata->ld_buf);
2444
2445         /* The child object shouldn't be cached anymore */
2446         if (rc)
2447                 set_bit(LU_OBJECT_HEARD_BANSHEE,
2448                         &child->mo_lu.lo_header->loh_flags);
2449         return rc;
2450 }
2451
2452 /*
2453  * Get locks on parents in proper order
2454  * RETURN: < 0 - error, rename_order if successful
2455  */
2456 enum rename_order {
2457         MDD_RN_SAME,
2458         MDD_RN_SRCTGT,
2459         MDD_RN_TGTSRC
2460 };
2461
2462 static int mdd_rename_order(const struct lu_env *env,
2463                             struct mdd_device *mdd,
2464                             struct mdd_object *src_pobj,
2465                             const struct lu_attr *pattr,
2466                             struct mdd_object *tgt_pobj)
2467 {
2468         /* order of locking, 1 - tgt-src, 0 - src-tgt*/
2469         int rc;
2470         ENTRY;
2471
2472         if (src_pobj == tgt_pobj)
2473                 RETURN(MDD_RN_SAME);
2474
2475         /* compared the parent child relationship of src_p&tgt_p */
2476         if (lu_fid_eq(&mdd->mdd_root_fid, mdo2fid(src_pobj))){
2477                 rc = MDD_RN_SRCTGT;
2478         } else if (lu_fid_eq(&mdd->mdd_root_fid, mdo2fid(tgt_pobj))) {
2479                 rc = MDD_RN_TGTSRC;
2480         } else {
2481                 rc = mdd_is_parent(env, mdd, src_pobj, pattr, mdo2fid(tgt_pobj),
2482                                    NULL);
2483                 if (rc == -EREMOTE)
2484                         rc = 0;
2485
2486                 if (rc == 1)
2487                         rc = MDD_RN_TGTSRC;
2488                 else if (rc == 0)
2489                         rc = MDD_RN_SRCTGT;
2490         }
2491
2492         RETURN(rc);
2493 }
2494
2495 /* has not mdd_write{read}_lock on any obj yet. */
2496 static int mdd_rename_sanity_check(const struct lu_env *env,
2497                                    struct mdd_object *src_pobj,
2498                                    const struct lu_attr *pattr,
2499                                    struct mdd_object *tgt_pobj,
2500                                    const struct lu_attr *tpattr,
2501                                    struct mdd_object *sobj,
2502                                    const struct lu_attr *cattr,
2503                                    struct mdd_object *tobj,
2504                                    const struct lu_attr *tattr)
2505 {
2506         int rc = 0;
2507         ENTRY;
2508
2509         /* XXX: when get here, sobj must NOT be NULL,
2510          * the other case has been processed in cld_rename
2511          * before mdd_rename and enable MDS_PERM_BYPASS. */
2512         LASSERT(sobj);
2513
2514         rc = mdd_may_delete(env, src_pobj, pattr, sobj, cattr, NULL, 1, 0);
2515         if (rc)
2516                 RETURN(rc);
2517
2518         /* XXX: when get here, "tobj == NULL" means tobj must
2519          * NOT exist (neither on remote MDS, such case has been
2520          * processed in cld_rename before mdd_rename and enable
2521          * MDS_PERM_BYPASS).
2522          * So check may_create, but not check may_unlink. */
2523         if (tobj == NULL)
2524                 rc = mdd_may_create(env, tgt_pobj, tpattr, NULL,
2525                                     (src_pobj != tgt_pobj));
2526         else
2527                 rc = mdd_may_delete(env, tgt_pobj, tpattr, tobj, tattr, cattr,
2528                                     (src_pobj != tgt_pobj), 1);
2529
2530         if (!rc && !tobj && (src_pobj != tgt_pobj) && S_ISDIR(cattr->la_mode))
2531                 rc = __mdd_may_link(env, tgt_pobj, tpattr);
2532
2533         RETURN(rc);
2534 }
2535
2536 static int mdd_declare_rename(const struct lu_env *env,
2537                               struct mdd_device *mdd,
2538                               struct mdd_object *mdd_spobj,
2539                               struct mdd_object *mdd_tpobj,
2540                               struct mdd_object *mdd_sobj,
2541                               struct mdd_object *mdd_tobj,
2542                               const struct lu_name *tname,
2543                               const struct lu_name *sname,
2544                               struct md_attr *ma,
2545                               struct linkea_data *ldata,
2546                               struct thandle *handle)
2547 {
2548         struct lu_attr    *la = &mdd_env_info(env)->mti_la_for_fix;
2549         int rc;
2550
2551         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
2552         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
2553
2554         LASSERT(mdd_spobj);
2555         LASSERT(mdd_tpobj);
2556         LASSERT(mdd_sobj);
2557
2558         /* name from source dir */
2559         rc = mdo_declare_index_delete(env, mdd_spobj, sname->ln_name, handle);
2560         if (rc)
2561                 return rc;
2562
2563         /* .. from source child */
2564         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
2565                 /* source child can be directory,
2566                  * counted by source dir's nlink */
2567                 rc = mdo_declare_ref_del(env, mdd_spobj, handle);
2568                 if (rc)
2569                         return rc;
2570                 if (mdd_spobj != mdd_tpobj) {
2571                         rc = mdo_declare_index_delete(env, mdd_sobj, dotdot,
2572                                                       handle);
2573                         if (rc != 0)
2574                                 return rc;
2575
2576                         rc = mdo_declare_index_insert(env, mdd_sobj,
2577                                                       mdo2fid(mdd_tpobj),
2578                                                       S_IFDIR, dotdot, handle);
2579                         if (rc != 0)
2580                                 return rc;
2581                 }
2582
2583                 /* new target child can be directory,
2584                  * counted by target dir's nlink */
2585                 rc = mdo_declare_ref_add(env, mdd_tpobj, handle);
2586                 if (rc != 0)
2587                         return rc;
2588         }
2589
2590         la->la_valid = LA_CTIME | LA_MTIME;
2591         rc = mdo_declare_attr_set(env, mdd_spobj, la, handle);
2592         if (rc != 0)
2593                 return rc;
2594
2595         rc = mdo_declare_attr_set(env, mdd_tpobj, la, handle);
2596         if (rc != 0)
2597                 return rc;
2598
2599         la->la_valid = LA_CTIME;
2600         rc = mdo_declare_attr_set(env, mdd_sobj, la, handle);
2601         if (rc)
2602                 return rc;
2603
2604         rc = mdd_declare_links_add(env, mdd_sobj, handle, ldata,
2605                 S_ISREG(mdd_object_type(mdd_sobj)) ? MLAO_CHECK : MLAO_IGNORE);
2606         if (rc)
2607                 return rc;
2608
2609         /* new name */
2610         rc = mdo_declare_index_insert(env, mdd_tpobj, mdo2fid(mdd_sobj),
2611                                       mdd_object_type(mdd_sobj),
2612                                       tname->ln_name, handle);
2613         if (rc != 0)
2614                 return rc;
2615
2616         /* name from target dir (old name), we declare it unconditionally
2617          * as mdd_rename() calls delete unconditionally as well. so just
2618          * to balance declarations vs calls to change ... */
2619         rc = mdo_declare_index_delete(env, mdd_tpobj, tname->ln_name, handle);
2620         if (rc)
2621                 return rc;
2622
2623         if (mdd_tobj && mdd_object_exists(mdd_tobj)) {
2624                 /* delete target child in target parent directory */
2625                 rc = mdo_declare_ref_del(env, mdd_tobj, handle);
2626                 if (rc)
2627                         return rc;
2628
2629                 if (S_ISDIR(mdd_object_type(mdd_tobj))) {
2630                         /* target child can be directory,
2631                          * delete "." reference in target child directory */
2632                         rc = mdo_declare_ref_del(env, mdd_tobj, handle);
2633                         if (rc)
2634                                 return rc;
2635
2636                         /* delete ".." reference in target parent directory */
2637                         rc = mdo_declare_ref_del(env, mdd_tpobj, handle);
2638                         if (rc)
2639                                 return rc;
2640                 }
2641
2642                 la->la_valid = LA_CTIME;
2643                 rc = mdo_declare_attr_set(env, mdd_tobj, la, handle);
2644                 if (rc)
2645                         return rc;
2646
2647                 rc = mdd_declare_finish_unlink(env, mdd_tobj, handle);
2648                 if (rc)
2649                         return rc;
2650         }
2651
2652         rc = mdd_declare_changelog_store(env, mdd, tname, sname, handle);
2653         if (rc)
2654                 return rc;
2655
2656         return rc;
2657 }
2658
2659 /* src object can be remote that is why we use only fid and type of object */
2660 static int mdd_rename(const struct lu_env *env,
2661                       struct md_object *src_pobj, struct md_object *tgt_pobj,
2662                       const struct lu_fid *lf, const struct lu_name *lsname,
2663                       struct md_object *tobj, const struct lu_name *ltname,
2664                       struct md_attr *ma)
2665 {
2666         const char *sname = lsname->ln_name;
2667         const char *tname = ltname->ln_name;
2668         struct lu_attr    *la = &mdd_env_info(env)->mti_la_for_fix;
2669         struct mdd_object *mdd_spobj = md2mdd_obj(src_pobj); /* source parent */
2670         struct mdd_object *mdd_tpobj = md2mdd_obj(tgt_pobj);
2671         struct mdd_device *mdd = mdo2mdd(src_pobj);
2672         struct mdd_object *mdd_sobj = NULL;                  /* source object */
2673         struct mdd_object *mdd_tobj = NULL;
2674         struct lu_attr *cattr = MDD_ENV_VAR(env, cattr);
2675         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
2676         struct lu_attr *tattr = MDD_ENV_VAR(env, tattr);
2677         struct lu_attr *tpattr = MDD_ENV_VAR(env, tpattr);
2678         struct thandle *handle;
2679         struct linkea_data  *ldata = &mdd_env_info(env)->mti_link_data;
2680         const struct lu_fid *tpobj_fid = mdo2fid(mdd_tpobj);
2681         const struct lu_fid *spobj_fid = mdo2fid(mdd_spobj);
2682         bool is_dir;
2683         bool tobj_ref = 0;
2684         bool tobj_locked = 0;
2685         unsigned cl_flags = 0;
2686         int rc, rc2;
2687         ENTRY;
2688
2689         if (tobj)
2690                 mdd_tobj = md2mdd_obj(tobj);
2691
2692         mdd_sobj = mdd_object_find(env, mdd, lf);
2693
2694         rc = mdd_la_get(env, mdd_sobj, cattr, BYPASS_CAPA);
2695         if (rc)
2696                 GOTO(out_pending, rc);
2697
2698         rc = mdd_la_get(env, mdd_spobj, pattr, BYPASS_CAPA);
2699         if (rc)
2700                 GOTO(out_pending, rc);
2701
2702         if (mdd_tobj) {
2703                 rc = mdd_la_get(env, mdd_tobj, tattr, BYPASS_CAPA);
2704                 if (rc)
2705                         GOTO(out_pending, rc);
2706         }
2707
2708         rc = mdd_la_get(env, mdd_tpobj, tpattr, BYPASS_CAPA);
2709         if (rc)
2710                 GOTO(out_pending, rc);
2711
2712         rc = mdd_rename_sanity_check(env, mdd_spobj, pattr, mdd_tpobj, tpattr,
2713                                      mdd_sobj, cattr, mdd_tobj, tattr);
2714         if (rc)
2715                 GOTO(out_pending, rc);
2716
2717         rc = mdd_name_check(mdd, ltname);
2718         if (rc < 0)
2719                 GOTO(out_pending, rc);
2720
2721         handle = mdd_trans_create(env, mdd);
2722         if (IS_ERR(handle))
2723                 GOTO(out_pending, rc = PTR_ERR(handle));
2724
2725         memset(ldata, 0, sizeof(*ldata));
2726         mdd_linkea_prepare(env, mdd_sobj, NULL, NULL, mdd_object_fid(mdd_tpobj),
2727                            ltname, 1, 0, ldata);
2728         rc = mdd_declare_rename(env, mdd, mdd_spobj, mdd_tpobj, mdd_sobj,
2729                                 mdd_tobj, lsname, ltname, ma, ldata, handle);
2730         if (rc)
2731                 GOTO(stop, rc);
2732
2733         rc = mdd_trans_start(env, mdd, handle);
2734         if (rc)
2735                 GOTO(stop, rc);
2736
2737         /* FIXME: Should consider tobj and sobj too in rename_lock. */
2738         rc = mdd_rename_order(env, mdd, mdd_spobj, pattr, mdd_tpobj);
2739         if (rc < 0)
2740                 GOTO(cleanup_unlocked, rc);
2741
2742         is_dir = S_ISDIR(cattr->la_mode);
2743
2744         /* Remove source name from source directory */
2745         rc = __mdd_index_delete(env, mdd_spobj, sname, is_dir, handle,
2746                                 mdd_object_capa(env, mdd_spobj));
2747         if (rc)
2748                 GOTO(cleanup, rc);
2749
2750         /* "mv dir1 dir2" needs "dir1/.." link update */
2751         if (is_dir && mdd_sobj && !lu_fid_eq(spobj_fid, tpobj_fid)) {
2752                 rc = __mdd_index_delete_only(env, mdd_sobj, dotdot, handle,
2753                                         mdd_object_capa(env, mdd_sobj));
2754                 if (rc != 0)
2755                         GOTO(fixup_spobj2, rc);
2756
2757                 rc = __mdd_index_insert_only(env, mdd_sobj, tpobj_fid, S_IFDIR,
2758                                              dotdot, handle,
2759                                              mdd_object_capa(env, mdd_sobj));
2760                 if (rc != 0)
2761                         GOTO(fixup_spobj, rc);
2762         }
2763
2764         /* Remove target name from target directory
2765          * Here tobj can be remote one, so we do index_delete unconditionally
2766          * and -ENOENT is allowed.
2767          */
2768         rc = __mdd_index_delete(env, mdd_tpobj, tname, is_dir, handle,
2769                                 mdd_object_capa(env, mdd_tpobj));
2770         if (rc != 0) {
2771                 if (mdd_tobj) {
2772                         /* tname might been renamed to something else */
2773                         GOTO(fixup_spobj, rc);
2774                 }
2775                 if (rc != -ENOENT)
2776                         GOTO(fixup_spobj, rc);
2777         }
2778
2779         /* Insert new fid with target name into target dir */
2780         rc = __mdd_index_insert(env, mdd_tpobj, lf, cattr->la_mode,
2781                                 tname, handle, mdd_object_capa(env, mdd_tpobj));
2782         if (rc != 0)
2783                 GOTO(fixup_tpobj, rc);
2784
2785         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
2786         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
2787
2788         /* XXX: mdd_sobj must be local one if it is NOT NULL. */
2789         if (mdd_sobj) {
2790                 la->la_valid = LA_CTIME;
2791                 rc = mdd_update_time(env, mdd_sobj, cattr, la, handle);
2792                 if (rc)
2793                         GOTO(fixup_tpobj, rc);
2794         }
2795
2796         /* Remove old target object
2797          * For tobj is remote case cmm layer has processed
2798          * and set tobj to NULL then. So when tobj is NOT NULL,
2799          * it must be local one.
2800          */
2801         if (tobj && mdd_object_exists(mdd_tobj)) {
2802                 mdd_write_lock(env, mdd_tobj, MOR_TGT_CHILD);
2803                 tobj_locked = 1;
2804                 if (mdd_is_dead_obj(mdd_tobj)) {
2805                         /* shld not be dead, something is wrong */
2806                         CERROR("tobj is dead, something is wrong\n");
2807                         rc = -EINVAL;
2808                         goto cleanup;
2809                 }
2810                 mdo_ref_del(env, mdd_tobj, handle);
2811
2812                 /* Remove dot reference. */
2813                 if (S_ISDIR(tattr->la_mode))
2814                         mdo_ref_del(env, mdd_tobj, handle);
2815                 tobj_ref = 1;
2816
2817                 /* fetch updated nlink */
2818                 rc = mdd_la_get(env, mdd_tobj, tattr, BYPASS_CAPA);
2819                 if (rc != 0) {
2820                         CERROR("%s: Failed to get nlink for tobj "
2821                                 DFID": rc = %d\n",
2822                                 mdd2obd_dev(mdd)->obd_name,
2823                                 PFID(tpobj_fid), rc);
2824                         GOTO(fixup_tpobj, rc);
2825                 }
2826
2827                 la->la_valid = LA_CTIME;
2828                 rc = mdd_update_time(env, mdd_tobj, tattr, la, handle);
2829                 if (rc != 0) {
2830                         CERROR("%s: Failed to set ctime for tobj "
2831                                 DFID": rc = %d\n",
2832                                 mdd2obd_dev(mdd)->obd_name,
2833                                 PFID(tpobj_fid), rc);
2834                         GOTO(fixup_tpobj, rc);
2835                 }
2836
2837                 /* XXX: this transfer to ma will be removed with LOD/OSP */
2838                 ma->ma_attr = *tattr;
2839                 ma->ma_valid |= MA_INODE;
2840                 rc = mdd_finish_unlink(env, mdd_tobj, ma, mdd_tpobj, ltname,
2841                                        handle);
2842                 if (rc != 0) {
2843                         CERROR("%s: Failed to unlink tobj "
2844                                 DFID": rc = %d\n",
2845                                 mdd2obd_dev(mdd)->obd_name,
2846                                 PFID(tpobj_fid), rc);
2847                         GOTO(fixup_tpobj, rc);
2848                 }
2849
2850                 /* fetch updated nlink */
2851                 rc = mdd_la_get(env, mdd_tobj, tattr, BYPASS_CAPA);
2852                 if (rc != 0) {
2853                         CERROR("%s: Failed to get nlink for tobj "
2854                                 DFID": rc = %d\n",
2855                                 mdd2obd_dev(mdd)->obd_name,
2856                                 PFID(tpobj_fid), rc);
2857                         GOTO(fixup_tpobj, rc);
2858                 }
2859                 /* XXX: this transfer to ma will be removed with LOD/OSP */
2860                 ma->ma_attr = *tattr;
2861                 ma->ma_valid |= MA_INODE;
2862
2863                 if (tattr->la_nlink == 0) {
2864                         cl_flags |= CLF_RENAME_LAST;
2865                         if (mdd_hsm_archive_exists(env, mdd_tobj, ma))
2866                                 cl_flags |= CLF_RENAME_LAST_EXISTS;
2867                 }
2868         }
2869
2870         la->la_valid = LA_CTIME | LA_MTIME;
2871         rc = mdd_update_time(env, mdd_spobj, pattr, la, handle);
2872         if (rc)
2873                 GOTO(fixup_tpobj, rc);
2874
2875         if (mdd_spobj != mdd_tpobj) {
2876                 la->la_valid = LA_CTIME | LA_MTIME;
2877                 rc = mdd_update_time(env, mdd_tpobj, tpattr, la, handle);
2878         }
2879
2880         if (rc == 0 && mdd_sobj) {
2881                 mdd_write_lock(env, mdd_sobj, MOR_SRC_CHILD);
2882                 rc = mdd_links_rename(env, mdd_sobj, mdo2fid(mdd_spobj), lsname,
2883                                       mdo2fid(mdd_tpobj), ltname, handle, NULL,
2884                                       0, 0);
2885                 if (rc == -ENOENT)
2886                         /* Old files might not have EA entry */
2887                         mdd_links_add(env, mdd_sobj, mdo2fid(mdd_spobj),
2888                                       lsname, handle, NULL, 0);
2889                 mdd_write_unlock(env, mdd_sobj);
2890                 /* We don't fail the transaction if the link ea can't be
2891                    updated -- fid2path will use alternate lookup method. */
2892                 rc = 0;
2893         }
2894
2895         EXIT;
2896
2897 fixup_tpobj:
2898         if (rc) {
2899                 rc2 = __mdd_index_delete(env, mdd_tpobj, tname, is_dir, handle,
2900                                          BYPASS_CAPA);
2901                 if (rc2)
2902                         CWARN("tp obj fix error %d\n",rc2);
2903
2904                 if (mdd_tobj && mdd_object_exists(mdd_tobj) &&
2905                     !mdd_is_dead_obj(mdd_tobj)) {
2906                         if (tobj_ref) {
2907                                 mdo_ref_add(env, mdd_tobj, handle);
2908                                 if (is_dir)
2909                                         mdo_ref_add(env, mdd_tobj, handle);
2910                         }
2911
2912                         rc2 = __mdd_index_insert(env, mdd_tpobj,
2913                                                   mdo2fid(mdd_tobj),
2914                                                   mdd_object_type(mdd_tobj),
2915                                                   tname, handle, BYPASS_CAPA);
2916                         if (rc2 != 0)
2917                                 CWARN("tp obj fix error: rc = %d\n", rc2);
2918                 }
2919         }
2920
2921 fixup_spobj:
2922         if (rc && is_dir && mdd_sobj && mdd_spobj != mdd_tpobj) {
2923                 rc2 = __mdd_index_delete_only(env, mdd_sobj, dotdot, handle,
2924                                               BYPASS_CAPA);
2925
2926                 if (rc2)
2927                         CWARN("%s: sp obj dotdot delete error: rc = %d\n",
2928                                mdd2obd_dev(mdd)->obd_name, rc2);
2929
2930
2931                 rc2 = __mdd_index_insert_only(env, mdd_sobj, spobj_fid, S_IFDIR,
2932                                               dotdot, handle, BYPASS_CAPA);
2933                 if (rc2 != 0)
2934                         CWARN("%s: sp obj dotdot insert error: rc = %d\n",
2935                               mdd2obd_dev(mdd)->obd_name, rc2);
2936         }
2937
2938 fixup_spobj2:
2939         if (rc != 0) {
2940                 rc2 = __mdd_index_insert(env, mdd_spobj, lf,
2941                                          mdd_object_type(mdd_sobj), sname,
2942                                          handle, BYPASS_CAPA);
2943                 if (rc2 != 0)
2944                         CWARN("sp obj fix error: rc = %d\n", rc2);
2945         }
2946
2947 cleanup:
2948         if (tobj_locked)
2949                 mdd_write_unlock(env, mdd_tobj);
2950
2951 cleanup_unlocked:
2952         if (rc == 0)
2953                 rc = mdd_changelog_ns_store(env, mdd, CL_RENAME, cl_flags,
2954                                             mdd_tobj, tpobj_fid, lf, spobj_fid,
2955                                             ltname, lsname, handle);
2956
2957 stop:
2958         mdd_trans_stop(env, mdd, rc, handle);
2959
2960 out_pending:
2961         mdd_object_put(env, mdd_sobj);
2962         return rc;
2963 }
2964
2965 /**
2966  * During migration once the parent FID has been changed,
2967  * we need update the parent FID in linkea.
2968  **/
2969 static int mdd_linkea_update_child_internal(const struct lu_env *env,
2970                                             struct mdd_object *parent,
2971                                             struct mdd_object *child,
2972                                             const char *name, int namelen,
2973                                             struct thandle *handle,
2974                                             bool declare)
2975 {
2976         struct mdd_thread_info  *info = mdd_env_info(env);
2977         struct linkea_data      ldata = {0};
2978         struct lu_buf           *buf = &info->mti_link_buf;
2979         int                     count;
2980         int                     rc = 0;
2981
2982         ENTRY;
2983
2984         buf = lu_buf_check_and_alloc(buf, PATH_MAX);
2985         if (buf->lb_buf == NULL)
2986                 RETURN(-ENOMEM);
2987
2988         ldata.ld_buf = buf;
2989         rc = mdd_links_read(env, child, &ldata);
2990         if (rc != 0) {
2991                 if (rc == -ENOENT || rc == -ENODATA)
2992                         rc = 0;
2993                 RETURN(rc);
2994         }
2995
2996         LASSERT(ldata.ld_leh != NULL);
2997         ldata.ld_lee = (struct link_ea_entry *)(ldata.ld_leh + 1);
2998         for (count = 0; count < ldata.ld_leh->leh_reccount; count++) {
2999                 struct mdd_device *mdd = mdo2mdd(&child->mod_obj);
3000                 struct lu_name lname;
3001                 struct lu_fid  fid;
3002
3003                 linkea_entry_unpack(ldata.ld_lee, &ldata.ld_reclen,
3004                                     &lname, &fid);
3005
3006                 if (strncmp(lname.ln_name, name, namelen) != 0 ||
3007                     lu_fid_eq(&fid, mdd_object_fid(parent))) {
3008                         ldata.ld_lee = (struct link_ea_entry *)
3009                                        ((char *)ldata.ld_lee +
3010                                         ldata.ld_reclen);
3011                         continue;
3012                 }
3013
3014                 CDEBUG(D_INFO, "%s: update "DFID" with %.*s:"DFID"\n",
3015                        mdd2obd_dev(mdd)->obd_name, PFID(mdd_object_fid(child)),
3016                        lname.ln_namelen, lname.ln_name,
3017                        PFID(mdd_object_fid(parent)));
3018                 /* update to the new parent fid */
3019                 linkea_entry_pack(ldata.ld_lee, &lname,
3020                                   mdd_object_fid(parent));
3021                 if (declare)
3022                         rc = mdd_declare_links_add(env, child, handle, &ldata,
3023                                                    MLAO_IGNORE);
3024                 else
3025                         rc = mdd_links_write(env, child, &ldata, handle);
3026                 break;
3027         }
3028         RETURN(rc);
3029 }
3030
3031 static int mdd_linkea_declare_update_child(const struct lu_env *env,
3032                                            struct mdd_object *parent,
3033                                            struct mdd_object *child,
3034                                            const char *name, int namelen,
3035                                            struct thandle *handle)
3036 {
3037         return mdd_linkea_update_child_internal(env, parent, child, name,
3038                                                 namelen, handle, true);
3039 }
3040
3041 static int mdd_linkea_update_child(const struct lu_env *env,
3042                                    struct mdd_object *parent,
3043                                    struct mdd_object *child,
3044                                    const char *name, int namelen,
3045                                    struct thandle *handle)
3046 {
3047         return mdd_linkea_update_child_internal(env, parent, child, name,
3048                                                 namelen, handle, false);
3049 }
3050
3051 static int mdd_update_linkea_internal(const struct lu_env *env,
3052                                       struct mdd_object *mdd_pobj,
3053                                       struct mdd_object *mdd_sobj,
3054                                       struct mdd_object *mdd_tobj,
3055                                       const struct lu_name *child_name,
3056                                       struct thandle *handle,
3057                                       int declare)
3058 {
3059         struct mdd_thread_info  *info = mdd_env_info(env);
3060         struct linkea_data      *ldata = &info->mti_link_data;
3061         int                     count;
3062         int                     rc = 0;
3063         ENTRY;
3064
3065         rc = mdd_links_read(env, mdd_sobj, ldata);
3066         if (rc != 0) {
3067                 if (rc == -ENOENT || rc == -ENODATA)
3068                         rc = 0;
3069                 RETURN(rc);
3070         }
3071
3072         if (declare)
3073                 rc = mdd_declare_links_add(env, mdd_tobj, handle, ldata,
3074                                            MLAO_IGNORE);
3075         else
3076                 rc = mdd_links_write(env, mdd_tobj, ldata, handle);
3077
3078         if (rc != 0)
3079                 RETURN(rc);
3080
3081         /* If it is mulitple links file, we need update the name entry for
3082          * all parent */
3083         LASSERT(ldata->ld_leh != NULL);
3084         ldata->ld_lee = (struct link_ea_entry *)(ldata->ld_leh + 1);
3085         for (count = 0; count < ldata->ld_leh->leh_reccount; count++) {
3086                 struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3087                 struct mdd_object       *pobj;
3088                 struct lu_name          lname;
3089                 struct lu_fid           fid;
3090
3091                 linkea_entry_unpack(ldata->ld_lee, &ldata->ld_reclen,
3092                                     &lname, &fid);
3093                 ldata->ld_lee = (struct link_ea_entry *)((char *)ldata->ld_lee +
3094                                                          ldata->ld_reclen);
3095                 pobj = mdd_object_find(env, mdd, &fid);
3096                 if (IS_ERR(pobj)) {
3097                         CWARN("%s: cannot find obj "DFID": rc = %ld\n",
3098                               mdd2obd_dev(mdd)->obd_name, PFID(&fid),
3099                               PTR_ERR(pobj));
3100                         continue;
3101                 }
3102
3103                 if (!mdd_object_exists(pobj)) {
3104                         CDEBUG(D_INFO, "%s: obj "DFID" does not exist\n",
3105                               mdd2obd_dev(mdd)->obd_name, PFID(&fid));
3106                         GOTO(next_put, rc);
3107                 }
3108
3109                 if (pobj == mdd_pobj &&
3110                     lname.ln_namelen == child_name->ln_namelen &&
3111                     strncmp(lname.ln_name, child_name->ln_name,
3112                             lname.ln_namelen) == 0) {
3113                         CDEBUG(D_INFO, "%s: skip its own %s: "DFID"\n",
3114                               mdd2obd_dev(mdd)->obd_name, child_name->ln_name,
3115                               PFID(&fid));
3116                         GOTO(next_put, rc);
3117                 }
3118
3119                 CDEBUG(D_INFO, "%s: update "DFID" with "DNAME":"DFID"\n",
3120                        mdd2obd_dev(mdd)->obd_name, PFID(mdd_object_fid(pobj)),
3121                        PNAME(&lname), PFID(mdd_object_fid(mdd_tobj)));
3122
3123                 if (declare) {
3124                         /* Remove source name from source directory */
3125                         /* Insert new fid with target name into target dir */
3126                         rc = mdo_declare_index_delete(env, pobj, lname.ln_name,
3127                                                       handle);
3128                         if (rc != 0)
3129                                 GOTO(next_put, rc);
3130
3131                         rc = mdo_declare_index_insert(env, pobj,
3132                                         mdd_object_fid(mdd_tobj),
3133                                         mdd_object_type(mdd_tobj),
3134                                         lname.ln_name, handle);
3135                         if (rc != 0)
3136                                 GOTO(next_put, rc);
3137
3138                         rc = mdo_declare_ref_add(env, mdd_tobj, handle);
3139                         if (rc)
3140                                 GOTO(next_put, rc);
3141
3142                         rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3143                         if (rc)
3144                                 GOTO(next_put, rc);
3145                 } else {
3146                         rc = __mdd_index_delete(env, pobj, lname.ln_name,
3147                                                 0, handle,
3148                                                 mdd_object_capa(env, pobj));
3149                         if (rc)
3150                                 GOTO(next_put, rc);
3151
3152                         rc = __mdd_index_insert(env, pobj,
3153                                         mdd_object_fid(mdd_tobj),
3154                                         mdd_object_type(mdd_tobj),
3155                                         lname.ln_name, handle,
3156                                         mdd_object_capa(env, pobj));
3157                         if (rc != 0)
3158                                 GOTO(next_put, rc);
3159
3160                         mdd_write_lock(env, mdd_tobj, MOR_SRC_CHILD);
3161                         rc = mdo_ref_add(env, mdd_tobj, handle);
3162                         mdd_write_unlock(env, mdd_tobj);
3163                         if (rc)
3164                                 GOTO(next_put, rc);
3165
3166                         mdd_write_lock(env, mdd_sobj, MOR_TGT_CHILD);
3167                         mdo_ref_del(env, mdd_sobj, handle);
3168                         mdd_write_unlock(env, mdd_sobj);
3169                 }
3170 next_put:
3171                 mdd_object_put(env, pobj);
3172                 if (rc != 0)
3173                         break;
3174         }
3175
3176         RETURN(rc);
3177 }
3178
3179 static int mdd_migrate_xattrs(const struct lu_env *env,
3180                               struct mdd_object *mdd_sobj,
3181                               struct mdd_object *mdd_tobj)
3182 {
3183         struct mdd_thread_info  *info = mdd_env_info(env);
3184         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3185         char                    *xname;
3186         struct thandle          *handle;
3187         struct lu_buf           xbuf;
3188         int                     xlen;
3189         int                     rem;
3190         int                     xsize;
3191         int                     list_xsize;
3192         struct lu_buf           list_xbuf;
3193         int                     rc;
3194
3195         /* retrieve xattr list from the old object */
3196         list_xsize = mdo_xattr_list(env, mdd_sobj, &LU_BUF_NULL,
3197                                     mdd_object_capa(env, mdd_sobj));
3198         if (list_xsize == -ENODATA)
3199                 return 0;
3200
3201         if (list_xsize < 0)
3202                 return list_xsize;
3203
3204         lu_buf_check_and_alloc(&info->mti_big_buf, list_xsize);
3205         if (info->mti_big_buf.lb_buf == NULL)
3206                 return -ENOMEM;
3207
3208         list_xbuf.lb_buf = info->mti_big_buf.lb_buf;
3209         list_xbuf.lb_len = list_xsize;
3210         rc = mdo_xattr_list(env, mdd_sobj, &list_xbuf,
3211                             mdd_object_capa(env, mdd_sobj));
3212         if (rc < 0)
3213                 return rc;
3214         rc = 0;
3215         rem = list_xsize;
3216         xname = list_xbuf.lb_buf;
3217         while (rem > 0) {
3218                 xlen = strnlen(xname, rem - 1) + 1;
3219                 if (strcmp(XATTR_NAME_LINK, xname) == 0 ||
3220                     strcmp(XATTR_NAME_LMA, xname) == 0 ||
3221                     strcmp(XATTR_NAME_LMV, xname) == 0)
3222                         goto next;
3223
3224                 /* For directory, if there are default layout, migrate here */
3225                 if (strcmp(XATTR_NAME_LOV, xname) == 0 &&
3226                     !S_ISDIR(lu_object_attr(&mdd_sobj->mod_obj.mo_lu)))
3227                         goto next;
3228
3229                 xsize = mdo_xattr_get(env, mdd_sobj, &LU_BUF_NULL,
3230                                       xname,
3231                                       mdd_object_capa(env, mdd_sobj));
3232                 if (xsize == -ENODATA)
3233                         goto next;
3234                 if (xsize < 0)
3235                         GOTO(out, rc);
3236
3237                 lu_buf_check_and_alloc(&info->mti_link_buf, xsize);
3238                 if (info->mti_link_buf.lb_buf == NULL)
3239                         GOTO(out, rc = -ENOMEM);
3240
3241                 xbuf.lb_len = xsize;
3242                 xbuf.lb_buf = info->mti_link_buf.lb_buf;
3243                 rc = mdo_xattr_get(env, mdd_sobj, &xbuf, xname,
3244                                    mdd_object_capa(env, mdd_sobj));
3245                 if (rc == -ENODATA)
3246                         goto next;
3247                 if (rc < 0)
3248                         GOTO(out, rc);
3249
3250                 handle = mdd_trans_create(env, mdd);
3251                 if (IS_ERR(handle))
3252                         GOTO(out, rc = PTR_ERR(handle));
3253
3254                 rc = mdo_declare_xattr_set(env, mdd_tobj, &xbuf, xname, 0,
3255                                            handle);
3256                 if (rc != 0)
3257                         GOTO(stop_trans, rc);
3258                 /* Note: this transaction is part of migration, and it is not
3259                  * the last step of migration, so we set th_local = 1 to avoid
3260                  * update last rcvd for this transaction */
3261                 handle->th_local = 1;
3262                 rc = mdd_trans_start(env, mdd, handle);
3263                 if (rc != 0)
3264                         GOTO(stop_trans, rc);
3265
3266                 rc = mdo_xattr_set(env, mdd_tobj, &xbuf, xname, 0, handle,
3267                                    mdd_object_capa(env, mdd_sobj));
3268                 if (rc == -EEXIST)
3269                         GOTO(stop_trans, rc = 0);
3270
3271                 if (rc != 0)
3272                         GOTO(stop_trans, rc);
3273 stop_trans:
3274                 mdd_trans_stop(env, mdd, rc, handle);
3275                 if (rc != 0)
3276                         GOTO(out, rc);
3277 next:
3278                 rem -= xlen;
3279                 memmove(xname, xname + xlen, rem);
3280         }
3281 out:
3282         return rc;
3283 }
3284
3285 static int mdd_declare_migrate_create(const struct lu_env *env,
3286                                       struct mdd_object *mdd_pobj,
3287                                       struct mdd_object *mdd_sobj,
3288                                       struct mdd_object *mdd_tobj,
3289                                       struct md_op_spec *spec,
3290                                       struct lu_attr *la,
3291                                       union lmv_mds_md *mgr_ea,
3292                                       struct thandle *handle)
3293 {
3294         struct lu_attr          *la_flag = MDD_ENV_VAR(env, la_for_fix);
3295         const struct lu_buf     *buf;
3296         int                     rc;
3297         int                     mgr_easize;
3298
3299         rc = mdd_declare_object_create_internal(env, mdd_pobj, mdd_tobj, la,
3300                                                 handle, spec, NULL);
3301         if (rc != 0)
3302                 return rc;
3303
3304         rc = mdd_declare_object_initialize(env, mdd_pobj, mdd_tobj, la,
3305                                            handle);
3306         if (rc != 0)
3307                 return rc;
3308
3309         if (S_ISLNK(la->la_mode)) {
3310                 const char *target_name = spec->u.sp_symname;
3311                 int sym_len = strlen(target_name);
3312                 const struct lu_buf *buf;
3313
3314                 buf = mdd_buf_get_const(env, target_name, sym_len);
3315                 rc = dt_declare_record_write(env, mdd_object_child(mdd_tobj),
3316                                              buf, 0, handle);
3317                 if (rc != 0)
3318                         return rc;
3319         }
3320
3321         if (spec->u.sp_ea.eadata != NULL && spec->u.sp_ea.eadatalen != 0) {
3322                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
3323                                         spec->u.sp_ea.eadatalen);
3324                 rc = mdo_declare_xattr_set(env, mdd_tobj, buf, XATTR_NAME_LOV,
3325                                            0, handle);
3326                 if (rc)
3327                         return rc;
3328         }
3329
3330         mgr_easize = lmv_mds_md_size(2, LMV_MAGIC_V1);
3331         buf = mdd_buf_get_const(env, mgr_ea, mgr_easize);
3332         rc = mdo_declare_xattr_set(env, mdd_sobj, buf, XATTR_NAME_LMV,
3333                                    0, handle);
3334         if (rc)
3335                 return rc;
3336
3337         la_flag->la_valid = LA_FLAGS;
3338         la_flag->la_flags = la->la_flags | LUSTRE_IMMUTABLE_FL;
3339         rc = mdo_declare_attr_set(env, mdd_sobj, la_flag, handle);
3340
3341         return rc;
3342 }
3343
3344 static int mdd_migrate_create(const struct lu_env *env,
3345                               struct mdd_object *mdd_pobj,
3346                               struct mdd_object *mdd_sobj,
3347                               struct mdd_object *mdd_tobj,
3348                               struct lu_attr *la)
3349 {
3350         struct mdd_thread_info  *info = mdd_env_info(env);
3351         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3352         struct md_op_spec       *spec = &info->mti_spec;
3353         struct lu_buf           lmm_buf = { 0 };
3354         struct lu_buf           link_buf = { 0 };
3355         const struct lu_buf     *buf;
3356         struct thandle          *handle;
3357         struct lmv_mds_md_v1    *mgr_ea;
3358         struct lu_attr          *la_flag = MDD_ENV_VAR(env, la_for_fix);
3359         struct dt_allocation_hint *hint = &mdd_env_info(env)->mti_hint;
3360         int                     mgr_easize;
3361         int                     rc;
3362         ENTRY;
3363
3364         /* prepare spec for create */
3365         memset(spec, 0, sizeof(*spec));
3366         spec->sp_cr_lookup = 0;
3367         spec->sp_feat = &dt_directory_features;
3368         if (S_ISLNK(la->la_mode)) {
3369                 buf = lu_buf_check_and_alloc(
3370                                 &mdd_env_info(env)->mti_big_buf,
3371                                 la->la_size + 1);
3372                 link_buf = *buf;
3373                 link_buf.lb_len = la->la_size + 1;
3374                 rc = mdd_readlink(env, &mdd_sobj->mod_obj, &link_buf);
3375                 if (rc <= 0) {
3376                         rc = rc != 0 ? rc : -EFAULT;
3377                         CERROR("%s: "DFID" readlink failed: rc = %d\n",
3378                                mdd2obd_dev(mdd)->obd_name,
3379                                PFID(mdd_object_fid(mdd_sobj)), rc);
3380                         RETURN(rc);
3381                 }
3382                 spec->u.sp_symname = link_buf.lb_buf;
3383         } else if S_ISREG(la->la_mode) {
3384                 /* retrieve lov of the old object */
3385                 rc = mdd_get_lov_ea(env, mdd_sobj, &lmm_buf);
3386                 if (rc != 0 && rc != -ENODATA)
3387                         RETURN(rc);
3388                 if (lmm_buf.lb_buf != NULL && lmm_buf.lb_len != 0) {
3389                         spec->u.sp_ea.eadata = lmm_buf.lb_buf;
3390                         spec->u.sp_ea.eadatalen = lmm_buf.lb_len;
3391                         spec->sp_cr_flags |= MDS_OPEN_HAS_EA;
3392                 }
3393         }
3394
3395         mgr_ea = (struct lmv_mds_md_v1 *)info->mti_xattr_buf;
3396         memset(mgr_ea, 0, sizeof(*mgr_ea));
3397         mgr_ea->lmv_magic = cpu_to_le32(LMV_MAGIC_V1);
3398         mgr_ea->lmv_stripe_count = cpu_to_le32(2);
3399         mgr_ea->lmv_master_mdt_index = mdd_seq_site(mdd)->ss_node_id;
3400         mgr_ea->lmv_hash_type = cpu_to_le32(LMV_HASH_FLAG_MIGRATION);
3401         fid_cpu_to_le(&mgr_ea->lmv_stripe_fids[0], mdd_object_fid(mdd_sobj));
3402         fid_cpu_to_le(&mgr_ea->lmv_stripe_fids[1], mdd_object_fid(mdd_tobj));
3403
3404         mdd_object_make_hint(env, mdd_pobj, mdd_tobj, la, spec, hint);
3405
3406         handle = mdd_trans_create(env, mdd);
3407         if (IS_ERR(handle))
3408                 GOTO(out_free, rc = PTR_ERR(handle));
3409
3410         /* Note: this transaction is part of migration, and it is not
3411          * the last step of migration, so we set th_local = 1 to avoid
3412          * update last rcvd for this transaction */
3413         handle->th_local = 1;
3414         rc = mdd_declare_migrate_create(env, mdd_pobj, mdd_sobj, mdd_tobj,
3415                                         spec, la,
3416                                         (union lmv_mds_md *)info->mti_xattr_buf,
3417                                         handle);
3418         if (rc != 0)
3419                 GOTO(stop_trans, rc);
3420
3421         rc = mdd_trans_start(env, mdd, handle);
3422         if (rc != 0)
3423                 GOTO(stop_trans, rc);
3424
3425         /* create the target object */
3426         rc = mdd_object_create(env, mdd_pobj, mdd_tobj, la, spec, NULL, NULL,
3427                                hint, handle);
3428         if (rc != 0)
3429                 GOTO(stop_trans, rc);
3430
3431         /* Set MIGRATE EA on the source inode, so once the migration needs
3432          * to be re-done during failover, the re-do process can locate the
3433          * target object which is already being created. */
3434         mgr_easize = lmv_mds_md_size(2, LMV_MAGIC_V1);
3435         buf = mdd_buf_get_const(env, mgr_ea, mgr_easize);
3436         rc = mdo_xattr_set(env, mdd_sobj, buf, XATTR_NAME_LMV, 0,
3437                            handle, mdd_object_capa(env, mdd_sobj));
3438         if (rc != 0)
3439                 GOTO(stop_trans, rc);
3440
3441         /* Set immutable flag, so any modification is disabled until
3442          * the migration is done. Once the migration is interrupted,
3443          * if the resume process find the migrating object has both
3444          * IMMUTALBE flag and MIGRATE EA, it need to clear IMMUTABLE
3445          * flag and approve the migration */
3446         la_flag->la_valid = LA_FLAGS;
3447         la_flag->la_flags = la->la_flags | LUSTRE_IMMUTABLE_FL;
3448         rc = mdo_attr_set(env, mdd_sobj, la_flag, handle,
3449                           mdd_object_capa(env, mdd_sobj));
3450 stop_trans:
3451         if (handle != NULL)
3452                 mdd_trans_stop(env, mdd, rc, handle);
3453 out_free:
3454         if (lmm_buf.lb_buf != NULL)
3455                 OBD_FREE(lmm_buf.lb_buf, lmm_buf.lb_len);
3456         RETURN(rc);
3457 }
3458
3459 static int mdd_migrate_entries(const struct lu_env *env,
3460                                struct mdd_object *mdd_sobj,
3461                                struct mdd_object *mdd_tobj)
3462 {
3463         struct dt_object        *next = mdd_object_child(mdd_sobj);
3464         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3465         struct dt_object        *dt_tobj = mdd_object_child(mdd_tobj);
3466         struct thandle          *handle;
3467         struct dt_it            *it;
3468         const struct dt_it_ops  *iops;
3469         int                      rc;
3470         int                      result;
3471         struct lu_dirent        *ent;
3472         ENTRY;
3473
3474         OBD_ALLOC(ent, NAME_MAX + sizeof(*ent) + 1);
3475         if (ent == NULL)
3476                 RETURN(-ENOMEM);
3477
3478         if (!dt_try_as_dir(env, next))
3479                 GOTO(out_ent, rc = -ENOTDIR);
3480         /*
3481          * iterate directories
3482          */
3483         iops = &next->do_index_ops->dio_it;
3484         it = iops->init(env, next, LUDA_FID | LUDA_TYPE,
3485                         mdd_object_capa(env, mdd_sobj));
3486         if (IS_ERR(it))
3487                 GOTO(out_ent, rc = PTR_ERR(it));
3488
3489         rc = iops->load(env, it, 0);
3490         if (rc == 0)
3491                 rc = iops->next(env, it);
3492         else if (rc > 0)
3493                 rc = 0;
3494         /*
3495          * At this point and across for-loop:
3496          *
3497          *  rc == 0 -> ok, proceed.
3498          *  rc >  0 -> end of directory.
3499          *  rc <  0 -> error.
3500          */
3501         do {
3502                 struct mdd_object       *child;
3503                 char                    *name = mdd_env_info(env)->mti_key;
3504                 int                     len;
3505                 int                     recsize;
3506                 int                     is_dir;
3507                 bool                    target_exist = false;
3508
3509                 len = iops->key_size(env, it);
3510                 if (len == 0)
3511                         goto next;
3512
3513                 result = iops->rec(env, it, (struct dt_rec *)ent,
3514                                    LUDA_FID | LUDA_TYPE);
3515                 if (result == -ESTALE)
3516                         goto next;
3517                 if (result != 0) {
3518                         rc = result;
3519                         goto out;
3520                 }
3521
3522                 fid_le_to_cpu(&ent->lde_fid, &ent->lde_fid);
3523                 recsize = le16_to_cpu(ent->lde_reclen);
3524
3525                 /* Insert new fid with target name into target dir */
3526                 if ((ent->lde_namelen == 1 && ent->lde_name[0] == '.') ||
3527                     (ent->lde_namelen == 2 && ent->lde_name[0] == '.' &&
3528                      ent->lde_name[1] == '.'))
3529                         goto next;
3530
3531                 child = mdd_object_find(env, mdd, &ent->lde_fid);
3532                 if (IS_ERR(child))
3533                         GOTO(out, rc = PTR_ERR(child));
3534
3535                 is_dir = S_ISDIR(mdd_object_type(child));
3536
3537                 snprintf(name, ent->lde_namelen + 1, "%s", ent->lde_name);
3538
3539                 /* Check whether the name has been inserted to the target */
3540                 if (dt_try_as_dir(env, dt_tobj)) {
3541                         struct lu_fid *fid = &mdd_env_info(env)->mti_fid2;
3542
3543                         rc = dt_lookup(env, dt_tobj, (struct dt_rec *)fid,
3544                                        (struct dt_key *)name,
3545                                        mdd_object_capa(env, mdd_tobj));
3546                         if (unlikely(rc == 0))
3547                                 target_exist = true;
3548                 }
3549
3550                 handle = mdd_trans_create(env, mdd);
3551                 if (IS_ERR(handle))
3552                         GOTO(out, rc = PTR_ERR(handle));
3553
3554                 /* Note: this transaction is part of migration, and it is not
3555                  * the last step of migration, so we set th_local = 1 to avoid
3556                  * updating last rcvd for this transaction */
3557                 handle->th_local = 1;
3558                 if (likely(!target_exist)) {
3559                         rc = mdo_declare_index_insert(env, mdd_tobj,
3560                                                       &ent->lde_fid,
3561                                                       mdd_object_type(child),
3562                                                       name, handle);
3563                         if (rc != 0)
3564                                 GOTO(out_put, rc);
3565
3566                         if (is_dir) {
3567                                 rc = mdo_declare_ref_add(env, mdd_tobj, handle);
3568                                 if (rc != 0)
3569                                         GOTO(out_put, rc);
3570                         }
3571                 }
3572
3573                 rc = mdo_declare_index_delete(env, mdd_sobj, name, handle);
3574                 if (rc != 0)
3575                         GOTO(out_put, rc);
3576
3577                 if (is_dir) {
3578                         rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3579                         if (rc != 0)
3580                                 GOTO(out_put, rc);
3581
3582                         /* Update .. for child */
3583                         rc = mdo_declare_index_delete(env, child, dotdot,
3584                                                       handle);
3585                         if (rc != 0)
3586                                 GOTO(out_put, rc);
3587
3588                         rc = mdo_declare_index_insert(env, child,
3589                                                       mdd_object_fid(mdd_tobj),
3590                                                       S_IFDIR, dotdot, handle);
3591                         if (rc != 0)
3592                                 GOTO(out_put, rc);
3593                 }
3594
3595                 rc = mdd_linkea_declare_update_child(env, mdd_tobj,
3596                                                      child, name,
3597                                                      strlen(name),
3598                                                      handle);
3599                 if (rc != 0)
3600                         GOTO(out_put, rc);
3601
3602                 rc = mdd_trans_start(env, mdd, handle);
3603                 if (rc != 0) {
3604                         CERROR("%s: transaction start failed: rc = %d\n",
3605                                mdd2obd_dev(mdd)->obd_name, rc);
3606                         GOTO(out_put, rc);
3607                 }
3608
3609                 if (likely(!target_exist)) {
3610                         rc = __mdd_index_insert(env, mdd_tobj, &ent->lde_fid,
3611                                                 mdd_object_type(child),
3612                                                 name, handle,
3613                                                 mdd_object_capa(env, mdd_tobj));
3614                         if (rc != 0)
3615                                 GOTO(out_put, rc);
3616
3617                         if (is_dir) {
3618                                 rc = mdo_ref_add(env, mdd_tobj, handle);
3619                                 if (rc != 0)
3620                                         GOTO(out_put, rc);
3621
3622                         }
3623                 }
3624
3625                 rc = __mdd_index_delete(env, mdd_sobj, name, is_dir, handle,
3626                                         mdd_object_capa(env, mdd_sobj));
3627                 if (rc != 0)
3628                         GOTO(out_put, rc);
3629
3630                 if (is_dir) {
3631                         rc = __mdd_index_delete_only(env, child, dotdot, handle,
3632                                                    mdd_object_capa(env, child));
3633                         if (rc != 0)
3634                                 GOTO(out_put, rc);
3635
3636                         rc = __mdd_index_insert_only(env, child,
3637                                          mdd_object_fid(mdd_tobj), S_IFDIR,
3638                                          dotdot, handle,
3639                                          mdd_object_capa(env, child));
3640                         if (rc != 0)
3641                                 GOTO(out_put, rc);
3642                 }
3643
3644                 rc = mdd_linkea_update_child(env, mdd_tobj, child, name,
3645                                              strlen(name), handle);
3646
3647 out_put:
3648                 mdd_object_put(env, child);
3649                 mdd_trans_stop(env, mdd, rc, handle);
3650                 if (rc != 0)
3651                         GOTO(out, rc);
3652 next:
3653                 result = iops->next(env, it);
3654                 if (OBD_FAIL_CHECK(OBD_FAIL_MIGRATE_ENTRIES))
3655                         GOTO(out, rc = -EINTR);
3656
3657                 if (result == -ESTALE)
3658                         goto next;
3659         } while (result == 0);
3660 out:
3661         iops->put(env, it);
3662         iops->fini(env, it);
3663 out_ent:
3664         OBD_FREE(ent, NAME_MAX + sizeof(*ent) + 1);
3665         RETURN(rc);
3666 }
3667
3668 static int mdd_declare_update_linkea(const struct lu_env *env,
3669                                      struct mdd_object *mdd_pobj,
3670                                      struct mdd_object *mdd_sobj,
3671                                      struct mdd_object *mdd_tobj,
3672                                      struct thandle *handle,
3673                                      const struct lu_name *child_name)
3674 {
3675         return mdd_update_linkea_internal(env, mdd_pobj, mdd_sobj, mdd_tobj,
3676                                           child_name, handle, 1);
3677 }
3678
3679 static int mdd_update_linkea(const struct lu_env *env,
3680                              struct mdd_object *mdd_pobj,
3681                              struct mdd_object *mdd_sobj,
3682                              struct mdd_object *mdd_tobj,
3683                              struct thandle *handle,
3684                              const struct lu_name *child_name)
3685 {
3686         return mdd_update_linkea_internal(env, mdd_pobj, mdd_sobj, mdd_tobj,
3687                                           child_name, handle, 0);
3688 }
3689
3690 static int mdd_declare_migrate_update_name(const struct lu_env *env,
3691                                            struct mdd_object *mdd_pobj,
3692                                            struct mdd_object *mdd_sobj,
3693                                            struct mdd_object *mdd_tobj,
3694                                            const struct lu_name *lname,
3695                                            struct lu_attr *la,
3696                                            struct lu_attr *parent_la,
3697                                            struct thandle *handle)
3698 {
3699         struct lu_attr  *la_flag = MDD_ENV_VAR(env, tattr);
3700         int             rc;
3701
3702         /* Revert IMMUTABLE flag */
3703         la_flag->la_valid = LA_FLAGS;
3704         la_flag->la_flags = la->la_flags & ~LUSTRE_IMMUTABLE_FL;
3705         rc = mdo_declare_attr_set(env, mdd_sobj, la_flag, handle);
3706         if (rc != 0)
3707                 return rc;
3708
3709         /* delete entry from source dir */
3710         rc = mdo_declare_index_delete(env, mdd_pobj, lname->ln_name, handle);
3711         if (rc != 0)
3712                 return rc;
3713
3714         rc = mdd_declare_update_linkea(env, mdd_pobj, mdd_sobj,
3715                                        mdd_tobj, handle, lname);
3716         if (rc != 0)
3717                 return rc;
3718
3719         if (S_ISREG(mdd_object_type(mdd_sobj))) {
3720                 rc = mdo_declare_xattr_del(env, mdd_sobj, XATTR_NAME_LOV,
3721                                            handle);
3722                 if (rc != 0)
3723                         return rc;
3724         }
3725
3726         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
3727                 rc = mdo_declare_ref_del(env, mdd_pobj, handle);
3728                 if (rc != 0)
3729                         return rc;
3730         }
3731
3732         /* new name */
3733         rc = mdo_declare_index_insert(env, mdd_pobj, mdo2fid(mdd_tobj),
3734                                       mdd_object_type(mdd_tobj),
3735                                       lname->ln_name, handle);
3736         if (rc != 0)
3737                 return rc;
3738
3739         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
3740                 rc = mdo_declare_ref_add(env, mdd_pobj, handle);
3741                 if (rc != 0)
3742                         return rc;
3743         }
3744
3745         /* delete old object */
3746         rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3747         if (rc != 0)
3748                 return rc;
3749
3750         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
3751                 /* delete old object */
3752                 rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3753                 if (rc != 0)
3754                         return rc;
3755                 /* set nlink to 0 */
3756                 rc = mdo_declare_attr_set(env, mdd_sobj, la, handle);
3757                 if (rc != 0)
3758                         return rc;
3759         }
3760
3761         rc = mdd_declare_finish_unlink(env, mdd_sobj, handle);
3762         if (rc)
3763                 return rc;
3764
3765         rc = mdo_declare_attr_set(env, mdd_pobj, parent_la, handle);
3766
3767         return rc;
3768 }
3769
3770 static int mdd_migrate_update_name(const struct lu_env *env,
3771                                    struct mdd_object *mdd_pobj,
3772                                    struct mdd_object *mdd_sobj,
3773                                    struct mdd_object *mdd_tobj,
3774                                    const struct lu_name *lname,
3775                                    struct md_attr *ma)
3776 {
3777         struct lu_attr          *p_la = MDD_ENV_VAR(env, la_for_fix);
3778         struct lu_attr          *so_attr = MDD_ENV_VAR(env, cattr);
3779         struct lu_attr          *la_flag = MDD_ENV_VAR(env, tattr);
3780         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3781         struct thandle          *handle;
3782         int                     is_dir = S_ISDIR(mdd_object_type(mdd_sobj));
3783         const char              *name = lname->ln_name;
3784         int                     rc;
3785         ENTRY;
3786
3787         /* update time for parent */
3788         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
3789         p_la->la_ctime = p_la->la_mtime = ma->ma_attr.la_ctime;
3790         p_la->la_valid = LA_CTIME;
3791
3792         rc = mdd_la_get(env, mdd_sobj, so_attr, mdd_object_capa(env, mdd_sobj));
3793         if (rc != 0)
3794                 RETURN(rc);
3795
3796         handle = mdd_trans_create(env, mdd);
3797         if (IS_ERR(handle))
3798                 RETURN(PTR_ERR(handle));
3799
3800         rc = mdd_declare_migrate_update_name(env, mdd_pobj, mdd_sobj, mdd_tobj,
3801                                              lname, so_attr, p_la, handle);
3802         if (rc != 0) {
3803                 /* If the migration can not be fit in one transaction, just
3804                  * leave it in the original MDT */
3805                 if (rc == -E2BIG)
3806                         GOTO(stop_trans, rc = 0);
3807                 else
3808                         GOTO(stop_trans, rc);
3809         }
3810
3811         CDEBUG(D_INFO, "%s: update "DFID"/"DFID" with %s:"DFID"\n",
3812                mdd2obd_dev(mdd)->obd_name, PFID(mdd_object_fid(mdd_pobj)),
3813                PFID(mdd_object_fid(mdd_sobj)), lname->ln_name,
3814                PFID(mdd_object_fid(mdd_tobj)));
3815
3816         rc = mdd_trans_start(env, mdd, handle);
3817         if (rc != 0)
3818                 GOTO(stop_trans, rc);
3819
3820         /* Revert IMMUTABLE flag */
3821         la_flag->la_valid = LA_FLAGS;
3822         la_flag->la_flags = so_attr->la_flags & ~LUSTRE_IMMUTABLE_FL;
3823         rc = mdo_attr_set(env, mdd_sobj, la_flag, handle,
3824                           mdd_object_capa(env, mdd_pobj));
3825         if (rc != 0)
3826                 GOTO(stop_trans, rc);
3827
3828         /* Remove source name from source directory */
3829         rc = __mdd_index_delete(env, mdd_pobj, name, is_dir, handle,
3830                                 mdd_object_capa(env, mdd_pobj));
3831         if (rc != 0)
3832                 GOTO(stop_trans, rc);
3833
3834         rc = mdd_update_linkea(env, mdd_pobj, mdd_sobj, mdd_tobj,
3835                                handle, lname);
3836         if (rc != 0)
3837                 GOTO(stop_trans, rc);
3838
3839         if (S_ISREG(so_attr->la_mode)) {
3840                 if (so_attr->la_nlink == 1) {
3841                         rc = mdo_xattr_del(env, mdd_sobj, XATTR_NAME_LOV,
3842                                            handle,
3843                                            mdd_object_capa(env, mdd_sobj));
3844                         if (rc != 0 && rc != -ENODATA)
3845                                 GOTO(stop_trans, rc);
3846                 }
3847         }
3848
3849         /* Insert new fid with target name into target dir */
3850         rc = __mdd_index_insert(env, mdd_pobj, mdd_object_fid(mdd_tobj),
3851                                 mdd_object_type(mdd_tobj), name,
3852                                 handle, mdd_object_capa(env, mdd_pobj));
3853         if (rc != 0)
3854                 GOTO(stop_trans, rc);
3855
3856         rc = mdd_links_add(env, mdd_tobj, mdo2fid(mdd_pobj), lname, handle,
3857                            NULL, 1);
3858         if (rc != 0)
3859                 GOTO(stop_trans, rc);
3860
3861         mdd_write_lock(env, mdd_sobj, MOR_SRC_CHILD);
3862         mdo_ref_del(env, mdd_sobj, handle);
3863         if (is_dir)
3864                 mdo_ref_del(env, mdd_sobj, handle);
3865
3866         /* Get the attr again after ref_del */
3867         rc = mdd_la_get(env, mdd_sobj, so_attr,
3868                         mdd_object_capa(env, mdd_sobj));
3869         if (rc != 0)
3870                 GOTO(out_unlock, rc);
3871
3872         ma->ma_attr = *so_attr;
3873         ma->ma_valid |= MA_INODE;
3874         rc = mdd_finish_unlink(env, mdd_sobj, ma, mdd_pobj, lname, handle);
3875         if (rc != 0)
3876                 GOTO(out_unlock, rc);
3877
3878         rc = mdd_attr_set_internal(env, mdd_pobj, p_la, handle, 0);
3879         if (rc != 0)
3880                 GOTO(out_unlock, rc);
3881
3882 out_unlock:
3883         mdd_write_unlock(env, mdd_sobj);
3884
3885 stop_trans:
3886         mdd_trans_stop(env, mdd, rc, handle);
3887
3888         RETURN(rc);
3889 }
3890
3891 /**
3892  * Check whether we should migrate the file/dir
3893  * return val
3894  *      < 0  permission check failed or other error.
3895  *      = 0  the file can be migrated.
3896  *      > 0  the file does not need to be migrated, mostly
3897  *           for multiple link file
3898  **/
3899 static int mdd_migrate_sanity_check(const struct lu_env *env,
3900                                     struct mdd_object *pobj,
3901                                     const struct lu_attr *pattr,
3902                                     struct mdd_object *sobj,
3903                                     struct lu_attr *sattr)
3904 {
3905         struct mdd_thread_info  *info = mdd_env_info(env);
3906         struct linkea_data      *ldata = &info->mti_link_data;
3907         int                     mgr_easize;
3908         struct lu_buf           *mgr_buf;
3909         int                     count;
3910         int                     rc;
3911
3912         ENTRY;
3913
3914         mgr_easize = lmv_mds_md_size(2, LMV_MAGIC_V1);
3915         mgr_buf = lu_buf_check_and_alloc(&info->mti_big_buf, mgr_easize);
3916         if (mgr_buf->lb_buf == NULL)
3917                 RETURN(-ENOMEM);
3918
3919         rc = mdo_xattr_get(env, sobj, mgr_buf, XATTR_NAME_LMV,
3920                            mdd_object_capa(env, sobj));
3921         if (rc > 0) {
3922                 union lmv_mds_md *lmm = mgr_buf->lb_buf;
3923
3924                 /* If the object has migrateEA, it means IMMUTE flag
3925                  * is being set by previous migration process, so it
3926                  * needs to override the IMMUTE flag, otherwise the
3927                  * following sanity check will fail */
3928                 if (le32_to_cpu(lmm->lmv_md_v1.lmv_hash_type) &
3929                                                 LMV_HASH_FLAG_MIGRATION) {
3930                         struct mdd_device *mdd = mdo2mdd(&sobj->mod_obj);
3931
3932                         sattr->la_flags &= ~LUSTRE_IMMUTABLE_FL;
3933                         CDEBUG(D_HA, "%s: "DFID" override IMMUTE FLAG\n",
3934                                mdd2obd_dev(mdd)->obd_name,
3935                                PFID(mdd_object_fid(sobj)));
3936                 }
3937         }
3938
3939         rc = mdd_rename_sanity_check(env, pobj, pattr, pobj, pattr,
3940                                      sobj, sattr, NULL, NULL);
3941         if (rc != 0)
3942                 RETURN(rc);
3943
3944         /* Then it will check if the file should be migrated. If the file
3945          * has mulitple links, we only need migrate the file if all of its
3946          * entries has been migrated to the remote MDT */
3947         if (!S_ISREG(sattr->la_mode) || sattr->la_nlink < 2)
3948                 RETURN(0);
3949
3950         rc = mdd_links_read(env, sobj, ldata);
3951         if (rc != 0) {
3952                 /* For multiple links files, if there are no linkEA data at all,
3953                  * means the file might be created before linkEA is enabled, and
3954                  * all all of its links should not be migrated yet, otherwise
3955                  * it should have some linkEA there */
3956                 if (rc == -ENOENT || rc == -ENODATA)
3957                         RETURN(1);
3958                 RETURN(rc);
3959         }
3960
3961         /* If it is mulitple links file, we need update the name entry for
3962          * all parent */
3963         LASSERT(ldata->ld_leh != NULL);
3964         ldata->ld_lee = (struct link_ea_entry *)(ldata->ld_leh + 1);
3965         for (count = 0; count < ldata->ld_leh->leh_reccount; count++) {
3966                 struct mdd_device       *mdd = mdo2mdd(&sobj->mod_obj);
3967                 struct mdd_object       *lpobj;
3968                 struct lu_name          lname;
3969                 struct lu_fid           fid;
3970
3971                 linkea_entry_unpack(ldata->ld_lee, &ldata->ld_reclen,
3972                                     &lname, &fid);
3973                 ldata->ld_lee = (struct link_ea_entry *)((char *)ldata->ld_lee +
3974                                                          ldata->ld_reclen);
3975                 lpobj = mdd_object_find(env, mdd, &fid);
3976                 if (IS_ERR(lpobj)) {
3977                         CWARN("%s: cannot find obj "DFID": rc = %ld\n",
3978                               mdd2obd_dev(mdd)->obd_name, PFID(&fid),
3979                               PTR_ERR(lpobj));
3980                         continue;
3981                 }
3982
3983                 if (!mdd_object_exists(lpobj) || mdd_object_remote(lpobj)) {
3984                         CDEBUG(D_INFO, DFID"%.*s: is on remote MDT.\n",
3985                                PFID(&fid), lname.ln_namelen, lname.ln_name);
3986                         mdd_object_put(env, lpobj);
3987                         continue;
3988                 }
3989
3990                 CDEBUG(D_INFO, DFID"still has local entry %.*s "DFID"\n",
3991                        PFID(mdd_object_fid(sobj)), lname.ln_namelen,
3992                        lname.ln_name, PFID(&fid));
3993                 mdd_object_put(env, lpobj);
3994                 rc = 1;
3995                 break;
3996         }
3997
3998         RETURN(rc);
3999 }
4000
4001 static int mdd_migrate(const struct lu_env *env, struct md_object *pobj,
4002                        struct md_object *sobj, const struct lu_name *lname,
4003                        struct md_object *tobj, struct md_attr *ma)
4004 {
4005         struct mdd_object       *mdd_pobj = md2mdd_obj(pobj);
4006         struct mdd_device       *mdd = mdo2mdd(pobj);
4007         struct mdd_object       *mdd_sobj = md2mdd_obj(sobj);
4008         struct mdd_object       *mdd_tobj = NULL;
4009         struct lu_attr          *so_attr = MDD_ENV_VAR(env, cattr);
4010         struct lu_attr          *pattr = MDD_ENV_VAR(env, pattr);
4011         int                     rc;
4012
4013         ENTRY;
4014         /* If the file will being migrated, it will check whether
4015          * the file is being opened by someone else right now */
4016         mdd_read_lock(env, mdd_sobj, MOR_SRC_CHILD);
4017         if (mdd_sobj->mod_count >= 1) {
4018                 CERROR("%s: "DFID"%s is already opened count %d: rc = %d\n",
4019                        mdd2obd_dev(mdd)->obd_name,
4020                        PFID(mdd_object_fid(mdd_sobj)), lname->ln_name,
4021                        mdd_sobj->mod_count, -EBUSY);
4022                 mdd_read_unlock(env, mdd_sobj);
4023                 GOTO(put, rc = -EBUSY);
4024         }
4025         mdd_read_unlock(env, mdd_sobj);
4026
4027         rc = mdd_la_get(env, mdd_sobj, so_attr, mdd_object_capa(env, mdd_sobj));
4028         if (rc != 0)
4029                 GOTO(put, rc);
4030
4031         rc = mdd_la_get(env, mdd_pobj, pattr, BYPASS_CAPA);
4032         if (rc != 0)
4033                 GOTO(put, rc);
4034
4035         rc = mdd_migrate_sanity_check(env, mdd_pobj, pattr, mdd_sobj, so_attr);
4036         if (rc != 0) {
4037                 if (rc > 0)
4038                         rc = 0;
4039                 GOTO(put, rc);
4040         }
4041
4042         /* Sigh, it is impossible to finish all of migration in a single
4043          * transaction, for example migrating big directory entries to the
4044          * new MDT, it needs insert all of name entries of children in the
4045          * new directory.
4046          *
4047          * So migration will be done in multiple steps and transactions.
4048          *
4049          * 1. create an orphan object on the remote MDT in one transaction.
4050          * 2. migrate extend attributes to the new target file/directory.
4051          * 3. For directory, migrate the entries to the new MDT and update
4052          * linkEA of each children. Because we can not migrate all entries
4053          * in a single transaction, so the migrating directory will become
4054          * a striped directory during migration, so once the process is
4055          * interrupted, the directory is still accessible. (During lookup,
4056          * client will locate the name by searching both original and target
4057          * object).
4058          * 4. Finally, update the name/FID to point to the new file/directory
4059          * in a separate transaction.
4060          */
4061
4062         /* step 1: Check whether the orphan object has been created, and create
4063          * orphan object on the remote MDT if needed */
4064         mdd_tobj = md2mdd_obj(tobj);
4065         if (!mdd_object_exists(mdd_tobj)) {
4066                 rc = mdd_migrate_create(env, mdd_pobj, mdd_sobj, mdd_tobj,
4067                                         so_attr);
4068                 if (rc != 0)
4069                         GOTO(put, rc);
4070         }
4071
4072         /* step 2: migrate xattr */
4073         rc = mdd_migrate_xattrs(env, mdd_sobj, mdd_tobj);
4074         if (rc != 0)
4075                 GOTO(put, rc);
4076
4077         /* step 3: migrate name entries to the orphan object */
4078         if (S_ISDIR(lu_object_attr(&mdd_sobj->mod_obj.mo_lu))) {
4079                 rc = mdd_migrate_entries(env, mdd_sobj, mdd_tobj);
4080                 if (rc != 0)
4081                         GOTO(put, rc);
4082                 if (unlikely(OBD_FAIL_CHECK_RESET(OBD_FAIL_MIGRATE_NET_REP,
4083                                                   OBD_FAIL_MDS_REINT_NET_REP)))
4084                         GOTO(put, rc = 0);
4085         }
4086
4087         /* step 4: update name entry to the new object */
4088         rc = mdd_migrate_update_name(env, mdd_pobj, mdd_sobj, mdd_tobj, lname,
4089                                      ma);
4090         if (rc != 0)
4091                 GOTO(put, rc);
4092 put:
4093         RETURN(rc);
4094 }
4095
4096 const struct md_dir_operations mdd_dir_ops = {
4097         .mdo_is_subdir     = mdd_is_subdir,
4098         .mdo_lookup        = mdd_lookup,
4099         .mdo_create        = mdd_create,
4100         .mdo_rename        = mdd_rename,
4101         .mdo_link          = mdd_link,
4102         .mdo_unlink        = mdd_unlink,
4103         .mdo_create_data   = mdd_create_data,
4104         .mdo_migrate       = mdd_migrate,
4105 };