lustre/mdd/mdd_dir.c

   1 /*
   2  * GPL HEADER START
   3  *
   4  * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
   5  *
   6  * This program is free software; you can redistribute it and/or modify
   7  * it under the terms of the GNU General Public License version 2 only,
   8  * as published by the Free Software Foundation.
   9  *
  10  * This program is distributed in the hope that it will be useful, but
  11  * WITHOUT ANY WARRANTY; without even the implied warranty of
  12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13  * General Public License version 2 for more details (a copy is included
  14  * in the LICENSE file that accompanied this code).
  15  *
  16  * You should have received a copy of the GNU General Public License
  17  * version 2 along with this program; If not, see
  18  * http://www.sun.com/software/products/lustre/docs/GPLv2.pdf
  19  *
  20  * Please contact Sun Microsystems, Inc., 4150 Network Circle, Santa Clara,
  21  * CA 95054 USA or visit www.sun.com if you need additional information or
  22  * have any questions.
  23  *
  24  * GPL HEADER END
  25  */
  26 /*
  27  * Copyright (c) 2007, 2010, Oracle and/or its affiliates. All rights reserved.
  28  * Use is subject to license terms.
  29  *
  30  * Copyright (c) 2011, 2014, Intel Corporation.
  31  */
  32 /*
  33  * This file is part of Lustre, http://www.lustre.org/
  34  * Lustre is a trademark of Sun Microsystems, Inc.
  35  *
  36  * lustre/mdd/mdd_dir.c
  37  *
  38  * Lustre Metadata Server (mdd) routines
  39  *
  40  * Author: Wang Di <wangdi@intel.com>
  41  */
  42
  43 #define DEBUG_SUBSYSTEM S_MDS
  44
  45 #include <obd_class.h>
  46 #include <obd_support.h>
  47 #include <lustre_mds.h>
  48 #include <lustre_fid.h>
  49
  50 #include "mdd_internal.h"
  51
  52 static const char dot[] = ".";
  53 static const char dotdot[] = "..";
  54
  55 static struct lu_name lname_dotdot = {
  56         (char *) dotdot,
  57         sizeof(dotdot) - 1
  58 };
  59
  60 static inline int
  61 mdd_name_check(struct mdd_device *m, const struct lu_name *ln)
  62 {
  63         if (!lu_name_is_valid(ln))
  64                 return -EINVAL;
  65         else if (ln->ln_namelen > m->mdd_dt_conf.ddp_max_name_len)
  66                 return -ENAMETOOLONG;
  67         else
  68                 return 0;
  69 }
  70
  71 /* Get FID from name and parent */
  72 static int
  73 __mdd_lookup(const struct lu_env *env, struct md_object *pobj,
  74              const struct lu_attr *pattr, const struct lu_name *lname,
  75              struct lu_fid* fid, int mask)
  76 {
  77         const char *name                = lname->ln_name;
  78         const struct dt_key *key        = (const struct dt_key *)name;
  79         struct mdd_object *mdd_obj      = md2mdd_obj(pobj);
  80         struct mdd_device *m            = mdo2mdd(pobj);
  81         struct dt_object *dir           = mdd_object_child(mdd_obj);
  82         int rc;
  83         ENTRY;
  84
  85         if (unlikely(mdd_is_dead_obj(mdd_obj)))
  86                 RETURN(-ESTALE);
  87
  88         if (mdd_object_remote(mdd_obj)) {
  89                 CDEBUG(D_INFO, "%s: Object "DFID" locates on remote server\n",
  90                        mdd2obd_dev(m)->obd_name, PFID(mdo2fid(mdd_obj)));
  91         } else if (!mdd_object_exists(mdd_obj)) {
  92                 RETURN(-ESTALE);
  93         }
  94
  95         rc = mdd_permission_internal_locked(env, mdd_obj, pattr, mask,
  96                                             MOR_TGT_PARENT);
  97         if (rc)
  98                 RETURN(rc);
  99
 100         if (likely(S_ISDIR(mdd_object_type(mdd_obj)) &&
 101                    dt_try_as_dir(env, dir)))
 102                 rc = dt_lookup(env, dir, (struct dt_rec *)fid, key);
 103         else
 104                 rc = -ENOTDIR;
 105
 106         RETURN(rc);
 107 }
 108
 109 int mdd_lookup(const struct lu_env *env,
 110                struct md_object *pobj, const struct lu_name *lname,
 111                struct lu_fid *fid, struct md_op_spec *spec)
 112 {
 113         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
 114         int rc;
 115         ENTRY;
 116
 117         rc = mdd_la_get(env, md2mdd_obj(pobj), pattr);
 118         if (rc != 0)
 119                 RETURN(rc);
 120
 121         rc = __mdd_lookup(env, pobj, pattr, lname, fid,
 122                           (spec != NULL && spec->sp_permitted) ? 0 : MAY_EXEC);
 123         RETURN(rc);
 124 }
 125
 126 static inline int mdd_parent_fid(const struct lu_env *env,
 127                                  struct mdd_object *obj,
 128                                  const struct lu_attr *attr,
 129                                  struct lu_fid *fid)
 130 {
 131         return __mdd_lookup(env, &obj->mod_obj, attr, &lname_dotdot, fid, 0);
 132 }
 133
 134 /*
 135  * For root fid use special function, which does not compare version component
 136  * of fid. Version component is different for root fids on all MDTs.
 137  */
 138 int mdd_is_root(struct mdd_device *mdd, const struct lu_fid *fid)
 139 {
 140         return fid_seq(&mdd->mdd_root_fid) == fid_seq(fid) &&
 141                 fid_oid(&mdd->mdd_root_fid) == fid_oid(fid);
 142 }
 143
 144 /*
 145  * return 1: if lf is the fid of the ancestor of p1;
 146  * return 0: if not;
 147  *
 148  * return -EREMOTE: if remote object is found, in this
 149  * case fid of remote object is saved to @pf;
 150  *
 151  * otherwise: values < 0, errors.
 152  */
 153 static int mdd_is_parent(const struct lu_env *env,
 154                         struct mdd_device *mdd,
 155                         struct mdd_object *p1,
 156                         const struct lu_attr *attr,
 157                         const struct lu_fid *lf,
 158                         struct lu_fid *pf)
 159 {
 160         struct mdd_object *parent = NULL;
 161         struct lu_fid *pfid;
 162         int rc;
 163         ENTRY;
 164
 165         LASSERT(!lu_fid_eq(mdo2fid(p1), lf));
 166         pfid = &mdd_env_info(env)->mti_fid;
 167
 168         /* Check for root first. */
 169         if (mdd_is_root(mdd, mdo2fid(p1)))
 170                 RETURN(0);
 171
 172         for(;;) {
 173                 /* this is done recursively */
 174                 rc = mdd_parent_fid(env, p1, attr, pfid);
 175                 if (rc)
 176                         GOTO(out, rc);
 177                 if (mdd_is_root(mdd, pfid))
 178                         GOTO(out, rc = 0);
 179                 if (lu_fid_eq(pfid, &mdd->mdd_local_root_fid))
 180                         GOTO(out, rc = 0);
 181                 if (lu_fid_eq(pfid, lf))
 182                         GOTO(out, rc = 1);
 183                 if (parent)
 184                         mdd_object_put(env, parent);
 185
 186                 parent = mdd_object_find(env, mdd, pfid);
 187                 if (IS_ERR(parent)) {
 188                         GOTO(out, rc = PTR_ERR(parent));
 189                 } else if (mdd_object_remote(parent)) {
 190                         /*FIXME: Because of the restriction of rename in Phase I.
 191                          * If the parent is remote, we just assumed lf is not the
 192                          * parent of P1 for now */
 193                         GOTO(out, rc = 0);
 194                 }
 195                 p1 = parent;
 196         }
 197         EXIT;
 198 out:
 199         if (parent && !IS_ERR(parent))
 200                 mdd_object_put(env, parent);
 201         return rc;
 202 }
 203
 204 /*
 205  * No permission check is needed.
 206  *
 207  * returns 1: if fid is ancestor of @mo;
 208  * returns 0: if fid is not a ancestor of @mo;
 209  *
 210  * returns EREMOTE if remote object is found, fid of remote object is saved to
 211  * @fid;
 212  *
 213  * returns < 0: if error
 214  */
 215 int mdd_is_subdir(const struct lu_env *env, struct md_object *mo,
 216                   const struct lu_fid *fid, struct lu_fid *sfid)
 217 {
 218         struct mdd_device *mdd = mdo2mdd(mo);
 219         struct lu_attr *attr = MDD_ENV_VAR(env, cattr);
 220         int rc;
 221         ENTRY;
 222
 223         if (!S_ISDIR(mdd_object_type(md2mdd_obj(mo))))
 224                 RETURN(0);
 225
 226         rc = mdd_la_get(env, md2mdd_obj(mo), attr);
 227         if (rc != 0)
 228                 RETURN(rc);
 229
 230         rc = mdd_is_parent(env, mdd, md2mdd_obj(mo), attr, fid, sfid);
 231         if (rc == 0) {
 232                 /* found root */
 233                 fid_zero(sfid);
 234         } else if (rc == 1) {
 235                 /* found @fid is parent */
 236                 *sfid = *fid;
 237                 rc = 0;
 238         }
 239         RETURN(rc);
 240 }
 241
 242 /*
 243  * Check that @dir contains no entries except (possibly) dot and dotdot.
 244  *
 245  * Returns:
 246  *
 247  *             0        empty
 248  *      -ENOTDIR        not a directory object
 249  *    -ENOTEMPTY        not empty
 250  *           -ve        other error
 251  *
 252  */
 253 static int mdd_dir_is_empty(const struct lu_env *env,
 254                             struct mdd_object *dir)
 255 {
 256         struct dt_it     *it;
 257         struct dt_object *obj;
 258         const struct dt_it_ops *iops;
 259         int result;
 260         ENTRY;
 261
 262         obj = mdd_object_child(dir);
 263         if (!dt_try_as_dir(env, obj))
 264                 RETURN(-ENOTDIR);
 265
 266         iops = &obj->do_index_ops->dio_it;
 267         it = iops->init(env, obj, LUDA_64BITHASH);
 268         if (!IS_ERR(it)) {
 269                 result = iops->get(env, it, (const struct dt_key *)"");
 270                 if (result > 0) {
 271                         int i;
 272                         for (result = 0, i = 0; result == 0 && i < 3; ++i)
 273                                 result = iops->next(env, it);
 274                         if (result == 0)
 275                                 result = -ENOTEMPTY;
 276                         else if (result == 1)
 277                                 result = 0;
 278                 } else if (result == 0)
 279                         /*
 280                          * Huh? Index contains no zero key?
 281                          */
 282                         result = -EIO;
 283
 284                 iops->put(env, it);
 285                 iops->fini(env, it);
 286         } else
 287                 result = PTR_ERR(it);
 288         RETURN(result);
 289 }
 290
 291 /**
 292  * Determine if the target object can be hard linked, and right now it only
 293  * checks if the link count reach the maximum limit. Note: for ldiskfs, the
 294  * directory nlink count might exceed the maximum link count(see
 295  * osd_object_ref_add), so it only check nlink for non-directories.
 296  *
 297  * \param[in] env       thread environment
 298  * \param[in] obj       object being linked to
 299  * \param[in] la        attributes of \a obj
 300  *
 301  * \retval              0 if \a obj can be hard linked
 302  * \retval              negative error if \a obj is a directory or has too
 303  *                      many links
 304  */
 305 static int __mdd_may_link(const struct lu_env *env, struct mdd_object *obj,
 306                           const struct lu_attr *la)
 307 {
 308         struct mdd_device *m = mdd_obj2mdd_dev(obj);
 309         ENTRY;
 310
 311         LASSERT(la != NULL);
 312
 313         /* Subdir count limitation can be broken through
 314          * (see osd_object_ref_add), so only check non-directory here. */
 315         if (!S_ISDIR(la->la_mode) &&
 316             la->la_nlink >= m->mdd_dt_conf.ddp_max_nlink)
 317                 RETURN(-EMLINK);
 318
 319         RETURN(0);
 320 }
 321
 322 /**
 323  * Check whether it may create the cobj under the pobj.
 324  *
 325  * \param[in] env       execution environment
 326  * \param[in] pobj      the parent directory
 327  * \param[in] pattr     the attribute of the parent directory
 328  * \param[in] cobj      the child to be created
 329  * \param[in] check_perm        if check WRITE|EXEC permission for parent
 330  *
 331  * \retval              = 0 create the child under this dir is allowed
 332  * \retval              negative errno create the child under this dir is
 333  *                      not allowed
 334  */
 335 int mdd_may_create(const struct lu_env *env, struct mdd_object *pobj,
 336                    const struct lu_attr *pattr, struct mdd_object *cobj,
 337                    bool check_perm)
 338 {
 339         struct mdd_thread_info *info = mdd_env_info(env);
 340         struct lu_buf   *xbuf;
 341         int rc = 0;
 342         ENTRY;
 343
 344         if (cobj && mdd_object_exists(cobj))
 345                 RETURN(-EEXIST);
 346
 347         if (mdd_is_dead_obj(pobj))
 348                 RETURN(-ENOENT);
 349
 350         /* If the parent is a sub-stripe, check whether it is dead */
 351         xbuf = mdd_buf_get(env, info->mti_key, sizeof(info->mti_key));
 352         rc = mdo_xattr_get(env, pobj, xbuf, XATTR_NAME_LMV);
 353         if (unlikely(rc > 0)) {
 354                 struct lmv_mds_md_v1  *lmv1 = xbuf->lb_buf;
 355
 356                 if (le32_to_cpu(lmv1->lmv_magic) == LMV_MAGIC_STRIPE &&
 357                     le32_to_cpu(lmv1->lmv_hash_type) & LMV_HASH_FLAG_DEAD)
 358                         RETURN(-ESTALE);
 359         }
 360         rc = 0;
 361
 362         if (check_perm)
 363                 rc = mdd_permission_internal_locked(env, pobj, pattr,
 364                                                     MAY_WRITE | MAY_EXEC,
 365                                                     MOR_TGT_PARENT);
 366         RETURN(rc);
 367 }
 368
 369 /*
 370  * Check whether can unlink from the pobj in the case of "cobj == NULL".
 371  */
 372 int mdd_may_unlink(const struct lu_env *env, struct mdd_object *pobj,
 373                    const struct lu_attr *pattr, const struct lu_attr *attr)
 374 {
 375         int rc;
 376         ENTRY;
 377
 378         if (mdd_is_dead_obj(pobj))
 379                 RETURN(-ENOENT);
 380
 381         if (attr->la_flags & (LUSTRE_APPEND_FL | LUSTRE_IMMUTABLE_FL))
 382                 RETURN(-EPERM);
 383
 384         rc = mdd_permission_internal_locked(env, pobj, pattr,
 385                                             MAY_WRITE | MAY_EXEC,
 386                                             MOR_TGT_PARENT);
 387         if (rc != 0)
 388                 RETURN(rc);
 389
 390         if (pattr->la_flags & LUSTRE_APPEND_FL)
 391                 RETURN(-EPERM);
 392
 393         RETURN(rc);
 394 }
 395
 396 /*
 397  * pobj == NULL is remote ops case, under such case, pobj's
 398  * VTX feature has been checked already, no need check again.
 399  */
 400 static inline int mdd_is_sticky(const struct lu_env *env,
 401                                 struct mdd_object *pobj,
 402                                 const struct lu_attr *pattr,
 403                                 struct mdd_object *cobj,
 404                                 const struct lu_attr *cattr)
 405 {
 406         struct lu_ucred *uc = lu_ucred_assert(env);
 407
 408         if (pobj != NULL) {
 409                 LASSERT(pattr != NULL);
 410                 if (!(pattr->la_mode & S_ISVTX) ||
 411                     (pattr->la_uid == uc->uc_fsuid))
 412                         return 0;
 413         }
 414
 415         LASSERT(cattr != NULL);
 416         if (cattr->la_uid == uc->uc_fsuid)
 417                 return 0;
 418
 419         return !md_capable(uc, CFS_CAP_FOWNER);
 420 }
 421
 422 static int mdd_may_delete_entry(const struct lu_env *env,
 423                                 struct mdd_object *pobj,
 424                                 const struct lu_attr *pattr,
 425                                 int check_perm)
 426 {
 427         ENTRY;
 428
 429         LASSERT(pobj != NULL);
 430         if (!mdd_object_exists(pobj))
 431                 RETURN(-ENOENT);
 432
 433         if (mdd_is_dead_obj(pobj))
 434                 RETURN(-ENOENT);
 435
 436         if (check_perm) {
 437                 int rc;
 438                 rc = mdd_permission_internal_locked(env, pobj, pattr,
 439                                             MAY_WRITE | MAY_EXEC,
 440                                             MOR_TGT_PARENT);
 441                 if (rc)
 442                         RETURN(rc);
 443         }
 444
 445         if (pattr->la_flags & LUSTRE_APPEND_FL)
 446                 RETURN(-EPERM);
 447
 448         RETURN(0);
 449 }
 450
 451 /*
 452  * Check whether it may delete the cobj from the pobj.
 453  * pobj maybe NULL
 454  */
 455 int mdd_may_delete(const struct lu_env *env, struct mdd_object *tpobj,
 456                    const struct lu_attr *tpattr, struct mdd_object *tobj,
 457                    const struct lu_attr *tattr, const struct lu_attr *cattr,
 458                    int check_perm, int check_empty)
 459 {
 460         int rc = 0;
 461         ENTRY;
 462
 463         if (tpobj) {
 464                 LASSERT(tpattr != NULL);
 465                 rc = mdd_may_delete_entry(env, tpobj, tpattr, check_perm);
 466                 if (rc != 0)
 467                         RETURN(rc);
 468         }
 469
 470         if (tobj == NULL)
 471                 RETURN(0);
 472
 473         if (!mdd_object_exists(tobj))
 474                 RETURN(-ENOENT);
 475
 476         if (mdd_is_dead_obj(tobj))
 477                 RETURN(-ESTALE);
 478
 479         if (mdd_is_sticky(env, tpobj, tpattr, tobj, tattr))
 480                 RETURN(-EPERM);
 481
 482         if (tattr->la_flags & (LUSTRE_APPEND_FL | LUSTRE_IMMUTABLE_FL))
 483                 RETURN(-EPERM);
 484
 485         /* additional check the rename case */
 486         if (cattr) {
 487                 if (S_ISDIR(cattr->la_mode)) {
 488                         struct mdd_device *mdd = mdo2mdd(&tobj->mod_obj);
 489
 490                         if (!S_ISDIR(tattr->la_mode))
 491                                 RETURN(-ENOTDIR);
 492
 493                         if (lu_fid_eq(mdo2fid(tobj), &mdd->mdd_root_fid))
 494                                 RETURN(-EBUSY);
 495                 } else if (S_ISDIR(tattr->la_mode))
 496                         RETURN(-EISDIR);
 497         }
 498
 499         if (S_ISDIR(tattr->la_mode) && check_empty)
 500                 rc = mdd_dir_is_empty(env, tobj);
 501
 502         RETURN(rc);
 503 }
 504
 505 /**
 506  * Check whether it can create the link file(linked to @src_obj) under
 507  * the target directory(@tgt_obj), and src_obj has been locked by
 508  * mdd_write_lock.
 509  *
 510  * \param[in] env       execution environment
 511  * \param[in] tgt_obj   the target directory
 512  * \param[in] tattr     attributes of target directory
 513  * \param[in] lname     the link name
 514  * \param[in] src_obj   source object for link
 515  * \param[in] cattr     attributes for source object
 516  *
 517  * \retval              = 0 it is allowed to create the link file under tgt_obj
 518  * \retval              negative error not allowed to create the link file
 519  */
 520 static int mdd_link_sanity_check(const struct lu_env *env,
 521                                  struct mdd_object *tgt_obj,
 522                                  const struct lu_attr *tattr,
 523                                  const struct lu_name *lname,
 524                                  struct mdd_object *src_obj,
 525                                  const struct lu_attr *cattr)
 526 {
 527         struct mdd_device *m = mdd_obj2mdd_dev(src_obj);
 528         int rc = 0;
 529         ENTRY;
 530
 531         if (!mdd_object_exists(src_obj))
 532                 RETURN(-ENOENT);
 533
 534         if (mdd_is_dead_obj(src_obj))
 535                 RETURN(-ESTALE);
 536
 537         /* Local ops, no lookup before link, check filename length here. */
 538         rc = mdd_name_check(m, lname);
 539         if (rc < 0)
 540                 RETURN(rc);
 541
 542         if (cattr->la_flags & (LUSTRE_IMMUTABLE_FL | LUSTRE_APPEND_FL))
 543                 RETURN(-EPERM);
 544
 545         if (S_ISDIR(mdd_object_type(src_obj)))
 546                 RETURN(-EPERM);
 547
 548         LASSERT(src_obj != tgt_obj);
 549         rc = mdd_may_create(env, tgt_obj, tattr, NULL, true);
 550         if (rc != 0)
 551                 RETURN(rc);
 552
 553         rc = __mdd_may_link(env, src_obj, cattr);
 554
 555         RETURN(rc);
 556 }
 557
 558 static int __mdd_index_delete_only(const struct lu_env *env, struct mdd_object *pobj,
 559                                    const char *name, struct thandle *handle)
 560 {
 561         struct dt_object *next = mdd_object_child(pobj);
 562         int rc;
 563         ENTRY;
 564
 565         if (dt_try_as_dir(env, next))
 566                 rc = dt_delete(env, next, (struct dt_key *)name, handle);
 567         else
 568                 rc = -ENOTDIR;
 569
 570         RETURN(rc);
 571 }
 572
 573 static int __mdd_index_insert_only(const struct lu_env *env,
 574                                    struct mdd_object *pobj,
 575                                    const struct lu_fid *lf, __u32 type,
 576                                    const char *name,
 577                                    struct thandle *handle)
 578 {
 579         struct dt_object *next = mdd_object_child(pobj);
 580         int               rc;
 581         ENTRY;
 582
 583         if (dt_try_as_dir(env, next)) {
 584                 struct dt_insert_rec    *rec = &mdd_env_info(env)->mti_dt_rec;
 585                 struct lu_ucred         *uc  = lu_ucred_check(env);
 586                 int                      ignore_quota;
 587
 588                 rec->rec_fid = lf;
 589                 rec->rec_type = type;
 590                 ignore_quota = uc ? uc->uc_cap & CFS_CAP_SYS_RESOURCE_MASK : 1;
 591                 rc = dt_insert(env, next, (const struct dt_rec *)rec,
 592                                (const struct dt_key *)name, handle,
 593                                ignore_quota);
 594         } else {
 595                 rc = -ENOTDIR;
 596         }
 597         RETURN(rc);
 598 }
 599
 600 /* insert named index, add reference if isdir */
 601 static int __mdd_index_insert(const struct lu_env *env, struct mdd_object *pobj,
 602                               const struct lu_fid *lf, __u32 type,
 603                               const char *name, struct thandle *handle)
 604 {
 605         int rc;
 606         ENTRY;
 607
 608         rc = __mdd_index_insert_only(env, pobj, lf, type, name, handle);
 609         if (rc == 0 && S_ISDIR(type)) {
 610                 mdd_write_lock(env, pobj, MOR_TGT_PARENT);
 611                 mdo_ref_add(env, pobj, handle);
 612                 mdd_write_unlock(env, pobj);
 613         }
 614
 615         RETURN(rc);
 616 }
 617
 618 /* delete named index, drop reference if isdir */
 619 static int __mdd_index_delete(const struct lu_env *env, struct mdd_object *pobj,
 620                               const char *name, int is_dir,
 621                               struct thandle *handle)
 622 {
 623         int               rc;
 624         ENTRY;
 625
 626         rc = __mdd_index_delete_only(env, pobj, name, handle);
 627         if (rc == 0 && is_dir) {
 628                 mdd_write_lock(env, pobj, MOR_TGT_PARENT);
 629                 mdo_ref_del(env, pobj, handle);
 630                 mdd_write_unlock(env, pobj);
 631         }
 632
 633         RETURN(rc);
 634 }
 635
 636 static int mdd_llog_record_calc_size(const struct lu_env *env,
 637                                      const struct lu_name *tname,
 638                                      const struct lu_name *sname)
 639 {
 640         const struct lu_ucred   *uc = lu_ucred(env);
 641         enum changelog_rec_flags crf = 0;
 642         size_t                   hdr_size = sizeof(struct llog_changelog_rec) -
 643                                             sizeof(struct changelog_rec);
 644
 645         if (sname != NULL)
 646                 crf |= CLF_RENAME;
 647
 648         if (uc != NULL && uc->uc_jobid[0] != '\0')
 649                 crf |= CLF_JOBID;
 650
 651         return llog_data_len(hdr_size + changelog_rec_offset(crf) +
 652                              (tname != NULL ? tname->ln_namelen : 0) +
 653                              (sname != NULL ? 1 + sname->ln_namelen : 0));
 654 }
 655
 656 int mdd_declare_changelog_store(const struct lu_env *env,
 657                                 struct mdd_device *mdd,
 658                                 const struct lu_name *tname,
 659                                 const struct lu_name *sname,
 660                                 struct thandle *handle)
 661 {
 662         struct obd_device               *obd = mdd2obd_dev(mdd);
 663         struct llog_ctxt                *ctxt;
 664         struct llog_changelog_rec       *rec;
 665         struct lu_buf                   *buf;
 666         struct thandle                  *llog_th;
 667         int                              reclen;
 668         int                              rc;
 669
 670         /* Not recording */
 671         if (!(mdd->mdd_cl.mc_flags & CLM_ON))
 672                 return 0;
 673
 674         reclen = mdd_llog_record_calc_size(env, tname, sname);
 675         buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_big_buf, reclen);
 676         if (buf->lb_buf == NULL)
 677                 return -ENOMEM;
 678
 679         rec = buf->lb_buf;
 680         rec->cr_hdr.lrh_len = reclen;
 681         rec->cr_hdr.lrh_type = CHANGELOG_REC;
 682
 683         ctxt = llog_get_context(obd, LLOG_CHANGELOG_ORIG_CTXT);
 684         if (ctxt == NULL)
 685                 return -ENXIO;
 686
 687         llog_th = thandle_get_sub(env, handle, ctxt->loc_handle->lgh_obj);
 688         if (IS_ERR(llog_th))
 689                 GOTO(out_put, rc = PTR_ERR(llog_th));
 690
 691         rc = llog_declare_add(env, ctxt->loc_handle, &rec->cr_hdr, llog_th);
 692
 693 out_put:
 694         llog_ctxt_put(ctxt);
 695
 696         return rc;
 697 }
 698
 699 /** Add a changelog entry \a rec to the changelog llog
 700  * \param mdd
 701  * \param rec
 702  * \param handle - currently ignored since llogs start their own transaction;
 703  *              this will hopefully be fixed in llog rewrite
 704  * \retval 0 ok
 705  */
 706 int mdd_changelog_store(const struct lu_env *env, struct mdd_device *mdd,
 707                         struct llog_changelog_rec *rec, struct thandle *th)
 708 {
 709         struct obd_device       *obd = mdd2obd_dev(mdd);
 710         struct llog_ctxt        *ctxt;
 711         struct thandle          *llog_th;
 712         int                      rc;
 713
 714         rec->cr_hdr.lrh_len = llog_data_len(sizeof(*rec) +
 715                                             changelog_rec_varsize(&rec->cr));
 716
 717         /* llog_lvfs_write_rec sets the llog tail len */
 718         rec->cr_hdr.lrh_type = CHANGELOG_REC;
 719         rec->cr.cr_time = cl_time();
 720
 721         spin_lock(&mdd->mdd_cl.mc_lock);
 722         /* NB: I suppose it's possible llog_add adds out of order wrt cr_index,
 723          * but as long as the MDD transactions are ordered correctly for e.g.
 724          * rename conflicts, I don't think this should matter. */
 725         rec->cr.cr_index = ++mdd->mdd_cl.mc_index;
 726         spin_unlock(&mdd->mdd_cl.mc_lock);
 727
 728         ctxt = llog_get_context(obd, LLOG_CHANGELOG_ORIG_CTXT);
 729         if (ctxt == NULL)
 730                 return -ENXIO;
 731
 732         llog_th = thandle_get_sub(env, th, ctxt->loc_handle->lgh_obj);
 733         if (IS_ERR(llog_th))
 734                 GOTO(out_put, rc = PTR_ERR(llog_th));
 735
 736         /* nested journal transaction */
 737         rc = llog_add(env, ctxt->loc_handle, &rec->cr_hdr, NULL, llog_th);
 738
 739 out_put:
 740         llog_ctxt_put(ctxt);
 741         if (rc > 0)
 742                 rc = 0;
 743         return rc;
 744 }
 745
 746 static void mdd_changelog_rec_ext_rename(struct changelog_rec *rec,
 747                                          const struct lu_fid *sfid,
 748                                          const struct lu_fid *spfid,
 749                                          const struct lu_name *sname)
 750 {
 751         struct changelog_ext_rename     *rnm = changelog_rec_rename(rec);
 752         size_t                           extsize = sname->ln_namelen + 1;
 753
 754         LASSERT(sfid != NULL);
 755         LASSERT(spfid != NULL);
 756         LASSERT(sname != NULL);
 757
 758         rnm->cr_sfid = *sfid;
 759         rnm->cr_spfid = *spfid;
 760
 761         changelog_rec_name(rec)[rec->cr_namelen] = '\0';
 762         strlcpy(changelog_rec_sname(rec), sname->ln_name, extsize);
 763         rec->cr_namelen += extsize;
 764 }
 765
 766 void mdd_changelog_rec_ext_jobid(struct changelog_rec *rec, const char *jobid)
 767 {
 768         struct changelog_ext_jobid      *jid = changelog_rec_jobid(rec);
 769
 770         if (jobid == NULL || jobid[0] == '\0')
 771                 return;
 772
 773         strlcpy(jid->cr_jobid, jobid, sizeof(jid->cr_jobid));
 774 }
 775
 776 /** Store a namespace change changelog record
 777  * If this fails, we must fail the whole transaction; we don't
 778  * want the change to commit without the log entry.
 779  * \param target - mdd_object of change
 780  * \param tpfid - target parent dir/object fid
 781  * \param sfid - source object fid
 782  * \param spfid - source parent fid
 783  * \param tname - target name string
 784  * \param sname - source name string
 785  * \param handle - transacion handle
 786  */
 787 int mdd_changelog_ns_store(const struct lu_env *env,
 788                            struct mdd_device *mdd,
 789                            enum changelog_rec_type type,
 790                            enum changelog_rec_flags crf,
 791                            struct mdd_object *target,
 792                            const struct lu_fid *tpfid,
 793                            const struct lu_fid *sfid,
 794                            const struct lu_fid *spfid,
 795                            const struct lu_name *tname,
 796                            const struct lu_name *sname,
 797                            struct thandle *handle)
 798 {
 799         const struct lu_ucred           *uc = lu_ucred(env);
 800         struct llog_changelog_rec       *rec;
 801         struct lu_buf                   *buf;
 802         int                              reclen;
 803         int                              rc;
 804         ENTRY;
 805
 806         /* Not recording */
 807         if (!(mdd->mdd_cl.mc_flags & CLM_ON))
 808                 RETURN(0);
 809
 810         if ((mdd->mdd_cl.mc_mask & (1 << type)) == 0)
 811                 RETURN(0);
 812
 813         LASSERT(tpfid != NULL);
 814         LASSERT(tname != NULL);
 815         LASSERT(handle != NULL);
 816
 817         reclen = mdd_llog_record_calc_size(env, tname, sname);
 818         buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_big_buf, reclen);
 819         if (buf->lb_buf == NULL)
 820                 RETURN(-ENOMEM);
 821         rec = buf->lb_buf;
 822
 823         crf &= CLF_FLAGMASK;
 824
 825         if (uc != NULL && uc->uc_jobid[0] != '\0')
 826                 crf |= CLF_JOBID;
 827
 828         if (sname != NULL)
 829                 crf |= CLF_RENAME;
 830         else
 831                 crf |= CLF_VERSION;
 832
 833         rec->cr.cr_flags = crf;
 834         rec->cr.cr_type = (__u32)type;
 835         rec->cr.cr_pfid = *tpfid;
 836         rec->cr.cr_namelen = tname->ln_namelen;
 837         memcpy(changelog_rec_name(&rec->cr), tname->ln_name, tname->ln_namelen);
 838
 839         if (crf & CLF_RENAME)
 840                 mdd_changelog_rec_ext_rename(&rec->cr, sfid, spfid, sname);
 841
 842         if (crf & CLF_JOBID)
 843                 mdd_changelog_rec_ext_jobid(&rec->cr, uc->uc_jobid);
 844
 845         if (likely(target != NULL)) {
 846                 rec->cr.cr_tfid = *mdo2fid(target);
 847                 target->mod_cltime = cfs_time_current_64();
 848         } else {
 849                 fid_zero(&rec->cr.cr_tfid);
 850         }
 851
 852         rc = mdd_changelog_store(env, mdd, rec, handle);
 853         if (rc < 0) {
 854                 CERROR("changelog failed: rc=%d, op%d %s c"DFID" p"DFID"\n",
 855                         rc, type, tname->ln_name, PFID(sfid), PFID(tpfid));
 856                 return -EFAULT;
 857         }
 858
 859         return 0;
 860 }
 861
 862 static int __mdd_links_add(const struct lu_env *env,
 863                            struct mdd_object *mdd_obj,
 864                            struct linkea_data *ldata,
 865                            const struct lu_name *lname,
 866                            const struct lu_fid *pfid,
 867                            int first, int check)
 868 {
 869         int rc;
 870
 871         if (ldata->ld_leh == NULL) {
 872                 rc = first ? -ENODATA : mdd_links_read(env, mdd_obj, ldata);
 873                 if (rc) {
 874                         if (rc != -ENODATA)
 875                                 return rc;
 876                         rc = linkea_data_new(ldata,
 877                                              &mdd_env_info(env)->mti_link_buf);
 878                         if (rc)
 879                                 return rc;
 880                 }
 881         }
 882
 883         if (check) {
 884                 rc = linkea_links_find(ldata, lname, pfid);
 885                 if (rc && rc != -ENOENT)
 886                         return rc;
 887                 if (rc == 0)
 888                         return -EEXIST;
 889         }
 890
 891         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_LINKEA_MORE)) {
 892                 struct lu_fid *tfid = &mdd_env_info(env)->mti_fid2;
 893
 894                 *tfid = *pfid;
 895                 tfid->f_ver = ~0;
 896                 linkea_add_buf(ldata, lname, tfid);
 897         }
 898
 899         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_LINKEA_MORE2))
 900                 linkea_add_buf(ldata, lname, pfid);
 901
 902         return linkea_add_buf(ldata, lname, pfid);
 903 }
 904
 905 static int __mdd_links_del(const struct lu_env *env,
 906                            struct mdd_object *mdd_obj,
 907                            struct linkea_data *ldata,
 908                            const struct lu_name *lname,
 909                            const struct lu_fid *pfid)
 910 {
 911         int rc;
 912
 913         if (ldata->ld_leh == NULL) {
 914                 rc = mdd_links_read(env, mdd_obj, ldata);
 915                 if (rc)
 916                         return rc;
 917         }
 918
 919         rc = linkea_links_find(ldata, lname, pfid);
 920         if (rc)
 921                 return rc;
 922
 923         linkea_del_buf(ldata, lname);
 924         return 0;
 925 }
 926
 927 static int mdd_linkea_prepare(const struct lu_env *env,
 928                               struct mdd_object *mdd_obj,
 929                               const struct lu_fid *oldpfid,
 930                               const struct lu_name *oldlname,
 931                               const struct lu_fid *newpfid,
 932                               const struct lu_name *newlname,
 933                               int first, int check,
 934                               struct linkea_data *ldata)
 935 {
 936         int rc = 0;
 937         int rc2 = 0;
 938         ENTRY;
 939
 940         if (OBD_FAIL_CHECK(OBD_FAIL_FID_IGIF))
 941                 return 0;
 942
 943         LASSERT(oldpfid != NULL || newpfid != NULL);
 944
 945         if (mdd_obj->mod_flags & DEAD_OBJ) {
 946                 /* Prevent linkea to be updated which is NOT necessary. */
 947                 ldata->ld_reclen = 0;
 948                 /* No more links, don't bother */
 949                 RETURN(0);
 950         }
 951
 952         if (oldpfid != NULL) {
 953                 rc = __mdd_links_del(env, mdd_obj, ldata, oldlname, oldpfid);
 954                 if (rc) {
 955                         if ((check == 1) ||
 956                             (rc != -ENODATA && rc != -ENOENT))
 957                                 RETURN(rc);
 958                         /* No changes done. */
 959                         rc = 0;
 960                 }
 961         }
 962
 963         /* If renaming, add the new record */
 964         if (newpfid != NULL) {
 965                 /* even if the add fails, we still delete the out-of-date
 966                  * old link */
 967                 rc2 = __mdd_links_add(env, mdd_obj, ldata, newlname, newpfid,
 968                                       first, check);
 969         }
 970
 971         rc = rc != 0 ? rc : rc2;
 972
 973         RETURN(rc);
 974 }
 975
 976 int mdd_links_rename(const struct lu_env *env,
 977                      struct mdd_object *mdd_obj,
 978                      const struct lu_fid *oldpfid,
 979                      const struct lu_name *oldlname,
 980                      const struct lu_fid *newpfid,
 981                      const struct lu_name *newlname,
 982                      struct thandle *handle,
 983                      struct linkea_data *ldata,
 984                      int first, int check)
 985 {
 986         int rc = 0;
 987         ENTRY;
 988
 989         if (ldata == NULL) {
 990                 ldata = &mdd_env_info(env)->mti_link_data;
 991                 memset(ldata, 0, sizeof(*ldata));
 992                 rc = mdd_linkea_prepare(env, mdd_obj, oldpfid, oldlname,
 993                                         newpfid, newlname, first, check,
 994                                         ldata);
 995                 if (rc != 0)
 996                         GOTO(out, rc);
 997         }
 998
 999         if (ldata->ld_reclen != 0)
1000                 rc = mdd_links_write(env, mdd_obj, ldata, handle);
1001         EXIT;
1002 out:
1003         if (rc != 0) {
1004                 int error = 1;
1005                 if (rc == -EOVERFLOW || rc == -ENOSPC)
1006                         error = 0;
1007                 if (oldpfid == NULL)
1008                         CDEBUG(error ? D_ERROR : D_OTHER,
1009                                "link_ea add '%.*s' failed %d "DFID"\n",
1010                                newlname->ln_namelen, newlname->ln_name,
1011                                rc, PFID(mdd_object_fid(mdd_obj)));
1012                 else if (newpfid == NULL)
1013                         CDEBUG(error ? D_ERROR : D_OTHER,
1014                                "link_ea del '%.*s' failed %d "DFID"\n",
1015                                oldlname->ln_namelen, oldlname->ln_name,
1016                                rc, PFID(mdd_object_fid(mdd_obj)));
1017                 else
1018                         CDEBUG(error ? D_ERROR : D_OTHER,
1019                                "link_ea rename '%.*s'->'%.*s' failed %d "
1020                                DFID"\n",
1021                                oldlname->ln_namelen, oldlname->ln_name,
1022                                newlname->ln_namelen, newlname->ln_name,
1023                                rc, PFID(mdd_object_fid(mdd_obj)));
1024         }
1025
1026         if (ldata->ld_buf && ldata->ld_buf->lb_len > OBD_ALLOC_BIG)
1027                 /* if we vmalloced a large buffer drop it */
1028                 lu_buf_free(ldata->ld_buf);
1029
1030         return rc;
1031 }
1032
1033 static inline int mdd_links_add(const struct lu_env *env,
1034                                 struct mdd_object *mdd_obj,
1035                                 const struct lu_fid *pfid,
1036                                 const struct lu_name *lname,
1037                                 struct thandle *handle,
1038                                 struct linkea_data *ldata, int first)
1039 {
1040         return mdd_links_rename(env, mdd_obj, NULL, NULL,
1041                                 pfid, lname, handle, ldata, first, 0);
1042 }
1043
1044 static inline int mdd_links_del(const struct lu_env *env,
1045                                 struct mdd_object *mdd_obj,
1046                                 const struct lu_fid *pfid,
1047                                 const struct lu_name *lname,
1048                                 struct thandle *handle)
1049 {
1050         return mdd_links_rename(env, mdd_obj, pfid, lname,
1051                                 NULL, NULL, handle, NULL, 0, 0);
1052 }
1053
1054 /** Read the link EA into a temp buffer.
1055  * Uses the mdd_thread_info::mti_big_buf since it is generally large.
1056  * A pointer to the buffer is stored in \a ldata::ld_buf.
1057  *
1058  * \retval 0 or error
1059  */
1060 int mdd_links_read(const struct lu_env *env, struct mdd_object *mdd_obj,
1061                    struct linkea_data *ldata)
1062 {
1063         int rc;
1064
1065         if (!mdd_object_exists(mdd_obj))
1066                 return -ENODATA;
1067
1068         /* First try a small buf */
1069         LASSERT(env != NULL);
1070         ldata->ld_buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_link_buf,
1071                                                PAGE_CACHE_SIZE);
1072         if (ldata->ld_buf->lb_buf == NULL)
1073                 return -ENOMEM;
1074
1075         rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf, XATTR_NAME_LINK);
1076         if (rc == -ERANGE) {
1077                 /* Buf was too small, figure out what we need. */
1078                 lu_buf_free(ldata->ld_buf);
1079                 rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf,
1080                                    XATTR_NAME_LINK);
1081                 if (rc < 0)
1082                         return rc;
1083                 ldata->ld_buf = lu_buf_check_and_alloc(ldata->ld_buf, rc);
1084                 if (ldata->ld_buf->lb_buf == NULL)
1085                         return -ENOMEM;
1086                 rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf,
1087                                   XATTR_NAME_LINK);
1088         }
1089         if (rc < 0) {
1090                 lu_buf_free(ldata->ld_buf);
1091                 ldata->ld_buf = NULL;
1092                 return rc;
1093         }
1094
1095         return linkea_init(ldata);
1096 }
1097
1098 /** Read the link EA into a temp buffer.
1099  * Uses the name_buf since it is generally large.
1100  * \retval IS_ERR err
1101  * \retval ptr to \a lu_buf (always \a mti_big_buf)
1102  */
1103 struct lu_buf *mdd_links_get(const struct lu_env *env,
1104                              struct mdd_object *mdd_obj)
1105 {
1106         struct linkea_data ldata = { NULL };
1107         int rc;
1108
1109         rc = mdd_links_read(env, mdd_obj, &ldata);
1110         return rc ? ERR_PTR(rc) : ldata.ld_buf;
1111 }
1112
1113 int mdd_links_write(const struct lu_env *env, struct mdd_object *mdd_obj,
1114                     struct linkea_data *ldata, struct thandle *handle)
1115 {
1116         const struct lu_buf *buf = mdd_buf_get_const(env, ldata->ld_buf->lb_buf,
1117                                                      ldata->ld_leh->leh_len);
1118         int                 rc;
1119
1120         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_NO_LINKEA))
1121                 return 0;
1122
1123         rc = mdo_xattr_set(env, mdd_obj, buf, XATTR_NAME_LINK, 0, handle);
1124         if (unlikely(rc == -ENOSPC) && S_ISREG(mdd_object_type(mdd_obj)) &&
1125             mdd_object_remote(mdd_obj) == 0) {
1126                 struct lfsck_request *lr = &mdd_env_info(env)->mti_lr;
1127                 struct thandle  *sub_th;
1128
1129                 /* XXX: If the linkEA is overflow, then we need to notify the
1130                  *      namespace LFSCK to skip "nlink" attribute verification
1131                  *      on this object to avoid the "nlink" to be shrinked by
1132                  *      wrong. It may be not good an interaction with LFSCK
1133                  *      like this. We will consider to replace it with other
1134                  *      mechanism in future. LU-5802. */
1135                 lfsck_pack_rfa(lr, mdo2fid(mdd_obj), LE_SKIP_NLINK,
1136                                LFSCK_TYPE_NAMESPACE);
1137
1138                 sub_th = thandle_get_sub_by_dt(env, handle,
1139                                 mdo2mdd(&mdd_obj->mod_obj)->mdd_bottom);
1140                 lfsck_in_notify(env, mdo2mdd(&mdd_obj->mod_obj)->mdd_bottom,
1141                                 lr, sub_th);
1142         }
1143
1144         return rc;
1145 }
1146
1147 int mdd_declare_links_add(const struct lu_env *env, struct mdd_object *mdd_obj,
1148                           struct thandle *handle, struct linkea_data *ldata,
1149                           enum mdd_links_add_overflow overflow)
1150 {
1151         int     rc;
1152         int     ea_len;
1153         void    *linkea;
1154
1155         if (ldata != NULL && ldata->ld_leh != NULL) {
1156                 ea_len = ldata->ld_leh->leh_len;
1157                 linkea = ldata->ld_buf->lb_buf;
1158         } else {
1159                 ea_len = DEFAULT_LINKEA_SIZE;
1160                 linkea = NULL;
1161         }
1162
1163         /* XXX: max size? */
1164         rc = mdo_declare_xattr_set(env, mdd_obj,
1165                                    mdd_buf_get_const(env, linkea, ea_len),
1166                                    XATTR_NAME_LINK, 0, handle);
1167         if (rc != 0)
1168                 return rc;
1169
1170         if (mdd_object_remote(mdd_obj) == 0 && overflow == MLAO_CHECK) {
1171                 struct lfsck_request *lr = &mdd_env_info(env)->mti_lr;
1172                 struct thandle  *sub_th;
1173
1174                 /* XXX: If the linkEA is overflow, then we need to notify the
1175                  *      namespace LFSCK to skip "nlink" attribute verification
1176                  *      on this object to avoid the "nlink" to be shrinked by
1177                  *      wrong. It may be not good an interaction with LFSCK
1178                  *      like this. We will consider to replace it with other
1179                  *      mechanism in future. LU-5802. */
1180                 lfsck_pack_rfa(lr, mdo2fid(mdd_obj), LE_SKIP_NLINK_DECLARE,
1181                                LFSCK_TYPE_NAMESPACE);
1182
1183                 sub_th = thandle_get_sub_by_dt(env, handle,
1184                                 mdo2mdd(&mdd_obj->mod_obj)->mdd_bottom);
1185                 rc = lfsck_in_notify(env,
1186                                      mdo2mdd(&mdd_obj->mod_obj)->mdd_bottom,
1187                                      lr, sub_th);
1188         }
1189
1190         return rc;
1191 }
1192
1193 static inline int mdd_declare_links_del(const struct lu_env *env,
1194                                         struct mdd_object *c,
1195                                         struct thandle *handle)
1196 {
1197         int rc = 0;
1198
1199         /* For directory, the linkEA will be removed together
1200          * with the object. */
1201         if (!S_ISDIR(mdd_object_type(c)))
1202                 rc = mdd_declare_links_add(env, c, handle, NULL, MLAO_IGNORE);
1203
1204         return rc;
1205 }
1206
1207 static int mdd_declare_link(const struct lu_env *env,
1208                             struct mdd_device *mdd,
1209                             struct mdd_object *p,
1210                             struct mdd_object *c,
1211                             const struct lu_name *name,
1212                             struct thandle *handle,
1213                             struct lu_attr *la,
1214                             struct linkea_data *data)
1215 {
1216         int rc;
1217
1218         rc = mdo_declare_index_insert(env, p, mdo2fid(c), mdd_object_type(c),
1219                                       name->ln_name, handle);
1220         if (rc != 0)
1221                 return rc;
1222
1223         rc = mdo_declare_ref_add(env, c, handle);
1224         if (rc != 0)
1225                 return rc;
1226
1227         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_MORE_NLINK)) {
1228                 rc = mdo_declare_ref_add(env, c, handle);
1229                 if (rc != 0)
1230                         return rc;
1231         }
1232
1233         la->la_valid = LA_CTIME | LA_MTIME;
1234         rc = mdo_declare_attr_set(env, p, la, handle);
1235         if (rc != 0)
1236                 return rc;
1237
1238         la->la_valid = LA_CTIME;
1239         rc = mdo_declare_attr_set(env, c, la, handle);
1240         if (rc != 0)
1241                 return rc;
1242
1243         rc = mdd_declare_links_add(env, c, handle, data,
1244                         S_ISREG(mdd_object_type(c)) ? MLAO_CHECK : MLAO_IGNORE);
1245         if (rc != 0)
1246                 return rc;
1247
1248         rc = mdd_declare_changelog_store(env, mdd, name, NULL, handle);
1249
1250         return rc;
1251 }
1252
1253 static int mdd_link(const struct lu_env *env, struct md_object *tgt_obj,
1254                     struct md_object *src_obj, const struct lu_name *lname,
1255                     struct md_attr *ma)
1256 {
1257         const char *name = lname->ln_name;
1258         struct lu_attr    *la = &mdd_env_info(env)->mti_la_for_fix;
1259         struct mdd_object *mdd_tobj = md2mdd_obj(tgt_obj);
1260         struct mdd_object *mdd_sobj = md2mdd_obj(src_obj);
1261         struct lu_attr    *cattr = MDD_ENV_VAR(env, cattr);
1262         struct lu_attr    *tattr = MDD_ENV_VAR(env, tattr);
1263         struct mdd_device *mdd = mdo2mdd(src_obj);
1264         struct thandle *handle;
1265         struct linkea_data *ldata = &mdd_env_info(env)->mti_link_data;
1266         int rc;
1267         ENTRY;
1268
1269         rc = mdd_la_get(env, mdd_sobj, cattr);
1270         if (rc != 0)
1271                 RETURN(rc);
1272
1273         rc = mdd_la_get(env, mdd_tobj, tattr);
1274         if (rc != 0)
1275                 RETURN(rc);
1276
1277         handle = mdd_trans_create(env, mdd);
1278         if (IS_ERR(handle))
1279                 GOTO(out_pending, rc = PTR_ERR(handle));
1280
1281         memset(ldata, 0, sizeof(*ldata));
1282
1283         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1284         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1285
1286         rc = mdd_declare_link(env, mdd, mdd_tobj, mdd_sobj, lname, handle,
1287                               la, ldata);
1288         if (rc)
1289                 GOTO(stop, rc);
1290
1291         rc = mdd_trans_start(env, mdd, handle);
1292         if (rc)
1293                 GOTO(stop, rc);
1294
1295         mdd_write_lock(env, mdd_sobj, MOR_TGT_CHILD);
1296         rc = mdd_link_sanity_check(env, mdd_tobj, tattr, lname, mdd_sobj,
1297                                    cattr);
1298         if (rc)
1299                 GOTO(out_unlock, rc);
1300
1301         if (!OBD_FAIL_CHECK(OBD_FAIL_LFSCK_LESS_NLINK)) {
1302                 rc = mdo_ref_add(env, mdd_sobj, handle);
1303                 if (rc != 0)
1304                         GOTO(out_unlock, rc);
1305         }
1306
1307         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_MORE_NLINK)) {
1308                 rc = mdo_ref_add(env, mdd_sobj, handle);
1309                 if (rc != 0)
1310                         GOTO(out_unlock, rc);
1311         }
1312
1313         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_DANGLING3)) {
1314                 struct lu_fid tfid = *mdo2fid(mdd_sobj);
1315
1316                 tfid.f_oid++;
1317                 rc = __mdd_index_insert_only(env, mdd_tobj, &tfid,
1318                                              mdd_object_type(mdd_sobj),
1319                                              name, handle);
1320         } else {
1321                 rc = __mdd_index_insert_only(env, mdd_tobj, mdo2fid(mdd_sobj),
1322                                              mdd_object_type(mdd_sobj),
1323                                              name, handle);
1324         }
1325
1326         if (rc != 0) {
1327                 mdo_ref_del(env, mdd_sobj, handle);
1328                 GOTO(out_unlock, rc);
1329         }
1330
1331         la->la_valid = LA_CTIME | LA_MTIME;
1332         rc = mdd_update_time(env, mdd_tobj, tattr, la, handle);
1333         if (rc)
1334                 GOTO(out_unlock, rc);
1335
1336         la->la_valid = LA_CTIME;
1337         rc = mdd_update_time(env, mdd_sobj, cattr, la, handle);
1338         if (rc == 0) {
1339                 rc = mdd_linkea_prepare(env, mdd_sobj, NULL, NULL,
1340                                         mdo2fid(mdd_tobj), lname, 0, 0,
1341                                         ldata);
1342                 if (rc == 0)
1343                         mdd_links_add(env, mdd_sobj, mdo2fid(mdd_tobj),
1344                                       lname, handle, ldata, 0);
1345                 /* The failure of links_add should not cause the link
1346                  * failure, reset rc here */
1347                 rc = 0;
1348         }
1349         EXIT;
1350 out_unlock:
1351         mdd_write_unlock(env, mdd_sobj);
1352         if (rc == 0)
1353                 rc = mdd_changelog_ns_store(env, mdd, CL_HARDLINK, 0, mdd_sobj,
1354                                             mdo2fid(mdd_tobj), NULL, NULL,
1355                                             lname, NULL, handle);
1356 stop:
1357         mdd_trans_stop(env, mdd, rc, handle);
1358
1359         if (ldata->ld_buf && ldata->ld_buf->lb_len > OBD_ALLOC_BIG)
1360                 /* if we vmalloced a large buffer drop it */
1361                 lu_buf_free(ldata->ld_buf);
1362 out_pending:
1363         return rc;
1364 }
1365
1366 static int mdd_mark_dead_object(const struct lu_env *env,
1367                                 struct mdd_object *obj, struct thandle *handle,
1368                                 bool declare)
1369 {
1370         struct lu_attr *attr = MDD_ENV_VAR(env, la_for_start);
1371         int rc;
1372
1373         if (!declare)
1374                 obj->mod_flags |= DEAD_OBJ;
1375
1376         if (!S_ISDIR(mdd_object_type(obj)))
1377                 return 0;
1378
1379         attr->la_valid = LA_FLAGS;
1380         attr->la_flags = LUSTRE_SLAVE_DEAD_FL;
1381
1382         if (declare)
1383                 rc = mdo_declare_attr_set(env, obj, attr, handle);
1384         else
1385                 rc = mdo_attr_set(env, obj, attr, handle);
1386
1387         return rc;
1388 }
1389
1390 static int mdd_declare_finish_unlink(const struct lu_env *env,
1391                                      struct mdd_object *obj,
1392                                      struct thandle *handle)
1393 {
1394         int     rc;
1395
1396         rc = mdd_mark_dead_object(env, obj, handle, true);
1397         if (rc != 0)
1398                 return rc;
1399
1400         rc = orph_declare_index_insert(env, obj, mdd_object_type(obj), handle);
1401         if (rc != 0)
1402                 return rc;
1403
1404         rc = mdo_declare_destroy(env, obj, handle);
1405         if (rc != 0)
1406                 return rc;
1407
1408         return mdd_declare_links_del(env, obj, handle);
1409 }
1410
1411 /* caller should take a lock before calling */
1412 int mdd_finish_unlink(const struct lu_env *env,
1413                       struct mdd_object *obj, struct md_attr *ma,
1414                       const struct mdd_object *pobj,
1415                       const struct lu_name *lname,
1416                       struct thandle *th)
1417 {
1418         int rc = 0;
1419         int is_dir = S_ISDIR(ma->ma_attr.la_mode);
1420         ENTRY;
1421
1422         LASSERT(mdd_write_locked(env, obj) != 0);
1423
1424         if (ma->ma_attr.la_nlink == 0 || is_dir) {
1425                 rc = mdd_mark_dead_object(env, obj, th, false);
1426                 if (rc != 0)
1427                         RETURN(rc);
1428
1429                 /* add new orphan and the object
1430                  * will be deleted during mdd_close() */
1431                 if (obj->mod_count) {
1432                         rc = __mdd_orphan_add(env, obj, th);
1433                         if (rc == 0)
1434                                 CDEBUG(D_HA, "Object "DFID" is inserted into "
1435                                         "orphan list, open count = %d\n",
1436                                         PFID(mdd_object_fid(obj)),
1437                                         obj->mod_count);
1438                         else
1439                                 CERROR("Object "DFID" fail to be an orphan, "
1440                                        "open count = %d, maybe cause failed "
1441                                        "open replay\n",
1442                                         PFID(mdd_object_fid(obj)),
1443                                         obj->mod_count);
1444                 } else {
1445                         rc = mdo_destroy(env, obj, th);
1446                 }
1447         } else if (!is_dir) {
1448                 /* old files may not have link ea; ignore errors */
1449                 mdd_links_del(env, obj, mdo2fid(pobj), lname, th);
1450         }
1451
1452         RETURN(rc);
1453 }
1454
1455 /*
1456  * pobj maybe NULL
1457  * has mdd_write_lock on cobj already, but not on pobj yet
1458  */
1459 int mdd_unlink_sanity_check(const struct lu_env *env, struct mdd_object *pobj,
1460                             const struct lu_attr *pattr,
1461                             struct mdd_object *cobj,
1462                             const struct lu_attr *cattr)
1463 {
1464         int rc;
1465         ENTRY;
1466
1467         rc = mdd_may_delete(env, pobj, pattr, cobj, cattr, NULL, 1, 1);
1468
1469         RETURN(rc);
1470 }
1471
1472 static int mdd_declare_unlink(const struct lu_env *env, struct mdd_device *mdd,
1473                               struct mdd_object *p, struct mdd_object *c,
1474                               const struct lu_name *name, struct md_attr *ma,
1475                               struct thandle *handle, int no_name, int is_dir)
1476 {
1477         struct lu_attr  *la = &mdd_env_info(env)->mti_la_for_fix;
1478         int              rc;
1479
1480         if (!OBD_FAIL_CHECK(OBD_FAIL_LFSCK_DANGLING2)) {
1481                 if (likely(no_name == 0)) {
1482                         rc = mdo_declare_index_delete(env, p, name->ln_name,
1483                                                       handle);
1484                         if (rc != 0)
1485                                 return rc;
1486                 }
1487
1488                 if (is_dir != 0) {
1489                         rc = mdo_declare_ref_del(env, p, handle);
1490                         if (rc != 0)
1491                                 return rc;
1492                 }
1493         }
1494
1495         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1496         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1497         la->la_valid = LA_CTIME | LA_MTIME;
1498         rc = mdo_declare_attr_set(env, p, la, handle);
1499         if (rc)
1500                 return rc;
1501
1502         if (c != NULL) {
1503                 rc = mdo_declare_ref_del(env, c, handle);
1504                 if (rc)
1505                         return rc;
1506
1507                 rc = mdo_declare_ref_del(env, c, handle);
1508                 if (rc)
1509                         return rc;
1510
1511                 la->la_valid = LA_CTIME;
1512                 rc = mdo_declare_attr_set(env, c, la, handle);
1513                 if (rc)
1514                         return rc;
1515
1516                 rc = mdd_declare_finish_unlink(env, c, handle);
1517                 if (rc)
1518                         return rc;
1519
1520                 /* FIXME: need changelog for remove entry */
1521                 rc = mdd_declare_changelog_store(env, mdd, name, NULL, handle);
1522         }
1523
1524         return rc;
1525 }
1526
1527 /*
1528  * test if a file has an HSM archive
1529  * if HSM attributes are not found in ma update them from
1530  * HSM xattr
1531  */
1532 static bool mdd_hsm_archive_exists(const struct lu_env *env,
1533                                    struct mdd_object *obj,
1534                                    struct md_attr *ma)
1535 {
1536         ENTRY;
1537
1538         if (!(ma->ma_valid & MA_HSM)) {
1539                 /* no HSM MD provided, read xattr */
1540                 struct lu_buf   *hsm_buf;
1541                 const size_t     buflen = sizeof(struct hsm_attrs);
1542                 int              rc;
1543
1544                 hsm_buf = mdd_buf_get(env, NULL, 0);
1545                 lu_buf_alloc(hsm_buf, buflen);
1546                 rc = mdo_xattr_get(env, obj, hsm_buf, XATTR_NAME_HSM);
1547                 rc = lustre_buf2hsm(hsm_buf->lb_buf, rc, &ma->ma_hsm);
1548                 lu_buf_free(hsm_buf);
1549                 if (rc < 0)
1550                         RETURN(false);
1551
1552                 ma->ma_valid = MA_HSM;
1553         }
1554         if (ma->ma_hsm.mh_flags & HS_EXISTS)
1555                 RETURN(true);
1556         RETURN(false);
1557 }
1558
1559 /**
1560  * Delete name entry and the object.
1561  * Note: no_name == 1 means it only destory the object, i.e. name_entry
1562  * does not exist for this object, and it could only happen during resending
1563  * of remote unlink. see the comments in mdt_reint_unlink. Unfortunately, lname
1564  * is also needed in this case(needed by changelog), so we have to add another
1565  * parameter(no_name)here. XXX: this is only needed in DNE phase I, on Phase II,
1566  * the ENOENT failure should be able to be fixed by redo mechanism.
1567  */
1568 static int mdd_unlink(const struct lu_env *env, struct md_object *pobj,
1569                       struct md_object *cobj, const struct lu_name *lname,
1570                       struct md_attr *ma, int no_name)
1571 {
1572         const char *name = lname->ln_name;
1573         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
1574         struct lu_attr *cattr = MDD_ENV_VAR(env, cattr);
1575         struct lu_attr *la = &mdd_env_info(env)->mti_la_for_fix;
1576         struct mdd_object *mdd_pobj = md2mdd_obj(pobj);
1577         struct mdd_object *mdd_cobj = NULL;
1578         struct mdd_device *mdd = mdo2mdd(pobj);
1579         struct thandle    *handle;
1580         int rc, is_dir = 0;
1581         ENTRY;
1582
1583         /* cobj == NULL means only delete name entry */
1584         if (likely(cobj != NULL)) {
1585                 mdd_cobj = md2mdd_obj(cobj);
1586                 if (mdd_object_exists(mdd_cobj) == 0)
1587                         RETURN(-ENOENT);
1588         }
1589
1590         rc = mdd_la_get(env, mdd_pobj, pattr);
1591         if (rc)
1592                 RETURN(rc);
1593
1594         if (likely(mdd_cobj != NULL)) {
1595                 /* fetch cattr */
1596                 rc = mdd_la_get(env, mdd_cobj, cattr);
1597                 if (rc)
1598                         RETURN(rc);
1599
1600                 is_dir = S_ISDIR(cattr->la_mode);
1601         }
1602
1603         rc = mdd_unlink_sanity_check(env, mdd_pobj, pattr, mdd_cobj, cattr);
1604         if (rc)
1605                 RETURN(rc);
1606
1607         handle = mdd_trans_create(env, mdd);
1608         if (IS_ERR(handle))
1609                 RETURN(PTR_ERR(handle));
1610
1611         rc = mdd_declare_unlink(env, mdd, mdd_pobj, mdd_cobj,
1612                                 lname, ma, handle, no_name, is_dir);
1613         if (rc)
1614                 GOTO(stop, rc);
1615
1616         rc = mdd_trans_start(env, mdd, handle);
1617         if (rc)
1618                 GOTO(stop, rc);
1619
1620         if (likely(mdd_cobj != NULL))
1621                 mdd_write_lock(env, mdd_cobj, MOR_TGT_CHILD);
1622
1623         if (likely(no_name == 0) && !OBD_FAIL_CHECK(OBD_FAIL_LFSCK_DANGLING2)) {
1624                 rc = __mdd_index_delete(env, mdd_pobj, name, is_dir, handle);
1625                 if (rc)
1626                         GOTO(cleanup, rc);
1627         }
1628
1629         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_MUL_REF) ||
1630             OBD_FAIL_CHECK(OBD_FAIL_LFSCK_NO_NAMEENTRY))
1631                 GOTO(cleanup, rc = 0);
1632
1633         if (likely(mdd_cobj != NULL)) {
1634                 rc = mdo_ref_del(env, mdd_cobj, handle);
1635                 if (rc != 0) {
1636                         __mdd_index_insert_only(env, mdd_pobj,
1637                                                 mdo2fid(mdd_cobj),
1638                                                 mdd_object_type(mdd_cobj),
1639                                                 name, handle);
1640                         GOTO(cleanup, rc);
1641                 }
1642
1643                 if (is_dir)
1644                         /* unlink dot */
1645                         mdo_ref_del(env, mdd_cobj, handle);
1646
1647                 /* fetch updated nlink */
1648                 rc = mdd_la_get(env, mdd_cobj, cattr);
1649                 if (rc)
1650                         GOTO(cleanup, rc);
1651         }
1652
1653         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1654         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1655
1656         la->la_valid = LA_CTIME | LA_MTIME;
1657         rc = mdd_update_time(env, mdd_pobj, pattr, la, handle);
1658         if (rc)
1659                 GOTO(cleanup, rc);
1660
1661         /* Enough for only unlink the entry */
1662         if (unlikely(mdd_cobj == NULL))
1663                 GOTO(stop, rc);
1664
1665         if (cattr->la_nlink > 0 || mdd_cobj->mod_count > 0) {
1666                 /* update ctime of an unlinked file only if it is still
1667                  * opened or a link still exists */
1668                 la->la_valid = LA_CTIME;
1669                 rc = mdd_update_time(env, mdd_cobj, cattr, la, handle);
1670                 if (rc)
1671                         GOTO(cleanup, rc);
1672         }
1673
1674         /* XXX: this transfer to ma will be removed with LOD/OSP */
1675         ma->ma_attr = *cattr;
1676         ma->ma_valid |= MA_INODE;
1677         rc = mdd_finish_unlink(env, mdd_cobj, ma, mdd_pobj, lname, handle);
1678
1679         /* fetch updated nlink */
1680         if (rc == 0)
1681                 rc = mdd_la_get(env, mdd_cobj, cattr);
1682
1683         /* if object is removed then we can't get its attrs, use last get */
1684         if (cattr->la_nlink == 0) {
1685                 ma->ma_attr = *cattr;
1686                 ma->ma_valid |= MA_INODE;
1687         }
1688         EXIT;
1689 cleanup:
1690         if (likely(mdd_cobj != NULL))
1691                 mdd_write_unlock(env, mdd_cobj);
1692
1693         if (rc == 0) {
1694                 int cl_flags = 0;
1695
1696                 if (cattr->la_nlink == 0) {
1697                         cl_flags |= CLF_UNLINK_LAST;
1698                         /* search for an existing archive */
1699                         if (mdd_hsm_archive_exists(env, mdd_cobj, ma))
1700                                 cl_flags |= CLF_UNLINK_HSM_EXISTS;
1701                 }
1702
1703                 rc = mdd_changelog_ns_store(env, mdd,
1704                         is_dir ? CL_RMDIR : CL_UNLINK, cl_flags,
1705                         mdd_cobj, mdo2fid(mdd_pobj), NULL, NULL, lname, NULL,
1706                         handle);
1707         }
1708
1709 stop:
1710         mdd_trans_stop(env, mdd, rc, handle);
1711
1712         return rc;
1713 }
1714
1715 /*
1716  * The permission has been checked when obj created, no need check again.
1717  */
1718 static int mdd_cd_sanity_check(const struct lu_env *env,
1719                                struct mdd_object *obj)
1720 {
1721         ENTRY;
1722
1723         /* EEXIST check */
1724         if (!obj || mdd_is_dead_obj(obj))
1725                 RETURN(-ENOENT);
1726
1727         RETURN(0);
1728 }
1729
1730 static int mdd_create_data(const struct lu_env *env, struct md_object *pobj,
1731                            struct md_object *cobj, const struct md_op_spec *spec,
1732                            struct md_attr *ma)
1733 {
1734         struct mdd_device *mdd = mdo2mdd(cobj);
1735         struct mdd_object *mdd_pobj = md2mdd_obj(pobj);
1736         struct mdd_object *son = md2mdd_obj(cobj);
1737         struct thandle    *handle;
1738         const struct lu_buf *buf;
1739         struct lu_attr    *attr = MDD_ENV_VAR(env, cattr);
1740         struct dt_allocation_hint *hint = &mdd_env_info(env)->mti_hint;
1741         int                rc;
1742         ENTRY;
1743
1744         rc = mdd_cd_sanity_check(env, son);
1745         if (rc)
1746                 RETURN(rc);
1747
1748         if (!md_should_create(spec->sp_cr_flags))
1749                 RETURN(0);
1750
1751         /*
1752          * there are following use cases for this function:
1753          * 1) late striping - file was created with MDS_OPEN_DELAY_CREATE
1754          *    striping can be specified or not
1755          * 2) CMD?
1756          */
1757         rc = mdd_la_get(env, son, attr);
1758         if (rc)
1759                 RETURN(rc);
1760
1761         /* calling ->ah_make_hint() is used to transfer information from parent */
1762         mdd_object_make_hint(env, mdd_pobj, son, attr, spec, hint);
1763
1764         handle = mdd_trans_create(env, mdd);
1765         if (IS_ERR(handle))
1766                 GOTO(out_free, rc = PTR_ERR(handle));
1767
1768         /*
1769          * XXX: Setting the lov ea is not locked but setting the attr is locked?
1770          * Should this be fixed?
1771          */
1772         CDEBUG(D_OTHER, "ea %p/%u, cr_flags "LPO64", no_create %u\n",
1773                spec->u.sp_ea.eadata, spec->u.sp_ea.eadatalen,
1774                spec->sp_cr_flags, spec->no_create);
1775
1776         if (spec->no_create || (spec->sp_cr_flags & MDS_OPEN_HAS_EA)) {
1777                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
1778                                         spec->u.sp_ea.eadatalen);
1779         } else {
1780                 buf = &LU_BUF_NULL;
1781         }
1782
1783         rc = dt_declare_xattr_set(env, mdd_object_child(son), buf,
1784                                   XATTR_NAME_LOV, 0, handle);
1785         if (rc)
1786                 GOTO(stop, rc);
1787
1788         rc = mdd_declare_changelog_store(env, mdd, NULL, NULL, handle);
1789         if (rc)
1790                 GOTO(stop, rc);
1791
1792         rc = mdd_trans_start(env, mdd, handle);
1793         if (rc)
1794                 GOTO(stop, rc);
1795
1796         rc = dt_xattr_set(env, mdd_object_child(son), buf, XATTR_NAME_LOV,
1797                           0, handle);
1798
1799         if (rc)
1800                 GOTO(stop, rc);
1801
1802         rc = mdd_changelog_data_store(env, mdd, CL_LAYOUT, 0, son, handle);
1803
1804 stop:
1805         mdd_trans_stop(env, mdd, rc, handle);
1806 out_free:
1807         RETURN(rc);
1808 }
1809
1810 static int mdd_declare_object_initialize(const struct lu_env *env,
1811                                          struct mdd_object *parent,
1812                                          struct mdd_object *child,
1813                                          struct lu_attr *attr,
1814                                          struct thandle *handle)
1815 {
1816         int rc;
1817         ENTRY;
1818
1819         /*
1820          * inode mode has been set in creation time, and it's based on umask,
1821          * la_mode and acl, don't set here again! (which will go wrong
1822          * because below function doesn't consider umask).
1823          * I'd suggest set all object attributes in creation time, see above.
1824          */
1825         LASSERT(attr->la_valid & (LA_MODE | LA_TYPE));
1826         attr->la_valid &= ~(LA_MODE | LA_TYPE);
1827         rc = mdo_declare_attr_set(env, child, attr, handle);
1828         attr->la_valid |= LA_MODE | LA_TYPE;
1829         if (rc != 0 || !S_ISDIR(attr->la_mode))
1830                 RETURN(rc);
1831
1832         rc = mdo_declare_index_insert(env, child, mdo2fid(child), S_IFDIR,
1833                                       dot, handle);
1834         if (rc != 0)
1835                 RETURN(rc);
1836
1837         rc = mdo_declare_ref_add(env, child, handle);
1838         if (rc != 0)
1839                 RETURN(rc);
1840
1841         rc = mdo_declare_index_insert(env, child, mdo2fid(parent), S_IFDIR,
1842                                       dotdot, handle);
1843
1844         RETURN(rc);
1845 }
1846
1847 static int mdd_object_initialize(const struct lu_env *env,
1848                                  const struct lu_fid *pfid,
1849                                  struct mdd_object *child,
1850                                  struct lu_attr *attr, struct thandle *handle,
1851                                  const struct md_op_spec *spec)
1852 {
1853         int rc = 0;
1854         ENTRY;
1855
1856         if (S_ISDIR(attr->la_mode)) {
1857                 /* Add "." and ".." for newly created dir */
1858                 mdo_ref_add(env, child, handle);
1859                 rc = __mdd_index_insert_only(env, child, mdo2fid(child),
1860                                              S_IFDIR, dot, handle);
1861                 if (rc == 0)
1862                         rc = __mdd_index_insert_only(env, child, pfid, S_IFDIR,
1863                                                      dotdot, handle);
1864                 if (rc != 0)
1865                         mdo_ref_del(env, child, handle);
1866         }
1867
1868         RETURN(rc);
1869 }
1870
1871 /**
1872  * This function checks whether it can create a file/dir under the
1873  * directory(@pobj). The directory(@pobj) is not being locked by
1874  * mdd lock.
1875  *
1876  * \param[in] env       execution environment
1877  * \param[in] pobj      the directory to create files
1878  * \param[in] pattr     the attributes of the directory
1879  * \param[in] lname     the name of the created file/dir
1880  * \param[in] cattr     the attributes of the file/dir
1881  * \param[in] spec      create specification
1882  *
1883  * \retval              = 0 it is allowed to create file/dir under
1884  *                      the directory
1885  * \retval              negative error not allowed to create file/dir
1886  *                      under the directory
1887  */
1888 static int mdd_create_sanity_check(const struct lu_env *env,
1889                                    struct md_object *pobj,
1890                                    const struct lu_attr *pattr,
1891                                    const struct lu_name *lname,
1892                                    struct lu_attr *cattr,
1893                                    struct md_op_spec *spec)
1894 {
1895         struct mdd_thread_info *info = mdd_env_info(env);
1896         struct lu_fid     *fid       = &info->mti_fid;
1897         struct mdd_object *obj       = md2mdd_obj(pobj);
1898         struct mdd_device *m         = mdo2mdd(pobj);
1899         bool            check_perm = true;
1900         int rc;
1901         ENTRY;
1902
1903         /* EEXIST check */
1904         if (mdd_is_dead_obj(obj))
1905                 RETURN(-ENOENT);
1906
1907         /*
1908          * In some cases this lookup is not needed - we know before if name
1909          * exists or not because MDT performs lookup for it.
1910          * name length check is done in lookup.
1911          */
1912         if (spec->sp_cr_lookup) {
1913                 /*
1914                  * Check if the name already exist, though it will be checked in
1915                  * _index_insert also, for avoiding rolling back if exists
1916                  * _index_insert.
1917                  */
1918                 rc = __mdd_lookup(env, pobj, pattr, lname, fid,
1919                                   MAY_WRITE | MAY_EXEC);
1920                 if (rc != -ENOENT)
1921                         RETURN(rc ? : -EEXIST);
1922
1923                 /* Permission is already being checked in mdd_lookup */
1924                 check_perm = false;
1925         }
1926
1927         rc = mdd_may_create(env, obj, pattr, NULL, check_perm);
1928         if (rc != 0)
1929                 RETURN(rc);
1930
1931         /* sgid check */
1932         if (pattr->la_mode & S_ISGID) {
1933                 cattr->la_gid = pattr->la_gid;
1934                 if (S_ISDIR(cattr->la_mode)) {
1935                         cattr->la_mode |= S_ISGID;
1936                         cattr->la_valid |= LA_MODE;
1937                 }
1938         }
1939
1940         rc = mdd_name_check(m, lname);
1941         if (rc < 0)
1942                 RETURN(rc);
1943
1944         switch (cattr->la_mode & S_IFMT) {
1945         case S_IFLNK: {
1946                 unsigned int symlen = strlen(spec->u.sp_symname) + 1;
1947
1948                 if (symlen > (1 << m->mdd_dt_conf.ddp_block_shift))
1949                         RETURN(-ENAMETOOLONG);
1950                 else
1951                         RETURN(0);
1952         }
1953         case S_IFDIR:
1954         case S_IFREG:
1955         case S_IFCHR:
1956         case S_IFBLK:
1957         case S_IFIFO:
1958         case S_IFSOCK:
1959                 rc = 0;
1960                 break;
1961         default:
1962                 rc = -EINVAL;
1963                 break;
1964         }
1965         RETURN(rc);
1966 }
1967
1968 static int mdd_declare_object_create(const struct lu_env *env,
1969                                      struct mdd_device *mdd,
1970                                      struct mdd_object *p, struct mdd_object *c,
1971                                      struct lu_attr *attr,
1972                                      struct thandle *handle,
1973                                      const struct md_op_spec *spec,
1974                                      struct lu_buf *def_acl_buf,
1975                                      struct lu_buf *acl_buf,
1976                                      struct dt_allocation_hint *hint)
1977 {
1978         int rc;
1979
1980         rc = mdd_declare_object_create_internal(env, p, c, attr, handle, spec,
1981                                                 hint);
1982         if (rc)
1983                 GOTO(out, rc);
1984
1985 #ifdef CONFIG_FS_POSIX_ACL
1986         if (def_acl_buf->lb_len > 0 && S_ISDIR(attr->la_mode)) {
1987                 /* if dir, then can inherit default ACl */
1988                 rc = mdo_declare_xattr_set(env, c, def_acl_buf,
1989                                            XATTR_NAME_ACL_DEFAULT,
1990                                            0, handle);
1991                 if (rc)
1992                         GOTO(out, rc);
1993         }
1994
1995         if (acl_buf->lb_len > 0) {
1996                 rc = mdo_declare_attr_set(env, c, attr, handle);
1997                 if (rc)
1998                         GOTO(out, rc);
1999
2000                 rc = mdo_declare_xattr_set(env, c, acl_buf,
2001                                            XATTR_NAME_ACL_ACCESS, 0, handle);
2002                 if (rc)
2003                         GOTO(out, rc);
2004         }
2005 #endif
2006         rc = mdd_declare_object_initialize(env, p, c, attr, handle);
2007         if (rc)
2008                 GOTO(out, rc);
2009
2010         /* replay case, create LOV EA from client data */
2011         if (spec->no_create ||
2012             (spec->sp_cr_flags & MDS_OPEN_HAS_EA && S_ISREG(attr->la_mode))) {
2013                 const struct lu_buf *buf;
2014
2015                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
2016                                         spec->u.sp_ea.eadatalen);
2017                 rc = mdo_declare_xattr_set(env, c, buf, XATTR_NAME_LOV, 0,
2018                                            handle);
2019                 if (rc)
2020                         GOTO(out, rc);
2021         }
2022
2023         if (S_ISLNK(attr->la_mode)) {
2024                 const char *target_name = spec->u.sp_symname;
2025                 int sym_len = strlen(target_name);
2026                 const struct lu_buf *buf;
2027
2028                 buf = mdd_buf_get_const(env, target_name, sym_len);
2029                 rc = dt_declare_record_write(env, mdd_object_child(c),
2030                                              buf, 0, handle);
2031                 if (rc)
2032                         GOTO(out, rc);
2033         }
2034 out:
2035         return rc;
2036 }
2037
2038 static int mdd_declare_create(const struct lu_env *env, struct mdd_device *mdd,
2039                               struct mdd_object *p, struct mdd_object *c,
2040                               const struct lu_name *name,
2041                               struct lu_attr *attr,
2042                               struct thandle *handle,
2043                               const struct md_op_spec *spec,
2044                               struct linkea_data *ldata,
2045                               struct lu_buf *def_acl_buf,
2046                               struct lu_buf *acl_buf,
2047                               struct dt_allocation_hint *hint)
2048 {
2049         int rc;
2050
2051         rc = mdd_declare_object_create(env, mdd, p, c, attr, handle, spec,
2052                                        def_acl_buf, acl_buf, hint);
2053         if (rc)
2054                 GOTO(out, rc);
2055
2056         if (S_ISDIR(attr->la_mode)) {
2057                 rc = mdo_declare_ref_add(env, p, handle);
2058                 if (rc)
2059                         GOTO(out, rc);
2060         }
2061
2062         if (unlikely(spec->sp_cr_flags & MDS_OPEN_VOLATILE)) {
2063                 rc = orph_declare_index_insert(env, c, attr->la_mode, handle);
2064                 if (rc)
2065                         GOTO(out, rc);
2066         } else {
2067                 struct lu_attr  *la = &mdd_env_info(env)->mti_la_for_fix;
2068
2069                 rc = mdo_declare_index_insert(env, p, mdo2fid(c), attr->la_mode,
2070                                               name->ln_name, handle);
2071                 if (rc != 0)
2072                         return rc;
2073
2074                 rc = mdd_declare_links_add(env, c, handle, ldata, MLAO_IGNORE);
2075                 if (rc)
2076                         return rc;
2077
2078                 *la = *attr;
2079                 la->la_valid = LA_CTIME | LA_MTIME;
2080                 rc = mdo_declare_attr_set(env, p, la, handle);
2081                 if (rc)
2082                         return rc;
2083
2084                 rc = mdd_declare_changelog_store(env, mdd, name, NULL, handle);
2085                 if (rc)
2086                         return rc;
2087         }
2088 out:
2089         return rc;
2090 }
2091
2092 static int mdd_acl_init(const struct lu_env *env, struct mdd_object *pobj,
2093                         struct lu_attr *la, struct lu_buf *def_acl_buf,
2094                         struct lu_buf *acl_buf)
2095 {
2096         int     rc;
2097         ENTRY;
2098
2099         if (S_ISLNK(la->la_mode)) {
2100                 acl_buf->lb_len = 0;
2101                 def_acl_buf->lb_len = 0;
2102                 RETURN(0);
2103         }
2104
2105         mdd_read_lock(env, pobj, MOR_TGT_PARENT);
2106         rc = mdo_xattr_get(env, pobj, def_acl_buf,
2107                            XATTR_NAME_ACL_DEFAULT);
2108         mdd_read_unlock(env, pobj);
2109         if (rc > 0) {
2110                 /* If there are default ACL, fix mode/ACL by default ACL */
2111                 def_acl_buf->lb_len = rc;
2112                 LASSERT(def_acl_buf->lb_len <= acl_buf->lb_len);
2113                 memcpy(acl_buf->lb_buf, def_acl_buf->lb_buf, rc);
2114                 acl_buf->lb_len = rc;
2115                 rc = __mdd_fix_mode_acl(env, acl_buf, &la->la_mode);
2116                 if (rc < 0)
2117                         RETURN(rc);
2118         } else if (rc == -ENODATA || rc == -EOPNOTSUPP) {
2119                 /* If there are no default ACL, fix mode by mask */
2120                 struct lu_ucred *uc = lu_ucred(env);
2121
2122                 /* The create triggered by MDT internal events, such as
2123                  * LFSCK reset, will not contain valid "uc". */
2124                 if (unlikely(uc != NULL))
2125                         la->la_mode &= ~uc->uc_umask;
2126                 rc = 0;
2127                 acl_buf->lb_len = 0;
2128                 def_acl_buf->lb_len = 0;
2129         }
2130
2131         RETURN(rc);
2132 }
2133
2134 /**
2135  * Create a metadata object and initialize it, set acl, xattr.
2136  **/
2137 static int mdd_object_create(const struct lu_env *env, struct mdd_object *pobj,
2138                              struct mdd_object *son, struct lu_attr *attr,
2139                              struct md_op_spec *spec, struct lu_buf *acl_buf,
2140                              struct lu_buf *def_acl_buf,
2141                              struct dt_allocation_hint *hint,
2142                              struct thandle *handle)
2143 {
2144         int                     rc;
2145
2146         mdd_write_lock(env, son, MOR_TGT_CHILD);
2147         rc = mdd_object_create_internal(env, NULL, son, attr, handle, spec,
2148                                         hint);
2149         if (rc)
2150                 GOTO(unlock, rc);
2151
2152         /* Note: In DNE phase I, for striped dir, though sub-stripes will be
2153          * created in declare phase, they also needs to be added to master
2154          * object as sub-directory entry. So it has to initialize the master
2155          * object, then set dir striped EA.(in mdo_xattr_set) */
2156         rc = mdd_object_initialize(env, mdo2fid(pobj), son, attr, handle,
2157                                    spec);
2158         if (rc != 0)
2159                 GOTO(err_destroy, rc);
2160
2161         /*
2162          * in case of replay we just set LOVEA provided by the client
2163          * XXX: I think it would be interesting to try "old" way where
2164          *      MDT calls this xattr_set(LOV) in a different transaction.
2165          *      probably this way we code can be made better.
2166          */
2167
2168         /* During creation, there are only a few cases we need do xattr_set to
2169          * create stripes.
2170          * 1. regular file: see comments above.
2171          * 2. dir: inherit default striping or pool settings from parent.
2172          * 3. create striped directory with provided stripeEA.
2173          * 4. create striped directory because inherit default layout from the
2174          * parent.
2175          */
2176         if (spec->no_create ||
2177             (S_ISREG(attr->la_mode) && spec->sp_cr_flags & MDS_OPEN_HAS_EA) ||
2178             S_ISDIR(attr->la_mode)) {
2179                 const struct lu_buf *buf;
2180
2181                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
2182                                         spec->u.sp_ea.eadatalen);
2183                 rc = mdo_xattr_set(env, son, buf,
2184                                    S_ISDIR(attr->la_mode) ? XATTR_NAME_LMV :
2185                                                             XATTR_NAME_LOV, 0,
2186                                    handle);
2187                 if (rc != 0)
2188                         GOTO(err_destroy, rc);
2189         }
2190
2191 #ifdef CONFIG_FS_POSIX_ACL
2192         if (def_acl_buf != NULL && def_acl_buf->lb_len > 0 &&
2193             S_ISDIR(attr->la_mode)) {
2194                 /* set default acl */
2195                 rc = mdo_xattr_set(env, son, def_acl_buf,
2196                                    XATTR_NAME_ACL_DEFAULT, 0,
2197                                    handle);
2198                 if (rc)
2199                         GOTO(err_destroy, rc);
2200         }
2201         /* set its own acl */
2202         if (acl_buf != NULL && acl_buf->lb_len > 0) {
2203                 rc = mdo_xattr_set(env, son, acl_buf,
2204                                    XATTR_NAME_ACL_ACCESS,
2205                                    0, handle);
2206                 if (rc)
2207                         GOTO(err_destroy, rc);
2208         }
2209 #endif
2210
2211         if (S_ISLNK(attr->la_mode)) {
2212                 struct lu_ucred  *uc = lu_ucred_assert(env);
2213                 struct dt_object *dt = mdd_object_child(son);
2214                 const char *target_name = spec->u.sp_symname;
2215                 int sym_len = strlen(target_name);
2216                 const struct lu_buf *buf;
2217                 loff_t pos = 0;
2218
2219                 buf = mdd_buf_get_const(env, target_name, sym_len);
2220                 rc = dt->do_body_ops->dbo_write(env, dt, buf, &pos, handle,
2221                                                 uc->uc_cap &
2222                                                 CFS_CAP_SYS_RESOURCE_MASK);
2223
2224                 if (rc == sym_len)
2225                         rc = 0;
2226                 else
2227                         GOTO(err_initlized, rc = -EFAULT);
2228         }
2229
2230 err_initlized:
2231         if (unlikely(rc != 0)) {
2232                 int rc2;
2233                 if (S_ISDIR(attr->la_mode)) {
2234                         /* Drop the reference, no need to delete "."/"..",
2235                          * because the object to be destroied directly. */
2236                         rc2 = mdo_ref_del(env, son, handle);
2237                         if (rc2 != 0)
2238                                 GOTO(unlock, rc);
2239                 }
2240                 rc2 = mdo_ref_del(env, son, handle);
2241                 if (rc2 != 0)
2242                         GOTO(unlock, rc);
2243 err_destroy:
2244                 mdo_destroy(env, son, handle);
2245         }
2246 unlock:
2247         mdd_write_unlock(env, son);
2248         RETURN(rc);
2249 }
2250
2251 /*
2252  * Create object and insert it into namespace.
2253  */
2254 static int mdd_create(const struct lu_env *env, struct md_object *pobj,
2255                       const struct lu_name *lname, struct md_object *child,
2256                       struct md_op_spec *spec, struct md_attr* ma)
2257 {
2258         struct mdd_thread_info  *info = mdd_env_info(env);
2259         struct lu_attr          *la = &info->mti_la_for_fix;
2260         struct mdd_object       *mdd_pobj = md2mdd_obj(pobj);
2261         struct mdd_object       *son = md2mdd_obj(child);
2262         struct mdd_device       *mdd = mdo2mdd(pobj);
2263         struct lu_attr          *attr = &ma->ma_attr;
2264         struct thandle          *handle;
2265         struct lu_attr          *pattr = &info->mti_pattr;
2266         struct lu_buf           acl_buf;
2267         struct lu_buf           def_acl_buf;
2268         struct linkea_data      *ldata = &info->mti_link_data;
2269         const char              *name = lname->ln_name;
2270         struct dt_allocation_hint *hint = &mdd_env_info(env)->mti_hint;
2271         int                      rc;
2272         int                      rc2;
2273         ENTRY;
2274
2275         /*
2276          * Two operations have to be performed:
2277          *
2278          *  - an allocation of a new object (->do_create()), and
2279          *
2280          *  - an insertion into a parent index (->dio_insert()).
2281          *
2282          * Due to locking, operation order is not important, when both are
2283          * successful, *but* error handling cases are quite different:
2284          *
2285          *  - if insertion is done first, and following object creation fails,
2286          *  insertion has to be rolled back, but this operation might fail
2287          *  also leaving us with dangling index entry.
2288          *
2289          *  - if creation is done first, is has to be undone if insertion
2290          *  fails, leaving us with leaked space, which is neither good, nor
2291          *  fatal.
2292          *
2293          * It seems that creation-first is simplest solution, but it is
2294          * sub-optimal in the frequent
2295          *
2296          *         $ mkdir foo
2297          *         $ mkdir foo
2298          *
2299          * case, because second mkdir is bound to create object, only to
2300          * destroy it immediately.
2301          *
2302          * To avoid this follow local file systems that do double lookup:
2303          *
2304          *     0. lookup -> -EEXIST (mdd_create_sanity_check())
2305          *
2306          *     1. create            (mdd_object_create_internal())
2307          *
2308          *     2. insert            (__mdd_index_insert(), lookup again)
2309          */
2310
2311         rc = mdd_la_get(env, mdd_pobj, pattr);
2312         if (rc != 0)
2313                 RETURN(rc);
2314
2315         /* Sanity checks before big job. */
2316         rc = mdd_create_sanity_check(env, pobj, pattr, lname, attr, spec);
2317         if (rc)
2318                 RETURN(rc);
2319
2320         if (OBD_FAIL_CHECK(OBD_FAIL_MDS_DQACQ_NET))
2321                 GOTO(out_free, rc = -EINPROGRESS);
2322
2323         handle = mdd_trans_create(env, mdd);
2324         if (IS_ERR(handle))
2325                 GOTO(out_free, rc = PTR_ERR(handle));
2326
2327         acl_buf.lb_buf = info->mti_xattr_buf;
2328         acl_buf.lb_len = sizeof(info->mti_xattr_buf);
2329         def_acl_buf.lb_buf = info->mti_key;
2330         def_acl_buf.lb_len = sizeof(info->mti_key);
2331         rc = mdd_acl_init(env, mdd_pobj, attr, &def_acl_buf, &acl_buf);
2332         if (rc < 0)
2333                 GOTO(out_stop, rc);
2334
2335         mdd_object_make_hint(env, mdd_pobj, son, attr, spec, hint);
2336
2337         memset(ldata, 0, sizeof(*ldata));
2338         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_BAD_PARENT)) {
2339                 struct lu_fid tfid = *mdd_object_fid(mdd_pobj);
2340
2341                 tfid.f_oid--;
2342                 rc = mdd_linkea_prepare(env, son, NULL, NULL,
2343                                         &tfid, lname, 1, 0, ldata);
2344         } else {
2345                 rc = mdd_linkea_prepare(env, son, NULL, NULL,
2346                                         mdd_object_fid(mdd_pobj),
2347                                         lname, 1, 0, ldata);
2348         }
2349
2350         rc = mdd_declare_create(env, mdd, mdd_pobj, son, lname, attr,
2351                                 handle, spec, ldata, &def_acl_buf, &acl_buf,
2352                                 hint);
2353         if (rc)
2354                 GOTO(out_stop, rc);
2355
2356         rc = mdd_trans_start(env, mdd, handle);
2357         if (rc)
2358                 GOTO(out_stop, rc);
2359
2360         rc = mdd_object_create(env, mdd_pobj, son, attr, spec, &acl_buf,
2361                                &def_acl_buf, hint, handle);
2362         if (rc != 0)
2363                 GOTO(out_stop, rc);
2364
2365         if (unlikely(spec->sp_cr_flags & MDS_OPEN_VOLATILE)) {
2366                 mdd_write_lock(env, son, MOR_TGT_CHILD);
2367                 rc = __mdd_orphan_add(env, son, handle);
2368                 GOTO(out_volatile, rc);
2369         } else {
2370                 rc = __mdd_index_insert(env, mdd_pobj, mdo2fid(son),
2371                                         attr->la_mode, name, handle);
2372                 if (rc != 0)
2373                         GOTO(err_created, rc);
2374
2375                 mdd_links_add(env, son, mdo2fid(mdd_pobj), lname, handle,
2376                               ldata, 1);
2377
2378                 /* update parent directory mtime/ctime */
2379                 *la = *attr;
2380                 la->la_valid = LA_CTIME | LA_MTIME;
2381                 rc = mdd_update_time(env, mdd_pobj, pattr, la, handle);
2382                 if (rc)
2383                         GOTO(err_insert, rc);
2384         }
2385
2386         EXIT;
2387 err_insert:
2388         if (rc != 0) {
2389                 int rc2;
2390
2391                 if (spec->sp_cr_flags & MDS_OPEN_VOLATILE)
2392                         rc2 = __mdd_orphan_del(env, son, handle);
2393                 else
2394                         rc2 = __mdd_index_delete(env, mdd_pobj, name,
2395                                                  S_ISDIR(attr->la_mode),
2396                                                  handle);
2397                 if (rc2 != 0)
2398                         goto out_stop;
2399
2400 err_created:
2401                 mdd_write_lock(env, son, MOR_TGT_CHILD);
2402                 if (S_ISDIR(attr->la_mode)) {
2403                         /* Drop the reference, no need to delete "."/"..",
2404                          * because the object is to be destroyed directly. */
2405                         rc2 = mdo_ref_del(env, son, handle);
2406                         if (rc2 != 0) {
2407                                 mdd_write_unlock(env, son);
2408                                 goto out_stop;
2409                         }
2410                 }
2411 out_volatile:
2412                 /* For volatile files drop one link immediately, since there is
2413                  * no filename in the namespace, and save any error returned. */
2414                 rc2 = mdo_ref_del(env, son, handle);
2415                 if (rc2 != 0) {
2416                         mdd_write_unlock(env, son);
2417                         if (unlikely(rc == 0))
2418                                 rc = rc2;
2419                         goto out_stop;
2420                 }
2421
2422                 /* Don't destroy the volatile object on success */
2423                 if (likely(rc != 0))
2424                         mdo_destroy(env, son, handle);
2425                 mdd_write_unlock(env, son);
2426         }
2427
2428         if (rc == 0 && fid_is_namespace_visible(mdo2fid(son)) &&
2429             likely((spec->sp_cr_flags & MDS_OPEN_VOLATILE) == 0))
2430                 rc = mdd_changelog_ns_store(env, mdd,
2431                                 S_ISDIR(attr->la_mode) ? CL_MKDIR :
2432                                 S_ISREG(attr->la_mode) ? CL_CREATE :
2433                                 S_ISLNK(attr->la_mode) ? CL_SOFTLINK : CL_MKNOD,
2434                                 0, son, mdo2fid(mdd_pobj), NULL, NULL, lname,
2435                                 NULL, handle);
2436 out_stop:
2437         rc2 = mdd_trans_stop(env, mdd, rc, handle);
2438         if (rc == 0)
2439                 rc = rc2;
2440 out_free:
2441         if (ldata->ld_buf && ldata->ld_buf->lb_len > OBD_ALLOC_BIG)
2442                 /* if we vmalloced a large buffer drop it */
2443                 lu_buf_free(ldata->ld_buf);
2444
2445         /* The child object shouldn't be cached anymore */
2446         if (rc)
2447                 set_bit(LU_OBJECT_HEARD_BANSHEE,
2448                         &child->mo_lu.lo_header->loh_flags);
2449         return rc;
2450 }
2451
2452 /*
2453  * Get locks on parents in proper order
2454  * RETURN: < 0 - error, rename_order if successful
2455  */
2456 enum rename_order {
2457         MDD_RN_SAME,
2458         MDD_RN_SRCTGT,
2459         MDD_RN_TGTSRC
2460 };
2461
2462 static int mdd_rename_order(const struct lu_env *env,
2463                             struct mdd_device *mdd,
2464                             struct mdd_object *src_pobj,
2465                             const struct lu_attr *pattr,
2466                             struct mdd_object *tgt_pobj)
2467 {
2468         /* order of locking, 1 - tgt-src, 0 - src-tgt*/
2469         int rc;
2470         ENTRY;
2471
2472         if (src_pobj == tgt_pobj)
2473                 RETURN(MDD_RN_SAME);
2474
2475         /* compared the parent child relationship of src_p&tgt_p */
2476         if (lu_fid_eq(&mdd->mdd_root_fid, mdo2fid(src_pobj))){
2477                 rc = MDD_RN_SRCTGT;
2478         } else if (lu_fid_eq(&mdd->mdd_root_fid, mdo2fid(tgt_pobj))) {
2479                 rc = MDD_RN_TGTSRC;
2480         } else {
2481                 rc = mdd_is_parent(env, mdd, src_pobj, pattr, mdo2fid(tgt_pobj),
2482                                    NULL);
2483                 if (rc == -EREMOTE)
2484                         rc = 0;
2485
2486                 if (rc == 1)
2487                         rc = MDD_RN_TGTSRC;
2488                 else if (rc == 0)
2489                         rc = MDD_RN_SRCTGT;
2490         }
2491
2492         RETURN(rc);
2493 }
2494
2495 /* has not mdd_write{read}_lock on any obj yet. */
2496 static int mdd_rename_sanity_check(const struct lu_env *env,
2497                                    struct mdd_object *src_pobj,
2498                                    const struct lu_attr *pattr,
2499                                    struct mdd_object *tgt_pobj,
2500                                    const struct lu_attr *tpattr,
2501                                    struct mdd_object *sobj,
2502                                    const struct lu_attr *cattr,
2503                                    struct mdd_object *tobj,
2504                                    const struct lu_attr *tattr)
2505 {
2506         int rc = 0;
2507         ENTRY;
2508
2509         /* XXX: when get here, sobj must NOT be NULL,
2510          * the other case has been processed in cld_rename
2511          * before mdd_rename and enable MDS_PERM_BYPASS. */
2512         LASSERT(sobj);
2513
2514         rc = mdd_may_delete(env, src_pobj, pattr, sobj, cattr, NULL, 1, 0);
2515         if (rc)
2516                 RETURN(rc);
2517
2518         /* XXX: when get here, "tobj == NULL" means tobj must
2519          * NOT exist (neither on remote MDS, such case has been
2520          * processed in cld_rename before mdd_rename and enable
2521          * MDS_PERM_BYPASS).
2522          * So check may_create, but not check may_unlink. */
2523         if (tobj == NULL)
2524                 rc = mdd_may_create(env, tgt_pobj, tpattr, NULL,
2525                                     (src_pobj != tgt_pobj));
2526         else
2527                 rc = mdd_may_delete(env, tgt_pobj, tpattr, tobj, tattr, cattr,
2528                                     (src_pobj != tgt_pobj), 1);
2529
2530         if (!rc && !tobj && (src_pobj != tgt_pobj) && S_ISDIR(cattr->la_mode))
2531                 rc = __mdd_may_link(env, tgt_pobj, tpattr);
2532
2533         RETURN(rc);
2534 }
2535
2536 static int mdd_declare_rename(const struct lu_env *env,
2537                               struct mdd_device *mdd,
2538                               struct mdd_object *mdd_spobj,
2539                               struct mdd_object *mdd_tpobj,
2540                               struct mdd_object *mdd_sobj,
2541                               struct mdd_object *mdd_tobj,
2542                               const struct lu_name *tname,
2543                               const struct lu_name *sname,
2544                               struct md_attr *ma,
2545                               struct linkea_data *ldata,
2546                               struct thandle *handle)
2547 {
2548         struct lu_attr    *la = &mdd_env_info(env)->mti_la_for_fix;
2549         int rc;
2550
2551         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
2552         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
2553
2554         LASSERT(mdd_spobj);
2555         LASSERT(mdd_tpobj);
2556         LASSERT(mdd_sobj);
2557
2558         /* name from source dir */
2559         rc = mdo_declare_index_delete(env, mdd_spobj, sname->ln_name, handle);
2560         if (rc)
2561                 return rc;
2562
2563         /* .. from source child */
2564         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
2565                 /* source child can be directory,
2566                  * counted by source dir's nlink */
2567                 rc = mdo_declare_ref_del(env, mdd_spobj, handle);
2568                 if (rc)
2569                         return rc;
2570                 if (mdd_spobj != mdd_tpobj) {
2571                         rc = mdo_declare_index_delete(env, mdd_sobj, dotdot,
2572                                                       handle);
2573                         if (rc != 0)
2574                                 return rc;
2575
2576                         rc = mdo_declare_index_insert(env, mdd_sobj,
2577                                                       mdo2fid(mdd_tpobj),
2578                                                       S_IFDIR, dotdot, handle);
2579                         if (rc != 0)
2580                                 return rc;
2581                 }
2582
2583                 /* new target child can be directory,
2584                  * counted by target dir's nlink */
2585                 rc = mdo_declare_ref_add(env, mdd_tpobj, handle);
2586                 if (rc != 0)
2587                         return rc;
2588         }
2589
2590         la->la_valid = LA_CTIME | LA_MTIME;
2591         rc = mdo_declare_attr_set(env, mdd_spobj, la, handle);
2592         if (rc != 0)
2593                 return rc;
2594
2595         rc = mdo_declare_attr_set(env, mdd_tpobj, la, handle);
2596         if (rc != 0)
2597                 return rc;
2598
2599         la->la_valid = LA_CTIME;
2600         rc = mdo_declare_attr_set(env, mdd_sobj, la, handle);
2601         if (rc)
2602                 return rc;
2603
2604         rc = mdd_declare_links_add(env, mdd_sobj, handle, ldata,
2605                 S_ISREG(mdd_object_type(mdd_sobj)) ? MLAO_CHECK : MLAO_IGNORE);
2606         if (rc)
2607                 return rc;
2608
2609         /* new name */
2610         rc = mdo_declare_index_insert(env, mdd_tpobj, mdo2fid(mdd_sobj),
2611                                       mdd_object_type(mdd_sobj),
2612                                       tname->ln_name, handle);
2613         if (rc != 0)
2614                 return rc;
2615
2616         /* name from target dir (old name), we declare it unconditionally
2617          * as mdd_rename() calls delete unconditionally as well. so just
2618          * to balance declarations vs calls to change ... */
2619         rc = mdo_declare_index_delete(env, mdd_tpobj, tname->ln_name, handle);
2620         if (rc)
2621                 return rc;
2622
2623         if (mdd_tobj && mdd_object_exists(mdd_tobj)) {
2624                 /* delete target child in target parent directory */
2625                 rc = mdo_declare_ref_del(env, mdd_tobj, handle);
2626                 if (rc)
2627                         return rc;
2628
2629                 if (S_ISDIR(mdd_object_type(mdd_tobj))) {
2630                         /* target child can be directory,
2631                          * delete "." reference in target child directory */
2632                         rc = mdo_declare_ref_del(env, mdd_tobj, handle);
2633                         if (rc)
2634                                 return rc;
2635
2636                         /* delete ".." reference in target parent directory */
2637                         rc = mdo_declare_ref_del(env, mdd_tpobj, handle);
2638                         if (rc)
2639                                 return rc;
2640                 }
2641
2642                 la->la_valid = LA_CTIME;
2643                 rc = mdo_declare_attr_set(env, mdd_tobj, la, handle);
2644                 if (rc)
2645                         return rc;
2646
2647                 rc = mdd_declare_finish_unlink(env, mdd_tobj, handle);
2648                 if (rc)
2649                         return rc;
2650         }
2651
2652         rc = mdd_declare_changelog_store(env, mdd, tname, sname, handle);
2653         if (rc)
2654                 return rc;
2655
2656         return rc;
2657 }
2658
2659 /* src object can be remote that is why we use only fid and type of object */
2660 static int mdd_rename(const struct lu_env *env,
2661                       struct md_object *src_pobj, struct md_object *tgt_pobj,
2662                       const struct lu_fid *lf, const struct lu_name *lsname,
2663                       struct md_object *tobj, const struct lu_name *ltname,
2664                       struct md_attr *ma)
2665 {
2666         const char *sname = lsname->ln_name;
2667         const char *tname = ltname->ln_name;
2668         struct lu_attr    *la = &mdd_env_info(env)->mti_la_for_fix;
2669         struct mdd_object *mdd_spobj = md2mdd_obj(src_pobj); /* source parent */
2670         struct mdd_object *mdd_tpobj = md2mdd_obj(tgt_pobj);
2671         struct mdd_device *mdd = mdo2mdd(src_pobj);
2672         struct mdd_object *mdd_sobj = NULL;                  /* source object */
2673         struct mdd_object *mdd_tobj = NULL;
2674         struct lu_attr *cattr = MDD_ENV_VAR(env, cattr);
2675         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
2676         struct lu_attr *tattr = MDD_ENV_VAR(env, tattr);
2677         struct lu_attr *tpattr = MDD_ENV_VAR(env, tpattr);
2678         struct thandle *handle;
2679         struct linkea_data  *ldata = &mdd_env_info(env)->mti_link_data;
2680         const struct lu_fid *tpobj_fid = mdo2fid(mdd_tpobj);
2681         const struct lu_fid *spobj_fid = mdo2fid(mdd_spobj);
2682         bool is_dir;
2683         bool tobj_ref = 0;
2684         bool tobj_locked = 0;
2685         unsigned cl_flags = 0;
2686         int rc, rc2;
2687         ENTRY;
2688
2689         if (tobj)
2690                 mdd_tobj = md2mdd_obj(tobj);
2691
2692         mdd_sobj = mdd_object_find(env, mdd, lf);
2693
2694         rc = mdd_la_get(env, mdd_sobj, cattr);
2695         if (rc)
2696                 GOTO(out_pending, rc);
2697
2698         rc = mdd_la_get(env, mdd_spobj, pattr);
2699         if (rc)
2700                 GOTO(out_pending, rc);
2701
2702         if (mdd_tobj) {
2703                 rc = mdd_la_get(env, mdd_tobj, tattr);
2704                 if (rc)
2705                         GOTO(out_pending, rc);
2706         }
2707
2708         rc = mdd_la_get(env, mdd_tpobj, tpattr);
2709         if (rc)
2710                 GOTO(out_pending, rc);
2711
2712         rc = mdd_rename_sanity_check(env, mdd_spobj, pattr, mdd_tpobj, tpattr,
2713                                      mdd_sobj, cattr, mdd_tobj, tattr);
2714         if (rc)
2715                 GOTO(out_pending, rc);
2716
2717         rc = mdd_name_check(mdd, ltname);
2718         if (rc < 0)
2719                 GOTO(out_pending, rc);
2720
2721         handle = mdd_trans_create(env, mdd);
2722         if (IS_ERR(handle))
2723                 GOTO(out_pending, rc = PTR_ERR(handle));
2724
2725         memset(ldata, 0, sizeof(*ldata));
2726         mdd_linkea_prepare(env, mdd_sobj, NULL, NULL, mdd_object_fid(mdd_tpobj),
2727                            ltname, 1, 0, ldata);
2728         rc = mdd_declare_rename(env, mdd, mdd_spobj, mdd_tpobj, mdd_sobj,
2729                                 mdd_tobj, lsname, ltname, ma, ldata, handle);
2730         if (rc)
2731                 GOTO(stop, rc);
2732
2733         rc = mdd_trans_start(env, mdd, handle);
2734         if (rc)
2735                 GOTO(stop, rc);
2736
2737         /* FIXME: Should consider tobj and sobj too in rename_lock. */
2738         rc = mdd_rename_order(env, mdd, mdd_spobj, pattr, mdd_tpobj);
2739         if (rc < 0)
2740                 GOTO(cleanup_unlocked, rc);
2741
2742         is_dir = S_ISDIR(cattr->la_mode);
2743
2744         /* Remove source name from source directory */
2745         rc = __mdd_index_delete(env, mdd_spobj, sname, is_dir, handle);
2746         if (rc)
2747                 GOTO(cleanup, rc);
2748
2749         /* "mv dir1 dir2" needs "dir1/.." link update */
2750         if (is_dir && mdd_sobj && !lu_fid_eq(spobj_fid, tpobj_fid)) {
2751                 rc = __mdd_index_delete_only(env, mdd_sobj, dotdot, handle);
2752                 if (rc != 0)
2753                         GOTO(fixup_spobj2, rc);
2754
2755                 rc = __mdd_index_insert_only(env, mdd_sobj, tpobj_fid, S_IFDIR,
2756                                              dotdot, handle);
2757                 if (rc != 0)
2758                         GOTO(fixup_spobj, rc);
2759         }
2760
2761         /* Remove target name from target directory
2762          * Here tobj can be remote one, so we do index_delete unconditionally
2763          * and -ENOENT is allowed.
2764          */
2765         rc = __mdd_index_delete(env, mdd_tpobj, tname, is_dir, handle);
2766         if (rc != 0) {
2767                 if (mdd_tobj) {
2768                         /* tname might been renamed to something else */
2769                         GOTO(fixup_spobj, rc);
2770                 }
2771                 if (rc != -ENOENT)
2772                         GOTO(fixup_spobj, rc);
2773         }
2774
2775         /* Insert new fid with target name into target dir */
2776         rc = __mdd_index_insert(env, mdd_tpobj, lf, cattr->la_mode,
2777                                 tname, handle);
2778         if (rc != 0)
2779                 GOTO(fixup_tpobj, rc);
2780
2781         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
2782         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
2783
2784         /* XXX: mdd_sobj must be local one if it is NOT NULL. */
2785         if (mdd_sobj) {
2786                 la->la_valid = LA_CTIME;
2787                 rc = mdd_update_time(env, mdd_sobj, cattr, la, handle);
2788                 if (rc)
2789                         GOTO(fixup_tpobj, rc);
2790         }
2791
2792         /* Remove old target object
2793          * For tobj is remote case cmm layer has processed
2794          * and set tobj to NULL then. So when tobj is NOT NULL,
2795          * it must be local one.
2796          */
2797         if (tobj && mdd_object_exists(mdd_tobj)) {
2798                 mdd_write_lock(env, mdd_tobj, MOR_TGT_CHILD);
2799                 tobj_locked = 1;
2800                 if (mdd_is_dead_obj(mdd_tobj)) {
2801                         /* shld not be dead, something is wrong */
2802                         CERROR("tobj is dead, something is wrong\n");
2803                         rc = -EINVAL;
2804                         goto cleanup;
2805                 }
2806                 mdo_ref_del(env, mdd_tobj, handle);
2807
2808                 /* Remove dot reference. */
2809                 if (S_ISDIR(tattr->la_mode))
2810                         mdo_ref_del(env, mdd_tobj, handle);
2811                 tobj_ref = 1;
2812
2813                 /* fetch updated nlink */
2814                 rc = mdd_la_get(env, mdd_tobj, tattr);
2815                 if (rc != 0) {
2816                         CERROR("%s: Failed to get nlink for tobj "
2817                                 DFID": rc = %d\n",
2818                                 mdd2obd_dev(mdd)->obd_name,
2819                                 PFID(tpobj_fid), rc);
2820                         GOTO(fixup_tpobj, rc);
2821                 }
2822
2823                 la->la_valid = LA_CTIME;
2824                 rc = mdd_update_time(env, mdd_tobj, tattr, la, handle);
2825                 if (rc != 0) {
2826                         CERROR("%s: Failed to set ctime for tobj "
2827                                 DFID": rc = %d\n",
2828                                 mdd2obd_dev(mdd)->obd_name,
2829                                 PFID(tpobj_fid), rc);
2830                         GOTO(fixup_tpobj, rc);
2831                 }
2832
2833                 /* XXX: this transfer to ma will be removed with LOD/OSP */
2834                 ma->ma_attr = *tattr;
2835                 ma->ma_valid |= MA_INODE;
2836                 rc = mdd_finish_unlink(env, mdd_tobj, ma, mdd_tpobj, ltname,
2837                                        handle);
2838                 if (rc != 0) {
2839                         CERROR("%s: Failed to unlink tobj "
2840                                 DFID": rc = %d\n",
2841                                 mdd2obd_dev(mdd)->obd_name,
2842                                 PFID(tpobj_fid), rc);
2843                         GOTO(fixup_tpobj, rc);
2844                 }
2845
2846                 /* fetch updated nlink */
2847                 rc = mdd_la_get(env, mdd_tobj, tattr);
2848                 if (rc != 0) {
2849                         CERROR("%s: Failed to get nlink for tobj "
2850                                 DFID": rc = %d\n",
2851                                 mdd2obd_dev(mdd)->obd_name,
2852                                 PFID(tpobj_fid), rc);
2853                         GOTO(fixup_tpobj, rc);
2854                 }
2855                 /* XXX: this transfer to ma will be removed with LOD/OSP */
2856                 ma->ma_attr = *tattr;
2857                 ma->ma_valid |= MA_INODE;
2858
2859                 if (tattr->la_nlink == 0) {
2860                         cl_flags |= CLF_RENAME_LAST;
2861                         if (mdd_hsm_archive_exists(env, mdd_tobj, ma))
2862                                 cl_flags |= CLF_RENAME_LAST_EXISTS;
2863                 }
2864         }
2865
2866         la->la_valid = LA_CTIME | LA_MTIME;
2867         rc = mdd_update_time(env, mdd_spobj, pattr, la, handle);
2868         if (rc)
2869                 GOTO(fixup_tpobj, rc);
2870
2871         if (mdd_spobj != mdd_tpobj) {
2872                 la->la_valid = LA_CTIME | LA_MTIME;
2873                 rc = mdd_update_time(env, mdd_tpobj, tpattr, la, handle);
2874         }
2875
2876         if (rc == 0 && mdd_sobj) {
2877                 mdd_write_lock(env, mdd_sobj, MOR_SRC_CHILD);
2878                 rc = mdd_links_rename(env, mdd_sobj, mdo2fid(mdd_spobj), lsname,
2879                                       mdo2fid(mdd_tpobj), ltname, handle, NULL,
2880                                       0, 0);
2881                 if (rc == -ENOENT)
2882                         /* Old files might not have EA entry */
2883                         mdd_links_add(env, mdd_sobj, mdo2fid(mdd_spobj),
2884                                       lsname, handle, NULL, 0);
2885                 mdd_write_unlock(env, mdd_sobj);
2886                 /* We don't fail the transaction if the link ea can't be
2887                    updated -- fid2path will use alternate lookup method. */
2888                 rc = 0;
2889         }
2890
2891         EXIT;
2892
2893 fixup_tpobj:
2894         if (rc) {
2895                 rc2 = __mdd_index_delete(env, mdd_tpobj, tname, is_dir, handle);
2896                 if (rc2)
2897                         CWARN("tp obj fix error %d\n",rc2);
2898
2899                 if (mdd_tobj && mdd_object_exists(mdd_tobj) &&
2900                     !mdd_is_dead_obj(mdd_tobj)) {
2901                         if (tobj_ref) {
2902                                 mdo_ref_add(env, mdd_tobj, handle);
2903                                 if (is_dir)
2904                                         mdo_ref_add(env, mdd_tobj, handle);
2905                         }
2906
2907                         rc2 = __mdd_index_insert(env, mdd_tpobj,
2908                                                   mdo2fid(mdd_tobj),
2909                                                   mdd_object_type(mdd_tobj),
2910                                                   tname, handle);
2911                         if (rc2 != 0)
2912                                 CWARN("tp obj fix error: rc = %d\n", rc2);
2913                 }
2914         }
2915
2916 fixup_spobj:
2917         if (rc && is_dir && mdd_sobj && mdd_spobj != mdd_tpobj) {
2918                 rc2 = __mdd_index_delete_only(env, mdd_sobj, dotdot, handle);
2919                 if (rc2)
2920                         CWARN("%s: sp obj dotdot delete error: rc = %d\n",
2921                                mdd2obd_dev(mdd)->obd_name, rc2);
2922
2923
2924                 rc2 = __mdd_index_insert_only(env, mdd_sobj, spobj_fid, S_IFDIR,
2925                                               dotdot, handle);
2926                 if (rc2 != 0)
2927                         CWARN("%s: sp obj dotdot insert error: rc = %d\n",
2928                               mdd2obd_dev(mdd)->obd_name, rc2);
2929         }
2930
2931 fixup_spobj2:
2932         if (rc != 0) {
2933                 rc2 = __mdd_index_insert(env, mdd_spobj, lf,
2934                                          mdd_object_type(mdd_sobj), sname,
2935                                          handle);
2936                 if (rc2 != 0)
2937                         CWARN("sp obj fix error: rc = %d\n", rc2);
2938         }
2939
2940 cleanup:
2941         if (tobj_locked)
2942                 mdd_write_unlock(env, mdd_tobj);
2943
2944 cleanup_unlocked:
2945         if (rc == 0)
2946                 rc = mdd_changelog_ns_store(env, mdd, CL_RENAME, cl_flags,
2947                                             mdd_tobj, tpobj_fid, lf, spobj_fid,
2948                                             ltname, lsname, handle);
2949
2950 stop:
2951         mdd_trans_stop(env, mdd, rc, handle);
2952
2953 out_pending:
2954         mdd_object_put(env, mdd_sobj);
2955         return rc;
2956 }
2957
2958 /**
2959  * During migration once the parent FID has been changed,
2960  * we need update the parent FID in linkea.
2961  **/
2962 static int mdd_linkea_update_child_internal(const struct lu_env *env,
2963                                             struct mdd_object *parent,
2964                                             struct mdd_object *child,
2965                                             const char *name, int namelen,
2966                                             struct thandle *handle,
2967                                             bool declare)
2968 {
2969         struct mdd_thread_info  *info = mdd_env_info(env);
2970         struct linkea_data      ldata = { NULL };
2971         struct lu_buf           *buf = &info->mti_link_buf;
2972         int                     count;
2973         int                     rc = 0;
2974
2975         ENTRY;
2976
2977         buf = lu_buf_check_and_alloc(buf, PATH_MAX);
2978         if (buf->lb_buf == NULL)
2979                 RETURN(-ENOMEM);
2980
2981         ldata.ld_buf = buf;
2982         rc = mdd_links_read(env, child, &ldata);
2983         if (rc != 0) {
2984                 if (rc == -ENOENT || rc == -ENODATA)
2985                         rc = 0;
2986                 RETURN(rc);
2987         }
2988
2989         LASSERT(ldata.ld_leh != NULL);
2990         ldata.ld_lee = (struct link_ea_entry *)(ldata.ld_leh + 1);
2991         for (count = 0; count < ldata.ld_leh->leh_reccount; count++) {
2992                 struct mdd_device *mdd = mdo2mdd(&child->mod_obj);
2993                 struct lu_name lname;
2994                 struct lu_fid  fid;
2995
2996                 linkea_entry_unpack(ldata.ld_lee, &ldata.ld_reclen,
2997                                     &lname, &fid);
2998
2999                 if (strncmp(lname.ln_name, name, namelen) != 0 ||
3000                     lu_fid_eq(&fid, mdd_object_fid(parent))) {
3001                         ldata.ld_lee = (struct link_ea_entry *)
3002                                        ((char *)ldata.ld_lee +
3003                                         ldata.ld_reclen);
3004                         continue;
3005                 }
3006
3007                 CDEBUG(D_INFO, "%s: update "DFID" with %.*s:"DFID"\n",
3008                        mdd2obd_dev(mdd)->obd_name, PFID(mdd_object_fid(child)),
3009                        lname.ln_namelen, lname.ln_name,
3010                        PFID(mdd_object_fid(parent)));
3011                 /* update to the new parent fid */
3012                 linkea_entry_pack(ldata.ld_lee, &lname,
3013                                   mdd_object_fid(parent));
3014                 if (declare)
3015                         rc = mdd_declare_links_add(env, child, handle, &ldata,
3016                                                    MLAO_IGNORE);
3017                 else
3018                         rc = mdd_links_write(env, child, &ldata, handle);
3019                 break;
3020         }
3021         RETURN(rc);
3022 }
3023
3024 static int mdd_linkea_declare_update_child(const struct lu_env *env,
3025                                            struct mdd_object *parent,
3026                                            struct mdd_object *child,
3027                                            const char *name, int namelen,
3028                                            struct thandle *handle)
3029 {
3030         return mdd_linkea_update_child_internal(env, parent, child, name,
3031                                                 namelen, handle, true);
3032 }
3033
3034 static int mdd_linkea_update_child(const struct lu_env *env,
3035                                    struct mdd_object *parent,
3036                                    struct mdd_object *child,
3037                                    const char *name, int namelen,
3038                                    struct thandle *handle)
3039 {
3040         return mdd_linkea_update_child_internal(env, parent, child, name,
3041                                                 namelen, handle, false);
3042 }
3043
3044 static int mdd_update_linkea_internal(const struct lu_env *env,
3045                                       struct mdd_object *mdd_pobj,
3046                                       struct mdd_object *mdd_sobj,
3047                                       struct mdd_object *mdd_tobj,
3048                                       const struct lu_name *child_name,
3049                                       struct thandle *handle,
3050                                       int declare)
3051 {
3052         struct mdd_thread_info  *info = mdd_env_info(env);
3053         struct linkea_data      *ldata = &info->mti_link_data;
3054         int                     count;
3055         int                     rc = 0;
3056         ENTRY;
3057
3058         rc = mdd_links_read(env, mdd_sobj, ldata);
3059         if (rc != 0) {
3060                 if (rc == -ENOENT || rc == -ENODATA)
3061                         rc = 0;
3062                 RETURN(rc);
3063         }
3064
3065         /* If it is mulitple links file, we need update the name entry for
3066          * all parent */
3067         LASSERT(ldata->ld_leh != NULL);
3068         ldata->ld_lee = (struct link_ea_entry *)(ldata->ld_leh + 1);
3069         for (count = 0; count < ldata->ld_leh->leh_reccount; count++) {
3070                 struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3071                 struct mdd_object       *pobj;
3072                 struct lu_name          lname;
3073                 struct lu_fid           fid;
3074
3075                 linkea_entry_unpack(ldata->ld_lee, &ldata->ld_reclen,
3076                                     &lname, &fid);
3077                 ldata->ld_lee = (struct link_ea_entry *)((char *)ldata->ld_lee +
3078                                                          ldata->ld_reclen);
3079                 pobj = mdd_object_find(env, mdd, &fid);
3080                 if (IS_ERR(pobj)) {
3081                         CWARN("%s: cannot find obj "DFID": rc = %ld\n",
3082                               mdd2obd_dev(mdd)->obd_name, PFID(&fid),
3083                               PTR_ERR(pobj));
3084                         continue;
3085                 }
3086
3087                 if (!mdd_object_exists(pobj)) {
3088                         CDEBUG(D_INFO, "%s: obj "DFID" does not exist\n",
3089                               mdd2obd_dev(mdd)->obd_name, PFID(&fid));
3090                         GOTO(next_put, rc);
3091                 }
3092
3093                 if (pobj == mdd_pobj &&
3094                     lname.ln_namelen == child_name->ln_namelen &&
3095                     strncmp(lname.ln_name, child_name->ln_name,
3096                             lname.ln_namelen) == 0) {
3097                         CDEBUG(D_INFO, "%s: skip its own %s: "DFID"\n",
3098                               mdd2obd_dev(mdd)->obd_name, child_name->ln_name,
3099                               PFID(&fid));
3100                         GOTO(next_put, rc);
3101                 }
3102
3103                 CDEBUG(D_INFO, "%s: update "DFID" with "DNAME":"DFID"\n",
3104                        mdd2obd_dev(mdd)->obd_name, PFID(mdd_object_fid(pobj)),
3105                        PNAME(&lname), PFID(mdd_object_fid(mdd_tobj)));
3106
3107                 if (declare) {
3108                         /* Remove source name from source directory */
3109                         /* Insert new fid with target name into target dir */
3110                         rc = mdo_declare_index_delete(env, pobj, lname.ln_name,
3111                                                       handle);
3112                         if (rc != 0)
3113                                 GOTO(next_put, rc);
3114
3115                         rc = mdo_declare_index_insert(env, pobj,
3116                                         mdd_object_fid(mdd_tobj),
3117                                         mdd_object_type(mdd_tobj),
3118                                         lname.ln_name, handle);
3119                         if (rc != 0)
3120                                 GOTO(next_put, rc);
3121
3122                         rc = mdo_declare_ref_add(env, mdd_tobj, handle);
3123                         if (rc)
3124                                 GOTO(next_put, rc);
3125
3126                         rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3127                         if (rc)
3128                                 GOTO(next_put, rc);
3129                 } else {
3130                         rc = __mdd_index_delete(env, pobj, lname.ln_name,
3131                                                 0, handle);
3132                         if (rc)
3133                                 GOTO(next_put, rc);
3134
3135                         rc = __mdd_index_insert(env, pobj,
3136                                         mdd_object_fid(mdd_tobj),
3137                                         mdd_object_type(mdd_tobj),
3138                                         lname.ln_name, handle);
3139                         if (rc != 0)
3140                                 GOTO(next_put, rc);
3141
3142                         mdd_write_lock(env, mdd_tobj, MOR_SRC_CHILD);
3143                         rc = mdo_ref_add(env, mdd_tobj, handle);
3144                         mdd_write_unlock(env, mdd_tobj);
3145                         if (rc)
3146                                 GOTO(next_put, rc);
3147
3148                         mdd_write_lock(env, mdd_sobj, MOR_TGT_CHILD);
3149                         mdo_ref_del(env, mdd_sobj, handle);
3150                         mdd_write_unlock(env, mdd_sobj);
3151                 }
3152 next_put:
3153                 mdd_object_put(env, pobj);
3154                 if (rc != 0)
3155                         break;
3156         }
3157
3158         RETURN(rc);
3159 }
3160
3161 static int mdd_migrate_xattrs(const struct lu_env *env,
3162                               struct mdd_object *mdd_sobj,
3163                               struct mdd_object *mdd_tobj)
3164 {
3165         struct mdd_thread_info  *info = mdd_env_info(env);
3166         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3167         char                    *xname;
3168         struct thandle          *handle;
3169         struct lu_buf           xbuf;
3170         int                     xlen;
3171         int                     rem;
3172         int                     xsize;
3173         int                     list_xsize;
3174         struct lu_buf           list_xbuf;
3175         int                     rc;
3176
3177         /* retrieve xattr list from the old object */
3178         list_xsize = mdo_xattr_list(env, mdd_sobj, &LU_BUF_NULL);
3179         if (list_xsize == -ENODATA)
3180                 return 0;
3181
3182         if (list_xsize < 0)
3183                 return list_xsize;
3184
3185         lu_buf_check_and_alloc(&info->mti_big_buf, list_xsize);
3186         if (info->mti_big_buf.lb_buf == NULL)
3187                 return -ENOMEM;
3188
3189         list_xbuf.lb_buf = info->mti_big_buf.lb_buf;
3190         list_xbuf.lb_len = list_xsize;
3191         rc = mdo_xattr_list(env, mdd_sobj, &list_xbuf);
3192         if (rc < 0)
3193                 return rc;
3194         rc = 0;
3195         rem = list_xsize;
3196         xname = list_xbuf.lb_buf;
3197         while (rem > 0) {
3198                 xlen = strnlen(xname, rem - 1) + 1;
3199                 if (strcmp(XATTR_NAME_LINK, xname) == 0 ||
3200                     strcmp(XATTR_NAME_LMA, xname) == 0 ||
3201                     strcmp(XATTR_NAME_LMV, xname) == 0)
3202                         goto next;
3203
3204                 /* For directory, if there are default layout, migrate here */
3205                 if (strcmp(XATTR_NAME_LOV, xname) == 0 &&
3206                     !S_ISDIR(lu_object_attr(&mdd_sobj->mod_obj.mo_lu)))
3207                         goto next;
3208
3209                 xsize = mdo_xattr_get(env, mdd_sobj, &LU_BUF_NULL, xname);
3210                 if (xsize == -ENODATA)
3211                         goto next;
3212                 if (xsize < 0)
3213                         GOTO(out, rc);
3214
3215                 lu_buf_check_and_alloc(&info->mti_link_buf, xsize);
3216                 if (info->mti_link_buf.lb_buf == NULL)
3217                         GOTO(out, rc = -ENOMEM);
3218
3219                 xbuf.lb_len = xsize;
3220                 xbuf.lb_buf = info->mti_link_buf.lb_buf;
3221                 rc = mdo_xattr_get(env, mdd_sobj, &xbuf, xname);
3222                 if (rc == -ENODATA)
3223                         goto next;
3224                 if (rc < 0)
3225                         GOTO(out, rc);
3226
3227                 handle = mdd_trans_create(env, mdd);
3228                 if (IS_ERR(handle))
3229                         GOTO(out, rc = PTR_ERR(handle));
3230
3231                 rc = mdo_declare_xattr_set(env, mdd_tobj, &xbuf, xname, 0,
3232                                            handle);
3233                 if (rc != 0)
3234                         GOTO(stop_trans, rc);
3235                 /* Note: this transaction is part of migration, and it is not
3236                  * the last step of migration, so we set th_local = 1 to avoid
3237                  * update last rcvd for this transaction */
3238                 handle->th_local = 1;
3239                 rc = mdd_trans_start(env, mdd, handle);
3240                 if (rc != 0)
3241                         GOTO(stop_trans, rc);
3242
3243                 rc = mdo_xattr_set(env, mdd_tobj, &xbuf, xname, 0, handle);
3244                 if (rc == -EEXIST)
3245                         GOTO(stop_trans, rc = 0);
3246
3247                 if (rc != 0)
3248                         GOTO(stop_trans, rc);
3249 stop_trans:
3250                 mdd_trans_stop(env, mdd, rc, handle);
3251                 if (rc != 0)
3252                         GOTO(out, rc);
3253 next:
3254                 rem -= xlen;
3255                 memmove(xname, xname + xlen, rem);
3256         }
3257 out:
3258         return rc;
3259 }
3260
3261 static int mdd_declare_migrate_create(const struct lu_env *env,
3262                                       struct mdd_object *mdd_pobj,
3263                                       struct mdd_object *mdd_sobj,
3264                                       struct mdd_object *mdd_tobj,
3265                                       struct md_op_spec *spec,
3266                                       struct lu_attr *la,
3267                                       union lmv_mds_md *mgr_ea,
3268                                       struct linkea_data *ldata,
3269                                       struct thandle *handle)
3270 {
3271         struct lu_attr          *la_flag = MDD_ENV_VAR(env, la_for_fix);
3272         const struct lu_buf     *buf;
3273         int                     rc;
3274         int                     mgr_easize;
3275
3276         rc = mdd_declare_object_create_internal(env, mdd_pobj, mdd_tobj, la,
3277                                                 handle, spec, NULL);
3278         if (rc != 0)
3279                 return rc;
3280
3281         rc = mdd_declare_object_initialize(env, mdd_pobj, mdd_tobj, la,
3282                                            handle);
3283         if (rc != 0)
3284                 return rc;
3285
3286         if (S_ISLNK(la->la_mode)) {
3287                 const char *target_name = spec->u.sp_symname;
3288                 int sym_len = strlen(target_name);
3289                 const struct lu_buf *buf;
3290
3291                 buf = mdd_buf_get_const(env, target_name, sym_len);
3292                 rc = dt_declare_record_write(env, mdd_object_child(mdd_tobj),
3293                                              buf, 0, handle);
3294                 if (rc != 0)
3295                         return rc;
3296         } else if (S_ISDIR(la->la_mode)) {
3297                 rc = mdd_declare_links_add(env, mdd_tobj, handle, ldata,
3298                                            MLAO_IGNORE);
3299                 if (rc != 0)
3300                         return rc;
3301         }
3302
3303         if (spec->u.sp_ea.eadata != NULL && spec->u.sp_ea.eadatalen != 0) {
3304                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
3305                                         spec->u.sp_ea.eadatalen);
3306                 rc = mdo_declare_xattr_set(env, mdd_tobj, buf, XATTR_NAME_LOV,
3307                                            0, handle);
3308                 if (rc)
3309                         return rc;
3310         }
3311
3312         mgr_easize = lmv_mds_md_size(2, LMV_MAGIC_V1);
3313         buf = mdd_buf_get_const(env, mgr_ea, mgr_easize);
3314         rc = mdo_declare_xattr_set(env, mdd_sobj, buf, XATTR_NAME_LMV,
3315                                    0, handle);
3316         if (rc)
3317                 return rc;
3318
3319         la_flag->la_valid = LA_FLAGS;
3320         la_flag->la_flags = la->la_flags | LUSTRE_IMMUTABLE_FL;
3321         rc = mdo_declare_attr_set(env, mdd_sobj, la_flag, handle);
3322
3323         return rc;
3324 }
3325
3326 static int mdd_migrate_create(const struct lu_env *env,
3327                               struct mdd_object *mdd_pobj,
3328                               struct mdd_object *mdd_sobj,
3329                               struct mdd_object *mdd_tobj,
3330                               const struct lu_name *lname,
3331                               struct lu_attr *la)
3332 {
3333         struct mdd_thread_info  *info = mdd_env_info(env);
3334         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3335         struct md_op_spec       *spec = &info->mti_spec;
3336         struct lu_buf           lmm_buf = { NULL };
3337         struct lu_buf           link_buf = { NULL };
3338         const struct lu_buf     *buf;
3339         struct thandle          *handle;
3340         struct lmv_mds_md_v1    *mgr_ea;
3341         struct lu_attr          *la_flag = MDD_ENV_VAR(env, la_for_fix);
3342         struct dt_allocation_hint *hint = &mdd_env_info(env)->mti_hint;
3343         int                     mgr_easize;
3344         struct linkea_data      *ldata = &mdd_env_info(env)->mti_link_data;
3345         int                     rc;
3346         ENTRY;
3347
3348         /* prepare spec for create */
3349         memset(spec, 0, sizeof(*spec));
3350         spec->sp_cr_lookup = 0;
3351         spec->sp_feat = &dt_directory_features;
3352         if (S_ISLNK(la->la_mode)) {
3353                 buf = lu_buf_check_and_alloc(
3354                                 &mdd_env_info(env)->mti_big_buf,
3355                                 la->la_size + 1);
3356                 link_buf = *buf;
3357                 link_buf.lb_len = la->la_size + 1;
3358                 memset(link_buf.lb_buf, 0, link_buf.lb_len);
3359                 rc = mdd_readlink(env, &mdd_sobj->mod_obj, &link_buf);
3360                 if (rc <= 0) {
3361                         rc = rc != 0 ? rc : -EFAULT;
3362                         CERROR("%s: "DFID" readlink failed: rc = %d\n",
3363                                mdd2obd_dev(mdd)->obd_name,
3364                                PFID(mdd_object_fid(mdd_sobj)), rc);
3365                         RETURN(rc);
3366                 }
3367                 spec->u.sp_symname = link_buf.lb_buf;
3368         } else if S_ISREG(la->la_mode) {
3369                 /* retrieve lov of the old object */
3370                 rc = mdd_get_lov_ea(env, mdd_sobj, &lmm_buf);
3371                 if (rc != 0 && rc != -ENODATA)
3372                         RETURN(rc);
3373                 if (lmm_buf.lb_buf != NULL && lmm_buf.lb_len != 0) {
3374                         spec->u.sp_ea.eadata = lmm_buf.lb_buf;
3375                         spec->u.sp_ea.eadatalen = lmm_buf.lb_len;
3376                         spec->sp_cr_flags |= MDS_OPEN_HAS_EA;
3377                 }
3378         } else if (S_ISDIR(la->la_mode)) {
3379                 rc = mdd_links_read(env, mdd_sobj, ldata);
3380                 if (rc < 0 && rc != -ENODATA)
3381                         RETURN(rc);
3382         }
3383
3384         mgr_ea = (struct lmv_mds_md_v1 *)info->mti_xattr_buf;
3385         memset(mgr_ea, 0, sizeof(*mgr_ea));
3386         mgr_ea->lmv_magic = cpu_to_le32(LMV_MAGIC_V1);
3387         mgr_ea->lmv_stripe_count = cpu_to_le32(2);
3388         mgr_ea->lmv_master_mdt_index = mdd_seq_site(mdd)->ss_node_id;
3389         mgr_ea->lmv_hash_type = cpu_to_le32(LMV_HASH_FLAG_MIGRATION);
3390         fid_cpu_to_le(&mgr_ea->lmv_stripe_fids[0], mdd_object_fid(mdd_sobj));
3391         fid_cpu_to_le(&mgr_ea->lmv_stripe_fids[1], mdd_object_fid(mdd_tobj));
3392
3393         mdd_object_make_hint(env, mdd_pobj, mdd_tobj, la, spec, hint);
3394
3395         handle = mdd_trans_create(env, mdd);
3396         if (IS_ERR(handle))
3397                 GOTO(out_free, rc = PTR_ERR(handle));
3398
3399         /* Note: this transaction is part of migration, and it is not
3400          * the last step of migration, so we set th_local = 1 to avoid
3401          * update last rcvd for this transaction */
3402         handle->th_local = 1;
3403         rc = mdd_declare_migrate_create(env, mdd_pobj, mdd_sobj, mdd_tobj,
3404                                         spec, la,
3405                                         (union lmv_mds_md *)info->mti_xattr_buf,
3406                                         ldata, handle);
3407         if (rc != 0)
3408                 GOTO(stop_trans, rc);
3409
3410         rc = mdd_trans_start(env, mdd, handle);
3411         if (rc != 0)
3412                 GOTO(stop_trans, rc);
3413
3414         /* create the target object */
3415         rc = mdd_object_create(env, mdd_pobj, mdd_tobj, la, spec, NULL, NULL,
3416                                hint, handle);
3417         if (rc != 0)
3418                 GOTO(stop_trans, rc);
3419
3420         if (S_ISDIR(la->la_mode)) {
3421                 rc = mdd_links_write(env, mdd_tobj, ldata, handle);
3422                 if (rc != 0)
3423                         GOTO(stop_trans, rc);
3424         }
3425
3426         /* Set MIGRATE EA on the source inode, so once the migration needs
3427          * to be re-done during failover, the re-do process can locate the
3428          * target object which is already being created. */
3429         mgr_easize = lmv_mds_md_size(2, LMV_MAGIC_V1);
3430         buf = mdd_buf_get_const(env, mgr_ea, mgr_easize);
3431         rc = mdo_xattr_set(env, mdd_sobj, buf, XATTR_NAME_LMV, 0, handle);
3432         if (rc != 0)
3433                 GOTO(stop_trans, rc);
3434
3435         /* Set immutable flag, so any modification is disabled until
3436          * the migration is done. Once the migration is interrupted,
3437          * if the resume process find the migrating object has both
3438          * IMMUTALBE flag and MIGRATE EA, it need to clear IMMUTABLE
3439          * flag and approve the migration */
3440         la_flag->la_valid = LA_FLAGS;
3441         la_flag->la_flags = la->la_flags | LUSTRE_IMMUTABLE_FL;
3442         rc = mdo_attr_set(env, mdd_sobj, la_flag, handle);
3443 stop_trans:
3444         if (handle != NULL)
3445                 mdd_trans_stop(env, mdd, rc, handle);
3446 out_free:
3447         if (lmm_buf.lb_buf != NULL)
3448                 OBD_FREE(lmm_buf.lb_buf, lmm_buf.lb_len);
3449         RETURN(rc);
3450 }
3451
3452 static int mdd_migrate_entries(const struct lu_env *env,
3453                                struct mdd_object *mdd_sobj,
3454                                struct mdd_object *mdd_tobj)
3455 {
3456         struct dt_object        *next = mdd_object_child(mdd_sobj);
3457         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3458         struct dt_object        *dt_tobj = mdd_object_child(mdd_tobj);
3459         struct thandle          *handle;
3460         struct dt_it            *it;
3461         const struct dt_it_ops  *iops;
3462         int                      rc;
3463         int                      result;
3464         struct lu_dirent        *ent;
3465         ENTRY;
3466
3467         OBD_ALLOC(ent, NAME_MAX + sizeof(*ent) + 1);
3468         if (ent == NULL)
3469                 RETURN(-ENOMEM);
3470
3471         if (!dt_try_as_dir(env, next))
3472                 GOTO(out_ent, rc = -ENOTDIR);
3473         /*
3474          * iterate directories
3475          */
3476         iops = &next->do_index_ops->dio_it;
3477         it = iops->init(env, next, LUDA_FID | LUDA_TYPE);
3478         if (IS_ERR(it))
3479                 GOTO(out_ent, rc = PTR_ERR(it));
3480
3481         rc = iops->load(env, it, 0);
3482         if (rc == 0)
3483                 rc = iops->next(env, it);
3484         else if (rc > 0)
3485                 rc = 0;
3486         /*
3487          * At this point and across for-loop:
3488          *
3489          *  rc == 0 -> ok, proceed.
3490          *  rc >  0 -> end of directory.
3491          *  rc <  0 -> error.
3492          */
3493         do {
3494                 struct mdd_object       *child;
3495                 char                    *name = mdd_env_info(env)->mti_key;
3496                 int                     len;
3497                 int                     recsize;
3498                 int                     is_dir;
3499                 bool                    target_exist = false;
3500
3501                 len = iops->key_size(env, it);
3502                 if (len == 0)
3503                         goto next;
3504
3505                 result = iops->rec(env, it, (struct dt_rec *)ent,
3506                                    LUDA_FID | LUDA_TYPE);
3507                 if (result == -ESTALE)
3508                         goto next;
3509                 if (result != 0) {
3510                         rc = result;
3511                         goto out;
3512                 }
3513
3514                 fid_le_to_cpu(&ent->lde_fid, &ent->lde_fid);
3515                 recsize = le16_to_cpu(ent->lde_reclen);
3516
3517                 /* Insert new fid with target name into target dir */
3518                 if ((ent->lde_namelen == 1 && ent->lde_name[0] == '.') ||
3519                     (ent->lde_namelen == 2 && ent->lde_name[0] == '.' &&
3520                      ent->lde_name[1] == '.'))
3521                         goto next;
3522
3523                 child = mdd_object_find(env, mdd, &ent->lde_fid);
3524                 if (IS_ERR(child))
3525                         GOTO(out, rc = PTR_ERR(child));
3526
3527                 is_dir = S_ISDIR(mdd_object_type(child));
3528
3529                 snprintf(name, ent->lde_namelen + 1, "%s", ent->lde_name);
3530
3531                 /* Check whether the name has been inserted to the target */
3532                 if (dt_try_as_dir(env, dt_tobj)) {
3533                         struct lu_fid *fid = &mdd_env_info(env)->mti_fid2;
3534
3535                         rc = dt_lookup(env, dt_tobj, (struct dt_rec *)fid,
3536                                        (struct dt_key *)name);
3537                         if (unlikely(rc == 0))
3538                                 target_exist = true;
3539                 }
3540
3541                 handle = mdd_trans_create(env, mdd);
3542                 if (IS_ERR(handle))
3543                         GOTO(out, rc = PTR_ERR(handle));
3544
3545                 /* Note: this transaction is part of migration, and it is not
3546                  * the last step of migration, so we set th_local = 1 to avoid
3547                  * updating last rcvd for this transaction */
3548                 handle->th_local = 1;
3549                 if (likely(!target_exist)) {
3550                         rc = mdo_declare_index_insert(env, mdd_tobj,
3551                                                       &ent->lde_fid,
3552                                                       mdd_object_type(child),
3553                                                       name, handle);
3554                         if (rc != 0)
3555                                 GOTO(out_put, rc);
3556
3557                         if (is_dir) {
3558                                 rc = mdo_declare_ref_add(env, mdd_tobj, handle);
3559                                 if (rc != 0)
3560                                         GOTO(out_put, rc);
3561                         }
3562                 }
3563
3564                 rc = mdo_declare_index_delete(env, mdd_sobj, name, handle);
3565                 if (rc != 0)
3566                         GOTO(out_put, rc);
3567
3568                 if (is_dir) {
3569                         rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3570                         if (rc != 0)
3571                                 GOTO(out_put, rc);
3572
3573                         /* Update .. for child */
3574                         rc = mdo_declare_index_delete(env, child, dotdot,
3575                                                       handle);
3576                         if (rc != 0)
3577                                 GOTO(out_put, rc);
3578
3579                         rc = mdo_declare_index_insert(env, child,
3580                                                       mdd_object_fid(mdd_tobj),
3581                                                       S_IFDIR, dotdot, handle);
3582                         if (rc != 0)
3583                                 GOTO(out_put, rc);
3584                 }
3585
3586                 rc = mdd_linkea_declare_update_child(env, mdd_tobj,
3587                                                      child, name,
3588                                                      strlen(name),
3589                                                      handle);
3590                 if (rc != 0)
3591                         GOTO(out_put, rc);
3592
3593                 rc = mdd_trans_start(env, mdd, handle);
3594                 if (rc != 0) {
3595                         CERROR("%s: transaction start failed: rc = %d\n",
3596                                mdd2obd_dev(mdd)->obd_name, rc);
3597                         GOTO(out_put, rc);
3598                 }
3599
3600                 if (likely(!target_exist)) {
3601                         rc = __mdd_index_insert(env, mdd_tobj, &ent->lde_fid,
3602                                                 mdd_object_type(child),
3603                                                 name, handle);
3604                         if (rc != 0)
3605                                 GOTO(out_put, rc);
3606
3607                         if (is_dir) {
3608                                 rc = mdo_ref_add(env, mdd_tobj, handle);
3609                                 if (rc != 0)
3610                                         GOTO(out_put, rc);
3611
3612                         }
3613                 }
3614
3615                 rc = __mdd_index_delete(env, mdd_sobj, name, is_dir, handle);
3616                 if (rc != 0)
3617                         GOTO(out_put, rc);
3618
3619                 if (is_dir) {
3620                         rc = __mdd_index_delete_only(env, child, dotdot,
3621                                                      handle);
3622                         if (rc != 0)
3623                                 GOTO(out_put, rc);
3624
3625                         rc = __mdd_index_insert_only(env, child,
3626                                          mdd_object_fid(mdd_tobj), S_IFDIR,
3627                                          dotdot, handle);
3628                         if (rc != 0)
3629                                 GOTO(out_put, rc);
3630                 }
3631
3632                 rc = mdd_linkea_update_child(env, mdd_tobj, child, name,
3633                                              strlen(name), handle);
3634
3635 out_put:
3636                 mdd_object_put(env, child);
3637                 mdd_trans_stop(env, mdd, rc, handle);
3638                 if (rc != 0)
3639                         GOTO(out, rc);
3640 next:
3641                 result = iops->next(env, it);
3642                 if (OBD_FAIL_CHECK(OBD_FAIL_MIGRATE_ENTRIES))
3643                         GOTO(out, rc = -EINTR);
3644
3645                 if (result == -ESTALE)
3646                         goto next;
3647         } while (result == 0);
3648 out:
3649         iops->put(env, it);
3650         iops->fini(env, it);
3651 out_ent:
3652         OBD_FREE(ent, NAME_MAX + sizeof(*ent) + 1);
3653         RETURN(rc);
3654 }
3655
3656 static int mdd_declare_update_linkea(const struct lu_env *env,
3657                                      struct mdd_object *mdd_pobj,
3658                                      struct mdd_object *mdd_sobj,
3659                                      struct mdd_object *mdd_tobj,
3660                                      struct thandle *handle,
3661                                      const struct lu_name *child_name)
3662 {
3663         return mdd_update_linkea_internal(env, mdd_pobj, mdd_sobj, mdd_tobj,
3664                                           child_name, handle, 1);
3665 }
3666
3667 static int mdd_update_linkea(const struct lu_env *env,
3668                              struct mdd_object *mdd_pobj,
3669                              struct mdd_object *mdd_sobj,
3670                              struct mdd_object *mdd_tobj,
3671                              struct thandle *handle,
3672                              const struct lu_name *child_name)
3673 {
3674         return mdd_update_linkea_internal(env, mdd_pobj, mdd_sobj, mdd_tobj,
3675                                           child_name, handle, 0);
3676 }
3677
3678 static int mdd_declare_migrate_update_name(const struct lu_env *env,
3679                                            struct mdd_object *mdd_pobj,
3680                                            struct mdd_object *mdd_sobj,
3681                                            struct mdd_object *mdd_tobj,
3682                                            const struct lu_name *lname,
3683                                            struct lu_attr *la,
3684                                            struct lu_attr *parent_la,
3685                                            struct thandle *handle)
3686 {
3687         struct lu_attr  *la_flag = MDD_ENV_VAR(env, tattr);
3688         int             rc;
3689
3690         /* Revert IMMUTABLE flag */
3691         la_flag->la_valid = LA_FLAGS;
3692         la_flag->la_flags = la->la_flags & ~LUSTRE_IMMUTABLE_FL;
3693         rc = mdo_declare_attr_set(env, mdd_sobj, la_flag, handle);
3694         if (rc != 0)
3695                 return rc;
3696
3697         /* delete entry from source dir */
3698         rc = mdo_declare_index_delete(env, mdd_pobj, lname->ln_name, handle);
3699         if (rc != 0)
3700                 return rc;
3701
3702         rc = mdd_declare_update_linkea(env, mdd_pobj, mdd_sobj,
3703                                        mdd_tobj, handle, lname);
3704         if (rc != 0)
3705                 return rc;
3706
3707         if (S_ISREG(mdd_object_type(mdd_sobj))) {
3708                 rc = mdo_declare_xattr_del(env, mdd_sobj, XATTR_NAME_LOV,
3709                                            handle);
3710                 if (rc != 0)
3711                         return rc;
3712         }
3713
3714         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
3715                 rc = mdo_declare_ref_del(env, mdd_pobj, handle);
3716                 if (rc != 0)
3717                         return rc;
3718         }
3719
3720         /* new name */
3721         rc = mdo_declare_index_insert(env, mdd_pobj, mdo2fid(mdd_tobj),
3722                                       mdd_object_type(mdd_tobj),
3723                                       lname->ln_name, handle);
3724         if (rc != 0)
3725                 return rc;
3726
3727         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
3728                 rc = mdo_declare_ref_add(env, mdd_pobj, handle);
3729                 if (rc != 0)
3730                         return rc;
3731         }
3732
3733         /* delete old object */
3734         rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3735         if (rc != 0)
3736                 return rc;
3737
3738         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
3739                 /* delete old object */
3740                 rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3741                 if (rc != 0)
3742                         return rc;
3743                 /* set nlink to 0 */
3744                 rc = mdo_declare_attr_set(env, mdd_sobj, la, handle);
3745                 if (rc != 0)
3746                         return rc;
3747         }
3748
3749         rc = mdd_declare_finish_unlink(env, mdd_sobj, handle);
3750         if (rc)
3751                 return rc;
3752
3753         rc = mdo_declare_attr_set(env, mdd_pobj, parent_la, handle);
3754
3755         return rc;
3756 }
3757
3758 static int mdd_migrate_update_name(const struct lu_env *env,
3759                                    struct mdd_object *mdd_pobj,
3760                                    struct mdd_object *mdd_sobj,
3761                                    struct mdd_object *mdd_tobj,
3762                                    const struct lu_name *lname,
3763                                    struct md_attr *ma)
3764 {
3765         struct lu_attr          *p_la = MDD_ENV_VAR(env, la_for_fix);
3766         struct lu_attr          *so_attr = MDD_ENV_VAR(env, cattr);
3767         struct lu_attr          *la_flag = MDD_ENV_VAR(env, tattr);
3768         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3769         struct thandle          *handle;
3770         int                     is_dir = S_ISDIR(mdd_object_type(mdd_sobj));
3771         const char              *name = lname->ln_name;
3772         int                     rc;
3773         ENTRY;
3774
3775         /* update time for parent */
3776         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
3777         p_la->la_ctime = p_la->la_mtime = ma->ma_attr.la_ctime;
3778         p_la->la_valid = LA_CTIME;
3779
3780         rc = mdd_la_get(env, mdd_sobj, so_attr);
3781         if (rc != 0)
3782                 RETURN(rc);
3783
3784         handle = mdd_trans_create(env, mdd);
3785         if (IS_ERR(handle))
3786                 RETURN(PTR_ERR(handle));
3787
3788         rc = mdd_declare_migrate_update_name(env, mdd_pobj, mdd_sobj, mdd_tobj,
3789                                              lname, so_attr, p_la, handle);
3790         if (rc != 0) {
3791                 /* If the migration can not be fit in one transaction, just
3792                  * leave it in the original MDT */
3793                 if (rc == -E2BIG)
3794                         GOTO(stop_trans, rc = 0);
3795                 else
3796                         GOTO(stop_trans, rc);
3797         }
3798
3799         CDEBUG(D_INFO, "%s: update "DFID"/"DFID" with %s:"DFID"\n",
3800                mdd2obd_dev(mdd)->obd_name, PFID(mdd_object_fid(mdd_pobj)),
3801                PFID(mdd_object_fid(mdd_sobj)), lname->ln_name,
3802                PFID(mdd_object_fid(mdd_tobj)));
3803
3804         rc = mdd_trans_start(env, mdd, handle);
3805         if (rc != 0)
3806                 GOTO(stop_trans, rc);
3807
3808         /* Revert IMMUTABLE flag */
3809         la_flag->la_valid = LA_FLAGS;
3810         la_flag->la_flags = so_attr->la_flags & ~LUSTRE_IMMUTABLE_FL;
3811         rc = mdo_attr_set(env, mdd_sobj, la_flag, handle);
3812         if (rc != 0)
3813                 GOTO(stop_trans, rc);
3814
3815         /* Remove source name from source directory */
3816         rc = __mdd_index_delete(env, mdd_pobj, name, is_dir, handle);
3817         if (rc != 0)
3818                 GOTO(stop_trans, rc);
3819
3820         rc = mdd_update_linkea(env, mdd_pobj, mdd_sobj, mdd_tobj,
3821                                handle, lname);
3822         if (rc != 0)
3823                 GOTO(stop_trans, rc);
3824
3825         if (S_ISREG(so_attr->la_mode)) {
3826                 if (so_attr->la_nlink == 1) {
3827                         rc = mdo_xattr_del(env, mdd_sobj, XATTR_NAME_LOV,
3828                                            handle);
3829                         if (rc != 0 && rc != -ENODATA)
3830                                 GOTO(stop_trans, rc);
3831                 }
3832         }
3833
3834         /* Insert new fid with target name into target dir */
3835         rc = __mdd_index_insert(env, mdd_pobj, mdd_object_fid(mdd_tobj),
3836                                 mdd_object_type(mdd_tobj), name, handle);
3837         if (rc != 0)
3838                 GOTO(stop_trans, rc);
3839
3840         rc = mdd_links_add(env, mdd_tobj, mdo2fid(mdd_pobj), lname, handle,
3841                            NULL, 1);
3842         if (rc != 0)
3843                 GOTO(stop_trans, rc);
3844
3845         mdd_write_lock(env, mdd_sobj, MOR_SRC_CHILD);
3846         mdo_ref_del(env, mdd_sobj, handle);
3847         if (is_dir)
3848                 mdo_ref_del(env, mdd_sobj, handle);
3849
3850         /* Get the attr again after ref_del */
3851         rc = mdd_la_get(env, mdd_sobj, so_attr);
3852         if (rc != 0)
3853                 GOTO(out_unlock, rc);
3854
3855         ma->ma_attr = *so_attr;
3856         ma->ma_valid |= MA_INODE;
3857         rc = mdd_finish_unlink(env, mdd_sobj, ma, mdd_pobj, lname, handle);
3858         if (rc != 0)
3859                 GOTO(out_unlock, rc);
3860
3861         rc = mdd_attr_set_internal(env, mdd_pobj, p_la, handle, 0);
3862         if (rc != 0)
3863                 GOTO(out_unlock, rc);
3864
3865 out_unlock:
3866         mdd_write_unlock(env, mdd_sobj);
3867
3868 stop_trans:
3869         mdd_trans_stop(env, mdd, rc, handle);
3870
3871         RETURN(rc);
3872 }
3873
3874 /**
3875  * Check whether we should migrate the file/dir
3876  * return val
3877  *      < 0  permission check failed or other error.
3878  *      = 0  the file can be migrated.
3879  *      > 0  the file does not need to be migrated, mostly
3880  *           for multiple link file
3881  **/
3882 static int mdd_migrate_sanity_check(const struct lu_env *env,
3883                                     struct mdd_object *pobj,
3884                                     const struct lu_attr *pattr,
3885                                     struct mdd_object *sobj,
3886                                     struct lu_attr *sattr)
3887 {
3888         struct mdd_thread_info  *info = mdd_env_info(env);
3889         struct linkea_data      *ldata = &info->mti_link_data;
3890         int                     mgr_easize;
3891         struct lu_buf           *mgr_buf;
3892         int                     count;
3893         int                     rc;
3894
3895         ENTRY;
3896
3897         mgr_easize = lmv_mds_md_size(2, LMV_MAGIC_V1);
3898         mgr_buf = lu_buf_check_and_alloc(&info->mti_big_buf, mgr_easize);
3899         if (mgr_buf->lb_buf == NULL)
3900                 RETURN(-ENOMEM);
3901
3902         rc = mdo_xattr_get(env, sobj, mgr_buf, XATTR_NAME_LMV);
3903         if (rc > 0) {
3904                 union lmv_mds_md *lmm = mgr_buf->lb_buf;
3905
3906                 /* If the object has migrateEA, it means IMMUTE flag
3907                  * is being set by previous migration process, so it
3908                  * needs to override the IMMUTE flag, otherwise the
3909                  * following sanity check will fail */
3910                 if (le32_to_cpu(lmm->lmv_md_v1.lmv_hash_type) &
3911                                                 LMV_HASH_FLAG_MIGRATION) {
3912                         struct mdd_device *mdd = mdo2mdd(&sobj->mod_obj);
3913
3914                         sattr->la_flags &= ~LUSTRE_IMMUTABLE_FL;
3915                         CDEBUG(D_HA, "%s: "DFID" override IMMUTE FLAG\n",
3916                                mdd2obd_dev(mdd)->obd_name,
3917                                PFID(mdd_object_fid(sobj)));
3918                 }
3919         }
3920
3921         rc = mdd_rename_sanity_check(env, pobj, pattr, pobj, pattr,
3922                                      sobj, sattr, NULL, NULL);
3923         if (rc != 0)
3924                 RETURN(rc);
3925
3926         /* Then it will check if the file should be migrated. If the file
3927          * has mulitple links, we only need migrate the file if all of its
3928          * entries has been migrated to the remote MDT */
3929         if (!S_ISREG(sattr->la_mode) || sattr->la_nlink < 2)
3930                 RETURN(0);
3931
3932         rc = mdd_links_read(env, sobj, ldata);
3933         if (rc != 0) {
3934                 /* For multiple links files, if there are no linkEA data at all,
3935                  * means the file might be created before linkEA is enabled, and
3936                  * all all of its links should not be migrated yet, otherwise
3937                  * it should have some linkEA there */
3938                 if (rc == -ENOENT || rc == -ENODATA)
3939                         RETURN(1);
3940                 RETURN(rc);
3941         }
3942
3943         /* If it is mulitple links file, we need update the name entry for
3944          * all parent */
3945         LASSERT(ldata->ld_leh != NULL);
3946         ldata->ld_lee = (struct link_ea_entry *)(ldata->ld_leh + 1);
3947         for (count = 0; count < ldata->ld_leh->leh_reccount; count++) {
3948                 struct mdd_device       *mdd = mdo2mdd(&sobj->mod_obj);
3949                 struct mdd_object       *lpobj;
3950                 struct lu_name          lname;
3951                 struct lu_fid           fid;
3952
3953                 linkea_entry_unpack(ldata->ld_lee, &ldata->ld_reclen,
3954                                     &lname, &fid);
3955                 ldata->ld_lee = (struct link_ea_entry *)((char *)ldata->ld_lee +
3956                                                          ldata->ld_reclen);
3957                 lpobj = mdd_object_find(env, mdd, &fid);
3958                 if (IS_ERR(lpobj)) {
3959                         CWARN("%s: cannot find obj "DFID": rc = %ld\n",
3960                               mdd2obd_dev(mdd)->obd_name, PFID(&fid),
3961                               PTR_ERR(lpobj));
3962                         continue;
3963                 }
3964
3965                 if (!mdd_object_exists(lpobj) || mdd_object_remote(lpobj)) {
3966                         CDEBUG(D_INFO, DFID"%.*s: is on remote MDT.\n",
3967                                PFID(&fid), lname.ln_namelen, lname.ln_name);
3968                         mdd_object_put(env, lpobj);
3969                         continue;
3970                 }
3971
3972                 CDEBUG(D_INFO, DFID"still has local entry %.*s "DFID"\n",
3973                        PFID(mdd_object_fid(sobj)), lname.ln_namelen,
3974                        lname.ln_name, PFID(&fid));
3975                 mdd_object_put(env, lpobj);
3976                 rc = 1;
3977                 break;
3978         }
3979
3980         RETURN(rc);
3981 }
3982
3983 static int mdd_migrate(const struct lu_env *env, struct md_object *pobj,
3984                        struct md_object *sobj, const struct lu_name *lname,
3985                        struct md_object *tobj, struct md_attr *ma)
3986 {
3987         struct mdd_object       *mdd_pobj = md2mdd_obj(pobj);
3988         struct mdd_device       *mdd = mdo2mdd(pobj);
3989         struct mdd_object       *mdd_sobj = md2mdd_obj(sobj);
3990         struct mdd_object       *mdd_tobj = NULL;
3991         struct lu_attr          *so_attr = MDD_ENV_VAR(env, cattr);
3992         struct lu_attr          *pattr = MDD_ENV_VAR(env, pattr);
3993         int                     rc;
3994
3995         ENTRY;
3996         /* If the file will being migrated, it will check whether
3997          * the file is being opened by someone else right now */
3998         mdd_read_lock(env, mdd_sobj, MOR_SRC_CHILD);
3999         if (mdd_sobj->mod_count >= 1) {
4000                 CERROR("%s: "DFID"%s is already opened count %d: rc = %d\n",
4001                        mdd2obd_dev(mdd)->obd_name,
4002                        PFID(mdd_object_fid(mdd_sobj)), lname->ln_name,
4003                        mdd_sobj->mod_count, -EBUSY);
4004                 mdd_read_unlock(env, mdd_sobj);
4005                 GOTO(put, rc = -EBUSY);
4006         }
4007         mdd_read_unlock(env, mdd_sobj);
4008
4009         rc = mdd_la_get(env, mdd_sobj, so_attr);
4010         if (rc != 0)
4011                 GOTO(put, rc);
4012
4013         rc = mdd_la_get(env, mdd_pobj, pattr);
4014         if (rc != 0)
4015                 GOTO(put, rc);
4016
4017         rc = mdd_migrate_sanity_check(env, mdd_pobj, pattr, mdd_sobj, so_attr);
4018         if (rc != 0) {
4019                 if (rc > 0)
4020                         rc = 0;
4021                 GOTO(put, rc);
4022         }
4023
4024         /* Sigh, it is impossible to finish all of migration in a single
4025          * transaction, for example migrating big directory entries to the
4026          * new MDT, it needs insert all of name entries of children in the
4027          * new directory.
4028          *
4029          * So migration will be done in multiple steps and transactions.
4030          *
4031          * 1. create an orphan object on the remote MDT in one transaction.
4032          * 2. migrate extend attributes to the new target file/directory.
4033          * 3. For directory, migrate the entries to the new MDT and update
4034          * linkEA of each children. Because we can not migrate all entries
4035          * in a single transaction, so the migrating directory will become
4036          * a striped directory during migration, so once the process is
4037          * interrupted, the directory is still accessible. (During lookup,
4038          * client will locate the name by searching both original and target
4039          * object).
4040          * 4. Finally, update the name/FID to point to the new file/directory
4041          * in a separate transaction.
4042          */
4043
4044         /* step 1: Check whether the orphan object has been created, and create
4045          * orphan object on the remote MDT if needed */
4046         mdd_tobj = md2mdd_obj(tobj);
4047         if (!mdd_object_exists(mdd_tobj)) {
4048                 rc = mdd_migrate_create(env, mdd_pobj, mdd_sobj, mdd_tobj,
4049                                         lname, so_attr);
4050                 if (rc != 0)
4051                         GOTO(put, rc);
4052         }
4053
4054         /* step 2: migrate xattr */
4055         rc = mdd_migrate_xattrs(env, mdd_sobj, mdd_tobj);
4056         if (rc != 0)
4057                 GOTO(put, rc);
4058
4059         /* step 3: migrate name entries to the orphan object */
4060         if (S_ISDIR(lu_object_attr(&mdd_sobj->mod_obj.mo_lu))) {
4061                 rc = mdd_migrate_entries(env, mdd_sobj, mdd_tobj);
4062                 if (rc != 0)
4063                         GOTO(put, rc);
4064                 if (unlikely(OBD_FAIL_CHECK_RESET(OBD_FAIL_MIGRATE_NET_REP,
4065                                                   OBD_FAIL_MDS_REINT_NET_REP)))
4066                         GOTO(put, rc = 0);
4067         } else {
4068                 OBD_FAIL_TIMEOUT(OBD_FAIL_MIGRATE_DELAY, cfs_fail_val);
4069         }
4070
4071         /* step 4: update name entry to the new object */
4072         rc = mdd_migrate_update_name(env, mdd_pobj, mdd_sobj, mdd_tobj, lname,
4073                                      ma);
4074         if (rc != 0)
4075                 GOTO(put, rc);
4076 put:
4077         RETURN(rc);
4078 }
4079
4080 const struct md_dir_operations mdd_dir_ops = {
4081         .mdo_is_subdir     = mdd_is_subdir,
4082         .mdo_lookup        = mdd_lookup,
4083         .mdo_create        = mdd_create,
4084         .mdo_rename        = mdd_rename,
4085         .mdo_link          = mdd_link,
4086         .mdo_unlink        = mdd_unlink,
4087         .mdo_create_data   = mdd_create_data,
4088         .mdo_migrate       = mdd_migrate,
4089 };