lustre/mdd/mdd_dir.c

   1 /*
   2  * GPL HEADER START
   3  *
   4  * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
   5  *
   6  * This program is free software; you can redistribute it and/or modify
   7  * it under the terms of the GNU General Public License version 2 only,
   8  * as published by the Free Software Foundation.
   9  *
  10  * This program is distributed in the hope that it will be useful, but
  11  * WITHOUT ANY WARRANTY; without even the implied warranty of
  12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13  * General Public License version 2 for more details (a copy is included
  14  * in the LICENSE file that accompanied this code).
  15  *
  16  * You should have received a copy of the GNU General Public License
  17  * version 2 along with this program; If not, see
  18  * http://www.sun.com/software/products/lustre/docs/GPLv2.pdf
  19  *
  20  * Please contact Sun Microsystems, Inc., 4150 Network Circle, Santa Clara,
  21  * CA 95054 USA or visit www.sun.com if you need additional information or
  22  * have any questions.
  23  *
  24  * GPL HEADER END
  25  */
  26 /*
  27  * Copyright (c) 2007, 2010, Oracle and/or its affiliates. All rights reserved.
  28  * Use is subject to license terms.
  29  *
  30  * Copyright (c) 2011, 2013, Intel Corporation.
  31  */
  32 /*
  33  * This file is part of Lustre, http://www.lustre.org/
  34  * Lustre is a trademark of Sun Microsystems, Inc.
  35  *
  36  * lustre/mdd/mdd_dir.c
  37  *
  38  * Lustre Metadata Server (mdd) routines
  39  *
  40  * Author: Wang Di <wangdi@intel.com>
  41  */
  42
  43 #define DEBUG_SUBSYSTEM S_MDS
  44
  45 #include <obd_class.h>
  46 #include <obd_support.h>
  47 #include <lustre_mds.h>
  48 #include <lustre_fid.h>
  49
  50 #include "mdd_internal.h"
  51
  52 static const char dot[] = ".";
  53 static const char dotdot[] = "..";
  54
  55 static struct lu_name lname_dotdot = {
  56         (char *) dotdot,
  57         sizeof(dotdot) - 1
  58 };
  59
  60 static inline int
  61 mdd_name_check(struct mdd_device *m, const struct lu_name *ln)
  62 {
  63         if (!lu_name_is_valid(ln))
  64                 return -EINVAL;
  65         else if (ln->ln_namelen > m->mdd_dt_conf.ddp_max_name_len)
  66                 return -ENAMETOOLONG;
  67         else
  68                 return 0;
  69 }
  70
  71 /* Get FID from name and parent */
  72 static int
  73 __mdd_lookup(const struct lu_env *env, struct md_object *pobj,
  74              const struct lu_attr *pattr, const struct lu_name *lname,
  75              struct lu_fid* fid, int mask)
  76 {
  77         const char *name                = lname->ln_name;
  78         const struct dt_key *key        = (const struct dt_key *)name;
  79         struct mdd_object *mdd_obj      = md2mdd_obj(pobj);
  80         struct mdd_device *m            = mdo2mdd(pobj);
  81         struct dt_object *dir           = mdd_object_child(mdd_obj);
  82         int rc;
  83         ENTRY;
  84
  85         if (unlikely(mdd_is_dead_obj(mdd_obj)))
  86                 RETURN(-ESTALE);
  87
  88         if (mdd_object_remote(mdd_obj)) {
  89                 CDEBUG(D_INFO, "%s: Object "DFID" locates on remote server\n",
  90                        mdd2obd_dev(m)->obd_name, PFID(mdo2fid(mdd_obj)));
  91         } else if (!mdd_object_exists(mdd_obj)) {
  92                 RETURN(-ESTALE);
  93         }
  94
  95         rc = mdd_permission_internal_locked(env, mdd_obj, pattr, mask,
  96                                             MOR_TGT_PARENT);
  97         if (rc)
  98                 RETURN(rc);
  99
 100         if (likely(S_ISDIR(mdd_object_type(mdd_obj)) &&
 101                    dt_try_as_dir(env, dir))) {
 102
 103                 rc = dir->do_index_ops->dio_lookup(env, dir,
 104                                                  (struct dt_rec *)fid, key,
 105                                                  mdd_object_capa(env, mdd_obj));
 106                 if (rc > 0)
 107                         rc = 0;
 108                 else if (rc == 0)
 109                         rc = -ENOENT;
 110         } else
 111                 rc = -ENOTDIR;
 112
 113         RETURN(rc);
 114 }
 115
 116 int mdd_lookup(const struct lu_env *env,
 117                struct md_object *pobj, const struct lu_name *lname,
 118                struct lu_fid *fid, struct md_op_spec *spec)
 119 {
 120         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
 121         int rc;
 122         ENTRY;
 123
 124         rc = mdd_la_get(env, md2mdd_obj(pobj), pattr, BYPASS_CAPA);
 125         if (rc != 0)
 126                 RETURN(rc);
 127
 128         rc = __mdd_lookup(env, pobj, pattr, lname, fid, MAY_EXEC);
 129         RETURN(rc);
 130 }
 131
 132 static inline int mdd_parent_fid(const struct lu_env *env,
 133                                  struct mdd_object *obj,
 134                                  const struct lu_attr *attr,
 135                                  struct lu_fid *fid)
 136 {
 137         return __mdd_lookup(env, &obj->mod_obj, attr, &lname_dotdot, fid, 0);
 138 }
 139
 140 /*
 141  * For root fid use special function, which does not compare version component
 142  * of fid. Version component is different for root fids on all MDTs.
 143  */
 144 int mdd_is_root(struct mdd_device *mdd, const struct lu_fid *fid)
 145 {
 146         return fid_seq(&mdd->mdd_root_fid) == fid_seq(fid) &&
 147                 fid_oid(&mdd->mdd_root_fid) == fid_oid(fid);
 148 }
 149
 150 /*
 151  * return 1: if lf is the fid of the ancestor of p1;
 152  * return 0: if not;
 153  *
 154  * return -EREMOTE: if remote object is found, in this
 155  * case fid of remote object is saved to @pf;
 156  *
 157  * otherwise: values < 0, errors.
 158  */
 159 static int mdd_is_parent(const struct lu_env *env,
 160                         struct mdd_device *mdd,
 161                         struct mdd_object *p1,
 162                         const struct lu_attr *attr,
 163                         const struct lu_fid *lf,
 164                         struct lu_fid *pf)
 165 {
 166         struct mdd_object *parent = NULL;
 167         struct lu_fid *pfid;
 168         int rc;
 169         ENTRY;
 170
 171         LASSERT(!lu_fid_eq(mdo2fid(p1), lf));
 172         pfid = &mdd_env_info(env)->mti_fid;
 173
 174         /* Check for root first. */
 175         if (mdd_is_root(mdd, mdo2fid(p1)))
 176                 RETURN(0);
 177
 178         for(;;) {
 179                 /* this is done recursively, bypass capa for each obj */
 180                 mdd_set_capainfo(env, 4, p1, BYPASS_CAPA);
 181                 rc = mdd_parent_fid(env, p1, attr, pfid);
 182                 if (rc)
 183                         GOTO(out, rc);
 184                 if (mdd_is_root(mdd, pfid))
 185                         GOTO(out, rc = 0);
 186                 if (lu_fid_eq(pfid, &mdd->mdd_local_root_fid))
 187                         GOTO(out, rc = 0);
 188                 if (lu_fid_eq(pfid, lf))
 189                         GOTO(out, rc = 1);
 190                 if (parent)
 191                         mdd_object_put(env, parent);
 192
 193                 parent = mdd_object_find(env, mdd, pfid);
 194                 if (IS_ERR(parent)) {
 195                         GOTO(out, rc = PTR_ERR(parent));
 196                 } else if (mdd_object_remote(parent)) {
 197                         /*FIXME: Because of the restriction of rename in Phase I.
 198                          * If the parent is remote, we just assumed lf is not the
 199                          * parent of P1 for now */
 200                         GOTO(out, rc = 0);
 201                 }
 202                 p1 = parent;
 203         }
 204         EXIT;
 205 out:
 206         if (parent && !IS_ERR(parent))
 207                 mdd_object_put(env, parent);
 208         return rc;
 209 }
 210
 211 /*
 212  * No permission check is needed.
 213  *
 214  * returns 1: if fid is ancestor of @mo;
 215  * returns 0: if fid is not a ancestor of @mo;
 216  *
 217  * returns EREMOTE if remote object is found, fid of remote object is saved to
 218  * @fid;
 219  *
 220  * returns < 0: if error
 221  */
 222 int mdd_is_subdir(const struct lu_env *env, struct md_object *mo,
 223                   const struct lu_fid *fid, struct lu_fid *sfid)
 224 {
 225         struct mdd_device *mdd = mdo2mdd(mo);
 226         struct lu_attr *attr = MDD_ENV_VAR(env, cattr);
 227         int rc;
 228         ENTRY;
 229
 230         if (!S_ISDIR(mdd_object_type(md2mdd_obj(mo))))
 231                 RETURN(0);
 232
 233         rc = mdd_la_get(env, md2mdd_obj(mo), attr, BYPASS_CAPA);
 234         if (rc != 0)
 235                 RETURN(rc);
 236
 237         rc = mdd_is_parent(env, mdd, md2mdd_obj(mo), attr, fid, sfid);
 238         if (rc == 0) {
 239                 /* found root */
 240                 fid_zero(sfid);
 241         } else if (rc == 1) {
 242                 /* found @fid is parent */
 243                 *sfid = *fid;
 244                 rc = 0;
 245         }
 246         RETURN(rc);
 247 }
 248
 249 /*
 250  * Check that @dir contains no entries except (possibly) dot and dotdot.
 251  *
 252  * Returns:
 253  *
 254  *             0        empty
 255  *      -ENOTDIR        not a directory object
 256  *    -ENOTEMPTY        not empty
 257  *           -ve        other error
 258  *
 259  */
 260 static int mdd_dir_is_empty(const struct lu_env *env,
 261                             struct mdd_object *dir)
 262 {
 263         struct dt_it     *it;
 264         struct dt_object *obj;
 265         const struct dt_it_ops *iops;
 266         int result;
 267         ENTRY;
 268
 269         obj = mdd_object_child(dir);
 270         if (!dt_try_as_dir(env, obj))
 271                 RETURN(-ENOTDIR);
 272
 273         iops = &obj->do_index_ops->dio_it;
 274         it = iops->init(env, obj, LUDA_64BITHASH, BYPASS_CAPA);
 275         if (!IS_ERR(it)) {
 276                 result = iops->get(env, it, (const struct dt_key *)"");
 277                 if (result > 0) {
 278                         int i;
 279                         for (result = 0, i = 0; result == 0 && i < 3; ++i)
 280                                 result = iops->next(env, it);
 281                         if (result == 0)
 282                                 result = -ENOTEMPTY;
 283                         else if (result == 1)
 284                                 result = 0;
 285                 } else if (result == 0)
 286                         /*
 287                          * Huh? Index contains no zero key?
 288                          */
 289                         result = -EIO;
 290
 291                 iops->put(env, it);
 292                 iops->fini(env, it);
 293         } else
 294                 result = PTR_ERR(it);
 295         RETURN(result);
 296 }
 297
 298 static int __mdd_may_link(const struct lu_env *env, struct mdd_object *obj,
 299                           const struct lu_attr *la)
 300 {
 301         struct mdd_device *m = mdd_obj2mdd_dev(obj);
 302         ENTRY;
 303
 304         LASSERT(la != NULL);
 305
 306         if (!S_ISDIR(la->la_mode))
 307                 RETURN(0);
 308
 309         /*
 310          * Subdir count limitation can be broken through.
 311          */
 312         if (la->la_nlink >= m->mdd_dt_conf.ddp_max_nlink)
 313                 RETURN(-EMLINK);
 314         else
 315                 RETURN(0);
 316 }
 317
 318 /*
 319  * Check whether it may create the cobj under the pobj.
 320  * cobj maybe NULL
 321  */
 322 int mdd_may_create(const struct lu_env *env,
 323                    struct mdd_object *pobj, const struct lu_attr *pattr,
 324                    struct mdd_object *cobj, bool check_perm, bool check_nlink)
 325 {
 326         struct mdd_thread_info *info = mdd_env_info(env);
 327         struct lu_buf   *xbuf;
 328         int rc = 0;
 329         ENTRY;
 330
 331         if (cobj && mdd_object_exists(cobj))
 332                 RETURN(-EEXIST);
 333
 334         if (mdd_is_dead_obj(pobj))
 335                 RETURN(-ENOENT);
 336
 337         /* If the parent is a sub-stripe, check whether it is dead */
 338         xbuf = mdd_buf_get(env, info->mti_key, sizeof(info->mti_key));
 339         rc = mdo_xattr_get(env, pobj, xbuf, XATTR_NAME_LMV,
 340                            mdd_object_capa(env, pobj));
 341         if (unlikely(rc > 0)) {
 342                 struct lmv_mds_md_v1  *lmv1 = xbuf->lb_buf;
 343
 344                 if (le32_to_cpu(lmv1->lmv_magic) == LMV_MAGIC_STRIPE &&
 345                     le32_to_cpu(lmv1->lmv_hash_type) & LMV_HASH_FLAG_DEAD)
 346                         RETURN(-ESTALE);
 347         }
 348         rc = 0;
 349
 350         if (check_perm)
 351                 rc = mdd_permission_internal_locked(env, pobj, pattr,
 352                                                     MAY_WRITE | MAY_EXEC,
 353                                                     MOR_TGT_PARENT);
 354         if (!rc && check_nlink)
 355                 rc = __mdd_may_link(env, pobj, pattr);
 356
 357         RETURN(rc);
 358 }
 359
 360 /*
 361  * Check whether can unlink from the pobj in the case of "cobj == NULL".
 362  */
 363 int mdd_may_unlink(const struct lu_env *env, struct mdd_object *pobj,
 364                    const struct lu_attr *pattr, const struct lu_attr *attr)
 365 {
 366         int rc;
 367         ENTRY;
 368
 369         if (mdd_is_dead_obj(pobj))
 370                 RETURN(-ENOENT);
 371
 372         if ((attr->la_valid & LA_FLAGS) &&
 373             (attr->la_flags & (LUSTRE_APPEND_FL | LUSTRE_IMMUTABLE_FL)))
 374                 RETURN(-EPERM);
 375
 376         rc = mdd_permission_internal_locked(env, pobj, pattr,
 377                                             MAY_WRITE | MAY_EXEC,
 378                                             MOR_TGT_PARENT);
 379         if (rc)
 380                 RETURN(rc);
 381
 382         if (mdd_is_append(pobj))
 383                 RETURN(-EPERM);
 384
 385         RETURN(rc);
 386 }
 387
 388 /*
 389  * pobj == NULL is remote ops case, under such case, pobj's
 390  * VTX feature has been checked already, no need check again.
 391  */
 392 static inline int mdd_is_sticky(const struct lu_env *env,
 393                                 struct mdd_object *pobj,
 394                                 const struct lu_attr *pattr,
 395                                 struct mdd_object *cobj,
 396                                 const struct lu_attr *cattr)
 397 {
 398         struct lu_ucred *uc = lu_ucred_assert(env);
 399
 400         if (pobj != NULL) {
 401                 LASSERT(pattr != NULL);
 402                 if (!(pattr->la_mode & S_ISVTX) ||
 403                     (pattr->la_uid == uc->uc_fsuid))
 404                         return 0;
 405         }
 406
 407         LASSERT(cattr != NULL);
 408         if (cattr->la_uid == uc->uc_fsuid)
 409                 return 0;
 410
 411         return !md_capable(uc, CFS_CAP_FOWNER);
 412 }
 413
 414 static int mdd_may_delete_entry(const struct lu_env *env,
 415                                 struct mdd_object *pobj,
 416                                 const struct lu_attr *pattr,
 417                                 int check_perm)
 418 {
 419         ENTRY;
 420
 421         LASSERT(pobj != NULL);
 422         if (!mdd_object_exists(pobj))
 423                 RETURN(-ENOENT);
 424
 425         if (mdd_is_dead_obj(pobj))
 426                 RETURN(-ENOENT);
 427
 428         if (check_perm) {
 429                 int rc;
 430                 rc = mdd_permission_internal_locked(env, pobj, pattr,
 431                                             MAY_WRITE | MAY_EXEC,
 432                                             MOR_TGT_PARENT);
 433                 if (rc)
 434                         RETURN(rc);
 435         }
 436
 437         if (mdd_is_append(pobj))
 438                 RETURN(-EPERM);
 439
 440         RETURN(0);
 441 }
 442
 443 /*
 444  * Check whether it may delete the cobj from the pobj.
 445  * pobj maybe NULL
 446  */
 447 int mdd_may_delete(const struct lu_env *env, struct mdd_object *tpobj,
 448                    const struct lu_attr *tpattr, struct mdd_object *tobj,
 449                    const struct lu_attr *tattr, const struct lu_attr *cattr,
 450                    int check_perm, int check_empty)
 451 {
 452         int rc = 0;
 453         ENTRY;
 454
 455         if (tpobj) {
 456                 LASSERT(tpattr != NULL);
 457                 rc = mdd_may_delete_entry(env, tpobj, tpattr, check_perm);
 458                 if (rc != 0)
 459                         RETURN(rc);
 460         }
 461
 462         if (tobj == NULL)
 463                 RETURN(0);
 464
 465         if (!mdd_object_exists(tobj))
 466                 RETURN(-ENOENT);
 467
 468         if (mdd_is_dead_obj(tobj))
 469                 RETURN(-ESTALE);
 470
 471         if (mdd_is_sticky(env, tpobj, tpattr, tobj, tattr))
 472                 RETURN(-EPERM);
 473
 474         if (mdd_is_immutable(tobj) || mdd_is_append(tobj))
 475                 RETURN(-EPERM);
 476
 477         if ((tattr->la_valid & LA_FLAGS) &&
 478             (tattr->la_flags & (LUSTRE_APPEND_FL | LUSTRE_IMMUTABLE_FL)))
 479                 RETURN(-EPERM);
 480
 481         /* additional check the rename case */
 482         if (cattr) {
 483                 if (S_ISDIR(cattr->la_mode)) {
 484                         struct mdd_device *mdd = mdo2mdd(&tobj->mod_obj);
 485
 486                         if (!S_ISDIR(tattr->la_mode))
 487                                 RETURN(-ENOTDIR);
 488
 489                         if (lu_fid_eq(mdo2fid(tobj), &mdd->mdd_root_fid))
 490                                 RETURN(-EBUSY);
 491                 } else if (S_ISDIR(tattr->la_mode))
 492                         RETURN(-EISDIR);
 493         }
 494
 495         if (S_ISDIR(tattr->la_mode) && check_empty)
 496                 rc = mdd_dir_is_empty(env, tobj);
 497
 498         RETURN(rc);
 499 }
 500
 501 /*
 502  * tgt maybe NULL
 503  * has mdd_write_lock on src already, but not on tgt yet
 504  */
 505 static int mdd_link_sanity_check(const struct lu_env *env,
 506                                  struct mdd_object *tgt_obj,
 507                                  const struct lu_attr *tattr,
 508                                  const struct lu_name *lname,
 509                                  struct mdd_object *src_obj,
 510                                  const struct lu_attr *cattr)
 511 {
 512         struct mdd_device *m = mdd_obj2mdd_dev(src_obj);
 513         int rc = 0;
 514         ENTRY;
 515
 516         if (!mdd_object_exists(src_obj))
 517                 RETURN(-ENOENT);
 518
 519         if (mdd_is_dead_obj(src_obj))
 520                 RETURN(-ESTALE);
 521
 522         /* Local ops, no lookup before link, check filename length here. */
 523         rc = mdd_name_check(m, lname);
 524         if (rc < 0)
 525                 RETURN(rc);
 526
 527         if (mdd_is_immutable(src_obj) || mdd_is_append(src_obj))
 528                 RETURN(-EPERM);
 529
 530         if (S_ISDIR(mdd_object_type(src_obj)))
 531                 RETURN(-EPERM);
 532
 533         LASSERT(src_obj != tgt_obj);
 534         if (tgt_obj) {
 535                 rc = mdd_may_create(env, tgt_obj, tattr, NULL, true, false);
 536                 if (rc)
 537                         RETURN(rc);
 538         }
 539
 540         rc = __mdd_may_link(env, src_obj, cattr);
 541
 542         RETURN(rc);
 543 }
 544
 545 static int __mdd_index_delete_only(const struct lu_env *env, struct mdd_object *pobj,
 546                                    const char *name, struct thandle *handle,
 547                                    struct lustre_capa *capa)
 548 {
 549         struct dt_object *next = mdd_object_child(pobj);
 550         int               rc;
 551         ENTRY;
 552
 553         if (dt_try_as_dir(env, next)) {
 554                 rc = next->do_index_ops->dio_delete(env, next,
 555                                                     (struct dt_key *)name,
 556                                                     handle, capa);
 557         } else
 558                 rc = -ENOTDIR;
 559
 560         RETURN(rc);
 561 }
 562
 563 static int __mdd_index_insert_only(const struct lu_env *env,
 564                                    struct mdd_object *pobj,
 565                                    const struct lu_fid *lf, const char *name,
 566                                    struct thandle *handle,
 567                                    struct lustre_capa *capa)
 568 {
 569         struct dt_object *next = mdd_object_child(pobj);
 570         int               rc;
 571         ENTRY;
 572
 573         if (dt_try_as_dir(env, next)) {
 574                 struct lu_ucred  *uc = lu_ucred_check(env);
 575                 int ignore_quota;
 576
 577                 ignore_quota = uc ? uc->uc_cap & CFS_CAP_SYS_RESOURCE_MASK : 1;
 578                 rc = next->do_index_ops->dio_insert(env, next,
 579                                                     (struct dt_rec*)lf,
 580                                                     (const struct dt_key *)name,
 581                                                     handle, capa, ignore_quota);
 582         } else {
 583                 rc = -ENOTDIR;
 584         }
 585         RETURN(rc);
 586 }
 587
 588 /* insert named index, add reference if isdir */
 589 static int __mdd_index_insert(const struct lu_env *env, struct mdd_object *pobj,
 590                               const struct lu_fid *lf, const char *name, int is_dir,
 591                               struct thandle *handle, struct lustre_capa *capa)
 592 {
 593         int               rc;
 594         ENTRY;
 595
 596         rc = __mdd_index_insert_only(env, pobj, lf, name, handle, capa);
 597         if (rc == 0 && is_dir) {
 598                 mdd_write_lock(env, pobj, MOR_TGT_PARENT);
 599                 mdo_ref_add(env, pobj, handle);
 600                 mdd_write_unlock(env, pobj);
 601         }
 602         RETURN(rc);
 603 }
 604
 605 /* delete named index, drop reference if isdir */
 606 static int __mdd_index_delete(const struct lu_env *env, struct mdd_object *pobj,
 607                               const char *name, int is_dir, struct thandle *handle,
 608                               struct lustre_capa *capa)
 609 {
 610         int               rc;
 611         ENTRY;
 612
 613         rc = __mdd_index_delete_only(env, pobj, name, handle, capa);
 614         if (rc == 0 && is_dir) {
 615                 mdd_write_lock(env, pobj, MOR_TGT_PARENT);
 616                 mdo_ref_del(env, pobj, handle);
 617                 mdd_write_unlock(env, pobj);
 618         }
 619
 620         RETURN(rc);
 621 }
 622
 623 int mdd_declare_changelog_store(const struct lu_env *env,
 624                                 struct mdd_device *mdd,
 625                                 const struct lu_name *fname,
 626                                 struct thandle *handle)
 627 {
 628         struct obd_device               *obd = mdd2obd_dev(mdd);
 629         struct llog_ctxt                *ctxt;
 630         struct llog_changelog_rec       *rec;
 631         struct lu_buf                   *buf;
 632         int                              reclen;
 633         int                              rc;
 634
 635         /* Not recording */
 636         if (!(mdd->mdd_cl.mc_flags & CLM_ON))
 637                 return 0;
 638
 639         reclen = llog_data_len(sizeof(*rec) +
 640                                (fname != NULL ? fname->ln_namelen : 0));
 641         buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_big_buf, reclen);
 642         if (buf->lb_buf == NULL)
 643                 return -ENOMEM;
 644
 645         rec = buf->lb_buf;
 646         rec->cr_hdr.lrh_len = reclen;
 647         rec->cr_hdr.lrh_type = CHANGELOG_REC;
 648
 649         ctxt = llog_get_context(obd, LLOG_CHANGELOG_ORIG_CTXT);
 650         if (ctxt == NULL)
 651                 return -ENXIO;
 652
 653         rc = llog_declare_add(env, ctxt->loc_handle, &rec->cr_hdr, handle);
 654         llog_ctxt_put(ctxt);
 655
 656         return rc;
 657 }
 658
 659 static int mdd_declare_changelog_ext_store(const struct lu_env *env,
 660                                            struct mdd_device *mdd,
 661                                            const struct lu_name *tname,
 662                                            const struct lu_name *sname,
 663                                            struct thandle *handle)
 664 {
 665         struct obd_device               *obd = mdd2obd_dev(mdd);
 666         struct llog_ctxt                *ctxt;
 667         struct llog_changelog_ext_rec   *rec;
 668         struct lu_buf                   *buf;
 669         int                              reclen;
 670         int                              rc;
 671
 672         /* Not recording */
 673         if (!(mdd->mdd_cl.mc_flags & CLM_ON))
 674                 return 0;
 675
 676         reclen = llog_data_len(sizeof(*rec) +
 677                                (tname != NULL ? tname->ln_namelen : 0) +
 678                                (sname != NULL ? 1 + sname->ln_namelen : 0));
 679         buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_big_buf, reclen);
 680         if (buf->lb_buf == NULL)
 681                 return -ENOMEM;
 682
 683         rec = buf->lb_buf;
 684         rec->cr_hdr.lrh_len = reclen;
 685         rec->cr_hdr.lrh_type = CHANGELOG_REC;
 686
 687         ctxt = llog_get_context(obd, LLOG_CHANGELOG_ORIG_CTXT);
 688         if (ctxt == NULL)
 689                 return -ENXIO;
 690
 691         rc = llog_declare_add(env, ctxt->loc_handle, &rec->cr_hdr, handle);
 692         llog_ctxt_put(ctxt);
 693
 694         return rc;
 695 }
 696
 697 /** Add a changelog entry \a rec to the changelog llog
 698  * \param mdd
 699  * \param rec
 700  * \param handle - currently ignored since llogs start their own transaction;
 701  *                 this will hopefully be fixed in llog rewrite
 702  * \retval 0 ok
 703  */
 704 int mdd_changelog_store(const struct lu_env *env, struct mdd_device *mdd,
 705                         struct llog_changelog_rec *rec, struct thandle *th)
 706 {
 707         struct obd_device       *obd = mdd2obd_dev(mdd);
 708         struct llog_ctxt        *ctxt;
 709         int                      rc;
 710
 711         rec->cr_hdr.lrh_len = llog_data_len(sizeof(*rec) + rec->cr.cr_namelen);
 712         rec->cr_hdr.lrh_type = CHANGELOG_REC;
 713         rec->cr.cr_time = cl_time();
 714
 715         spin_lock(&mdd->mdd_cl.mc_lock);
 716         /* NB: I suppose it's possible llog_add adds out of order wrt cr_index,
 717          * but as long as the MDD transactions are ordered correctly for e.g.
 718          * rename conflicts, I don't think this should matter. */
 719         rec->cr.cr_index = ++mdd->mdd_cl.mc_index;
 720         spin_unlock(&mdd->mdd_cl.mc_lock);
 721
 722         ctxt = llog_get_context(obd, LLOG_CHANGELOG_ORIG_CTXT);
 723         if (ctxt == NULL)
 724                 return -ENXIO;
 725
 726         rc = llog_add(env, ctxt->loc_handle, &rec->cr_hdr, NULL, th);
 727         llog_ctxt_put(ctxt);
 728         if (rc > 0)
 729                 rc = 0;
 730         return rc;
 731 }
 732
 733 /** Add a changelog_ext entry \a rec to the changelog llog
 734  * \param mdd
 735  * \param rec
 736  * \param handle - currently ignored since llogs start their own transaction;
 737  *              this will hopefully be fixed in llog rewrite
 738  * \retval 0 ok
 739  */
 740 static int
 741 mdd_changelog_ext_store(const struct lu_env *env, struct mdd_device *mdd,
 742                         struct llog_changelog_ext_rec *rec, struct thandle *th)
 743 {
 744         struct obd_device       *obd = mdd2obd_dev(mdd);
 745         struct llog_ctxt        *ctxt;
 746         int                      rc;
 747
 748         rec->cr_hdr.lrh_len = llog_data_len(sizeof(*rec) + rec->cr.cr_namelen);
 749         /* llog_lvfs_write_rec sets the llog tail len */
 750         rec->cr_hdr.lrh_type = CHANGELOG_REC;
 751         rec->cr.cr_time = cl_time();
 752
 753         spin_lock(&mdd->mdd_cl.mc_lock);
 754         /* NB: I suppose it's possible llog_add adds out of order wrt cr_index,
 755          * but as long as the MDD transactions are ordered correctly for e.g.
 756          * rename conflicts, I don't think this should matter. */
 757         rec->cr.cr_index = ++mdd->mdd_cl.mc_index;
 758         spin_unlock(&mdd->mdd_cl.mc_lock);
 759
 760         ctxt = llog_get_context(obd, LLOG_CHANGELOG_ORIG_CTXT);
 761         if (ctxt == NULL)
 762                 return -ENXIO;
 763
 764         /* nested journal transaction */
 765         rc = llog_add(env, ctxt->loc_handle, &rec->cr_hdr, NULL, th);
 766         llog_ctxt_put(ctxt);
 767         if (rc > 0)
 768                 rc = 0;
 769
 770         return rc;
 771 }
 772
 773 /** Store a namespace change changelog record
 774  * If this fails, we must fail the whole transaction; we don't
 775  * want the change to commit without the log entry.
 776  * \param target - mdd_object of change
 777  * \param parent - parent dir/object
 778  * \param tname - target name string
 779  * \param handle - transacion handle
 780  */
 781 int mdd_changelog_ns_store(const struct lu_env *env, struct mdd_device *mdd,
 782                            enum changelog_rec_type type, unsigned flags,
 783                            struct mdd_object *target, struct mdd_object *parent,
 784                            const struct lu_name *tname, struct thandle *handle)
 785 {
 786         struct llog_changelog_rec *rec;
 787         struct lu_buf *buf;
 788         int reclen;
 789         int rc;
 790         ENTRY;
 791
 792         /* Not recording */
 793         if (!(mdd->mdd_cl.mc_flags & CLM_ON))
 794                 RETURN(0);
 795         if ((mdd->mdd_cl.mc_mask & (1 << type)) == 0)
 796                 RETURN(0);
 797
 798         LASSERT(target != NULL);
 799         LASSERT(parent != NULL);
 800         LASSERT(tname != NULL);
 801         LASSERT(handle != NULL);
 802
 803         reclen = llog_data_len(sizeof(*rec) + tname->ln_namelen);
 804         buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_big_buf, reclen);
 805         if (buf->lb_buf == NULL)
 806                 RETURN(-ENOMEM);
 807         rec = buf->lb_buf;
 808
 809         rec->cr.cr_flags = CLF_VERSION | (CLF_FLAGMASK & flags);
 810         rec->cr.cr_type = (__u32)type;
 811         rec->cr.cr_tfid = *mdo2fid(target);
 812         rec->cr.cr_pfid = *mdo2fid(parent);
 813         rec->cr.cr_namelen = tname->ln_namelen;
 814         memcpy(rec->cr.cr_name, tname->ln_name, tname->ln_namelen);
 815
 816         target->mod_cltime = cfs_time_current_64();
 817
 818         rc = mdd_changelog_store(env, mdd, rec, handle);
 819         if (rc < 0) {
 820                 CERROR("changelog failed: rc=%d, op%d %s c"DFID" p"DFID"\n",
 821                         rc, type, tname->ln_name, PFID(&rec->cr.cr_tfid),
 822                         PFID(&rec->cr.cr_pfid));
 823                 RETURN(-EFAULT);
 824         }
 825
 826         RETURN(0);
 827 }
 828
 829
 830 /** Store a namespace change changelog record
 831  * If this fails, we must fail the whole transaction; we don't
 832  * want the change to commit without the log entry.
 833  * \param target - mdd_object of change
 834  * \param tpfid - target parent dir/object fid
 835  * \param sfid - source object fid
 836  * \param spfid - source parent fid
 837  * \param tname - target name string
 838  * \param sname - source name string
 839  * \param handle - transacion handle
 840  */
 841 static int mdd_changelog_ext_ns_store(const struct lu_env  *env,
 842                                       struct mdd_device    *mdd,
 843                                       enum changelog_rec_type type,
 844                                       unsigned flags,
 845                                       struct mdd_object    *target,
 846                                       const struct lu_fid  *tpfid,
 847                                       const struct lu_fid  *sfid,
 848                                       const struct lu_fid  *spfid,
 849                                       const struct lu_name *tname,
 850                                       const struct lu_name *sname,
 851                                       struct thandle *handle)
 852 {
 853         struct llog_changelog_ext_rec *rec;
 854         struct lu_buf *buf;
 855         int reclen;
 856         int rc;
 857         ENTRY;
 858
 859         /* Not recording */
 860         if (!(mdd->mdd_cl.mc_flags & CLM_ON))
 861                 RETURN(0);
 862         if ((mdd->mdd_cl.mc_mask & (1 << type)) == 0)
 863                 RETURN(0);
 864
 865         LASSERT(sfid != NULL);
 866         LASSERT(tpfid != NULL);
 867         LASSERT(tname != NULL);
 868         LASSERT(handle != NULL);
 869
 870         reclen = llog_data_len(sizeof(*rec) +
 871                                sname != NULL ? 1 + sname->ln_namelen : 0);
 872         buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_big_buf, reclen);
 873         if (buf->lb_buf == NULL)
 874                 RETURN(-ENOMEM);
 875         rec = buf->lb_buf;
 876
 877         rec->cr.cr_flags = CLF_EXT_VERSION | (CLF_FLAGMASK & flags);
 878         rec->cr.cr_type = (__u32)type;
 879         rec->cr.cr_pfid = *tpfid;
 880         rec->cr.cr_sfid = *sfid;
 881         rec->cr.cr_spfid = *spfid;
 882         rec->cr.cr_namelen = tname->ln_namelen;
 883         memcpy(rec->cr.cr_name, tname->ln_name, tname->ln_namelen);
 884         if (sname) {
 885                 rec->cr.cr_name[tname->ln_namelen] = '\0';
 886                 memcpy(rec->cr.cr_name + tname->ln_namelen + 1, sname->ln_name,
 887                         sname->ln_namelen);
 888                 rec->cr.cr_namelen += 1 + sname->ln_namelen;
 889         }
 890
 891         if (likely(target != NULL)) {
 892                 rec->cr.cr_tfid = *mdo2fid(target);
 893                 target->mod_cltime = cfs_time_current_64();
 894         } else {
 895                 fid_zero(&rec->cr.cr_tfid);
 896         }
 897
 898         rc = mdd_changelog_ext_store(env, mdd, rec, handle);
 899         if (rc < 0) {
 900                 CERROR("changelog failed: rc=%d, op%d %s c"DFID" p"DFID"\n",
 901                         rc, type, tname->ln_name, PFID(sfid), PFID(tpfid));
 902                 return -EFAULT;
 903         }
 904
 905         return 0;
 906 }
 907
 908 static int __mdd_links_add(const struct lu_env *env,
 909                            struct mdd_object *mdd_obj,
 910                            struct linkea_data *ldata,
 911                            const struct lu_name *lname,
 912                            const struct lu_fid *pfid,
 913                            int first, int check)
 914 {
 915         int rc;
 916
 917         if (ldata->ld_leh == NULL) {
 918                 rc = first ? -ENODATA : mdd_links_read(env, mdd_obj, ldata);
 919                 if (rc) {
 920                         if (rc != -ENODATA)
 921                                 return rc;
 922                         rc = linkea_data_new(ldata,
 923                                              &mdd_env_info(env)->mti_link_buf);
 924                         if (rc)
 925                                 return rc;
 926                 }
 927         }
 928
 929         if (check) {
 930                 rc = linkea_links_find(ldata, lname, pfid);
 931                 if (rc && rc != -ENOENT)
 932                         return rc;
 933                 if (rc == 0)
 934                         return -EEXIST;
 935         }
 936
 937         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_LINKEA_MORE)) {
 938                 struct lu_fid *tfid = &mdd_env_info(env)->mti_fid2;
 939
 940                 *tfid = *pfid;
 941                 tfid->f_ver = ~0;
 942                 linkea_add_buf(ldata, lname, tfid);
 943         }
 944
 945         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_LINKEA_MORE2))
 946                 linkea_add_buf(ldata, lname, pfid);
 947
 948         return linkea_add_buf(ldata, lname, pfid);
 949 }
 950
 951 static int __mdd_links_del(const struct lu_env *env,
 952                            struct mdd_object *mdd_obj,
 953                            struct linkea_data *ldata,
 954                            const struct lu_name *lname,
 955                            const struct lu_fid *pfid)
 956 {
 957         int rc;
 958
 959         if (ldata->ld_leh == NULL) {
 960                 rc = mdd_links_read(env, mdd_obj, ldata);
 961                 if (rc)
 962                         return rc;
 963         }
 964
 965         rc = linkea_links_find(ldata, lname, pfid);
 966         if (rc)
 967                 return rc;
 968
 969         linkea_del_buf(ldata, lname);
 970         return 0;
 971 }
 972
 973 static int mdd_linkea_prepare(const struct lu_env *env,
 974                               struct mdd_object *mdd_obj,
 975                               const struct lu_fid *oldpfid,
 976                               const struct lu_name *oldlname,
 977                               const struct lu_fid *newpfid,
 978                               const struct lu_name *newlname,
 979                               int first, int check,
 980                               struct linkea_data *ldata)
 981 {
 982         int rc = 0;
 983         int rc2 = 0;
 984         ENTRY;
 985
 986         if (OBD_FAIL_CHECK(OBD_FAIL_FID_IGIF))
 987                 return 0;
 988
 989         LASSERT(oldpfid != NULL || newpfid != NULL);
 990
 991         if (mdd_obj->mod_flags & DEAD_OBJ) {
 992                 /* Prevent linkea to be updated which is NOT necessary. */
 993                 ldata->ld_reclen = 0;
 994                 /* No more links, don't bother */
 995                 RETURN(0);
 996         }
 997
 998         if (oldpfid != NULL) {
 999                 rc = __mdd_links_del(env, mdd_obj, ldata, oldlname, oldpfid);
1000                 if (rc) {
1001                         if ((check == 1) ||
1002                             (rc != -ENODATA && rc != -ENOENT))
1003                                 RETURN(rc);
1004                         /* No changes done. */
1005                         rc = 0;
1006                 }
1007         }
1008
1009         /* If renaming, add the new record */
1010         if (newpfid != NULL) {
1011                 /* even if the add fails, we still delete the out-of-date
1012                  * old link */
1013                 rc2 = __mdd_links_add(env, mdd_obj, ldata, newlname, newpfid,
1014                                       first, check);
1015         }
1016
1017         rc = rc != 0 ? rc : rc2;
1018
1019         RETURN(rc);
1020 }
1021
1022 int mdd_links_rename(const struct lu_env *env,
1023                      struct mdd_object *mdd_obj,
1024                      const struct lu_fid *oldpfid,
1025                      const struct lu_name *oldlname,
1026                      const struct lu_fid *newpfid,
1027                      const struct lu_name *newlname,
1028                      struct thandle *handle,
1029                      struct linkea_data *ldata,
1030                      int first, int check)
1031 {
1032         int rc = 0;
1033         ENTRY;
1034
1035         if (ldata == NULL) {
1036                 ldata = &mdd_env_info(env)->mti_link_data;
1037                 memset(ldata, 0, sizeof(*ldata));
1038                 rc = mdd_linkea_prepare(env, mdd_obj, oldpfid, oldlname,
1039                                         newpfid, newlname, first, check,
1040                                         ldata);
1041                 if (rc != 0)
1042                         GOTO(out, rc);
1043         }
1044
1045         if (ldata->ld_reclen != 0)
1046                 rc = mdd_links_write(env, mdd_obj, ldata, handle);
1047         EXIT;
1048 out:
1049         if (rc != 0) {
1050                 int error = 1;
1051                 if (rc == -EOVERFLOW || rc == -ENOSPC)
1052                         error = 0;
1053                 if (oldpfid == NULL)
1054                         CDEBUG(error ? D_ERROR : D_OTHER,
1055                                "link_ea add '%.*s' failed %d "DFID"\n",
1056                                newlname->ln_namelen, newlname->ln_name,
1057                                rc, PFID(mdd_object_fid(mdd_obj)));
1058                 else if (newpfid == NULL)
1059                         CDEBUG(error ? D_ERROR : D_OTHER,
1060                                "link_ea del '%.*s' failed %d "DFID"\n",
1061                                oldlname->ln_namelen, oldlname->ln_name,
1062                                rc, PFID(mdd_object_fid(mdd_obj)));
1063                 else
1064                         CDEBUG(error ? D_ERROR : D_OTHER,
1065                                "link_ea rename '%.*s'->'%.*s' failed %d "
1066                                DFID"\n",
1067                                oldlname->ln_namelen, oldlname->ln_name,
1068                                newlname->ln_namelen, newlname->ln_name,
1069                                rc, PFID(mdd_object_fid(mdd_obj)));
1070         }
1071
1072         if (ldata->ld_buf && ldata->ld_buf->lb_len > OBD_ALLOC_BIG)
1073                 /* if we vmalloced a large buffer drop it */
1074                 lu_buf_free(ldata->ld_buf);
1075
1076         return rc;
1077 }
1078
1079 static inline int mdd_links_add(const struct lu_env *env,
1080                                 struct mdd_object *mdd_obj,
1081                                 const struct lu_fid *pfid,
1082                                 const struct lu_name *lname,
1083                                 struct thandle *handle,
1084                                 struct linkea_data *ldata, int first)
1085 {
1086         return mdd_links_rename(env, mdd_obj, NULL, NULL,
1087                                 pfid, lname, handle, ldata, first, 0);
1088 }
1089
1090 static inline int mdd_links_del(const struct lu_env *env,
1091                                 struct mdd_object *mdd_obj,
1092                                 const struct lu_fid *pfid,
1093                                 const struct lu_name *lname,
1094                                 struct thandle *handle)
1095 {
1096         return mdd_links_rename(env, mdd_obj, pfid, lname,
1097                                 NULL, NULL, handle, NULL, 0, 0);
1098 }
1099
1100 /** Read the link EA into a temp buffer.
1101  * Uses the mdd_thread_info::mti_big_buf since it is generally large.
1102  * A pointer to the buffer is stored in \a ldata::ld_buf.
1103  *
1104  * \retval 0 or error
1105  */
1106 int mdd_links_read(const struct lu_env *env, struct mdd_object *mdd_obj,
1107                    struct linkea_data *ldata)
1108 {
1109         int rc;
1110
1111         if (!mdd_object_exists(mdd_obj))
1112                 return -ENODATA;
1113
1114         /* First try a small buf */
1115         LASSERT(env != NULL);
1116         ldata->ld_buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_link_buf,
1117                                                PAGE_CACHE_SIZE);
1118         if (ldata->ld_buf->lb_buf == NULL)
1119                 return -ENOMEM;
1120
1121         rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf, XATTR_NAME_LINK,
1122                           BYPASS_CAPA);
1123         if (rc == -ERANGE) {
1124                 /* Buf was too small, figure out what we need. */
1125                 lu_buf_free(ldata->ld_buf);
1126                 rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf,
1127                                    XATTR_NAME_LINK, BYPASS_CAPA);
1128                 if (rc < 0)
1129                         return rc;
1130                 ldata->ld_buf = lu_buf_check_and_alloc(ldata->ld_buf, rc);
1131                 if (ldata->ld_buf->lb_buf == NULL)
1132                         return -ENOMEM;
1133                 rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf,
1134                                   XATTR_NAME_LINK, BYPASS_CAPA);
1135         }
1136         if (rc < 0) {
1137                 lu_buf_free(ldata->ld_buf);
1138                 ldata->ld_buf = NULL;
1139                 return rc;
1140         }
1141
1142         return linkea_init(ldata);
1143 }
1144
1145 /** Read the link EA into a temp buffer.
1146  * Uses the name_buf since it is generally large.
1147  * \retval IS_ERR err
1148  * \retval ptr to \a lu_buf (always \a mti_big_buf)
1149  */
1150 struct lu_buf *mdd_links_get(const struct lu_env *env,
1151                              struct mdd_object *mdd_obj)
1152 {
1153         struct linkea_data ldata = { 0 };
1154         int rc;
1155
1156         rc = mdd_links_read(env, mdd_obj, &ldata);
1157         return rc ? ERR_PTR(rc) : ldata.ld_buf;
1158 }
1159
1160 int mdd_links_write(const struct lu_env *env, struct mdd_object *mdd_obj,
1161                     struct linkea_data *ldata, struct thandle *handle)
1162 {
1163         const struct lu_buf *buf = mdd_buf_get_const(env, ldata->ld_buf->lb_buf,
1164                                                      ldata->ld_leh->leh_len);
1165         return mdo_xattr_set(env, mdd_obj, buf, XATTR_NAME_LINK, 0, handle,
1166                              mdd_object_capa(env, mdd_obj));
1167 }
1168
1169 int mdd_declare_links_add(const struct lu_env *env, struct mdd_object *mdd_obj,
1170                           struct thandle *handle, struct linkea_data *ldata)
1171 {
1172         int     rc;
1173         int     ea_len;
1174         void    *linkea;
1175
1176         if (ldata != NULL && ldata->ld_leh != NULL) {
1177                 ea_len = ldata->ld_leh->leh_len;
1178                 linkea = ldata->ld_buf->lb_buf;
1179         } else {
1180                 ea_len = DEFAULT_LINKEA_SIZE;
1181                 linkea = NULL;
1182         }
1183
1184         /* XXX: max size? */
1185         rc = mdo_declare_xattr_set(env, mdd_obj,
1186                                    mdd_buf_get_const(env, linkea, ea_len),
1187                                    XATTR_NAME_LINK, 0, handle);
1188         return rc;
1189 }
1190
1191 static inline int mdd_declare_links_del(const struct lu_env *env,
1192                                         struct mdd_object *c,
1193                                         struct thandle *handle)
1194 {
1195         int rc = 0;
1196
1197         /* For directory, the linkEA will be removed together
1198          * with the object. */
1199         if (!S_ISDIR(mdd_object_type(c)))
1200                 rc = mdd_declare_links_add(env, c, handle, NULL);
1201
1202         return rc;
1203 }
1204
1205 static int mdd_declare_link(const struct lu_env *env,
1206                             struct mdd_device *mdd,
1207                             struct mdd_object *p,
1208                             struct mdd_object *c,
1209                             const struct lu_name *name,
1210                             struct thandle *handle,
1211                             struct lu_attr *la,
1212                             struct linkea_data *data)
1213 {
1214         int rc;
1215
1216         rc = mdo_declare_index_insert(env, p, mdo2fid(c), name->ln_name,handle);
1217         if (rc)
1218                 return rc;
1219
1220         rc = mdo_declare_ref_add(env, c, handle);
1221         if (rc)
1222                 return rc;
1223
1224         la->la_valid = LA_CTIME | LA_MTIME;
1225         rc = mdo_declare_attr_set(env, p, la, handle);
1226         if (rc != 0)
1227                 return rc;
1228
1229         la->la_valid = LA_CTIME;
1230         rc = mdo_declare_attr_set(env, c, la, handle);
1231         if (rc)
1232                 return rc;
1233
1234         rc = mdd_declare_links_add(env, c, handle, data);
1235         if (rc)
1236                 return rc;
1237
1238         rc = mdd_declare_changelog_store(env, mdd, name, handle);
1239
1240         return rc;
1241 }
1242
1243 static int mdd_link(const struct lu_env *env, struct md_object *tgt_obj,
1244                     struct md_object *src_obj, const struct lu_name *lname,
1245                     struct md_attr *ma)
1246 {
1247         const char *name = lname->ln_name;
1248         struct lu_attr    *la = &mdd_env_info(env)->mti_la_for_fix;
1249         struct mdd_object *mdd_tobj = md2mdd_obj(tgt_obj);
1250         struct mdd_object *mdd_sobj = md2mdd_obj(src_obj);
1251         struct lu_attr    *cattr = MDD_ENV_VAR(env, cattr);
1252         struct lu_attr    *tattr = MDD_ENV_VAR(env, tattr);
1253         struct mdd_device *mdd = mdo2mdd(src_obj);
1254         struct thandle *handle;
1255         struct linkea_data *ldata = &mdd_env_info(env)->mti_link_data;
1256         int rc;
1257         ENTRY;
1258
1259         rc = mdd_la_get(env, mdd_sobj, cattr, BYPASS_CAPA);
1260         if (rc != 0)
1261                 RETURN(rc);
1262
1263         rc = mdd_la_get(env, mdd_tobj, tattr, BYPASS_CAPA);
1264         if (rc != 0)
1265                 RETURN(rc);
1266
1267         handle = mdd_trans_create(env, mdd);
1268         if (IS_ERR(handle))
1269                 GOTO(out_pending, rc = PTR_ERR(handle));
1270
1271         memset(ldata, 0, sizeof(*ldata));
1272
1273         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1274         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1275
1276         rc = mdd_declare_link(env, mdd, mdd_tobj, mdd_sobj, lname, handle,
1277                               la, ldata);
1278         if (rc)
1279                 GOTO(stop, rc);
1280
1281         rc = mdd_trans_start(env, mdd, handle);
1282         if (rc)
1283                 GOTO(stop, rc);
1284
1285         mdd_write_lock(env, mdd_sobj, MOR_TGT_CHILD);
1286         rc = mdd_link_sanity_check(env, mdd_tobj, tattr, lname, mdd_sobj,
1287                                    cattr);
1288         if (rc)
1289                 GOTO(out_unlock, rc);
1290
1291         rc = mdo_ref_add(env, mdd_sobj, handle);
1292         if (rc)
1293                 GOTO(out_unlock, rc);
1294
1295
1296         rc = __mdd_index_insert_only(env, mdd_tobj, mdo2fid(mdd_sobj),
1297                                      name, handle,
1298                                      mdd_object_capa(env, mdd_tobj));
1299         if (rc != 0) {
1300                 mdo_ref_del(env, mdd_sobj, handle);
1301                 GOTO(out_unlock, rc);
1302         }
1303
1304         la->la_valid = LA_CTIME | LA_MTIME;
1305         rc = mdd_update_time(env, mdd_tobj, tattr, la, handle);
1306         if (rc)
1307                 GOTO(out_unlock, rc);
1308
1309         la->la_valid = LA_CTIME;
1310         rc = mdd_update_time(env, mdd_sobj, cattr, la, handle);
1311         if (rc == 0) {
1312                 rc = mdd_linkea_prepare(env, mdd_sobj, NULL, NULL,
1313                                         mdo2fid(mdd_tobj), lname, 0, 0,
1314                                         ldata);
1315                 if (rc == 0)
1316                         mdd_links_add(env, mdd_sobj, mdo2fid(mdd_tobj),
1317                                       lname, handle, ldata, 0);
1318                 /* The failure of links_add should not cause the link
1319                  * failure, reset rc here */
1320                 rc = 0;
1321         }
1322         EXIT;
1323 out_unlock:
1324         mdd_write_unlock(env, mdd_sobj);
1325         if (rc == 0)
1326                 rc = mdd_changelog_ns_store(env, mdd, CL_HARDLINK, 0, mdd_sobj,
1327                                             mdd_tobj, lname, handle);
1328 stop:
1329         mdd_trans_stop(env, mdd, rc, handle);
1330
1331         if (ldata->ld_buf && ldata->ld_buf->lb_len > OBD_ALLOC_BIG)
1332                 /* if we vmalloced a large buffer drop it */
1333                 lu_buf_free(ldata->ld_buf);
1334 out_pending:
1335         return rc;
1336 }
1337
1338 static int mdd_mark_dead_object(const struct lu_env *env,
1339                                 struct mdd_object *obj, struct thandle *handle,
1340                                 bool declare)
1341 {
1342         struct lu_attr *attr = MDD_ENV_VAR(env, la_for_start);
1343         int rc;
1344
1345         if (!declare)
1346                 obj->mod_flags |= DEAD_OBJ;
1347
1348         if (!S_ISDIR(mdd_object_type(obj)))
1349                 return 0;
1350
1351         attr->la_valid = LA_FLAGS;
1352         attr->la_flags = LUSTRE_SLAVE_DEAD_FL;
1353
1354         if (declare)
1355                 rc = mdo_declare_attr_set(env, obj, attr, handle);
1356         else
1357                 rc = mdo_attr_set(env, obj, attr, handle,
1358                                   mdd_object_capa(env, obj));
1359
1360         return rc;
1361 }
1362
1363 static int mdd_declare_finish_unlink(const struct lu_env *env,
1364                                      struct mdd_object *obj,
1365                                      struct thandle *handle)
1366 {
1367         int     rc;
1368
1369         rc = mdd_mark_dead_object(env, obj, handle, true);
1370         if (rc != 0)
1371                 return rc;
1372
1373         rc = orph_declare_index_insert(env, obj, mdd_object_type(obj), handle);
1374         if (rc != 0)
1375                 return rc;
1376
1377         rc = mdo_declare_destroy(env, obj, handle);
1378         if (rc != 0)
1379                 return rc;
1380
1381         return mdd_declare_links_del(env, obj, handle);
1382 }
1383
1384 /* caller should take a lock before calling */
1385 int mdd_finish_unlink(const struct lu_env *env,
1386                       struct mdd_object *obj, struct md_attr *ma,
1387                       const struct mdd_object *pobj,
1388                       const struct lu_name *lname,
1389                       struct thandle *th)
1390 {
1391         int rc = 0;
1392         int is_dir = S_ISDIR(ma->ma_attr.la_mode);
1393         ENTRY;
1394
1395         LASSERT(mdd_write_locked(env, obj) != 0);
1396
1397         if (ma->ma_attr.la_nlink == 0 || is_dir) {
1398                 rc = mdd_mark_dead_object(env, obj, th, false);
1399                 if (rc != 0)
1400                         RETURN(rc);
1401
1402                 /* add new orphan and the object
1403                  * will be deleted during mdd_close() */
1404                 if (obj->mod_count) {
1405                         rc = __mdd_orphan_add(env, obj, th);
1406                         if (rc == 0)
1407                                 CDEBUG(D_HA, "Object "DFID" is inserted into "
1408                                         "orphan list, open count = %d\n",
1409                                         PFID(mdd_object_fid(obj)),
1410                                         obj->mod_count);
1411                         else
1412                                 CERROR("Object "DFID" fail to be an orphan, "
1413                                        "open count = %d, maybe cause failed "
1414                                        "open replay\n",
1415                                         PFID(mdd_object_fid(obj)),
1416                                         obj->mod_count);
1417                 } else {
1418                         rc = mdo_destroy(env, obj, th);
1419                 }
1420         } else if (!is_dir) {
1421                 /* old files may not have link ea; ignore errors */
1422                 mdd_links_del(env, obj, mdo2fid(pobj), lname, th);
1423         }
1424
1425         RETURN(rc);
1426 }
1427
1428 /*
1429  * pobj maybe NULL
1430  * has mdd_write_lock on cobj already, but not on pobj yet
1431  */
1432 int mdd_unlink_sanity_check(const struct lu_env *env, struct mdd_object *pobj,
1433                             const struct lu_attr *pattr,
1434                             struct mdd_object *cobj,
1435                             const struct lu_attr *cattr)
1436 {
1437         int rc;
1438         ENTRY;
1439
1440         rc = mdd_may_delete(env, pobj, pattr, cobj, cattr, NULL, 1, 1);
1441
1442         RETURN(rc);
1443 }
1444
1445 static int mdd_declare_unlink(const struct lu_env *env, struct mdd_device *mdd,
1446                               struct mdd_object *p, struct mdd_object *c,
1447                               const struct lu_name *name, struct md_attr *ma,
1448                               struct thandle *handle, int no_name)
1449 {
1450         struct lu_attr     *la = &mdd_env_info(env)->mti_la_for_fix;
1451         int rc;
1452
1453         if (likely(no_name == 0)) {
1454                 rc = mdo_declare_index_delete(env, p, name->ln_name, handle);
1455                 if (rc)
1456                         return rc;
1457         }
1458
1459         rc = mdo_declare_ref_del(env, p, handle);
1460         if (rc)
1461                 return rc;
1462
1463         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1464         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1465         la->la_valid = LA_CTIME | LA_MTIME;
1466         rc = mdo_declare_attr_set(env, p, la, handle);
1467         if (rc)
1468                 return rc;
1469
1470         if (c != NULL) {
1471                 rc = mdo_declare_ref_del(env, c, handle);
1472                 if (rc)
1473                         return rc;
1474
1475                 rc = mdo_declare_ref_del(env, c, handle);
1476                 if (rc)
1477                         return rc;
1478
1479                 la->la_valid = LA_CTIME;
1480                 rc = mdo_declare_attr_set(env, c, la, handle);
1481                 if (rc)
1482                         return rc;
1483
1484                 rc = mdd_declare_finish_unlink(env, c, handle);
1485                 if (rc)
1486                         return rc;
1487
1488                 /* FIXME: need changelog for remove entry */
1489                 rc = mdd_declare_changelog_store(env, mdd, name, handle);
1490         }
1491
1492         return rc;
1493 }
1494
1495 /*
1496  * test if a file has an HSM archive
1497  * if HSM attributes are not found in ma update them from
1498  * HSM xattr
1499  */
1500 static bool mdd_hsm_archive_exists(const struct lu_env *env,
1501                                    struct mdd_object *obj,
1502                                    struct md_attr *ma)
1503 {
1504         ENTRY;
1505
1506         if (!(ma->ma_valid & MA_HSM)) {
1507                 /* no HSM MD provided, read xattr */
1508                 struct lu_buf   *hsm_buf;
1509                 const size_t     buflen = sizeof(struct hsm_attrs);
1510                 int              rc;
1511
1512                 hsm_buf = mdd_buf_get(env, NULL, 0);
1513                 lu_buf_alloc(hsm_buf, buflen);
1514                 rc = mdo_xattr_get(env, obj, hsm_buf, XATTR_NAME_HSM,
1515                                    mdd_object_capa(env, obj));
1516                 rc = lustre_buf2hsm(hsm_buf->lb_buf, rc, &ma->ma_hsm);
1517                 lu_buf_free(hsm_buf);
1518                 if (rc < 0)
1519                         RETURN(false);
1520
1521                 ma->ma_valid = MA_HSM;
1522         }
1523         if (ma->ma_hsm.mh_flags & HS_EXISTS)
1524                 RETURN(true);
1525         RETURN(false);
1526 }
1527
1528 /**
1529  * Delete name entry and the object.
1530  * Note: no_name == 1 means it only destory the object, i.e. name_entry
1531  * does not exist for this object, and it could only happen during resending
1532  * of remote unlink. see the comments in mdt_reint_unlink. Unfortunately, lname
1533  * is also needed in this case(needed by changelog), so we have to add another
1534  * parameter(no_name)here. XXX: this is only needed in DNE phase I, on Phase II,
1535  * the ENOENT failure should be able to be fixed by redo mechanism.
1536  */
1537 static int mdd_unlink(const struct lu_env *env, struct md_object *pobj,
1538                       struct md_object *cobj, const struct lu_name *lname,
1539                       struct md_attr *ma, int no_name)
1540 {
1541         const char *name = lname->ln_name;
1542         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
1543         struct lu_attr *cattr = MDD_ENV_VAR(env, cattr);
1544         struct lu_attr *la = &mdd_env_info(env)->mti_la_for_fix;
1545         struct mdd_object *mdd_pobj = md2mdd_obj(pobj);
1546         struct mdd_object *mdd_cobj = NULL;
1547         struct mdd_device *mdd = mdo2mdd(pobj);
1548         struct thandle    *handle;
1549         int rc, is_dir = 0;
1550         ENTRY;
1551
1552         /* cobj == NULL means only delete name entry */
1553         if (likely(cobj != NULL)) {
1554                 mdd_cobj = md2mdd_obj(cobj);
1555                 if (mdd_object_exists(mdd_cobj) == 0)
1556                         RETURN(-ENOENT);
1557         }
1558
1559         rc = mdd_la_get(env, mdd_pobj, pattr, BYPASS_CAPA);
1560         if (rc)
1561                 RETURN(rc);
1562
1563         if (likely(mdd_cobj != NULL)) {
1564                 /* fetch cattr */
1565                 rc = mdd_la_get(env, mdd_cobj, cattr, BYPASS_CAPA);
1566                 if (rc)
1567                         RETURN(rc);
1568
1569                 is_dir = S_ISDIR(cattr->la_mode);
1570         }
1571
1572         rc = mdd_unlink_sanity_check(env, mdd_pobj, pattr, mdd_cobj, cattr);
1573         if (rc)
1574                 RETURN(rc);
1575
1576         handle = mdd_trans_create(env, mdd);
1577         if (IS_ERR(handle))
1578                 RETURN(PTR_ERR(handle));
1579
1580         rc = mdd_declare_unlink(env, mdd, mdd_pobj, mdd_cobj,
1581                                 lname, ma, handle, no_name);
1582         if (rc)
1583                 GOTO(stop, rc);
1584
1585         rc = mdd_trans_start(env, mdd, handle);
1586         if (rc)
1587                 GOTO(stop, rc);
1588
1589         if (likely(mdd_cobj != NULL))
1590                 mdd_write_lock(env, mdd_cobj, MOR_TGT_CHILD);
1591
1592         if (likely(no_name == 0)) {
1593                 rc = __mdd_index_delete(env, mdd_pobj, name, is_dir, handle,
1594                                         mdd_object_capa(env, mdd_pobj));
1595                 if (rc)
1596                         GOTO(cleanup, rc);
1597         }
1598
1599         if (likely(mdd_cobj != NULL)) {
1600                 rc = mdo_ref_del(env, mdd_cobj, handle);
1601                 if (rc != 0) {
1602                         __mdd_index_insert_only(env, mdd_pobj,
1603                                                 mdo2fid(mdd_cobj),
1604                                                 name, handle,
1605                                                 mdd_object_capa(env, mdd_pobj));
1606                         GOTO(cleanup, rc);
1607                 }
1608
1609                 if (is_dir)
1610                         /* unlink dot */
1611                         mdo_ref_del(env, mdd_cobj, handle);
1612
1613                 /* fetch updated nlink */
1614                 rc = mdd_la_get(env, mdd_cobj, cattr, BYPASS_CAPA);
1615                 if (rc)
1616                         GOTO(cleanup, rc);
1617         }
1618
1619         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1620         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1621
1622         la->la_valid = LA_CTIME | LA_MTIME;
1623         rc = mdd_update_time(env, mdd_pobj, pattr, la, handle);
1624         if (rc)
1625                 GOTO(cleanup, rc);
1626
1627         /* Enough for only unlink the entry */
1628         if (unlikely(mdd_cobj == NULL))
1629                 GOTO(stop, rc);
1630
1631         if (cattr->la_nlink > 0 || mdd_cobj->mod_count > 0) {
1632                 /* update ctime of an unlinked file only if it is still
1633                  * opened or a link still exists */
1634                 la->la_valid = LA_CTIME;
1635                 rc = mdd_update_time(env, mdd_cobj, cattr, la, handle);
1636                 if (rc)
1637                         GOTO(cleanup, rc);
1638         }
1639
1640         /* XXX: this transfer to ma will be removed with LOD/OSP */
1641         ma->ma_attr = *cattr;
1642         ma->ma_valid |= MA_INODE;
1643         rc = mdd_finish_unlink(env, mdd_cobj, ma, mdd_pobj, lname, handle);
1644
1645         /* fetch updated nlink */
1646         if (rc == 0)
1647                 rc = mdd_la_get(env, mdd_cobj, cattr, BYPASS_CAPA);
1648
1649         /* if object is removed then we can't get its attrs, use last get */
1650         if (cattr->la_nlink == 0) {
1651                 ma->ma_attr = *cattr;
1652                 ma->ma_valid |= MA_INODE;
1653         }
1654         EXIT;
1655 cleanup:
1656         mdd_write_unlock(env, mdd_cobj);
1657         if (rc == 0) {
1658                 int cl_flags = 0;
1659
1660                 if (cattr->la_nlink == 0) {
1661                         cl_flags |= CLF_UNLINK_LAST;
1662                         /* search for an existing archive */
1663                         if (mdd_hsm_archive_exists(env, mdd_cobj, ma))
1664                                 cl_flags |= CLF_UNLINK_HSM_EXISTS;
1665                 }
1666
1667                 rc = mdd_changelog_ns_store(env, mdd,
1668                         is_dir ? CL_RMDIR : CL_UNLINK, cl_flags,
1669                         mdd_cobj, mdd_pobj, lname, handle);
1670         }
1671
1672 stop:
1673         mdd_trans_stop(env, mdd, rc, handle);
1674
1675         return rc;
1676 }
1677
1678 /*
1679  * The permission has been checked when obj created, no need check again.
1680  */
1681 static int mdd_cd_sanity_check(const struct lu_env *env,
1682                                struct mdd_object *obj)
1683 {
1684         ENTRY;
1685
1686         /* EEXIST check */
1687         if (!obj || mdd_is_dead_obj(obj))
1688                 RETURN(-ENOENT);
1689
1690         RETURN(0);
1691 }
1692
1693 static int mdd_create_data(const struct lu_env *env, struct md_object *pobj,
1694                            struct md_object *cobj, const struct md_op_spec *spec,
1695                            struct md_attr *ma)
1696 {
1697         struct mdd_device *mdd = mdo2mdd(cobj);
1698         struct mdd_object *mdd_pobj = md2mdd_obj(pobj);
1699         struct mdd_object *son = md2mdd_obj(cobj);
1700         struct thandle    *handle;
1701         const struct lu_buf *buf;
1702         struct lu_attr    *attr = MDD_ENV_VAR(env, cattr);
1703         struct dt_allocation_hint *hint = &mdd_env_info(env)->mti_hint;
1704         int                rc;
1705         ENTRY;
1706
1707         rc = mdd_cd_sanity_check(env, son);
1708         if (rc)
1709                 RETURN(rc);
1710
1711         if (!md_should_create(spec->sp_cr_flags))
1712                 RETURN(0);
1713
1714         /*
1715          * there are following use cases for this function:
1716          * 1) late striping - file was created with MDS_OPEN_DELAY_CREATE
1717          *    striping can be specified or not
1718          * 2) CMD?
1719          */
1720         rc = mdd_la_get(env, son, attr, BYPASS_CAPA);
1721         if (rc)
1722                 RETURN(rc);
1723
1724         /* calling ->ah_make_hint() is used to transfer information from parent */
1725         mdd_object_make_hint(env, mdd_pobj, son, attr, spec, hint);
1726
1727         handle = mdd_trans_create(env, mdd);
1728         if (IS_ERR(handle))
1729                 GOTO(out_free, rc = PTR_ERR(handle));
1730
1731         /*
1732          * XXX: Setting the lov ea is not locked but setting the attr is locked?
1733          * Should this be fixed?
1734          */
1735         CDEBUG(D_OTHER, "ea %p/%u, cr_flags "LPO64", no_create %u\n",
1736                spec->u.sp_ea.eadata, spec->u.sp_ea.eadatalen,
1737                spec->sp_cr_flags, spec->no_create);
1738
1739         if (spec->no_create || (spec->sp_cr_flags & MDS_OPEN_HAS_EA)) {
1740                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
1741                                         spec->u.sp_ea.eadatalen);
1742         } else {
1743                 buf = &LU_BUF_NULL;
1744         }
1745
1746         rc = dt_declare_xattr_set(env, mdd_object_child(son), buf,
1747                                   XATTR_NAME_LOV, 0, handle);
1748         if (rc)
1749                 GOTO(stop, rc);
1750
1751         rc = mdd_declare_changelog_store(env, mdd, NULL, handle);
1752         if (rc)
1753                 GOTO(stop, rc);
1754
1755         rc = mdd_trans_start(env, mdd, handle);
1756         if (rc)
1757                 GOTO(stop, rc);
1758
1759         rc = dt_xattr_set(env, mdd_object_child(son), buf, XATTR_NAME_LOV,
1760                           0, handle, mdd_object_capa(env, son));
1761
1762         if (rc)
1763                 GOTO(stop, rc);
1764
1765         rc = mdd_changelog_data_store(env, mdd, CL_LAYOUT, 0, son, handle);
1766
1767 stop:
1768         mdd_trans_stop(env, mdd, rc, handle);
1769 out_free:
1770         RETURN(rc);
1771 }
1772
1773 static int mdd_declare_object_initialize(const struct lu_env *env,
1774                                          struct mdd_object *parent,
1775                                          struct mdd_object *child,
1776                                          struct lu_attr *attr,
1777                                          struct thandle *handle)
1778 {
1779         int rc;
1780         ENTRY;
1781
1782         /*
1783          * inode mode has been set in creation time, and it's based on umask,
1784          * la_mode and acl, don't set here again! (which will go wrong
1785          * because below function doesn't consider umask).
1786          * I'd suggest set all object attributes in creation time, see above.
1787          */
1788         LASSERT(attr->la_valid & (LA_MODE | LA_TYPE));
1789         attr->la_valid &= ~(LA_MODE | LA_TYPE);
1790         rc = mdo_declare_attr_set(env, child, attr, handle);
1791         attr->la_valid |= LA_MODE | LA_TYPE;
1792         if (rc == 0 && S_ISDIR(attr->la_mode)) {
1793                 rc = mdo_declare_index_insert(env, child, mdo2fid(child),
1794                                               dot, handle);
1795                 if (rc == 0)
1796                         rc = mdo_declare_ref_add(env, child, handle);
1797
1798                 rc = mdo_declare_index_insert(env, child, mdo2fid(parent),
1799                                               dotdot, handle);
1800         }
1801
1802         RETURN(rc);
1803 }
1804
1805 static int mdd_object_initialize(const struct lu_env *env,
1806                                  const struct lu_fid *pfid,
1807                                  struct mdd_object *child,
1808                                  struct lu_attr *attr, struct thandle *handle,
1809                                  const struct md_op_spec *spec)
1810 {
1811         int rc;
1812         ENTRY;
1813
1814         /*
1815          * Update attributes for child.
1816          *
1817          * FIXME:
1818          *  (1) the valid bits should be converted between Lustre and Linux;
1819          *  (2) maybe, the child attributes should be set in OSD when creation.
1820          */
1821
1822         rc = mdd_attr_set_internal(env, child, attr, handle, 0);
1823         /* arguments are supposed to stay the same */
1824         if (S_ISDIR(attr->la_mode)) {
1825                 /* Add "." and ".." for newly created dir */
1826                 mdo_ref_add(env, child, handle);
1827                 rc = __mdd_index_insert_only(env, child, mdo2fid(child),
1828                                              dot, handle, BYPASS_CAPA);
1829                 if (rc == 0)
1830                         rc = __mdd_index_insert_only(env, child, pfid,
1831                                                      dotdot, handle,
1832                                                      BYPASS_CAPA);
1833                 if (rc != 0)
1834                         mdo_ref_del(env, child, handle);
1835         }
1836
1837         RETURN(rc);
1838 }
1839
1840 /* has not lock on pobj yet */
1841 static int mdd_create_sanity_check(const struct lu_env *env,
1842                                    struct md_object *pobj,
1843                                    const struct lu_attr *pattr,
1844                                    const struct lu_name *lname,
1845                                    struct lu_attr *cattr,
1846                                    struct md_op_spec *spec)
1847 {
1848         struct mdd_thread_info *info = mdd_env_info(env);
1849         struct lu_fid     *fid       = &info->mti_fid;
1850         struct mdd_object *obj       = md2mdd_obj(pobj);
1851         struct mdd_device *m         = mdo2mdd(pobj);
1852         int rc;
1853         ENTRY;
1854
1855         /* EEXIST check */
1856         if (mdd_is_dead_obj(obj))
1857                 RETURN(-ENOENT);
1858
1859         /*
1860          * In some cases this lookup is not needed - we know before if name
1861          * exists or not because MDT performs lookup for it.
1862          * name length check is done in lookup.
1863          */
1864         if (spec->sp_cr_lookup) {
1865                 /*
1866                  * Check if the name already exist, though it will be checked in
1867                  * _index_insert also, for avoiding rolling back if exists
1868                  * _index_insert.
1869                  */
1870                 rc = __mdd_lookup(env, pobj, pattr, lname, fid,
1871                                   MAY_WRITE | MAY_EXEC);
1872                 if (rc != -ENOENT)
1873                         RETURN(rc ? : -EEXIST);
1874         } else {
1875                 rc = mdd_may_create(env, obj, pattr, NULL, true, false);
1876                 if (rc != 0)
1877                         RETURN(rc);
1878         }
1879
1880         /* sgid check */
1881         if (pattr->la_mode & S_ISGID) {
1882                 cattr->la_gid = pattr->la_gid;
1883                 if (S_ISDIR(cattr->la_mode)) {
1884                         cattr->la_mode |= S_ISGID;
1885                         cattr->la_valid |= LA_MODE;
1886                 }
1887         }
1888
1889         rc = mdd_name_check(m, lname);
1890         if (rc < 0)
1891                 RETURN(rc);
1892
1893         switch (cattr->la_mode & S_IFMT) {
1894         case S_IFLNK: {
1895                 unsigned int symlen = strlen(spec->u.sp_symname) + 1;
1896
1897                 if (symlen > (1 << m->mdd_dt_conf.ddp_block_shift))
1898                         RETURN(-ENAMETOOLONG);
1899                 else
1900                         RETURN(0);
1901         }
1902         case S_IFDIR:
1903         case S_IFREG:
1904         case S_IFCHR:
1905         case S_IFBLK:
1906         case S_IFIFO:
1907         case S_IFSOCK:
1908                 rc = 0;
1909                 break;
1910         default:
1911                 rc = -EINVAL;
1912                 break;
1913         }
1914         RETURN(rc);
1915 }
1916
1917 static int mdd_declare_object_create(const struct lu_env *env,
1918                                      struct mdd_device *mdd,
1919                                      struct mdd_object *p, struct mdd_object *c,
1920                                      struct lu_attr *attr,
1921                                      struct thandle *handle,
1922                                      const struct md_op_spec *spec,
1923                                      struct lu_buf *def_acl_buf,
1924                                      struct lu_buf *acl_buf,
1925                                      struct dt_allocation_hint *hint)
1926 {
1927         int rc;
1928
1929         rc = mdd_declare_object_create_internal(env, p, c, attr, handle, spec,
1930                                                 hint);
1931         if (rc)
1932                 GOTO(out, rc);
1933
1934 #ifdef CONFIG_FS_POSIX_ACL
1935         if (def_acl_buf->lb_len > 0 && S_ISDIR(attr->la_mode)) {
1936                 /* if dir, then can inherit default ACl */
1937                 rc = mdo_declare_xattr_set(env, c, def_acl_buf,
1938                                            XATTR_NAME_ACL_DEFAULT,
1939                                            0, handle);
1940                 if (rc)
1941                         GOTO(out, rc);
1942         }
1943
1944         if (acl_buf->lb_len > 0) {
1945                 rc = mdo_declare_attr_set(env, c, attr, handle);
1946                 if (rc)
1947                         GOTO(out, rc);
1948
1949                 rc = mdo_declare_xattr_set(env, c, acl_buf,
1950                                            XATTR_NAME_ACL_ACCESS, 0, handle);
1951                 if (rc)
1952                         GOTO(out, rc);
1953         }
1954 #endif
1955         rc = mdd_declare_object_initialize(env, p, c, attr, handle);
1956         if (rc)
1957                 GOTO(out, rc);
1958
1959         /* replay case, create LOV EA from client data */
1960         if (spec->no_create ||
1961             (spec->sp_cr_flags & MDS_OPEN_HAS_EA && S_ISREG(attr->la_mode))) {
1962                 const struct lu_buf *buf;
1963
1964                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
1965                                         spec->u.sp_ea.eadatalen);
1966                 rc = mdo_declare_xattr_set(env, c, buf, XATTR_NAME_LOV, 0,
1967                                            handle);
1968                 if (rc)
1969                         GOTO(out, rc);
1970         }
1971
1972         if (S_ISLNK(attr->la_mode)) {
1973                 const char *target_name = spec->u.sp_symname;
1974                 int sym_len = strlen(target_name);
1975                 const struct lu_buf *buf;
1976
1977                 buf = mdd_buf_get_const(env, target_name, sym_len);
1978                 rc = dt_declare_record_write(env, mdd_object_child(c),
1979                                              buf, 0, handle);
1980                 if (rc)
1981                         GOTO(out, rc);
1982         }
1983 out:
1984         return rc;
1985 }
1986
1987 static int mdd_declare_create(const struct lu_env *env, struct mdd_device *mdd,
1988                               struct mdd_object *p, struct mdd_object *c,
1989                               const struct lu_name *name,
1990                               struct lu_attr *attr,
1991                               struct thandle *handle,
1992                               const struct md_op_spec *spec,
1993                               struct linkea_data *ldata,
1994                               struct lu_buf *def_acl_buf,
1995                               struct lu_buf *acl_buf,
1996                               struct dt_allocation_hint *hint)
1997 {
1998         int rc;
1999
2000         rc = mdd_declare_object_create(env, mdd, p, c, attr, handle, spec,
2001                                        def_acl_buf, acl_buf, hint);
2002         if (rc)
2003                 GOTO(out, rc);
2004
2005         if (S_ISDIR(attr->la_mode)) {
2006                 rc = mdo_declare_ref_add(env, p, handle);
2007                 if (rc)
2008                         GOTO(out, rc);
2009         }
2010
2011         if (unlikely(spec->sp_cr_flags & MDS_OPEN_VOLATILE)) {
2012                 rc = orph_declare_index_insert(env, c, attr->la_mode, handle);
2013                 if (rc)
2014                         GOTO(out, rc);
2015         } else {
2016                 struct lu_attr  *la = &mdd_env_info(env)->mti_la_for_fix;
2017
2018                 rc = mdo_declare_index_insert(env, p, mdo2fid(c), name->ln_name,
2019                                               handle);
2020                 if (rc)
2021                         return rc;
2022                 rc = mdd_declare_links_add(env, c, handle, ldata);
2023                 if (rc)
2024                         return rc;
2025
2026                 *la = *attr;
2027                 la->la_valid = LA_CTIME | LA_MTIME;
2028                 rc = mdo_declare_attr_set(env, p, la, handle);
2029                 if (rc)
2030                         return rc;
2031
2032                 rc = mdd_declare_changelog_store(env, mdd, name, handle);
2033                 if (rc)
2034                         return rc;
2035         }
2036
2037         /* XXX: For remote create, it should indicate the remote RPC
2038          * will be sent after local transaction is finished, which
2039          * is not very nice, but it will be removed once we fully support
2040          * async update */
2041         if (mdd_object_remote(p) && handle->th_update != NULL)
2042                 handle->th_update->tu_sent_after_local_trans = 1;
2043 out:
2044         return rc;
2045 }
2046
2047 static int mdd_acl_init(const struct lu_env *env, struct mdd_object *pobj,
2048                         struct lu_attr *la, struct lu_buf *def_acl_buf,
2049                         struct lu_buf *acl_buf)
2050 {
2051         int     rc;
2052         ENTRY;
2053
2054         if (S_ISLNK(la->la_mode)) {
2055                 acl_buf->lb_len = 0;
2056                 def_acl_buf->lb_len = 0;
2057                 RETURN(0);
2058         }
2059
2060         mdd_read_lock(env, pobj, MOR_TGT_PARENT);
2061         rc = mdo_xattr_get(env, pobj, def_acl_buf,
2062                            XATTR_NAME_ACL_DEFAULT, BYPASS_CAPA);
2063         mdd_read_unlock(env, pobj);
2064         if (rc > 0) {
2065                 /* If there are default ACL, fix mode/ACL by default ACL */
2066                 def_acl_buf->lb_len = rc;
2067                 LASSERT(def_acl_buf->lb_len <= acl_buf->lb_len);
2068                 memcpy(acl_buf->lb_buf, def_acl_buf->lb_buf, rc);
2069                 acl_buf->lb_len = rc;
2070                 rc = __mdd_fix_mode_acl(env, acl_buf, &la->la_mode);
2071                 if (rc < 0)
2072                         RETURN(rc);
2073         } else if (rc == -ENODATA || rc == -EOPNOTSUPP) {
2074                 /* If there are no default ACL, fix mode by mask */
2075                 struct lu_ucred *uc = lu_ucred(env);
2076
2077                 /* The create triggered by MDT internal events, such as
2078                  * LFSCK reset, will not contain valid "uc". */
2079                 if (unlikely(uc != NULL))
2080                         la->la_mode &= ~uc->uc_umask;
2081                 rc = 0;
2082                 acl_buf->lb_len = 0;
2083                 def_acl_buf->lb_len = 0;
2084         }
2085
2086         RETURN(rc);
2087 }
2088
2089 /**
2090  * Create a metadata object and initialize it, set acl, xattr.
2091  **/
2092 static int mdd_object_create(const struct lu_env *env, struct mdd_object *pobj,
2093                              struct mdd_object *son, struct lu_attr *attr,
2094                              struct md_op_spec *spec, struct lu_buf *acl_buf,
2095                              struct lu_buf *def_acl_buf,
2096                              struct dt_allocation_hint *hint,
2097                              struct thandle *handle)
2098 {
2099         int                     rc;
2100
2101         mdd_write_lock(env, son, MOR_TGT_CHILD);
2102         rc = mdd_object_create_internal(env, NULL, son, attr, handle, spec,
2103                                         hint);
2104         if (rc)
2105                 GOTO(unlock, rc);
2106
2107         /* Note: In DNE phase I, for striped dir, though sub-stripes will be
2108          * created in declare phase, they also needs to be added to master
2109          * object as sub-directory entry. So it has to initialize the master
2110          * object, then set dir striped EA.(in mdo_xattr_set) */
2111         rc = mdd_object_initialize(env, mdo2fid(pobj), son, attr, handle,
2112                                    spec);
2113         if (rc != 0)
2114                 GOTO(err_destroy, rc);
2115
2116         /*
2117          * in case of replay we just set LOVEA provided by the client
2118          * XXX: I think it would be interesting to try "old" way where
2119          *      MDT calls this xattr_set(LOV) in a different transaction.
2120          *      probably this way we code can be made better.
2121          */
2122
2123         /* During creation, there are only a few cases we need do xattr_set to
2124          * create stripes.
2125          * 1. regular file: see comments above.
2126          * 2. create striped directory with provided stripeEA.
2127          * 3. create striped directory because inherit default layout from the
2128          * parent. */
2129         if (spec->no_create ||
2130             (S_ISREG(attr->la_mode) && spec->sp_cr_flags & MDS_OPEN_HAS_EA) ||
2131             S_ISDIR(attr->la_mode)) {
2132                 const struct lu_buf *buf;
2133
2134                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
2135                                         spec->u.sp_ea.eadatalen);
2136                 rc = mdo_xattr_set(env, son, buf,
2137                                    S_ISDIR(attr->la_mode) ? XATTR_NAME_LMV :
2138                                                             XATTR_NAME_LOV, 0,
2139                                    handle, BYPASS_CAPA);
2140                 if (rc != 0)
2141                         GOTO(err_destroy, rc);
2142         }
2143
2144 #ifdef CONFIG_FS_POSIX_ACL
2145         if (def_acl_buf != NULL && def_acl_buf->lb_len > 0 &&
2146             S_ISDIR(attr->la_mode)) {
2147                 /* set default acl */
2148                 rc = mdo_xattr_set(env, son, def_acl_buf,
2149                                    XATTR_NAME_ACL_DEFAULT, 0,
2150                                    handle, BYPASS_CAPA);
2151                 if (rc)
2152                         GOTO(err_destroy, rc);
2153         }
2154         /* set its own acl */
2155         if (acl_buf != NULL && acl_buf->lb_len > 0) {
2156                 rc = mdo_xattr_set(env, son, acl_buf,
2157                                    XATTR_NAME_ACL_ACCESS,
2158                                    0, handle, BYPASS_CAPA);
2159                 if (rc)
2160                         GOTO(err_destroy, rc);
2161         }
2162 #endif
2163
2164         if (S_ISLNK(attr->la_mode)) {
2165                 struct lu_ucred  *uc = lu_ucred_assert(env);
2166                 struct dt_object *dt = mdd_object_child(son);
2167                 const char *target_name = spec->u.sp_symname;
2168                 int sym_len = strlen(target_name);
2169                 const struct lu_buf *buf;
2170                 loff_t pos = 0;
2171
2172                 buf = mdd_buf_get_const(env, target_name, sym_len);
2173                 rc = dt->do_body_ops->dbo_write(env, dt, buf, &pos, handle,
2174                                                 mdd_object_capa(env, son),
2175                                                 uc->uc_cap &
2176                                                 CFS_CAP_SYS_RESOURCE_MASK);
2177
2178                 if (rc == sym_len)
2179                         rc = 0;
2180                 else
2181                         GOTO(err_initlized, rc = -EFAULT);
2182         }
2183
2184 err_initlized:
2185         if (unlikely(rc != 0)) {
2186                 int rc2;
2187                 if (S_ISDIR(attr->la_mode)) {
2188                         /* Drop the reference, no need to delete "."/"..",
2189                          * because the object to be destroied directly. */
2190                         rc2 = mdo_ref_del(env, son, handle);
2191                         if (rc2 != 0)
2192                                 GOTO(unlock, rc);
2193                 }
2194                 rc2 = mdo_ref_del(env, son, handle);
2195                 if (rc2 != 0)
2196                         GOTO(unlock, rc);
2197 err_destroy:
2198                 mdo_destroy(env, son, handle);
2199         }
2200 unlock:
2201         mdd_write_unlock(env, son);
2202         RETURN(rc);
2203 }
2204
2205 /*
2206  * Create object and insert it into namespace.
2207  */
2208 static int mdd_create(const struct lu_env *env, struct md_object *pobj,
2209                       const struct lu_name *lname, struct md_object *child,
2210                       struct md_op_spec *spec, struct md_attr* ma)
2211 {
2212         struct mdd_thread_info  *info = mdd_env_info(env);
2213         struct lu_attr          *la = &info->mti_la_for_fix;
2214         struct mdd_object       *mdd_pobj = md2mdd_obj(pobj);
2215         struct mdd_object       *son = md2mdd_obj(child);
2216         struct mdd_device       *mdd = mdo2mdd(pobj);
2217         struct lu_attr          *attr = &ma->ma_attr;
2218         struct thandle          *handle;
2219         struct lu_attr          *pattr = &info->mti_pattr;
2220         struct lu_buf           acl_buf;
2221         struct lu_buf           def_acl_buf;
2222         struct linkea_data      *ldata = &info->mti_link_data;
2223         const char              *name = lname->ln_name;
2224         struct dt_allocation_hint *hint = &mdd_env_info(env)->mti_hint;
2225         int                      rc;
2226         int                      rc2;
2227         ENTRY;
2228
2229         /*
2230          * Two operations have to be performed:
2231          *
2232          *  - an allocation of a new object (->do_create()), and
2233          *
2234          *  - an insertion into a parent index (->dio_insert()).
2235          *
2236          * Due to locking, operation order is not important, when both are
2237          * successful, *but* error handling cases are quite different:
2238          *
2239          *  - if insertion is done first, and following object creation fails,
2240          *  insertion has to be rolled back, but this operation might fail
2241          *  also leaving us with dangling index entry.
2242          *
2243          *  - if creation is done first, is has to be undone if insertion
2244          *  fails, leaving us with leaked space, which is neither good, nor
2245          *  fatal.
2246          *
2247          * It seems that creation-first is simplest solution, but it is
2248          * sub-optimal in the frequent
2249          *
2250          *         $ mkdir foo
2251          *         $ mkdir foo
2252          *
2253          * case, because second mkdir is bound to create object, only to
2254          * destroy it immediately.
2255          *
2256          * To avoid this follow local file systems that do double lookup:
2257          *
2258          *     0. lookup -> -EEXIST (mdd_create_sanity_check())
2259          *
2260          *     1. create            (mdd_object_create_internal())
2261          *
2262          *     2. insert            (__mdd_index_insert(), lookup again)
2263          */
2264
2265         rc = mdd_la_get(env, mdd_pobj, pattr, BYPASS_CAPA);
2266         if (rc != 0)
2267                 RETURN(rc);
2268
2269         /* Sanity checks before big job. */
2270         rc = mdd_create_sanity_check(env, pobj, pattr, lname, attr, spec);
2271         if (rc)
2272                 RETURN(rc);
2273
2274         if (OBD_FAIL_CHECK(OBD_FAIL_MDS_DQACQ_NET))
2275                 GOTO(out_free, rc = -EINPROGRESS);
2276
2277         handle = mdd_trans_create(env, mdd);
2278         if (IS_ERR(handle))
2279                 GOTO(out_free, rc = PTR_ERR(handle));
2280
2281         acl_buf.lb_buf = info->mti_xattr_buf;
2282         acl_buf.lb_len = sizeof(info->mti_xattr_buf);
2283         def_acl_buf.lb_buf = info->mti_key;
2284         def_acl_buf.lb_len = sizeof(info->mti_key);
2285         rc = mdd_acl_init(env, mdd_pobj, attr, &def_acl_buf, &acl_buf);
2286         if (rc < 0)
2287                 GOTO(out_stop, rc);
2288
2289         mdd_object_make_hint(env, mdd_pobj, son, attr, spec, hint);
2290
2291         memset(ldata, 0, sizeof(*ldata));
2292         rc = mdd_linkea_prepare(env, son, NULL, NULL,
2293                                 mdd_object_fid(mdd_pobj),
2294                                 lname, 1, 0, ldata);
2295
2296         rc = mdd_declare_create(env, mdd, mdd_pobj, son, lname, attr,
2297                                 handle, spec, ldata, &def_acl_buf, &acl_buf,
2298                                 hint);
2299         if (rc)
2300                 GOTO(out_stop, rc);
2301
2302         rc = mdd_trans_start(env, mdd, handle);
2303         if (rc)
2304                 GOTO(out_stop, rc);
2305
2306         rc = mdd_object_create(env, mdd_pobj, son, attr, spec, &acl_buf,
2307                                &def_acl_buf, hint, handle);
2308         if (rc != 0)
2309                 GOTO(out_stop, rc);
2310
2311         if (unlikely(spec->sp_cr_flags & MDS_OPEN_VOLATILE)) {
2312                 mdd_write_lock(env, son, MOR_TGT_CHILD);
2313                 rc = __mdd_orphan_add(env, son, handle);
2314                 GOTO(out_volatile, rc);
2315         } else {
2316                 rc = __mdd_index_insert(env, mdd_pobj, mdo2fid(son),
2317                                         name, S_ISDIR(attr->la_mode), handle,
2318                                         mdd_object_capa(env, mdd_pobj));
2319                 if (rc != 0)
2320                         GOTO(err_created, rc);
2321
2322                 mdd_links_add(env, son, mdo2fid(mdd_pobj), lname, handle,
2323                               ldata, 1);
2324
2325                 /* update parent directory mtime/ctime */
2326                 *la = *attr;
2327                 la->la_valid = LA_CTIME | LA_MTIME;
2328                 rc = mdd_update_time(env, mdd_pobj, pattr, la, handle);
2329                 if (rc)
2330                         GOTO(err_insert, rc);
2331         }
2332
2333         EXIT;
2334 err_insert:
2335         if (rc != 0) {
2336                 int rc2;
2337
2338                 if (spec->sp_cr_flags & MDS_OPEN_VOLATILE)
2339                         rc2 = __mdd_orphan_del(env, son, handle);
2340                 else
2341                         rc2 = __mdd_index_delete(env, mdd_pobj, name,
2342                                                  S_ISDIR(attr->la_mode),
2343                                                  handle, BYPASS_CAPA);
2344                 if (rc2 != 0)
2345                         goto out_stop;
2346
2347 err_created:
2348                 mdd_write_lock(env, son, MOR_TGT_CHILD);
2349                 if (S_ISDIR(attr->la_mode)) {
2350                         /* Drop the reference, no need to delete "."/"..",
2351                          * because the object is to be destroyed directly. */
2352                         rc2 = mdo_ref_del(env, son, handle);
2353                         if (rc2 != 0) {
2354                                 mdd_write_unlock(env, son);
2355                                 goto out_stop;
2356                         }
2357                 }
2358 out_volatile:
2359                 /* For volatile files drop one link immediately, since there is
2360                  * no filename in the namespace, and save any error returned. */
2361                 rc2 = mdo_ref_del(env, son, handle);
2362                 if (rc2 != 0) {
2363                         mdd_write_unlock(env, son);
2364                         if (unlikely(rc == 0))
2365                                 rc = rc2;
2366                         goto out_stop;
2367                 }
2368
2369                 /* Don't destroy the volatile object on success */
2370                 if (likely(rc != 0))
2371                         mdo_destroy(env, son, handle);
2372                 mdd_write_unlock(env, son);
2373         }
2374
2375         if (rc == 0 && fid_is_namespace_visible(mdo2fid(son)) &&
2376             likely((spec->sp_cr_flags & MDS_OPEN_VOLATILE) == 0))
2377                 rc = mdd_changelog_ns_store(env, mdd,
2378                                 S_ISDIR(attr->la_mode) ? CL_MKDIR :
2379                                 S_ISREG(attr->la_mode) ? CL_CREATE :
2380                                 S_ISLNK(attr->la_mode) ? CL_SOFTLINK : CL_MKNOD,
2381                                 0, son, mdd_pobj, lname, handle);
2382 out_stop:
2383         rc2 = mdd_trans_stop(env, mdd, rc, handle);
2384         if (rc == 0)
2385                 rc = rc2;
2386 out_free:
2387         if (ldata->ld_buf && ldata->ld_buf->lb_len > OBD_ALLOC_BIG)
2388                 /* if we vmalloced a large buffer drop it */
2389                 lu_buf_free(ldata->ld_buf);
2390
2391         /* The child object shouldn't be cached anymore */
2392         if (rc)
2393                 set_bit(LU_OBJECT_HEARD_BANSHEE,
2394                         &child->mo_lu.lo_header->loh_flags);
2395         return rc;
2396 }
2397
2398 /*
2399  * Get locks on parents in proper order
2400  * RETURN: < 0 - error, rename_order if successful
2401  */
2402 enum rename_order {
2403         MDD_RN_SAME,
2404         MDD_RN_SRCTGT,
2405         MDD_RN_TGTSRC
2406 };
2407
2408 static int mdd_rename_order(const struct lu_env *env,
2409                             struct mdd_device *mdd,
2410                             struct mdd_object *src_pobj,
2411                             const struct lu_attr *pattr,
2412                             struct mdd_object *tgt_pobj)
2413 {
2414         /* order of locking, 1 - tgt-src, 0 - src-tgt*/
2415         int rc;
2416         ENTRY;
2417
2418         if (src_pobj == tgt_pobj)
2419                 RETURN(MDD_RN_SAME);
2420
2421         /* compared the parent child relationship of src_p&tgt_p */
2422         if (lu_fid_eq(&mdd->mdd_root_fid, mdo2fid(src_pobj))){
2423                 rc = MDD_RN_SRCTGT;
2424         } else if (lu_fid_eq(&mdd->mdd_root_fid, mdo2fid(tgt_pobj))) {
2425                 rc = MDD_RN_TGTSRC;
2426         } else {
2427                 rc = mdd_is_parent(env, mdd, src_pobj, pattr, mdo2fid(tgt_pobj),
2428                                    NULL);
2429                 if (rc == -EREMOTE)
2430                         rc = 0;
2431
2432                 if (rc == 1)
2433                         rc = MDD_RN_TGTSRC;
2434                 else if (rc == 0)
2435                         rc = MDD_RN_SRCTGT;
2436         }
2437
2438         RETURN(rc);
2439 }
2440
2441 /* has not mdd_write{read}_lock on any obj yet. */
2442 static int mdd_rename_sanity_check(const struct lu_env *env,
2443                                    struct mdd_object *src_pobj,
2444                                    const struct lu_attr *pattr,
2445                                    struct mdd_object *tgt_pobj,
2446                                    const struct lu_attr *tpattr,
2447                                    struct mdd_object *sobj,
2448                                    const struct lu_attr *cattr,
2449                                    struct mdd_object *tobj,
2450                                    const struct lu_attr *tattr)
2451 {
2452         int rc = 0;
2453         ENTRY;
2454
2455         /* XXX: when get here, sobj must NOT be NULL,
2456          * the other case has been processed in cld_rename
2457          * before mdd_rename and enable MDS_PERM_BYPASS. */
2458         LASSERT(sobj);
2459
2460         rc = mdd_may_delete(env, src_pobj, pattr, sobj, cattr, NULL, 1, 0);
2461         if (rc)
2462                 RETURN(rc);
2463
2464         /* XXX: when get here, "tobj == NULL" means tobj must
2465          * NOT exist (neither on remote MDS, such case has been
2466          * processed in cld_rename before mdd_rename and enable
2467          * MDS_PERM_BYPASS).
2468          * So check may_create, but not check may_unlink. */
2469         if (!tobj)
2470                 rc = mdd_may_create(env, tgt_pobj, tpattr, NULL,
2471                                     (src_pobj != tgt_pobj), false);
2472         else
2473                 rc = mdd_may_delete(env, tgt_pobj, tpattr, tobj, tattr, cattr,
2474                                     (src_pobj != tgt_pobj), 1);
2475
2476         if (!rc && !tobj && (src_pobj != tgt_pobj) && S_ISDIR(cattr->la_mode))
2477                 rc = __mdd_may_link(env, tgt_pobj, tpattr);
2478
2479         RETURN(rc);
2480 }
2481
2482 static int mdd_declare_rename(const struct lu_env *env,
2483                               struct mdd_device *mdd,
2484                               struct mdd_object *mdd_spobj,
2485                               struct mdd_object *mdd_tpobj,
2486                               struct mdd_object *mdd_sobj,
2487                               struct mdd_object *mdd_tobj,
2488                               const struct lu_name *tname,
2489                               const struct lu_name *sname,
2490                               struct md_attr *ma,
2491                               struct linkea_data *ldata,
2492                               struct thandle *handle)
2493 {
2494         struct lu_attr    *la = &mdd_env_info(env)->mti_la_for_fix;
2495         int rc;
2496
2497         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
2498         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
2499
2500         LASSERT(mdd_spobj);
2501         LASSERT(mdd_tpobj);
2502         LASSERT(mdd_sobj);
2503
2504         /* name from source dir */
2505         rc = mdo_declare_index_delete(env, mdd_spobj, sname->ln_name, handle);
2506         if (rc)
2507                 return rc;
2508
2509         /* .. from source child */
2510         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
2511                 /* source child can be directory,
2512                  * counted by source dir's nlink */
2513                 rc = mdo_declare_ref_del(env, mdd_spobj, handle);
2514                 if (rc)
2515                         return rc;
2516                 if (mdd_spobj != mdd_tpobj) {
2517                         rc = mdo_declare_index_delete(env, mdd_sobj, dotdot,
2518                                                       handle);
2519                         if (rc)
2520                                 return rc;
2521
2522                         rc = mdo_declare_index_insert(env, mdd_sobj,
2523                                                       mdo2fid(mdd_tpobj),
2524                                                       dotdot, handle);
2525                         if (rc)
2526                                 return rc;
2527                 }
2528                 /* new target child can be directory,
2529                  * counted by target dir's nlink */
2530                 rc = mdo_declare_ref_add(env, mdd_tpobj, handle);
2531                 if (rc)
2532                         return rc;
2533         }
2534
2535         la->la_valid = LA_CTIME | LA_MTIME;
2536         rc = mdo_declare_attr_set(env, mdd_spobj, la, handle);
2537         if (rc != 0)
2538                 return rc;
2539
2540         rc = mdo_declare_attr_set(env, mdd_tpobj, la, handle);
2541         if (rc != 0)
2542                 return rc;
2543
2544         la->la_valid = LA_CTIME;
2545         rc = mdo_declare_attr_set(env, mdd_sobj, la, handle);
2546         if (rc)
2547                 return rc;
2548
2549         rc = mdd_declare_links_add(env, mdd_sobj, handle, ldata);
2550         if (rc)
2551                 return rc;
2552
2553         /* new name */
2554         rc = mdo_declare_index_insert(env, mdd_tpobj, mdo2fid(mdd_sobj),
2555                         tname->ln_name, handle);
2556         if (rc)
2557                 return rc;
2558
2559         /* name from target dir (old name), we declare it unconditionally
2560          * as mdd_rename() calls delete unconditionally as well. so just
2561          * to balance declarations vs calls to change ... */
2562         rc = mdo_declare_index_delete(env, mdd_tpobj, tname->ln_name, handle);
2563         if (rc)
2564                 return rc;
2565
2566         if (mdd_tobj && mdd_object_exists(mdd_tobj)) {
2567                 /* delete target child in target parent directory */
2568                 rc = mdo_declare_ref_del(env, mdd_tobj, handle);
2569                 if (rc)
2570                         return rc;
2571
2572                 if (S_ISDIR(mdd_object_type(mdd_tobj))) {
2573                         /* target child can be directory,
2574                          * delete "." reference in target child directory */
2575                         rc = mdo_declare_ref_del(env, mdd_tobj, handle);
2576                         if (rc)
2577                                 return rc;
2578
2579                         /* delete ".." reference in target parent directory */
2580                         rc = mdo_declare_ref_del(env, mdd_tpobj, handle);
2581                         if (rc)
2582                                 return rc;
2583                 }
2584
2585                 la->la_valid = LA_CTIME;
2586                 rc = mdo_declare_attr_set(env, mdd_tobj, la, handle);
2587                 if (rc)
2588                         return rc;
2589
2590                 rc = mdd_declare_finish_unlink(env, mdd_tobj, handle);
2591                 if (rc)
2592                         return rc;
2593         }
2594
2595         rc = mdd_declare_changelog_ext_store(env, mdd, tname, sname, handle);
2596         if (rc)
2597                 return rc;
2598
2599         return rc;
2600 }
2601
2602 /* src object can be remote that is why we use only fid and type of object */
2603 static int mdd_rename(const struct lu_env *env,
2604                       struct md_object *src_pobj, struct md_object *tgt_pobj,
2605                       const struct lu_fid *lf, const struct lu_name *lsname,
2606                       struct md_object *tobj, const struct lu_name *ltname,
2607                       struct md_attr *ma)
2608 {
2609         const char *sname = lsname->ln_name;
2610         const char *tname = ltname->ln_name;
2611         struct lu_attr    *la = &mdd_env_info(env)->mti_la_for_fix;
2612         struct mdd_object *mdd_spobj = md2mdd_obj(src_pobj); /* source parent */
2613         struct mdd_object *mdd_tpobj = md2mdd_obj(tgt_pobj);
2614         struct mdd_device *mdd = mdo2mdd(src_pobj);
2615         struct mdd_object *mdd_sobj = NULL;                  /* source object */
2616         struct mdd_object *mdd_tobj = NULL;
2617         struct lu_attr *cattr = MDD_ENV_VAR(env, cattr);
2618         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
2619         struct lu_attr *tattr = MDD_ENV_VAR(env, tattr);
2620         struct lu_attr *tpattr = MDD_ENV_VAR(env, tpattr);
2621         struct thandle *handle;
2622         struct linkea_data  *ldata = &mdd_env_info(env)->mti_link_data;
2623         const struct lu_fid *tpobj_fid = mdo2fid(mdd_tpobj);
2624         const struct lu_fid *spobj_fid = mdo2fid(mdd_spobj);
2625         bool is_dir;
2626         bool tobj_ref = 0;
2627         bool tobj_locked = 0;
2628         unsigned cl_flags = 0;
2629         int rc, rc2;
2630         ENTRY;
2631
2632         if (tobj)
2633                 mdd_tobj = md2mdd_obj(tobj);
2634
2635         mdd_sobj = mdd_object_find(env, mdd, lf);
2636
2637         rc = mdd_la_get(env, mdd_sobj, cattr, BYPASS_CAPA);
2638         if (rc)
2639                 GOTO(out_pending, rc);
2640
2641         rc = mdd_la_get(env, mdd_spobj, pattr, BYPASS_CAPA);
2642         if (rc)
2643                 GOTO(out_pending, rc);
2644
2645         if (mdd_tobj) {
2646                 rc = mdd_la_get(env, mdd_tobj, tattr, BYPASS_CAPA);
2647                 if (rc)
2648                         GOTO(out_pending, rc);
2649         }
2650
2651         rc = mdd_la_get(env, mdd_tpobj, tpattr, BYPASS_CAPA);
2652         if (rc)
2653                 GOTO(out_pending, rc);
2654
2655         rc = mdd_rename_sanity_check(env, mdd_spobj, pattr, mdd_tpobj, tpattr,
2656                                      mdd_sobj, cattr, mdd_tobj, tattr);
2657         if (rc)
2658                 GOTO(out_pending, rc);
2659
2660         rc = mdd_name_check(mdd, ltname);
2661         if (rc < 0)
2662                 GOTO(out_pending, rc);
2663
2664         handle = mdd_trans_create(env, mdd);
2665         if (IS_ERR(handle))
2666                 GOTO(out_pending, rc = PTR_ERR(handle));
2667
2668         memset(ldata, 0, sizeof(*ldata));
2669         mdd_linkea_prepare(env, mdd_sobj, NULL, NULL, mdd_object_fid(mdd_tpobj),
2670                            ltname, 1, 0, ldata);
2671         rc = mdd_declare_rename(env, mdd, mdd_spobj, mdd_tpobj, mdd_sobj,
2672                                 mdd_tobj, lsname, ltname, ma, ldata, handle);
2673         if (rc)
2674                 GOTO(stop, rc);
2675
2676         rc = mdd_trans_start(env, mdd, handle);
2677         if (rc)
2678                 GOTO(stop, rc);
2679
2680         /* FIXME: Should consider tobj and sobj too in rename_lock. */
2681         rc = mdd_rename_order(env, mdd, mdd_spobj, pattr, mdd_tpobj);
2682         if (rc < 0)
2683                 GOTO(cleanup_unlocked, rc);
2684
2685         is_dir = S_ISDIR(cattr->la_mode);
2686
2687         /* Remove source name from source directory */
2688         rc = __mdd_index_delete(env, mdd_spobj, sname, is_dir, handle,
2689                                 mdd_object_capa(env, mdd_spobj));
2690         if (rc)
2691                 GOTO(cleanup, rc);
2692
2693         /* "mv dir1 dir2" needs "dir1/.." link update */
2694         if (is_dir && mdd_sobj && !lu_fid_eq(spobj_fid, tpobj_fid)) {
2695                 rc = __mdd_index_delete_only(env, mdd_sobj, dotdot, handle,
2696                                         mdd_object_capa(env, mdd_sobj));
2697                 if (rc)
2698                         GOTO(fixup_spobj2, rc);
2699
2700                 rc = __mdd_index_insert_only(env, mdd_sobj, tpobj_fid, dotdot,
2701                                       handle, mdd_object_capa(env, mdd_sobj));
2702                 if (rc)
2703                         GOTO(fixup_spobj, rc);
2704         }
2705
2706         /* Remove target name from target directory
2707          * Here tobj can be remote one, so we do index_delete unconditionally
2708          * and -ENOENT is allowed.
2709          */
2710         rc = __mdd_index_delete(env, mdd_tpobj, tname, is_dir, handle,
2711                                 mdd_object_capa(env, mdd_tpobj));
2712         if (rc != 0) {
2713                 if (mdd_tobj) {
2714                         /* tname might been renamed to something else */
2715                         GOTO(fixup_spobj, rc);
2716                 }
2717                 if (rc != -ENOENT)
2718                         GOTO(fixup_spobj, rc);
2719         }
2720
2721         /* Insert new fid with target name into target dir */
2722         rc = __mdd_index_insert(env, mdd_tpobj, lf, tname, is_dir, handle,
2723                                 mdd_object_capa(env, mdd_tpobj));
2724         if (rc)
2725                 GOTO(fixup_tpobj, rc);
2726
2727         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
2728         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
2729
2730         /* XXX: mdd_sobj must be local one if it is NOT NULL. */
2731         if (mdd_sobj) {
2732                 la->la_valid = LA_CTIME;
2733                 rc = mdd_update_time(env, mdd_sobj, cattr, la, handle);
2734                 if (rc)
2735                         GOTO(fixup_tpobj, rc);
2736         }
2737
2738         /* Remove old target object
2739          * For tobj is remote case cmm layer has processed
2740          * and set tobj to NULL then. So when tobj is NOT NULL,
2741          * it must be local one.
2742          */
2743         if (tobj && mdd_object_exists(mdd_tobj)) {
2744                 mdd_write_lock(env, mdd_tobj, MOR_TGT_CHILD);
2745                 tobj_locked = 1;
2746                 if (mdd_is_dead_obj(mdd_tobj)) {
2747                         /* shld not be dead, something is wrong */
2748                         CERROR("tobj is dead, something is wrong\n");
2749                         rc = -EINVAL;
2750                         goto cleanup;
2751                 }
2752                 mdo_ref_del(env, mdd_tobj, handle);
2753
2754                 /* Remove dot reference. */
2755                 if (S_ISDIR(tattr->la_mode))
2756                         mdo_ref_del(env, mdd_tobj, handle);
2757                 tobj_ref = 1;
2758
2759                 /* fetch updated nlink */
2760                 rc = mdd_la_get(env, mdd_tobj, tattr, BYPASS_CAPA);
2761                 if (rc != 0) {
2762                         CERROR("%s: Failed to get nlink for tobj "
2763                                 DFID": rc = %d\n",
2764                                 mdd2obd_dev(mdd)->obd_name,
2765                                 PFID(tpobj_fid), rc);
2766                         GOTO(fixup_tpobj, rc);
2767                 }
2768
2769                 la->la_valid = LA_CTIME;
2770                 rc = mdd_update_time(env, mdd_tobj, tattr, la, handle);
2771                 if (rc != 0) {
2772                         CERROR("%s: Failed to set ctime for tobj "
2773                                 DFID": rc = %d\n",
2774                                 mdd2obd_dev(mdd)->obd_name,
2775                                 PFID(tpobj_fid), rc);
2776                         GOTO(fixup_tpobj, rc);
2777                 }
2778
2779                 /* XXX: this transfer to ma will be removed with LOD/OSP */
2780                 ma->ma_attr = *tattr;
2781                 ma->ma_valid |= MA_INODE;
2782                 rc = mdd_finish_unlink(env, mdd_tobj, ma, mdd_tpobj, ltname,
2783                                        handle);
2784                 if (rc != 0) {
2785                         CERROR("%s: Failed to unlink tobj "
2786                                 DFID": rc = %d\n",
2787                                 mdd2obd_dev(mdd)->obd_name,
2788                                 PFID(tpobj_fid), rc);
2789                         GOTO(fixup_tpobj, rc);
2790                 }
2791
2792                 /* fetch updated nlink */
2793                 rc = mdd_la_get(env, mdd_tobj, tattr, BYPASS_CAPA);
2794                 if (rc != 0) {
2795                         CERROR("%s: Failed to get nlink for tobj "
2796                                 DFID": rc = %d\n",
2797                                 mdd2obd_dev(mdd)->obd_name,
2798                                 PFID(tpobj_fid), rc);
2799                         GOTO(fixup_tpobj, rc);
2800                 }
2801                 /* XXX: this transfer to ma will be removed with LOD/OSP */
2802                 ma->ma_attr = *tattr;
2803                 ma->ma_valid |= MA_INODE;
2804
2805                 if (tattr->la_nlink == 0) {
2806                         cl_flags |= CLF_RENAME_LAST;
2807                         if (mdd_hsm_archive_exists(env, mdd_tobj, ma))
2808                                 cl_flags |= CLF_RENAME_LAST_EXISTS;
2809                 }
2810         }
2811
2812         la->la_valid = LA_CTIME | LA_MTIME;
2813         rc = mdd_update_time(env, mdd_spobj, pattr, la, handle);
2814         if (rc)
2815                 GOTO(fixup_tpobj, rc);
2816
2817         if (mdd_spobj != mdd_tpobj) {
2818                 la->la_valid = LA_CTIME | LA_MTIME;
2819                 rc = mdd_update_time(env, mdd_tpobj, tpattr, la, handle);
2820         }
2821
2822         if (rc == 0 && mdd_sobj) {
2823                 mdd_write_lock(env, mdd_sobj, MOR_SRC_CHILD);
2824                 rc = mdd_links_rename(env, mdd_sobj, mdo2fid(mdd_spobj), lsname,
2825                                       mdo2fid(mdd_tpobj), ltname, handle, NULL,
2826                                       0, 0);
2827                 if (rc == -ENOENT)
2828                         /* Old files might not have EA entry */
2829                         mdd_links_add(env, mdd_sobj, mdo2fid(mdd_spobj),
2830                                       lsname, handle, NULL, 0);
2831                 mdd_write_unlock(env, mdd_sobj);
2832                 /* We don't fail the transaction if the link ea can't be
2833                    updated -- fid2path will use alternate lookup method. */
2834                 rc = 0;
2835         }
2836
2837         EXIT;
2838
2839 fixup_tpobj:
2840         if (rc) {
2841                 rc2 = __mdd_index_delete(env, mdd_tpobj, tname, is_dir, handle,
2842                                          BYPASS_CAPA);
2843                 if (rc2)
2844                         CWARN("tp obj fix error %d\n",rc2);
2845
2846                 if (mdd_tobj && mdd_object_exists(mdd_tobj) &&
2847                     !mdd_is_dead_obj(mdd_tobj)) {
2848                         if (tobj_ref) {
2849                                 mdo_ref_add(env, mdd_tobj, handle);
2850                                 if (is_dir)
2851                                         mdo_ref_add(env, mdd_tobj, handle);
2852                         }
2853
2854                         rc2 = __mdd_index_insert(env, mdd_tpobj,
2855                                          mdo2fid(mdd_tobj), tname,
2856                                          is_dir, handle,
2857                                          BYPASS_CAPA);
2858
2859                         if (rc2)
2860                                 CWARN("tp obj fix error %d\n",rc2);
2861                 }
2862         }
2863
2864 fixup_spobj:
2865         if (rc && is_dir && mdd_sobj && mdd_spobj != mdd_tpobj) {
2866                 rc2 = __mdd_index_delete_only(env, mdd_sobj, dotdot, handle,
2867                                               BYPASS_CAPA);
2868
2869                 if (rc2)
2870                         CWARN("%s: sp obj dotdot delete error: rc = %d\n",
2871                                mdd2obd_dev(mdd)->obd_name, rc2);
2872
2873
2874                 rc2 = __mdd_index_insert_only(env, mdd_sobj, spobj_fid,
2875                                               dotdot, handle, BYPASS_CAPA);
2876                 if (rc2)
2877                         CWARN("%s: sp obj dotdot insert error: rc = %d\n",
2878                               mdd2obd_dev(mdd)->obd_name, rc2);
2879         }
2880
2881 fixup_spobj2:
2882         if (rc) {
2883                 rc2 = __mdd_index_insert(env, mdd_spobj,
2884                                          lf, sname, is_dir, handle, BYPASS_CAPA);
2885                 if (rc2)
2886                         CWARN("sp obj fix error %d\n",rc2);
2887         }
2888 cleanup:
2889         if (tobj_locked)
2890                 mdd_write_unlock(env, mdd_tobj);
2891 cleanup_unlocked:
2892         if (rc == 0)
2893                 rc = mdd_changelog_ext_ns_store(env, mdd, CL_RENAME, cl_flags,
2894                                                 mdd_tobj, tpobj_fid, lf,
2895                                                 spobj_fid, ltname, lsname,
2896                                                 handle);
2897
2898 stop:
2899         mdd_trans_stop(env, mdd, rc, handle);
2900 out_pending:
2901         mdd_object_put(env, mdd_sobj);
2902         return rc;
2903 }
2904
2905 /**
2906  * During migration once the parent FID has been changed,
2907  * we need update the parent FID in linkea.
2908  **/
2909 static int mdd_linkea_update_child_internal(const struct lu_env *env,
2910                                             struct mdd_object *parent,
2911                                             struct mdd_object *child,
2912                                             const char *name, int namelen,
2913                                             struct thandle *handle,
2914                                             bool declare)
2915 {
2916         struct mdd_thread_info  *info = mdd_env_info(env);
2917         struct linkea_data      ldata = {0};
2918         struct lu_buf           *buf = &info->mti_link_buf;
2919         int                     count;
2920         int                     rc = 0;
2921
2922         ENTRY;
2923
2924         buf = lu_buf_check_and_alloc(buf, PATH_MAX);
2925         if (buf->lb_buf == NULL)
2926                 RETURN(-ENOMEM);
2927
2928         ldata.ld_buf = buf;
2929         rc = mdd_links_read(env, child, &ldata);
2930         if (rc != 0) {
2931                 if (rc == -ENOENT || rc == -ENODATA)
2932                         rc = 0;
2933                 RETURN(rc);
2934         }
2935
2936         LASSERT(ldata.ld_leh != NULL);
2937         ldata.ld_lee = (struct link_ea_entry *)(ldata.ld_leh + 1);
2938         for (count = 0; count < ldata.ld_leh->leh_reccount; count++) {
2939                 struct mdd_device *mdd = mdo2mdd(&child->mod_obj);
2940                 struct lu_name lname;
2941                 struct lu_fid  fid;
2942
2943                 linkea_entry_unpack(ldata.ld_lee, &ldata.ld_reclen,
2944                                     &lname, &fid);
2945
2946                 if (strncmp(lname.ln_name, name, namelen) != 0 ||
2947                     lu_fid_eq(&fid, mdd_object_fid(parent))) {
2948                         ldata.ld_lee = (struct link_ea_entry *)
2949                                        ((char *)ldata.ld_lee +
2950                                         ldata.ld_reclen);
2951                         continue;
2952                 }
2953
2954                 CDEBUG(D_INFO, "%s: update "DFID" with %.*s:"DFID"\n",
2955                        mdd2obd_dev(mdd)->obd_name, PFID(mdd_object_fid(child)),
2956                        lname.ln_namelen, lname.ln_name,
2957                        PFID(mdd_object_fid(parent)));
2958                 /* update to the new parent fid */
2959                 linkea_entry_pack(ldata.ld_lee, &lname,
2960                                   mdd_object_fid(parent));
2961                 if (declare)
2962                         rc = mdd_declare_links_add(env, child, handle, &ldata);
2963                 else
2964                         rc = mdd_links_write(env, child, &ldata, handle);
2965                 break;
2966         }
2967         RETURN(rc);
2968 }
2969
2970 static int mdd_linkea_declare_update_child(const struct lu_env *env,
2971                                            struct mdd_object *parent,
2972                                            struct mdd_object *child,
2973                                            const char *name, int namelen,
2974                                            struct thandle *handle)
2975 {
2976         return mdd_linkea_update_child_internal(env, parent, child, name,
2977                                                 namelen, handle, true);
2978 }
2979
2980 static int mdd_linkea_update_child(const struct lu_env *env,
2981                                    struct mdd_object *parent,
2982                                    struct mdd_object *child,
2983                                    const char *name, int namelen,
2984                                    struct thandle *handle)
2985 {
2986         return mdd_linkea_update_child_internal(env, parent, child, name,
2987                                                 namelen, handle, false);
2988 }
2989
2990 static int mdd_update_linkea_internal(const struct lu_env *env,
2991                                       struct mdd_object *mdd_pobj,
2992                                       struct mdd_object *mdd_sobj,
2993                                       struct mdd_object *mdd_tobj,
2994                                       const struct lu_name *child_name,
2995                                       struct thandle *handle,
2996                                       int declare)
2997 {
2998         struct mdd_thread_info  *info = mdd_env_info(env);
2999         struct linkea_data      *ldata = &info->mti_link_data;
3000         int                     count;
3001         int                     rc = 0;
3002         ENTRY;
3003
3004         rc = mdd_links_read(env, mdd_sobj, ldata);
3005         if (rc != 0) {
3006                 if (rc == -ENOENT || rc == -ENODATA)
3007                         rc = 0;
3008                 RETURN(rc);
3009         }
3010
3011         if (declare)
3012                 rc = mdd_declare_links_add(env, mdd_tobj, handle, ldata);
3013         else
3014                 rc = mdd_links_write(env, mdd_tobj, ldata, handle);
3015
3016         if (rc != 0)
3017                 RETURN(rc);
3018
3019         /* If it is mulitple links file, we need update the name entry for
3020          * all parent */
3021         LASSERT(ldata->ld_leh != NULL);
3022         ldata->ld_lee = (struct link_ea_entry *)(ldata->ld_leh + 1);
3023         for (count = 0; count < ldata->ld_leh->leh_reccount; count++) {
3024                 struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3025                 struct mdd_object       *pobj;
3026                 struct lu_name          lname;
3027                 struct lu_fid           fid;
3028
3029                 linkea_entry_unpack(ldata->ld_lee, &ldata->ld_reclen,
3030                                     &lname, &fid);
3031                 ldata->ld_lee = (struct link_ea_entry *)((char *)ldata->ld_lee +
3032                                                          ldata->ld_reclen);
3033                 pobj = mdd_object_find(env, mdd, &fid);
3034                 if (IS_ERR(pobj)) {
3035                         CWARN("%s: cannot find obj "DFID": rc = %ld\n",
3036                               mdd2obd_dev(mdd)->obd_name, PFID(&fid),
3037                               PTR_ERR(pobj));
3038                         continue;
3039                 }
3040
3041                 if (!mdd_object_exists(pobj)) {
3042                         CDEBUG(D_INFO, "%s: obj "DFID" does not exist\n",
3043                               mdd2obd_dev(mdd)->obd_name, PFID(&fid));
3044                         GOTO(next_put, rc);
3045                 }
3046
3047                 if (pobj == mdd_pobj &&
3048                     lname.ln_namelen == child_name->ln_namelen &&
3049                     strncmp(lname.ln_name, child_name->ln_name,
3050                             lname.ln_namelen) == 0) {
3051                         CDEBUG(D_INFO, "%s: skip its own %s: "DFID"\n",
3052                               mdd2obd_dev(mdd)->obd_name, child_name->ln_name,
3053                               PFID(&fid));
3054                         GOTO(next_put, rc);
3055                 }
3056
3057                 CDEBUG(D_INFO, "%s: update "DFID" with "DNAME":"DFID"\n",
3058                        mdd2obd_dev(mdd)->obd_name, PFID(mdd_object_fid(pobj)),
3059                        PNAME(&lname), PFID(mdd_object_fid(mdd_tobj)));
3060
3061                 if (declare) {
3062                         /* Remove source name from source directory */
3063                         /* Insert new fid with target name into target dir */
3064                         rc = mdo_declare_index_delete(env, pobj, lname.ln_name,
3065                                                       handle);
3066                         if (rc)
3067                                 GOTO(next_put, rc);
3068
3069                         rc = mdo_declare_index_insert(env, pobj,
3070                                                       mdd_object_fid(mdd_tobj),
3071                                                       lname.ln_name, handle);
3072                         if (rc)
3073                                 GOTO(next_put, rc);
3074
3075                         rc = mdo_declare_ref_add(env, mdd_tobj, handle);
3076                         if (rc)
3077                                 GOTO(next_put, rc);
3078
3079                         rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3080                         if (rc)
3081                                 GOTO(next_put, rc);
3082                 } else {
3083                         rc = __mdd_index_delete(env, pobj, lname.ln_name,
3084                                                 0, handle,
3085                                                 mdd_object_capa(env, pobj));
3086                         if (rc)
3087                                 GOTO(next_put, rc);
3088
3089                         rc = __mdd_index_insert(env, pobj,
3090                                                 mdd_object_fid(mdd_tobj),
3091                                                 lname.ln_name, 0, handle,
3092                                                 mdd_object_capa(env, pobj));
3093                         if (rc)
3094                                 GOTO(next_put, rc);
3095
3096                         mdd_write_lock(env, mdd_tobj, MOR_SRC_CHILD);
3097                         rc = mdo_ref_add(env, mdd_tobj, handle);
3098                         mdd_write_unlock(env, mdd_tobj);
3099                         if (rc)
3100                                 GOTO(next_put, rc);
3101
3102                         mdd_write_lock(env, mdd_sobj, MOR_TGT_CHILD);
3103                         mdo_ref_del(env, mdd_sobj, handle);
3104                         mdd_write_unlock(env, mdd_sobj);
3105                 }
3106 next_put:
3107                 mdd_object_put(env, pobj);
3108                 if (rc != 0)
3109                         break;
3110         }
3111
3112         RETURN(rc);
3113 }
3114
3115 static int mdd_migrate_xattrs(const struct lu_env *env,
3116                               struct mdd_object *mdd_sobj,
3117                               struct mdd_object *mdd_tobj)
3118 {
3119         struct mdd_thread_info  *info = mdd_env_info(env);
3120         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3121         char                    *xname;
3122         struct thandle          *handle;
3123         struct lu_buf           xbuf;
3124         int                     xlen;
3125         int                     rem;
3126         int                     xsize;
3127         int                     list_xsize;
3128         struct lu_buf           list_xbuf;
3129         int                     rc;
3130
3131         /* retrieve xattr list from the old object */
3132         list_xsize = mdo_xattr_list(env, mdd_sobj, &LU_BUF_NULL,
3133                                     mdd_object_capa(env, mdd_sobj));
3134         if (list_xsize == -ENODATA)
3135                 return 0;
3136
3137         if (list_xsize < 0)
3138                 return list_xsize;
3139
3140         lu_buf_check_and_alloc(&info->mti_big_buf, list_xsize);
3141         if (info->mti_big_buf.lb_buf == NULL)
3142                 return -ENOMEM;
3143
3144         list_xbuf.lb_buf = info->mti_big_buf.lb_buf;
3145         list_xbuf.lb_len = list_xsize;
3146         rc = mdo_xattr_list(env, mdd_sobj, &list_xbuf,
3147                             mdd_object_capa(env, mdd_sobj));
3148         if (rc < 0)
3149                 return rc;
3150         rc = 0;
3151         rem = list_xsize;
3152         xname = list_xbuf.lb_buf;
3153         while (rem > 0) {
3154                 xlen = strnlen(xname, rem - 1) + 1;
3155                 if (strcmp(XATTR_NAME_LINK, xname) == 0 ||
3156                     strcmp(XATTR_NAME_LMA, xname) == 0 ||
3157                     strcmp(XATTR_NAME_LMV, xname) == 0)
3158                         goto next;
3159
3160                 /* For directory, if there are default layout, migrate here */
3161                 if (strcmp(XATTR_NAME_LOV, xname) == 0 &&
3162                     !S_ISDIR(lu_object_attr(&mdd_sobj->mod_obj.mo_lu)))
3163                         goto next;
3164
3165                 xsize = mdo_xattr_get(env, mdd_sobj, &LU_BUF_NULL,
3166                                       xname,
3167                                       mdd_object_capa(env, mdd_sobj));
3168                 if (xsize == -ENODATA)
3169                         goto next;
3170                 if (xsize < 0)
3171                         GOTO(out, rc);
3172
3173                 lu_buf_check_and_alloc(&info->mti_link_buf, xsize);
3174                 if (info->mti_link_buf.lb_buf == NULL)
3175                         GOTO(out, rc = -ENOMEM);
3176
3177                 xbuf.lb_len = xsize;
3178                 xbuf.lb_buf = info->mti_link_buf.lb_buf;
3179                 rc = mdo_xattr_get(env, mdd_sobj, &xbuf, xname,
3180                                    mdd_object_capa(env, mdd_sobj));
3181                 if (rc == -ENODATA)
3182                         goto next;
3183                 if (rc < 0)
3184                         GOTO(out, rc);
3185
3186                 handle = mdd_trans_create(env, mdd);
3187                 if (IS_ERR(handle))
3188                         GOTO(out, rc = PTR_ERR(handle));
3189
3190                 rc = mdo_declare_xattr_set(env, mdd_tobj, &xbuf, xname, 0,
3191                                            handle);
3192                 if (rc != 0)
3193                         GOTO(stop_trans, rc);
3194                 /* Note: this transaction is part of migration, and it is not
3195                  * the last step of migration, so we set th_local = 1 to avoid
3196                  * update last rcvd for this transaction */
3197                 handle->th_local = 1;
3198                 rc = mdd_trans_start(env, mdd, handle);
3199                 if (rc != 0)
3200                         GOTO(stop_trans, rc);
3201
3202                 rc = mdo_xattr_set(env, mdd_tobj, &xbuf, xname, 0, handle,
3203                                    mdd_object_capa(env, mdd_sobj));
3204                 if (rc == -EEXIST)
3205                         GOTO(stop_trans, rc = 0);
3206
3207                 if (rc != 0)
3208                         GOTO(stop_trans, rc);
3209 stop_trans:
3210                 mdd_trans_stop(env, mdd, rc, handle);
3211                 if (rc != 0)
3212                         GOTO(out, rc);
3213 next:
3214                 rem -= xlen;
3215                 memmove(xname, xname + xlen, rem);
3216         }
3217 out:
3218         return rc;
3219 }
3220
3221 static int mdd_declare_migrate_create(const struct lu_env *env,
3222                                       struct mdd_object *mdd_pobj,
3223                                       struct mdd_object *mdd_sobj,
3224                                       struct mdd_object *mdd_tobj,
3225                                       struct md_op_spec *spec,
3226                                       struct lu_attr *la,
3227                                       union lmv_mds_md *mgr_ea,
3228                                       struct thandle *handle)
3229 {
3230         struct lu_attr          *la_flag = MDD_ENV_VAR(env, la_for_fix);
3231         const struct lu_buf     *buf;
3232         int                     rc;
3233         int                     mgr_easize;
3234
3235         rc = mdd_declare_object_create_internal(env, mdd_pobj, mdd_tobj, la,
3236                                                 handle, spec, NULL);
3237         if (rc != 0)
3238                 return rc;
3239
3240         rc = mdd_declare_object_initialize(env, mdd_pobj, mdd_tobj, la,
3241                                            handle);
3242         if (rc != 0)
3243                 return rc;
3244
3245         if (S_ISLNK(la->la_mode)) {
3246                 const char *target_name = spec->u.sp_symname;
3247                 int sym_len = strlen(target_name);
3248                 const struct lu_buf *buf;
3249
3250                 buf = mdd_buf_get_const(env, target_name, sym_len);
3251                 rc = dt_declare_record_write(env, mdd_object_child(mdd_tobj),
3252                                              buf, 0, handle);
3253                 if (rc != 0)
3254                         return rc;
3255         }
3256
3257         if (spec->u.sp_ea.eadata != NULL && spec->u.sp_ea.eadatalen != 0) {
3258                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
3259                                         spec->u.sp_ea.eadatalen);
3260                 rc = mdo_declare_xattr_set(env, mdd_tobj, buf, XATTR_NAME_LOV,
3261                                            0, handle);
3262                 if (rc)
3263                         return rc;
3264         }
3265
3266         mgr_easize = lmv_mds_md_size(2, LMV_MAGIC_V1);
3267         buf = mdd_buf_get_const(env, mgr_ea, mgr_easize);
3268         rc = mdo_declare_xattr_set(env, mdd_sobj, buf, XATTR_NAME_LMV,
3269                                    0, handle);
3270         if (rc)
3271                 return rc;
3272
3273         la_flag->la_valid = LA_FLAGS;
3274         la_flag->la_flags = la->la_flags | LUSTRE_IMMUTABLE_FL;
3275         mdd_flags_xlate(mdd_sobj, la_flag->la_flags);
3276         rc = mdo_declare_attr_set(env, mdd_sobj, la_flag, handle);
3277
3278         return rc;
3279 }
3280
3281 static int mdd_migrate_create(const struct lu_env *env,
3282                               struct mdd_object *mdd_pobj,
3283                               struct mdd_object *mdd_sobj,
3284                               struct mdd_object *mdd_tobj,
3285                               struct lu_attr *la)
3286 {
3287         struct mdd_thread_info  *info = mdd_env_info(env);
3288         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3289         struct md_op_spec       *spec = &info->mti_spec;
3290         struct lu_buf           lmm_buf = { 0 };
3291         struct lu_buf           link_buf = { 0 };
3292         const struct lu_buf     *buf;
3293         struct thandle          *handle;
3294         struct lmv_mds_md_v1    *mgr_ea;
3295         struct lu_attr          *la_flag = MDD_ENV_VAR(env, la_for_fix);
3296         struct dt_allocation_hint *hint = &mdd_env_info(env)->mti_hint;
3297         int                     mgr_easize;
3298         int                     rc;
3299         ENTRY;
3300
3301         /* prepare spec for create */
3302         memset(spec, 0, sizeof(*spec));
3303         spec->sp_cr_lookup = 0;
3304         spec->sp_feat = &dt_directory_features;
3305         if (S_ISLNK(la->la_mode)) {
3306                 buf = lu_buf_check_and_alloc(
3307                                 &mdd_env_info(env)->mti_big_buf,
3308                                 la->la_size + 1);
3309                 link_buf = *buf;
3310                 link_buf.lb_len = la->la_size + 1;
3311                 rc = mdd_readlink(env, &mdd_sobj->mod_obj, &link_buf);
3312                 if (rc <= 0) {
3313                         rc = rc != 0 ? rc : -EFAULT;
3314                         CERROR("%s: "DFID" readlink failed: rc = %d\n",
3315                                mdd2obd_dev(mdd)->obd_name,
3316                                PFID(mdd_object_fid(mdd_sobj)), rc);
3317                         RETURN(rc);
3318                 }
3319                 spec->u.sp_symname = link_buf.lb_buf;
3320         } else if S_ISREG(la->la_mode) {
3321                 /* retrieve lov of the old object */
3322                 rc = mdd_get_lov_ea(env, mdd_sobj, &lmm_buf);
3323                 if (rc != 0 && rc != -ENODATA)
3324                         RETURN(rc);
3325                 if (lmm_buf.lb_buf != NULL && lmm_buf.lb_len != 0) {
3326                         spec->u.sp_ea.eadata = lmm_buf.lb_buf;
3327                         spec->u.sp_ea.eadatalen = lmm_buf.lb_len;
3328                         spec->sp_cr_flags |= MDS_OPEN_HAS_EA;
3329                 }
3330         }
3331
3332         mgr_ea = (struct lmv_mds_md_v1 *)info->mti_xattr_buf;
3333         mgr_ea->lmv_magic = cpu_to_le32(LMV_MAGIC_V1);
3334         mgr_ea->lmv_stripe_count = cpu_to_le32(2);
3335         mgr_ea->lmv_master_mdt_index = mdd_seq_site(mdd)->ss_node_id;
3336         mgr_ea->lmv_hash_type = cpu_to_le32(LMV_HASH_FLAG_MIGRATION);
3337         fid_cpu_to_le(&mgr_ea->lmv_master_fid, mdd_object_fid(mdd_sobj));
3338         fid_cpu_to_le(&mgr_ea->lmv_stripe_fids[0], mdd_object_fid(mdd_sobj));
3339         fid_cpu_to_le(&mgr_ea->lmv_stripe_fids[1], mdd_object_fid(mdd_tobj));
3340
3341         mdd_object_make_hint(env, mdd_pobj, mdd_tobj, la, spec, hint);
3342
3343         handle = mdd_trans_create(env, mdd);
3344         if (IS_ERR(handle))
3345                 GOTO(out_free, rc = PTR_ERR(handle));
3346
3347         /* Note: this transaction is part of migration, and it is not
3348          * the last step of migration, so we set th_local = 1 to avoid
3349          * update last rcvd for this transaction */
3350         handle->th_local = 1;
3351         rc = mdd_declare_migrate_create(env, mdd_pobj, mdd_sobj, mdd_tobj,
3352                                         spec, la,
3353                                         (union lmv_mds_md *)info->mti_xattr_buf,
3354                                         handle);
3355         if (rc != 0)
3356                 GOTO(stop_trans, rc);
3357
3358         rc = mdd_trans_start(env, mdd, handle);
3359         if (rc != 0)
3360                 GOTO(stop_trans, rc);
3361
3362         /* create the target object */
3363         rc = mdd_object_create(env, mdd_pobj, mdd_tobj, la, spec, NULL, NULL,
3364                                hint, handle);
3365         if (rc != 0)
3366                 GOTO(stop_trans, rc);
3367
3368         /* Set MIGRATE EA on the source inode, so once the migration needs
3369          * to be re-done during failover, the re-do process can locate the
3370          * target object which is already being created. */
3371         mgr_easize = lmv_mds_md_size(2, LMV_MAGIC_V1);
3372         buf = mdd_buf_get_const(env, mgr_ea, mgr_easize);
3373         rc = mdo_xattr_set(env, mdd_sobj, buf, XATTR_NAME_LMV, 0,
3374                            handle, mdd_object_capa(env, mdd_sobj));
3375         if (rc != 0)
3376                 GOTO(stop_trans, rc);
3377
3378         /* Set immutable flag, so any modification is disabled until
3379          * the migration is done. Once the migration is interrupted,
3380          * if the resume process find the migrating object has both
3381          * IMMUTALBE flag and MIGRATE EA, it need to clear IMMUTABLE
3382          * flag and approve the migration */
3383         la_flag->la_valid = LA_FLAGS;
3384         la_flag->la_flags = la->la_flags | LUSTRE_IMMUTABLE_FL;
3385         mdd_flags_xlate(mdd_sobj, la_flag->la_flags);
3386         rc = mdo_attr_set(env, mdd_sobj, la_flag, handle,
3387                           mdd_object_capa(env, mdd_sobj));
3388 stop_trans:
3389         if (handle != NULL)
3390                 mdd_trans_stop(env, mdd, rc, handle);
3391 out_free:
3392         if (lmm_buf.lb_buf != NULL)
3393                 OBD_FREE(lmm_buf.lb_buf, lmm_buf.lb_len);
3394         RETURN(rc);
3395 }
3396
3397 static int mdd_migrate_entries(const struct lu_env *env,
3398                                struct mdd_object *mdd_sobj,
3399                                struct mdd_object *mdd_tobj)
3400 {
3401         struct dt_object        *next = mdd_object_child(mdd_sobj);
3402         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3403         struct dt_object        *dt_tobj = mdd_object_child(mdd_tobj);
3404         struct thandle          *handle;
3405         struct dt_it            *it;
3406         const struct dt_it_ops  *iops;
3407         int                      rc;
3408         int                      result;
3409         struct lu_dirent        *ent;
3410         ENTRY;
3411
3412         OBD_ALLOC(ent, NAME_MAX + sizeof(*ent) + 1);
3413         if (ent == NULL)
3414                 RETURN(-ENOMEM);
3415
3416         if (!dt_try_as_dir(env, next))
3417                 GOTO(out_ent, rc = -ENOTDIR);
3418         /*
3419          * iterate directories
3420          */
3421         iops = &next->do_index_ops->dio_it;
3422         it = iops->init(env, next, LUDA_FID | LUDA_TYPE,
3423                         mdd_object_capa(env, mdd_sobj));
3424         if (IS_ERR(it))
3425                 GOTO(out_ent, rc = PTR_ERR(it));
3426
3427         rc = iops->load(env, it, 0);
3428         if (rc == 0)
3429                 rc = iops->next(env, it);
3430         else if (rc > 0)
3431                 rc = 0;
3432         /*
3433          * At this point and across for-loop:
3434          *
3435          *  rc == 0 -> ok, proceed.
3436          *  rc >  0 -> end of directory.
3437          *  rc <  0 -> error.
3438          */
3439         do {
3440                 struct mdd_object       *child;
3441                 char                    *name = mdd_env_info(env)->mti_key;
3442                 int                     len;
3443                 int                     recsize;
3444                 int                     is_dir;
3445                 bool                    target_exist = false;
3446
3447                 len = iops->key_size(env, it);
3448                 if (len == 0)
3449                         goto next;
3450
3451                 result = iops->rec(env, it, (struct dt_rec *)ent,
3452                                    LUDA_FID | LUDA_TYPE);
3453                 if (result == -ESTALE)
3454                         goto next;
3455                 if (result != 0) {
3456                         rc = result;
3457                         goto out;
3458                 }
3459
3460                 fid_le_to_cpu(&ent->lde_fid, &ent->lde_fid);
3461                 recsize = le16_to_cpu(ent->lde_reclen);
3462
3463                 /* Insert new fid with target name into target dir */
3464                 if ((ent->lde_namelen == 1 && ent->lde_name[0] == '.') ||
3465                     (ent->lde_namelen == 2 && ent->lde_name[0] == '.' &&
3466                      ent->lde_name[1] == '.'))
3467                         goto next;
3468
3469                 child = mdd_object_find(env, mdd, &ent->lde_fid);
3470                 if (IS_ERR(child))
3471                         GOTO(out, rc = PTR_ERR(child));
3472
3473                 is_dir = S_ISDIR(lu_object_attr(&child->mod_obj.mo_lu));
3474
3475                 snprintf(name, ent->lde_namelen + 1, "%s", ent->lde_name);
3476
3477                 /* Check whether the name has been inserted to the target */
3478                 if (dt_try_as_dir(env, dt_tobj)) {
3479                         struct lu_fid *fid = &mdd_env_info(env)->mti_fid2;
3480
3481                         rc = dt_tobj->do_index_ops->dio_lookup(env, dt_tobj,
3482                                                          (struct dt_rec *)fid,
3483                                                          (struct dt_key *)name,
3484                                                 mdd_object_capa(env, mdd_tobj));
3485                         if (unlikely(rc == 0))
3486                                 target_exist = true;
3487                 }
3488
3489                 handle = mdd_trans_create(env, mdd);
3490                 if (IS_ERR(handle))
3491                         GOTO(out, rc = PTR_ERR(handle));
3492
3493                 /* Note: this transaction is part of migration, and it is not
3494                  * the last step of migration, so we set th_local = 1 to avoid
3495                  * updating last rcvd for this transaction */
3496                 handle->th_local = 1;
3497                 if (likely(!target_exist)) {
3498                         rc = mdo_declare_index_insert(env, mdd_tobj,
3499                                                       &ent->lde_fid,
3500                                                       name, handle);
3501                         if (rc != 0)
3502                                 GOTO(out_put, rc);
3503
3504                         if (is_dir) {
3505                                 rc = mdo_declare_ref_add(env, mdd_tobj, handle);
3506                                 if (rc != 0)
3507                                         GOTO(out_put, rc);
3508                         }
3509                 }
3510
3511                 rc = mdo_declare_index_delete(env, mdd_sobj, name, handle);
3512                 if (rc != 0)
3513                         GOTO(out_put, rc);
3514
3515                 if (is_dir) {
3516                         rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3517                         if (rc != 0)
3518                                 GOTO(out_put, rc);
3519
3520                         /* Update .. for child */
3521                         rc = mdo_declare_index_delete(env, child, dotdot,
3522                                                       handle);
3523                         if (rc != 0)
3524                                 GOTO(out_put, rc);
3525
3526                         rc = mdo_declare_index_insert(env, child,
3527                                                       mdd_object_fid(mdd_tobj),
3528                                                               dotdot, handle);
3529                         if (rc != 0)
3530                                 GOTO(out_put, rc);
3531                 }
3532
3533                 rc = mdd_linkea_declare_update_child(env, mdd_tobj,
3534                                                      child, name,
3535                                                      strlen(name),
3536                                                      handle);
3537                 if (rc != 0)
3538                         GOTO(out_put, rc);
3539
3540                 rc = mdd_trans_start(env, mdd, handle);
3541                 if (rc != 0) {
3542                         CERROR("%s: transaction start failed: rc = %d\n",
3543                                mdd2obd_dev(mdd)->obd_name, rc);
3544                         GOTO(out_put, rc);
3545                 }
3546
3547                 if (likely(!target_exist)) {
3548                         rc = __mdd_index_insert(env, mdd_tobj, &ent->lde_fid,
3549                                                 name, is_dir, handle,
3550                                                 mdd_object_capa(env, mdd_tobj));
3551                         if (rc != 0)
3552                                 GOTO(out_put, rc);
3553
3554                         if (is_dir) {
3555                                 rc = mdo_ref_add(env, mdd_tobj, handle);
3556                                 if (rc != 0)
3557                                         GOTO(out_put, rc);
3558
3559                         }
3560                 }
3561
3562                 rc = __mdd_index_delete(env, mdd_sobj, name, is_dir, handle,
3563                                         mdd_object_capa(env, mdd_sobj));
3564                 if (rc != 0)
3565                         GOTO(out_put, rc);
3566
3567                 if (is_dir) {
3568                         rc = __mdd_index_delete_only(env, child, dotdot, handle,
3569                                                    mdd_object_capa(env, child));
3570                         if (rc != 0)
3571                                 GOTO(out_put, rc);
3572
3573                         rc = __mdd_index_insert_only(env, child,
3574                                          mdd_object_fid(mdd_tobj),
3575                                          dotdot, handle,
3576                                          mdd_object_capa(env, child));
3577                         if (rc != 0)
3578                                 GOTO(out_put, rc);
3579                 }
3580
3581                 rc = mdd_linkea_update_child(env, mdd_tobj, child, name,
3582                                              strlen(name), handle);
3583
3584 out_put:
3585                 mdd_object_put(env, child);
3586                 mdd_trans_stop(env, mdd, rc, handle);
3587                 if (rc != 0)
3588                         GOTO(out, rc);
3589 next:
3590                 result = iops->next(env, it);
3591                 if (OBD_FAIL_CHECK(OBD_FAIL_MIGRATE_ENTRIES))
3592                         GOTO(out, rc = -EINTR);
3593
3594                 if (result == -ESTALE)
3595                         goto next;
3596         } while (result == 0);
3597 out:
3598         iops->put(env, it);
3599         iops->fini(env, it);
3600 out_ent:
3601         OBD_FREE(ent, NAME_MAX + sizeof(*ent) + 1);
3602         RETURN(rc);
3603 }
3604
3605 static int mdd_declare_update_linkea(const struct lu_env *env,
3606                                      struct mdd_object *mdd_pobj,
3607                                      struct mdd_object *mdd_sobj,
3608                                      struct mdd_object *mdd_tobj,
3609                                      struct thandle *handle,
3610                                      const struct lu_name *child_name)
3611 {
3612         return mdd_update_linkea_internal(env, mdd_pobj, mdd_sobj, mdd_tobj,
3613                                           child_name, handle, 1);
3614 }
3615
3616 static int mdd_update_linkea(const struct lu_env *env,
3617                              struct mdd_object *mdd_pobj,
3618                              struct mdd_object *mdd_sobj,
3619                              struct mdd_object *mdd_tobj,
3620                              struct thandle *handle,
3621                              const struct lu_name *child_name)
3622 {
3623         return mdd_update_linkea_internal(env, mdd_pobj, mdd_sobj, mdd_tobj,
3624                                           child_name, handle, 0);
3625 }
3626
3627 static int mdd_declare_migrate_update_name(const struct lu_env *env,
3628                                            struct mdd_object *mdd_pobj,
3629                                            struct mdd_object *mdd_sobj,
3630                                            struct mdd_object *mdd_tobj,
3631                                            const struct lu_name *lname,
3632                                            struct lu_attr *la,
3633                                            struct lu_attr *parent_la,
3634                                            struct thandle *handle)
3635 {
3636         struct lu_attr  *la_flag = MDD_ENV_VAR(env, tattr);
3637         int             rc;
3638
3639         /* Revert IMMUTABLE flag */
3640         la_flag->la_valid = LA_FLAGS;
3641         la_flag->la_flags = la->la_flags & ~LUSTRE_IMMUTABLE_FL;
3642         mdd_flags_xlate(mdd_sobj, la_flag->la_flags);
3643         rc = mdo_declare_attr_set(env, mdd_sobj, la_flag, handle);
3644         if (rc != 0)
3645                 return rc;
3646
3647         /* delete entry from source dir */
3648         rc = mdo_declare_index_delete(env, mdd_pobj, lname->ln_name, handle);
3649         if (rc != 0)
3650                 return rc;
3651
3652         rc = mdd_declare_update_linkea(env, mdd_pobj, mdd_sobj,
3653                                        mdd_tobj, handle, lname);
3654         if (rc != 0)
3655                 return rc;
3656
3657         if (S_ISREG(mdd_object_type(mdd_sobj))) {
3658                 rc = mdo_declare_xattr_del(env, mdd_sobj, XATTR_NAME_LOV,
3659                                            handle);
3660                 if (rc != 0)
3661                         return rc;
3662         }
3663
3664         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
3665                 rc = mdo_declare_ref_del(env, mdd_pobj, handle);
3666                 if (rc != 0)
3667                         return rc;
3668         }
3669
3670         /* new name */
3671         rc = mdo_declare_index_insert(env, mdd_pobj, mdo2fid(mdd_tobj),
3672                                       lname->ln_name, handle);
3673         if (rc != 0)
3674                 return rc;
3675
3676         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
3677                 rc = mdo_declare_ref_add(env, mdd_pobj, handle);
3678                 if (rc != 0)
3679                         return rc;
3680         }
3681
3682         /* delete old object */
3683         rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3684         if (rc != 0)
3685                 return rc;
3686
3687         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
3688                 /* delete old object */
3689                 rc = mdo_declare_ref_del(env, mdd_sobj, handle);
3690                 if (rc != 0)
3691                         return rc;
3692                 /* set nlink to 0 */
3693                 rc = mdo_declare_attr_set(env, mdd_sobj, la, handle);
3694                 if (rc != 0)
3695                         return rc;
3696         }
3697
3698         rc = mdd_declare_finish_unlink(env, mdd_sobj, handle);
3699         if (rc)
3700                 return rc;
3701
3702         rc = mdo_declare_attr_set(env, mdd_pobj, parent_la, handle);
3703
3704         return rc;
3705 }
3706
3707 static int mdd_migrate_update_name(const struct lu_env *env,
3708                                    struct mdd_object *mdd_pobj,
3709                                    struct mdd_object *mdd_sobj,
3710                                    struct mdd_object *mdd_tobj,
3711                                    const struct lu_name *lname,
3712                                    struct md_attr *ma)
3713 {
3714         struct lu_attr          *p_la = MDD_ENV_VAR(env, la_for_fix);
3715         struct lu_attr          *so_attr = MDD_ENV_VAR(env, cattr);
3716         struct lu_attr          *la_flag = MDD_ENV_VAR(env, tattr);
3717         struct mdd_device       *mdd = mdo2mdd(&mdd_sobj->mod_obj);
3718         struct thandle          *handle;
3719         int                     is_dir = S_ISDIR(mdd_object_type(mdd_sobj));
3720         const char              *name = lname->ln_name;
3721         int                     rc;
3722         ENTRY;
3723
3724         /* update time for parent */
3725         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
3726         p_la->la_ctime = p_la->la_mtime = ma->ma_attr.la_ctime;
3727         p_la->la_valid = LA_CTIME;
3728
3729         rc = mdd_la_get(env, mdd_sobj, so_attr, mdd_object_capa(env, mdd_sobj));
3730         if (rc != 0)
3731                 RETURN(rc);
3732
3733         handle = mdd_trans_create(env, mdd);
3734         if (IS_ERR(handle))
3735                 RETURN(PTR_ERR(handle));
3736
3737         rc = mdd_declare_migrate_update_name(env, mdd_pobj, mdd_sobj, mdd_tobj,
3738                                              lname, so_attr, p_la, handle);
3739         if (rc != 0) {
3740                 /* If the migration can not be fit in one transaction, just
3741                  * leave it in the original MDT */
3742                 if (rc == -E2BIG)
3743                         GOTO(stop_trans, rc = 0);
3744                 else
3745                         GOTO(stop_trans, rc);
3746         }
3747
3748         CDEBUG(D_INFO, "%s: update "DFID"/"DFID" with %s:"DFID"\n",
3749                mdd2obd_dev(mdd)->obd_name, PFID(mdd_object_fid(mdd_pobj)),
3750                PFID(mdd_object_fid(mdd_sobj)), lname->ln_name,
3751                PFID(mdd_object_fid(mdd_tobj)));
3752
3753         rc = mdd_trans_start(env, mdd, handle);
3754         if (rc != 0)
3755                 GOTO(stop_trans, rc);
3756
3757         /* Revert IMMUTABLE flag */
3758         la_flag->la_valid = LA_FLAGS;
3759         la_flag->la_flags = so_attr->la_flags & ~LUSTRE_IMMUTABLE_FL;
3760         mdd_flags_xlate(mdd_sobj, la_flag->la_flags);
3761         rc = mdo_attr_set(env, mdd_sobj, la_flag, handle,
3762                           mdd_object_capa(env, mdd_pobj));
3763         if (rc != 0)
3764                 GOTO(stop_trans, rc);
3765
3766         /* Remove source name from source directory */
3767         rc = __mdd_index_delete(env, mdd_pobj, name, is_dir, handle,
3768                                 mdd_object_capa(env, mdd_pobj));
3769         if (rc != 0)
3770                 GOTO(stop_trans, rc);
3771
3772         rc = mdd_update_linkea(env, mdd_pobj, mdd_sobj, mdd_tobj,
3773                                handle, lname);
3774         if (rc != 0)
3775                 GOTO(stop_trans, rc);
3776
3777         if (S_ISREG(so_attr->la_mode)) {
3778                 if (so_attr->la_nlink == 1) {
3779                         rc = mdo_xattr_del(env, mdd_sobj, XATTR_NAME_LOV,
3780                                            handle,
3781                                            mdd_object_capa(env, mdd_sobj));
3782                         if (rc != 0 && rc != -ENODATA)
3783                                 GOTO(stop_trans, rc);
3784                 }
3785         }
3786
3787         /* Insert new fid with target name into target dir */
3788         rc = __mdd_index_insert(env, mdd_pobj, mdd_object_fid(mdd_tobj), name,
3789                                 is_dir, handle, mdd_object_capa(env, mdd_pobj));
3790         if (rc != 0)
3791                 GOTO(stop_trans, rc);
3792
3793         rc = mdd_links_add(env, mdd_tobj, mdo2fid(mdd_pobj), lname, handle,
3794                            NULL, 1);
3795         if (rc != 0)
3796                 GOTO(stop_trans, rc);
3797
3798         mdd_write_lock(env, mdd_sobj, MOR_SRC_CHILD);
3799         mdo_ref_del(env, mdd_sobj, handle);
3800         if (is_dir)
3801                 mdo_ref_del(env, mdd_sobj, handle);
3802
3803         /* Get the attr again after ref_del */
3804         rc = mdd_la_get(env, mdd_sobj, so_attr,
3805                         mdd_object_capa(env, mdd_sobj));
3806         if (rc != 0)
3807                 GOTO(stop_trans, rc);
3808         ma->ma_attr = *so_attr;
3809         ma->ma_valid |= MA_INODE;
3810         rc = mdd_finish_unlink(env, mdd_sobj, ma, mdd_pobj, lname, handle);
3811         if (rc != 0)
3812                 GOTO(stop_trans, rc);
3813
3814         rc = mdd_attr_set_internal(env, mdd_pobj, p_la, handle, 0);
3815         if (rc != 0)
3816                 GOTO(stop_trans, rc);
3817
3818         mdd_write_unlock(env, mdd_sobj);
3819
3820 stop_trans:
3821         mdd_trans_stop(env, mdd, rc, handle);
3822
3823         RETURN(rc);
3824 }
3825
3826 /**
3827  * Check whether we should migrate the file/dir
3828  * return val
3829  *      < 0  permission check failed or other error.
3830  *      = 0  the file can be migrated.
3831  *      > 0  the file does not need to be migrated, mostly
3832  *           for multiple link file
3833  **/
3834 static int mdd_migrate_sanity_check(const struct lu_env *env,
3835                                     struct mdd_object *pobj,
3836                                     const struct lu_attr *pattr,
3837                                     struct mdd_object *sobj,
3838                                     struct lu_attr *sattr)
3839 {
3840         struct mdd_thread_info  *info = mdd_env_info(env);
3841         struct linkea_data      *ldata = &info->mti_link_data;
3842         int                     mgr_easize;
3843         struct lu_buf           *mgr_buf;
3844         int                     count;
3845         int                     rc;
3846
3847         ENTRY;
3848
3849         mgr_easize = lmv_mds_md_size(2, LMV_MAGIC_V1);
3850         mgr_buf = lu_buf_check_and_alloc(&info->mti_big_buf, mgr_easize);
3851         if (mgr_buf->lb_buf == NULL)
3852                 RETURN(-ENOMEM);
3853
3854         rc = mdo_xattr_get(env, sobj, mgr_buf, XATTR_NAME_LMV,
3855                            mdd_object_capa(env, sobj));
3856         if (rc > 0) {
3857                 union lmv_mds_md *lmm = mgr_buf->lb_buf;
3858
3859                 /* If the object has migrateEA, it means IMMUTE flag
3860                  * is being set by previous migration process, so it
3861                  * needs to override the IMMUTE flag, otherwise the
3862                  * following sanity check will fail */
3863                 if (le32_to_cpu(lmm->lmv_md_v1.lmv_hash_type) &
3864                                                 LMV_HASH_FLAG_MIGRATION) {
3865                         struct mdd_device *mdd = mdo2mdd(&sobj->mod_obj);
3866
3867                         sattr->la_flags &= ~LUSTRE_IMMUTABLE_FL;
3868                         sobj->mod_flags &= ~IMMUTE_OBJ;
3869                         CDEBUG(D_HA, "%s: "DFID" override IMMUTE FLAG\n",
3870                                mdd2obd_dev(mdd)->obd_name,
3871                                PFID(mdd_object_fid(sobj)));
3872                 }
3873         }
3874
3875         rc = mdd_rename_sanity_check(env, pobj, pattr, pobj, pattr,
3876                                      sobj, sattr, NULL, NULL);
3877         if (rc != 0)
3878                 RETURN(rc);
3879
3880         /* Then it will check if the file should be migrated. If the file
3881          * has mulitple links, we only need migrate the file if all of its
3882          * entries has been migrated to the remote MDT */
3883         if (!S_ISREG(sattr->la_mode) || sattr->la_nlink < 2)
3884                 RETURN(0);
3885
3886         rc = mdd_links_read(env, sobj, ldata);
3887         if (rc != 0) {
3888                 /* For multiple links files, if there are no linkEA data at all,
3889                  * means the file might be created before linkEA is enabled, and
3890                  * all all of its links should not be migrated yet, otherwise
3891                  * it should have some linkEA there */
3892                 if (rc == -ENOENT || rc == -ENODATA)
3893                         RETURN(1);
3894                 RETURN(rc);
3895         }
3896
3897         /* If it is mulitple links file, we need update the name entry for
3898          * all parent */
3899         LASSERT(ldata->ld_leh != NULL);
3900         ldata->ld_lee = (struct link_ea_entry *)(ldata->ld_leh + 1);
3901         for (count = 0; count < ldata->ld_leh->leh_reccount; count++) {
3902                 struct mdd_device       *mdd = mdo2mdd(&sobj->mod_obj);
3903                 struct mdd_object       *lpobj;
3904                 struct lu_name          lname;
3905                 struct lu_fid           fid;
3906
3907                 linkea_entry_unpack(ldata->ld_lee, &ldata->ld_reclen,
3908                                     &lname, &fid);
3909                 ldata->ld_lee = (struct link_ea_entry *)((char *)ldata->ld_lee +
3910                                                          ldata->ld_reclen);
3911                 lpobj = mdd_object_find(env, mdd, &fid);
3912                 if (IS_ERR(lpobj)) {
3913                         CWARN("%s: cannot find obj "DFID": rc = %ld\n",
3914                               mdd2obd_dev(mdd)->obd_name, PFID(&fid),
3915                               PTR_ERR(lpobj));
3916                         continue;
3917                 }
3918
3919                 if (!mdd_object_exists(lpobj) || mdd_object_remote(lpobj)) {
3920                         CDEBUG(D_INFO, DFID"%.*s: is on remote MDT.\n",
3921                                PFID(&fid), lname.ln_namelen, lname.ln_name);
3922                         mdd_object_put(env, lpobj);
3923                         continue;
3924                 }
3925
3926                 CDEBUG(D_INFO, DFID"still has local entry %.*s "DFID"\n",
3927                        PFID(mdd_object_fid(sobj)), lname.ln_namelen,
3928                        lname.ln_name, PFID(&fid));
3929                 mdd_object_put(env, lpobj);
3930                 rc = 1;
3931                 break;
3932         }
3933
3934         RETURN(rc);
3935 }
3936
3937 static int mdd_migrate(const struct lu_env *env, struct md_object *pobj,
3938                        struct md_object *sobj, const struct lu_name *lname,
3939                        struct md_object *tobj, struct md_attr *ma)
3940 {
3941         struct mdd_object       *mdd_pobj = md2mdd_obj(pobj);
3942         struct mdd_device       *mdd = mdo2mdd(pobj);
3943         struct mdd_object       *mdd_sobj = md2mdd_obj(sobj);
3944         struct mdd_object       *mdd_tobj = NULL;
3945         struct lu_attr          *so_attr = MDD_ENV_VAR(env, cattr);
3946         struct lu_attr          *pattr = MDD_ENV_VAR(env, pattr);
3947         int                     rc;
3948
3949         ENTRY;
3950         /* If the file will being migrated, it will check whether
3951          * the file is being opened by someone else right now */
3952         mdd_read_lock(env, mdd_sobj, MOR_SRC_CHILD);
3953         if (mdd_sobj->mod_count >= 1) {
3954                 CERROR("%s: "DFID"%s is already opened count %d: rc = %d\n",
3955                        mdd2obd_dev(mdd)->obd_name,
3956                        PFID(mdd_object_fid(mdd_sobj)), lname->ln_name,
3957                        mdd_sobj->mod_count, -EBUSY);
3958                 mdd_read_unlock(env, mdd_sobj);
3959                 GOTO(put, rc = -EBUSY);
3960         }
3961         mdd_read_unlock(env, mdd_sobj);
3962
3963         rc = mdd_la_get(env, mdd_sobj, so_attr, mdd_object_capa(env, mdd_sobj));
3964         if (rc != 0)
3965                 GOTO(put, rc);
3966
3967         rc = mdd_la_get(env, mdd_pobj, pattr, BYPASS_CAPA);
3968         if (rc != 0)
3969                 GOTO(put, rc);
3970
3971         rc = mdd_migrate_sanity_check(env, mdd_pobj, pattr, mdd_sobj, so_attr);
3972         if (rc != 0) {
3973                 if (rc > 0)
3974                         rc = 0;
3975                 GOTO(put, rc);
3976         }
3977
3978         /* Sigh, it is impossible to finish all of migration in a single
3979          * transaction, for example migrating big directory entries to the
3980          * new MDT, it needs insert all of name entries of children in the
3981          * new directory.
3982          *
3983          * So migration will be done in multiple steps and transactions.
3984          *
3985          * 1. create an orphan object on the remote MDT in one transaction.
3986          * 2. migrate extend attributes to the new target file/directory.
3987          * 3. For directory, migrate the entries to the new MDT and update
3988          * linkEA of each children. Because we can not migrate all entries
3989          * in a single transaction, so the migrating directory will become
3990          * a striped directory during migration, so once the process is
3991          * interrupted, the directory is still accessible. (During lookup,
3992          * client will locate the name by searching both original and target
3993          * object).
3994          * 4. Finally, update the name/FID to point to the new file/directory
3995          * in a separate transaction.
3996          */
3997
3998         /* step 1: Check whether the orphan object has been created, and create
3999          * orphan object on the remote MDT if needed */
4000         mdd_tobj = md2mdd_obj(tobj);
4001         if (!mdd_object_exists(mdd_tobj)) {
4002                 rc = mdd_migrate_create(env, mdd_pobj, mdd_sobj, mdd_tobj,
4003                                         so_attr);
4004                 if (rc != 0)
4005                         GOTO(put, rc);
4006         }
4007
4008         /* step 2: migrate xattr */
4009         rc = mdd_migrate_xattrs(env, mdd_sobj, mdd_tobj);
4010         if (rc != 0)
4011                 GOTO(put, rc);
4012
4013         /* step 3: migrate name entries to the orphan object */
4014         if (S_ISDIR(lu_object_attr(&mdd_sobj->mod_obj.mo_lu))) {
4015                 rc = mdd_migrate_entries(env, mdd_sobj, mdd_tobj);
4016                 if (rc != 0)
4017                         GOTO(put, rc);
4018                 if (unlikely(OBD_FAIL_CHECK_RESET(OBD_FAIL_MIGRATE_NET_REP,
4019                                                   OBD_FAIL_MDS_REINT_NET_REP)))
4020                         GOTO(put, rc = 0);
4021         }
4022
4023         /* step 4: update name entry to the new object */
4024         rc = mdd_migrate_update_name(env, mdd_pobj, mdd_sobj, mdd_tobj, lname,
4025                                      ma);
4026         if (rc != 0)
4027                 GOTO(put, rc);
4028 put:
4029         RETURN(rc);
4030 }
4031
4032 const struct md_dir_operations mdd_dir_ops = {
4033         .mdo_is_subdir     = mdd_is_subdir,
4034         .mdo_lookup        = mdd_lookup,
4035         .mdo_create        = mdd_create,
4036         .mdo_rename        = mdd_rename,
4037         .mdo_link          = mdd_link,
4038         .mdo_unlink        = mdd_unlink,
4039         .mdo_create_data   = mdd_create_data,
4040         .mdo_migrate       = mdd_migrate,
4041 };