Whamcloud - gitweb
LU-13151 mdt: add parent FID to Changelog recordss
[fs/lustre-release.git] / lustre / mdd / mdd_dir.c
1 /*
2  * GPL HEADER START
3  *
4  * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
5  *
6  * This program is free software; you can redistribute it and/or modify
7  * it under the terms of the GNU General Public License version 2 only,
8  * as published by the Free Software Foundation.
9  *
10  * This program is distributed in the hope that it will be useful, but
11  * WITHOUT ANY WARRANTY; without even the implied warranty of
12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13  * General Public License version 2 for more details (a copy is included
14  * in the LICENSE file that accompanied this code).
15  *
16  * You should have received a copy of the GNU General Public License
17  * version 2 along with this program; If not, see
18  * http://www.gnu.org/licenses/gpl-2.0.html
19  *
20  * GPL HEADER END
21  */
22 /*
23  * Copyright (c) 2007, 2010, Oracle and/or its affiliates. All rights reserved.
24  * Use is subject to license terms.
25  *
26  * Copyright (c) 2011, 2017, Intel Corporation.
27  */
28 /*
29  * This file is part of Lustre, http://www.lustre.org/
30  * Lustre is a trademark of Sun Microsystems, Inc.
31  *
32  * lustre/mdd/mdd_dir.c
33  *
34  * Lustre Metadata Server (mdd) routines
35  *
36  * Author: Wang Di <wangdi@intel.com>
37  */
38
39 #define DEBUG_SUBSYSTEM S_MDS
40
41 #include <obd_class.h>
42 #include <obd_support.h>
43 #include <lustre_mds.h>
44 #include <lustre_fid.h>
45 #include <lustre_lmv.h>
46 #include <lustre_idmap.h>
47
48 #include "mdd_internal.h"
49
50 static const char dot[] = ".";
51 static const char dotdot[] = "..";
52
53 static struct lu_name lname_dotdot = {
54         .ln_name        = (char *) dotdot,
55         .ln_namelen     = sizeof(dotdot) - 1,
56 };
57
58 static inline int
59 mdd_name_check(struct mdd_device *m, const struct lu_name *ln)
60 {
61         if (!lu_name_is_valid(ln))
62                 return -EINVAL;
63         else if (ln->ln_namelen > m->mdd_dt_conf.ddp_max_name_len)
64                 return -ENAMETOOLONG;
65         else
66                 return 0;
67 }
68
69 /* Get FID from name and parent */
70 static int
71 __mdd_lookup(const struct lu_env *env, struct md_object *pobj,
72              const struct lu_attr *pattr, const struct lu_name *lname,
73              struct lu_fid* fid, int mask)
74 {
75         const char *name = lname->ln_name;
76         const struct dt_key *key = (const struct dt_key *)name;
77         struct mdd_object *mdd_obj = md2mdd_obj(pobj);
78         struct dt_object *dir = mdd_object_child(mdd_obj);
79         int rc;
80
81         ENTRY;
82
83         if (unlikely(mdd_is_dead_obj(mdd_obj)))
84                 RETURN(-ESTALE);
85
86         if (!mdd_object_exists(mdd_obj))
87                 RETURN(-ESTALE);
88
89         if (mdd_object_remote(mdd_obj)) {
90                 CDEBUG(D_INFO, "%s: Object "DFID" located on remote server\n",
91                        mdd_obj_dev_name(mdd_obj),
92                        PFID(mdd_object_fid(mdd_obj)));
93         }
94
95         rc = mdd_permission_internal_locked(env, mdd_obj, pattr, mask,
96                                             DT_TGT_PARENT);
97         if (rc)
98                 RETURN(rc);
99
100         if (likely(S_ISDIR(mdd_object_type(mdd_obj)) &&
101                    dt_try_as_dir(env, dir)))
102                 rc = dt_lookup(env, dir, (struct dt_rec *)fid, key);
103         else
104                 rc = -ENOTDIR;
105
106         RETURN(rc);
107 }
108
109 int mdd_lookup(const struct lu_env *env,
110                struct md_object *pobj, const struct lu_name *lname,
111                struct lu_fid *fid, struct md_op_spec *spec)
112 {
113         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
114         int rc;
115         ENTRY;
116
117         rc = mdd_la_get(env, md2mdd_obj(pobj), pattr);
118         if (rc != 0)
119                 RETURN(rc);
120
121         rc = __mdd_lookup(env, pobj, pattr, lname, fid,
122                           (spec != NULL && spec->sp_permitted) ? 0 : MAY_EXEC);
123         RETURN(rc);
124 }
125
126 /** Read the link EA into a temp buffer.
127  * Uses the mdd_thread_info::mti_big_buf since it is generally large.
128  * A pointer to the buffer is stored in \a ldata::ld_buf.
129  *
130  * \retval 0 or error
131  */
132 static int __mdd_links_read(const struct lu_env *env,
133                             struct mdd_object *mdd_obj,
134                             struct linkea_data *ldata)
135 {
136         int rc;
137
138         if (!mdd_object_exists(mdd_obj))
139                 return -ENODATA;
140
141         /* First try a small buf */
142         LASSERT(env != NULL);
143         ldata->ld_buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_link_buf,
144                                                PAGE_SIZE);
145         if (ldata->ld_buf->lb_buf == NULL)
146                 return -ENOMEM;
147
148         rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf, XATTR_NAME_LINK);
149         if (rc == -ERANGE) {
150                 /* Buf was too small, figure out what we need. */
151                 lu_buf_free(ldata->ld_buf);
152                 rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf,
153                                    XATTR_NAME_LINK);
154                 if (rc < 0)
155                         return rc;
156                 ldata->ld_buf = lu_buf_check_and_alloc(ldata->ld_buf, rc);
157                 if (ldata->ld_buf->lb_buf == NULL)
158                         return -ENOMEM;
159                 rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf,
160                                   XATTR_NAME_LINK);
161         }
162         if (rc < 0) {
163                 lu_buf_free(ldata->ld_buf);
164                 ldata->ld_buf = NULL;
165                 return rc;
166         }
167
168         return linkea_init(ldata);
169 }
170
171 int mdd_links_read(const struct lu_env *env,
172                    struct mdd_object *mdd_obj,
173                    struct linkea_data *ldata)
174 {
175         int rc;
176
177         rc = __mdd_links_read(env, mdd_obj, ldata);
178         if (!rc)
179                 rc = linkea_init(ldata);
180
181         return rc;
182 }
183
184 static int mdd_links_read_with_rec(const struct lu_env *env,
185                                    struct mdd_object *mdd_obj,
186                                    struct linkea_data *ldata)
187 {
188         int rc;
189
190         rc = __mdd_links_read(env, mdd_obj, ldata);
191         if (!rc)
192                 rc = linkea_init_with_rec(ldata);
193
194         return rc;
195 }
196
197 /**
198  * Get parent FID of the directory
199  *
200  * Read parent FID from linkEA, if that fails, then do lookup
201  * dotdot to get the parent FID.
202  *
203  * \param[in] env       execution environment
204  * \param[in] obj       object from which to find the parent FID
205  * \param[in] attr      attribute of the object
206  * \param[out] fid      fid to get the parent FID
207  *
208  * \retval              0 if getting the parent FID succeeds.
209  * \retval              negative errno if getting the parent FID fails.
210  **/
211 static inline int mdd_parent_fid(const struct lu_env *env,
212                                  struct mdd_object *obj,
213                                  const struct lu_attr *attr,
214                                  struct lu_fid *fid)
215 {
216         struct mdd_thread_info  *info = mdd_env_info(env);
217         struct linkea_data      ldata = { NULL };
218         struct lu_buf           *buf = &info->mti_link_buf;
219         struct lu_name          lname;
220         int                     rc = 0;
221
222         ENTRY;
223
224         LASSERTF(S_ISDIR(mdd_object_type(obj)),
225                  "%s: FID "DFID" is not a directory type = %o\n",
226                  mdd_obj_dev_name(obj), PFID(mdd_object_fid(obj)),
227                  mdd_object_type(obj));
228
229         buf = lu_buf_check_and_alloc(buf, PATH_MAX);
230         if (buf->lb_buf == NULL)
231                 GOTO(lookup, rc = 0);
232
233         ldata.ld_buf = buf;
234         rc = mdd_links_read_with_rec(env, obj, &ldata);
235         if (rc != 0)
236                 GOTO(lookup, rc);
237
238         /* the obj is not locked, don't cache attributes */
239         mdd_invalidate(env, &obj->mod_obj);
240
241         LASSERT(ldata.ld_leh != NULL);
242         /* Directory should only have 1 parent */
243         if (ldata.ld_leh->leh_reccount > 1)
244                 GOTO(lookup, rc);
245
246         ldata.ld_lee = (struct link_ea_entry *)(ldata.ld_leh + 1);
247
248         linkea_entry_unpack(ldata.ld_lee, &ldata.ld_reclen, &lname, fid);
249         if (likely(fid_is_sane(fid)))
250                 RETURN(0);
251 lookup:
252         rc =  __mdd_lookup(env, &obj->mod_obj, attr, &lname_dotdot, fid, 0);
253         RETURN(rc);
254 }
255
256 /*
257  * For root fid use special function, which does not compare version component
258  * of fid. Version component is different for root fids on all MDTs.
259  */
260 int mdd_is_root(struct mdd_device *mdd, const struct lu_fid *fid)
261 {
262         return fid_seq(&mdd->mdd_root_fid) == fid_seq(fid) &&
263                 fid_oid(&mdd->mdd_root_fid) == fid_oid(fid);
264 }
265
266 /*
267  * return 1: if \a tfid is the fid of the ancestor of \a mo;
268  * return 0: if not;
269  * otherwise: values < 0, errors.
270  */
271 static int mdd_is_parent(const struct lu_env *env,
272                         struct mdd_device *mdd,
273                         struct mdd_object *mo,
274                         const struct lu_attr *attr,
275                         const struct lu_fid *tfid)
276 {
277         struct mdd_object *mp;
278         struct lu_fid *pfid;
279         int rc;
280
281         LASSERT(!lu_fid_eq(mdd_object_fid(mo), tfid));
282         pfid = &mdd_env_info(env)->mti_fid;
283
284         if (mdd_is_root(mdd, mdd_object_fid(mo)))
285                 return 0;
286
287         if (mdd_is_root(mdd, tfid))
288                 return 1;
289
290         rc = mdd_parent_fid(env, mo, attr, pfid);
291         if (rc)
292                 return rc;
293
294         while (1) {
295                 if (lu_fid_eq(pfid, tfid))
296                         return 1;
297
298                 if (mdd_is_root(mdd, pfid))
299                         return 0;
300
301                 mp = mdd_object_find(env, mdd, pfid);
302                 if (IS_ERR(mp))
303                         return PTR_ERR(mp);
304
305                 if (!mdd_object_exists(mp)) {
306                         mdd_object_put(env, mp);
307                         return -ENOENT;
308                 }
309
310                 rc = mdd_parent_fid(env, mp, attr, pfid);
311                 mdd_object_put(env, mp);
312                 if (rc)
313                         return rc;
314         }
315
316         return 0;
317 }
318
319 /*
320  * No permission check is needed.
321  *
322  * returns 1: if fid is ancestor of @mo;
323  * returns 0: if fid is not an ancestor of @mo;
324  * returns < 0: if error
325  */
326 int mdd_is_subdir(const struct lu_env *env, struct md_object *mo,
327                   const struct lu_fid *fid)
328 {
329         struct mdd_device *mdd = mdo2mdd(mo);
330         struct lu_attr *attr = MDD_ENV_VAR(env, cattr);
331         int rc;
332         ENTRY;
333
334         if (!mdd_object_exists(md2mdd_obj(mo)))
335                 RETURN(-ENOENT);
336
337         if (!S_ISDIR(mdd_object_type(md2mdd_obj(mo))))
338                 RETURN(-ENOTDIR);
339
340         rc = mdd_la_get(env, md2mdd_obj(mo), attr);
341         if (rc != 0)
342                 RETURN(rc);
343
344         rc = mdd_is_parent(env, mdd, md2mdd_obj(mo), attr, fid);
345         RETURN(rc);
346 }
347
348 /*
349  * Check that @dir contains no entries except (possibly) dot and dotdot.
350  *
351  * Returns:
352  *
353  *             0        empty
354  *      -ENOTDIR        not a directory object
355  *    -ENOTEMPTY        not empty
356  *           -ve        other error
357  *
358  */
359 int mdd_dir_is_empty(const struct lu_env *env, struct mdd_object *dir)
360 {
361         struct dt_it     *it;
362         struct dt_object *obj;
363         const struct dt_it_ops *iops;
364         int result;
365         ENTRY;
366
367         obj = mdd_object_child(dir);
368         if (!dt_try_as_dir(env, obj))
369                 RETURN(-ENOTDIR);
370
371         iops = &obj->do_index_ops->dio_it;
372         it = iops->init(env, obj, LUDA_64BITHASH);
373         if (!IS_ERR(it)) {
374                 result = iops->get(env, it, (const struct dt_key *)"");
375                 if (result > 0) {
376                         int i;
377                         for (result = 0, i = 0; result == 0 && i < 3; ++i)
378                                 result = iops->next(env, it);
379                         if (result == 0)
380                                 result = -ENOTEMPTY;
381                         else if (result == 1)
382                                 result = 0;
383                 } else if (result == 0)
384                         /*
385                          * Huh? Index contains no zero key?
386                          */
387                         result = -EIO;
388
389                 iops->put(env, it);
390                 iops->fini(env, it);
391         } else {
392                 result = PTR_ERR(it);
393                 /* -ENODEV means no valid stripe */
394                 if (result == -ENODEV)
395                         RETURN(0);
396         }
397         RETURN(result);
398 }
399
400 /**
401  * Determine if the target object can be hard linked, and right now it only
402  * checks if the link count reach the maximum limit. Note: for ldiskfs, the
403  * directory nlink count might exceed the maximum link count(see
404  * osd_object_ref_add), so it only check nlink for non-directories.
405  *
406  * \param[in] env       thread environment
407  * \param[in] obj       object being linked to
408  * \param[in] la        attributes of \a obj
409  *
410  * \retval              0 if \a obj can be hard linked
411  * \retval              negative error if \a obj is a directory or has too
412  *                      many links
413  */
414 static int __mdd_may_link(const struct lu_env *env, struct mdd_object *obj,
415                           const struct lu_attr *la)
416 {
417         struct mdd_device *m = mdd_obj2mdd_dev(obj);
418         ENTRY;
419
420         LASSERT(la != NULL);
421
422         /* Subdir count limitation can be broken through
423          * (see osd_object_ref_add), so only check non-directory here. */
424         if (!S_ISDIR(la->la_mode) &&
425             la->la_nlink >= m->mdd_dt_conf.ddp_max_nlink)
426                 RETURN(-EMLINK);
427
428         RETURN(0);
429 }
430
431 /**
432  * Check whether it may create the cobj under the pobj.
433  *
434  * \param[in] env       execution environment
435  * \param[in] pobj      the parent directory
436  * \param[in] pattr     the attribute of the parent directory
437  * \param[in] cobj      the child to be created
438  * \param[in] check_perm        if check WRITE|EXEC permission for parent
439  *
440  * \retval              = 0 create the child under this dir is allowed
441  * \retval              negative errno create the child under this dir is
442  *                      not allowed
443  */
444 int mdd_may_create(const struct lu_env *env, struct mdd_object *pobj,
445                    const struct lu_attr *pattr, struct mdd_object *cobj,
446                    bool check_perm)
447 {
448         int rc = 0;
449         ENTRY;
450
451         if (cobj && mdd_object_exists(cobj))
452                 RETURN(-EEXIST);
453
454         if (mdd_is_dead_obj(pobj))
455                 RETURN(-ENOENT);
456
457         if (check_perm)
458                 rc = mdd_permission_internal_locked(env, pobj, pattr,
459                                                     MAY_WRITE | MAY_EXEC,
460                                                     DT_TGT_PARENT);
461         RETURN(rc);
462 }
463
464 /*
465  * Check whether can unlink from the pobj in the case of "cobj == NULL".
466  */
467 int mdd_may_unlink(const struct lu_env *env, struct mdd_object *pobj,
468                    const struct lu_attr *pattr, const struct lu_attr *attr)
469 {
470         int rc;
471         ENTRY;
472
473         if (mdd_is_dead_obj(pobj))
474                 RETURN(-ENOENT);
475
476         if (attr->la_flags & (LUSTRE_APPEND_FL | LUSTRE_IMMUTABLE_FL))
477                 RETURN(-EPERM);
478
479         rc = mdd_permission_internal_locked(env, pobj, pattr,
480                                             MAY_WRITE | MAY_EXEC,
481                                             DT_TGT_PARENT);
482         if (rc != 0)
483                 RETURN(rc);
484
485         if (pattr->la_flags & LUSTRE_APPEND_FL)
486                 RETURN(-EPERM);
487
488         RETURN(rc);
489 }
490
491 /*
492  * pobj == NULL is remote ops case, under such case, pobj's
493  * VTX feature has been checked already, no need check again.
494  */
495 static inline int mdd_is_sticky(const struct lu_env *env,
496                                 struct mdd_object *pobj,
497                                 const struct lu_attr *pattr,
498                                 struct mdd_object *cobj,
499                                 const struct lu_attr *cattr)
500 {
501         struct lu_ucred *uc = lu_ucred_assert(env);
502
503         if (pobj != NULL) {
504                 LASSERT(pattr != NULL);
505                 if (!(pattr->la_mode & S_ISVTX) ||
506                     (pattr->la_uid == uc->uc_fsuid))
507                         return 0;
508         }
509
510         LASSERT(cattr != NULL);
511         if (cattr->la_uid == uc->uc_fsuid)
512                 return 0;
513
514         return !md_capable(uc, CFS_CAP_FOWNER);
515 }
516
517 static int mdd_may_delete_entry(const struct lu_env *env,
518                                 struct mdd_object *pobj,
519                                 const struct lu_attr *pattr,
520                                 int check_perm)
521 {
522         ENTRY;
523
524         LASSERT(pobj != NULL);
525         if (!mdd_object_exists(pobj))
526                 RETURN(-ENOENT);
527
528         if (mdd_is_dead_obj(pobj))
529                 RETURN(-ENOENT);
530
531         if (check_perm) {
532                 int rc;
533                 rc = mdd_permission_internal_locked(env, pobj, pattr,
534                                             MAY_WRITE | MAY_EXEC,
535                                             DT_TGT_PARENT);
536                 if (rc)
537                         RETURN(rc);
538         }
539
540         if (pattr->la_flags & LUSTRE_APPEND_FL)
541                 RETURN(-EPERM);
542
543         RETURN(0);
544 }
545
546 /*
547  * Check whether it may delete the cobj from the pobj.
548  * pobj maybe NULL
549  */
550 int mdd_may_delete(const struct lu_env *env, struct mdd_object *tpobj,
551                    const struct lu_attr *tpattr, struct mdd_object *tobj,
552                    const struct lu_attr *tattr, const struct lu_attr *cattr,
553                    int check_perm, int check_empty)
554 {
555         int rc = 0;
556         ENTRY;
557
558         if (tpobj) {
559                 LASSERT(tpattr != NULL);
560                 rc = mdd_may_delete_entry(env, tpobj, tpattr, check_perm);
561                 if (rc != 0)
562                         RETURN(rc);
563         }
564
565         if (tobj == NULL)
566                 RETURN(0);
567
568         if (!mdd_object_exists(tobj))
569                 RETURN(-ENOENT);
570
571         if (mdd_is_dead_obj(tobj))
572                 RETURN(-ESTALE);
573
574         if (mdd_is_sticky(env, tpobj, tpattr, tobj, tattr))
575                 RETURN(-EPERM);
576
577         if (tattr->la_flags & (LUSTRE_APPEND_FL | LUSTRE_IMMUTABLE_FL))
578                 RETURN(-EPERM);
579
580         /* additional check the rename case */
581         if (cattr) {
582                 if (S_ISDIR(cattr->la_mode)) {
583                         if (!S_ISDIR(tattr->la_mode))
584                                 RETURN(-ENOTDIR);
585
586                         if (mdd_is_root(mdo2mdd(&tobj->mod_obj),
587                                         mdd_object_fid(tobj)))
588                                 RETURN(-EBUSY);
589                 } else if (S_ISDIR(tattr->la_mode))
590                         RETURN(-EISDIR);
591         }
592
593         if (S_ISDIR(tattr->la_mode) && check_empty)
594                 rc = mdd_dir_is_empty(env, tobj);
595
596         RETURN(rc);
597 }
598
599 /**
600  * Check whether it can create the link file(linked to @src_obj) under
601  * the target directory(@tgt_obj), and src_obj has been locked by
602  * mdd_write_lock.
603  *
604  * \param[in] env       execution environment
605  * \param[in] tgt_obj   the target directory
606  * \param[in] tattr     attributes of target directory
607  * \param[in] lname     the link name
608  * \param[in] src_obj   source object for link
609  * \param[in] cattr     attributes for source object
610  *
611  * \retval              = 0 it is allowed to create the link file under tgt_obj
612  * \retval              negative error not allowed to create the link file
613  */
614 static int mdd_link_sanity_check(const struct lu_env *env,
615                                  struct mdd_object *tgt_obj,
616                                  const struct lu_attr *tattr,
617                                  const struct lu_name *lname,
618                                  struct mdd_object *src_obj,
619                                  const struct lu_attr *cattr)
620 {
621         struct mdd_device *m = mdd_obj2mdd_dev(src_obj);
622         int rc = 0;
623         ENTRY;
624
625         if (!mdd_object_exists(src_obj))
626                 RETURN(-ENOENT);
627
628         if (mdd_is_dead_obj(src_obj))
629                 RETURN(-ESTALE);
630
631         /* Local ops, no lookup before link, check filename length here. */
632         rc = mdd_name_check(m, lname);
633         if (rc < 0)
634                 RETURN(rc);
635
636         if (cattr->la_flags & (LUSTRE_IMMUTABLE_FL | LUSTRE_APPEND_FL))
637                 RETURN(-EPERM);
638
639         if (S_ISDIR(mdd_object_type(src_obj)))
640                 RETURN(-EPERM);
641
642         LASSERT(src_obj != tgt_obj);
643         rc = mdd_may_create(env, tgt_obj, tattr, NULL, true);
644         if (rc != 0)
645                 RETURN(rc);
646
647         rc = __mdd_may_link(env, src_obj, cattr);
648
649         RETURN(rc);
650 }
651
652 static int __mdd_index_delete_only(const struct lu_env *env, struct mdd_object *pobj,
653                                    const char *name, struct thandle *handle)
654 {
655         struct dt_object *next = mdd_object_child(pobj);
656         int rc;
657         ENTRY;
658
659         if (dt_try_as_dir(env, next))
660                 rc = dt_delete(env, next, (struct dt_key *)name, handle);
661         else
662                 rc = -ENOTDIR;
663
664         RETURN(rc);
665 }
666
667 static int __mdd_index_insert_only(const struct lu_env *env,
668                                    struct mdd_object *pobj,
669                                    const struct lu_fid *lf, __u32 type,
670                                    const char *name,
671                                    struct thandle *handle)
672 {
673         struct dt_object *next = mdd_object_child(pobj);
674         int               rc;
675         ENTRY;
676
677         if (dt_try_as_dir(env, next)) {
678                 struct dt_insert_rec    *rec = &mdd_env_info(env)->mti_dt_rec;
679
680                 rec->rec_fid = lf;
681                 rec->rec_type = type;
682                 rc = dt_insert(env, next, (const struct dt_rec *)rec,
683                                (const struct dt_key *)name, handle);
684         } else {
685                 rc = -ENOTDIR;
686         }
687         RETURN(rc);
688 }
689
690 /* insert named index, add reference if isdir */
691 static int __mdd_index_insert(const struct lu_env *env, struct mdd_object *pobj,
692                               const struct lu_fid *lf, __u32 type,
693                               const char *name, struct thandle *handle)
694 {
695         int rc;
696         ENTRY;
697
698         rc = __mdd_index_insert_only(env, pobj, lf, type, name, handle);
699         if (rc == 0 && S_ISDIR(type)) {
700                 mdd_write_lock(env, pobj, DT_TGT_PARENT);
701                 mdo_ref_add(env, pobj, handle);
702                 mdd_write_unlock(env, pobj);
703         }
704
705         RETURN(rc);
706 }
707
708 /* delete named index, drop reference if isdir */
709 static int __mdd_index_delete(const struct lu_env *env, struct mdd_object *pobj,
710                               const char *name, int is_dir,
711                               struct thandle *handle)
712 {
713         int rc;
714         ENTRY;
715
716         rc = __mdd_index_delete_only(env, pobj, name, handle);
717         if (rc == 0 && is_dir) {
718                 mdd_write_lock(env, pobj, DT_TGT_PARENT);
719                 mdo_ref_del(env, pobj, handle);
720                 mdd_write_unlock(env, pobj);
721         }
722
723         RETURN(rc);
724 }
725
726 static int mdd_llog_record_calc_size(const struct lu_env *env,
727                                      const struct lu_name *tname,
728                                      const struct lu_name *sname)
729 {
730         const struct lu_ucred   *uc = lu_ucred(env);
731         enum changelog_rec_flags clf_flags = CLF_EXTRA_FLAGS;
732         enum changelog_rec_extra_flags crfe = CLFE_UIDGID | CLFE_NID;
733
734         if (sname != NULL)
735                 clf_flags |= CLF_RENAME;
736
737         if (uc != NULL && uc->uc_jobid[0] != '\0')
738                 clf_flags |= CLF_JOBID;
739
740         return llog_data_len(LLOG_CHANGELOG_HDR_SZ +
741                              changelog_rec_offset(clf_flags, crfe) +
742                              (tname != NULL ? tname->ln_namelen : 0) +
743                              (sname != NULL ? 1 + sname->ln_namelen : 0));
744 }
745
746 int mdd_declare_changelog_store(const struct lu_env *env,
747                                 struct mdd_device *mdd,
748                                 enum changelog_rec_type type,
749                                 const struct lu_name *tname,
750                                 const struct lu_name *sname,
751                                 struct thandle *handle)
752 {
753         struct obd_device               *obd = mdd2obd_dev(mdd);
754         struct llog_ctxt                *ctxt;
755         struct llog_changelog_rec       *rec;
756         struct lu_buf                   *buf;
757         struct thandle                  *llog_th;
758         int                              reclen;
759         int                              rc;
760
761         if (!mdd_changelog_enabled(env, mdd, type))
762                 return 0;
763
764         reclen = mdd_llog_record_calc_size(env, tname, sname);
765         buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_big_buf, reclen);
766         if (buf->lb_buf == NULL)
767                 return -ENOMEM;
768
769         rec = buf->lb_buf;
770         rec->cr_hdr.lrh_len = reclen;
771         rec->cr_hdr.lrh_type = CHANGELOG_REC;
772
773         ctxt = llog_get_context(obd, LLOG_CHANGELOG_ORIG_CTXT);
774         if (ctxt == NULL)
775                 return -ENXIO;
776
777         llog_th = thandle_get_sub(env, handle, ctxt->loc_handle->lgh_obj);
778         if (IS_ERR(llog_th))
779                 GOTO(out_put, rc = PTR_ERR(llog_th));
780
781         rc = llog_declare_add(env, ctxt->loc_handle, &rec->cr_hdr, llog_th);
782
783 out_put:
784         llog_ctxt_put(ctxt);
785
786         return rc;
787 }
788
789 int mdd_changelog_write_rec(const struct lu_env *env,
790                             struct llog_handle *loghandle,
791                             struct llog_rec_hdr *r,
792                             struct llog_cookie *cookie,
793                             int idx, struct thandle *th)
794 {
795         int rc;
796
797         if (r->lrh_type == CHANGELOG_REC) {
798                 struct mdd_device *mdd;
799                 struct llog_changelog_rec *rec;
800
801                 mdd = lu2mdd_dev(loghandle->lgh_ctxt->loc_obd->obd_lu_dev);
802                 rec = container_of(r, struct llog_changelog_rec, cr_hdr);
803
804                 spin_lock(&mdd->mdd_cl.mc_lock);
805                 rec->cr.cr_index = mdd->mdd_cl.mc_index + 1;
806                 spin_unlock(&mdd->mdd_cl.mc_lock);
807
808                 rc = llog_osd_ops.lop_write_rec(env, loghandle, r,
809                                                 cookie, idx, th);
810
811                 /*
812                  * if current llog is full, we will generate a new
813                  * llog, and since it's actually not an error, let's
814                  * avoid increasing index so that userspace apps
815                  * should not see a gap in the changelog sequence
816                  */
817                 if (!(rc == -ENOSPC && llog_is_full(loghandle))) {
818                         spin_lock(&mdd->mdd_cl.mc_lock);
819                         ++mdd->mdd_cl.mc_index;
820                         spin_unlock(&mdd->mdd_cl.mc_lock);
821                 }
822         } else {
823                 rc = llog_osd_ops.lop_write_rec(env, loghandle, r,
824                                                 cookie, idx, th);
825         }
826
827         return rc;
828 }
829
830 /** Add a changelog entry \a rec to the changelog llog
831  * \param mdd
832  * \param rec
833  * \param handle - currently ignored since llogs start their own transaction;
834  *              this will hopefully be fixed in llog rewrite
835  * \retval 0 ok
836  */
837 int mdd_changelog_store(const struct lu_env *env, struct mdd_device *mdd,
838                         struct llog_changelog_rec *rec, struct thandle *th)
839 {
840         struct obd_device       *obd = mdd2obd_dev(mdd);
841         struct llog_ctxt        *ctxt;
842         struct thandle          *llog_th;
843         int                      rc;
844
845         rec->cr_hdr.lrh_len = llog_data_len(sizeof(*rec) +
846                                             changelog_rec_varsize(&rec->cr));
847
848         /* llog_lvfs_write_rec sets the llog tail len */
849         rec->cr_hdr.lrh_type = CHANGELOG_REC;
850         rec->cr.cr_time = cl_time();
851
852         ctxt = llog_get_context(obd, LLOG_CHANGELOG_ORIG_CTXT);
853         if (ctxt == NULL)
854                 return -ENXIO;
855
856         llog_th = thandle_get_sub(env, th, ctxt->loc_handle->lgh_obj);
857         if (IS_ERR(llog_th))
858                 GOTO(out_put, rc = PTR_ERR(llog_th));
859
860         OBD_FAIL_TIMEOUT(OBD_FAIL_MDS_CHANGELOG_REORDER, cfs_fail_val);
861         /* nested journal transaction */
862         rc = llog_add(env, ctxt->loc_handle, &rec->cr_hdr, NULL, llog_th);
863
864         /* time to recover some space ?? */
865         if (likely(!mdd->mdd_changelog_gc ||
866                    mdd->mdd_cl.mc_gc_task != MDD_CHLG_GC_NONE ||
867                    mdd->mdd_changelog_min_gc_interval >=
868                         ktime_get_real_seconds() - mdd->mdd_cl.mc_gc_time))
869                 /* save a spin_lock trip */
870                 goto out_put;
871         spin_lock(&mdd->mdd_cl.mc_lock);
872         if (likely(mdd->mdd_changelog_gc &&
873                      mdd->mdd_cl.mc_gc_task == MDD_CHLG_GC_NONE &&
874                      ktime_get_real_seconds() - mdd->mdd_cl.mc_gc_time >
875                         mdd->mdd_changelog_min_gc_interval)) {
876                 if (unlikely(llog_cat_free_space(ctxt->loc_handle) <=
877                              mdd->mdd_changelog_min_free_cat_entries ||
878                              OBD_FAIL_CHECK(OBD_FAIL_FORCE_GC_THREAD))) {
879                         CWARN("%s:%s low on changelog_catalog free entries, "
880                               "starting ChangeLog garbage collection thread\n",
881                               obd->obd_name,
882                               OBD_FAIL_CHECK(OBD_FAIL_FORCE_GC_THREAD) ?
883                                 " simulate" : "");
884
885                         /* indicate further kthread run will occur outside
886                          * right after current journal transaction filling has
887                          * completed
888                          */
889                         mdd->mdd_cl.mc_gc_task = MDD_CHLG_GC_NEED;
890                 }
891                 /* next check in mdd_changelog_min_gc_interval anyway
892                  */
893                 mdd->mdd_cl.mc_gc_time = ktime_get_real_seconds();
894         }
895         spin_unlock(&mdd->mdd_cl.mc_lock);
896 out_put:
897         llog_ctxt_put(ctxt);
898         if (rc > 0)
899                 rc = 0;
900         return rc;
901 }
902
903 static void mdd_changelog_rec_ext_rename(struct changelog_rec *rec,
904                                          const struct lu_fid *sfid,
905                                          const struct lu_fid *spfid,
906                                          const struct lu_name *sname)
907 {
908         struct changelog_ext_rename *rnm = changelog_rec_rename(rec);
909         size_t extsize;
910
911         LASSERT(sfid != NULL);
912         LASSERT(spfid != NULL);
913         LASSERT(sname != NULL);
914
915         extsize = sname->ln_namelen + 1;
916
917         rnm->cr_sfid = *sfid;
918         rnm->cr_spfid = *spfid;
919
920         changelog_rec_name(rec)[rec->cr_namelen] = '\0';
921         strlcpy(changelog_rec_sname(rec), sname->ln_name, extsize);
922         rec->cr_namelen += extsize;
923 }
924
925 void mdd_changelog_rec_ext_jobid(struct changelog_rec *rec, const char *jobid)
926 {
927         struct changelog_ext_jobid *jid = changelog_rec_jobid(rec);
928
929         if (jobid == NULL || jobid[0] == '\0')
930                 return;
931
932         strlcpy(jid->cr_jobid, jobid, sizeof(jid->cr_jobid));
933 }
934
935 void mdd_changelog_rec_ext_extra_flags(struct changelog_rec *rec, __u64 eflags)
936 {
937         struct changelog_ext_extra_flags *ef = changelog_rec_extra_flags(rec);
938
939         ef->cr_extra_flags = eflags;
940 }
941
942 void mdd_changelog_rec_extra_uidgid(struct changelog_rec *rec,
943                                     __u64 uid, __u64 gid)
944 {
945         struct changelog_ext_uidgid *uidgid = changelog_rec_uidgid(rec);
946
947         uidgid->cr_uid = uid;
948         uidgid->cr_gid = gid;
949 }
950
951 void mdd_changelog_rec_extra_nid(struct changelog_rec *rec,
952                                  lnet_nid_t nid)
953 {
954         struct changelog_ext_nid *clnid = changelog_rec_nid(rec);
955
956         clnid->cr_nid = nid;
957 }
958
959 void mdd_changelog_rec_extra_omode(struct changelog_rec *rec, u32 flags)
960 {
961         struct changelog_ext_openmode *omd = changelog_rec_openmode(rec);
962
963         omd->cr_openflags = flags;
964 }
965
966 void mdd_changelog_rec_extra_xattr(struct changelog_rec *rec,
967                                    const char *xattr_name)
968 {
969         struct changelog_ext_xattr *xattr = changelog_rec_xattr(rec);
970
971         strlcpy(xattr->cr_xattr, xattr_name, sizeof(xattr->cr_xattr));
972 }
973
974 /** Store a namespace change changelog record
975  * If this fails, we must fail the whole transaction; we don't
976  * want the change to commit without the log entry.
977  * \param target - mdd_object of change
978  * \param tpfid - target parent dir/object fid
979  * \param sfid - source object fid
980  * \param spfid - source parent fid
981  * \param tname - target name string
982  * \param sname - source name string
983  * \param handle - transaction handle
984  */
985 int mdd_changelog_ns_store(const struct lu_env *env,
986                            struct mdd_device *mdd,
987                            enum changelog_rec_type type,
988                            enum changelog_rec_flags clf_flags,
989                            struct mdd_object *target,
990                            const struct lu_fid *tpfid,
991                            const struct lu_fid *sfid,
992                            const struct lu_fid *spfid,
993                            const struct lu_name *tname,
994                            const struct lu_name *sname,
995                            struct thandle *handle)
996 {
997         const struct lu_ucred           *uc = lu_ucred(env);
998         struct llog_changelog_rec       *rec;
999         struct lu_buf                   *buf;
1000         int                              reclen;
1001         __u64                            xflags = CLFE_INVALID;
1002         int                              rc;
1003         ENTRY;
1004
1005         if (!mdd_changelog_enabled(env, mdd, type))
1006                 RETURN(0);
1007
1008         LASSERT(tpfid != NULL);
1009         LASSERT(tname != NULL);
1010         LASSERT(handle != NULL);
1011
1012         reclen = mdd_llog_record_calc_size(env, tname, sname);
1013         buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_big_buf, reclen);
1014         if (buf->lb_buf == NULL)
1015                 RETURN(-ENOMEM);
1016         rec = buf->lb_buf;
1017
1018         clf_flags &= CLF_FLAGMASK;
1019         clf_flags |= CLF_EXTRA_FLAGS;
1020
1021         if (uc) {
1022                 if (uc->uc_jobid[0] != '\0')
1023                         clf_flags |= CLF_JOBID;
1024                 xflags |= CLFE_UIDGID;
1025                 xflags |= CLFE_NID;
1026         }
1027
1028         if (sname != NULL)
1029                 clf_flags |= CLF_RENAME;
1030         else
1031                 clf_flags |= CLF_VERSION;
1032
1033         rec->cr.cr_flags = clf_flags;
1034
1035         if (clf_flags & CLF_EXTRA_FLAGS) {
1036                 mdd_changelog_rec_ext_extra_flags(&rec->cr, xflags);
1037                 if (xflags & CLFE_UIDGID)
1038                         mdd_changelog_rec_extra_uidgid(&rec->cr,
1039                                                        uc->uc_uid, uc->uc_gid);
1040                 if (xflags & CLFE_NID)
1041                         mdd_changelog_rec_extra_nid(&rec->cr, uc->uc_nid);
1042         }
1043
1044         rec->cr.cr_type = (__u32)type;
1045         rec->cr.cr_pfid = *tpfid;
1046         rec->cr.cr_namelen = tname->ln_namelen;
1047         memcpy(changelog_rec_name(&rec->cr), tname->ln_name, tname->ln_namelen);
1048
1049         if (clf_flags & CLF_RENAME)
1050                 mdd_changelog_rec_ext_rename(&rec->cr, sfid, spfid, sname);
1051
1052         if (clf_flags & CLF_JOBID)
1053                 mdd_changelog_rec_ext_jobid(&rec->cr, uc->uc_jobid);
1054
1055         if (likely(target != NULL)) {
1056                 rec->cr.cr_tfid = *mdd_object_fid(target);
1057                 target->mod_cltime = ktime_get();
1058         } else {
1059                 fid_zero(&rec->cr.cr_tfid);
1060         }
1061
1062         rc = mdd_changelog_store(env, mdd, rec, handle);
1063         if (rc < 0) {
1064                 CERROR("%s: cannot store changelog record: type = %d, "
1065                        "name = '%s', t = "DFID", p = "DFID": rc = %d\n",
1066                        mdd2obd_dev(mdd)->obd_name, type, tname->ln_name,
1067                        PFID(&rec->cr.cr_tfid), PFID(&rec->cr.cr_pfid), rc);
1068                 return -EFAULT;
1069         }
1070
1071         return 0;
1072 }
1073
1074 static int __mdd_links_add(const struct lu_env *env,
1075                            struct mdd_object *mdd_obj,
1076                            struct linkea_data *ldata,
1077                            const struct lu_name *lname,
1078                            const struct lu_fid *pfid,
1079                            int first, int check)
1080 {
1081         int rc;
1082
1083         if (ldata->ld_leh == NULL) {
1084                 rc = first ? -ENODATA : mdd_links_read(env, mdd_obj, ldata);
1085                 if (rc) {
1086                         if (rc != -ENODATA)
1087                                 return rc;
1088                         rc = linkea_data_new(ldata,
1089                                              &mdd_env_info(env)->mti_link_buf);
1090                         if (rc)
1091                                 return rc;
1092                 }
1093         }
1094
1095         if (check) {
1096                 rc = linkea_links_find(ldata, lname, pfid);
1097                 if (rc && rc != -ENOENT)
1098                         return rc;
1099                 if (rc == 0)
1100                         return -EEXIST;
1101         }
1102
1103         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_LINKEA_MORE)) {
1104                 struct lu_fid *tfid = &mdd_env_info(env)->mti_fid2;
1105
1106                 *tfid = *pfid;
1107                 tfid->f_ver = ~0;
1108                 linkea_add_buf(ldata, lname, tfid);
1109         }
1110
1111         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_LINKEA_MORE2))
1112                 linkea_add_buf(ldata, lname, pfid);
1113
1114         return linkea_add_buf(ldata, lname, pfid);
1115 }
1116
1117 static int __mdd_links_del(const struct lu_env *env,
1118                            struct mdd_object *mdd_obj,
1119                            struct linkea_data *ldata,
1120                            const struct lu_name *lname,
1121                            const struct lu_fid *pfid)
1122 {
1123         int rc;
1124
1125         if (ldata->ld_leh == NULL) {
1126                 rc = mdd_links_read(env, mdd_obj, ldata);
1127                 if (rc)
1128                         return rc;
1129         }
1130
1131         rc = linkea_links_find(ldata, lname, pfid);
1132         if (rc)
1133                 return rc;
1134
1135         linkea_del_buf(ldata, lname);
1136         return 0;
1137 }
1138
1139 static int mdd_linkea_prepare(const struct lu_env *env,
1140                               struct mdd_object *mdd_obj,
1141                               const struct lu_fid *oldpfid,
1142                               const struct lu_name *oldlname,
1143                               const struct lu_fid *newpfid,
1144                               const struct lu_name *newlname,
1145                               int first, int check,
1146                               struct linkea_data *ldata)
1147 {
1148         int rc = 0;
1149         ENTRY;
1150
1151         if (OBD_FAIL_CHECK(OBD_FAIL_FID_IGIF))
1152                 RETURN(0);
1153
1154         LASSERT(oldpfid != NULL || newpfid != NULL);
1155
1156         if (mdd_obj->mod_flags & DEAD_OBJ)
1157                 /* Unnecessary to update linkEA for dead object.  */
1158                 RETURN(0);
1159
1160         if (oldpfid != NULL) {
1161                 rc = __mdd_links_del(env, mdd_obj, ldata, oldlname, oldpfid);
1162                 if (rc) {
1163                         if ((check == 1) || (rc != -ENODATA && rc != -ENOENT))
1164                                 RETURN(rc);
1165
1166                         /* No changes done. */
1167                         rc = 0;
1168                 }
1169         }
1170
1171         /* If renaming, add the new record */
1172         if (newpfid != NULL)
1173                 rc = __mdd_links_add(env, mdd_obj, ldata, newlname, newpfid,
1174                                      first, check);
1175
1176         RETURN(rc);
1177 }
1178
1179 int mdd_links_rename(const struct lu_env *env,
1180                      struct mdd_object *mdd_obj,
1181                      const struct lu_fid *oldpfid,
1182                      const struct lu_name *oldlname,
1183                      const struct lu_fid *newpfid,
1184                      const struct lu_name *newlname,
1185                      struct thandle *handle,
1186                      struct linkea_data *ldata,
1187                      int first, int check)
1188 {
1189         int rc = 0;
1190         ENTRY;
1191
1192         if (ldata == NULL) {
1193                 ldata = &mdd_env_info(env)->mti_link_data;
1194                 memset(ldata, 0, sizeof(*ldata));
1195                 rc = mdd_linkea_prepare(env, mdd_obj, oldpfid, oldlname,
1196                                         newpfid, newlname, first, check, ldata);
1197                 if (rc)
1198                         GOTO(out, rc);
1199         }
1200
1201         if (!(mdd_obj->mod_flags & DEAD_OBJ))
1202                 rc = mdd_links_write(env, mdd_obj, ldata, handle);
1203
1204         GOTO(out, rc);
1205
1206 out:
1207         if (rc != 0) {
1208                 if (newlname == NULL)
1209                         CERROR("link_ea add failed %d "DFID"\n",
1210                                rc, PFID(mdd_object_fid(mdd_obj)));
1211                 else if (oldpfid == NULL)
1212                         CERROR("link_ea add '%.*s' failed %d "DFID"\n",
1213                                newlname->ln_namelen, newlname->ln_name, rc,
1214                                PFID(mdd_object_fid(mdd_obj)));
1215                 else if (newpfid == NULL)
1216                         CERROR("link_ea del '%.*s' failed %d "DFID"\n",
1217                                oldlname->ln_namelen, oldlname->ln_name, rc,
1218                                PFID(mdd_object_fid(mdd_obj)));
1219                 else
1220                         CERROR("link_ea rename '%.*s'->'%.*s' failed %d "DFID
1221                                "\n", oldlname->ln_namelen, oldlname->ln_name,
1222                                newlname->ln_namelen, newlname->ln_name, rc,
1223                                PFID(mdd_object_fid(mdd_obj)));
1224         }
1225
1226         if (is_vmalloc_addr(ldata->ld_buf))
1227                 /* if we vmalloced a large buffer drop it */
1228                 lu_buf_free(ldata->ld_buf);
1229
1230         return rc;
1231 }
1232
1233 static inline int mdd_links_add(const struct lu_env *env,
1234                                 struct mdd_object *mdd_obj,
1235                                 const struct lu_fid *pfid,
1236                                 const struct lu_name *lname,
1237                                 struct thandle *handle,
1238                                 struct linkea_data *ldata, int first)
1239 {
1240         return mdd_links_rename(env, mdd_obj, NULL, NULL,
1241                                 pfid, lname, handle, ldata, first, 0);
1242 }
1243
1244 static inline int mdd_links_del(const struct lu_env *env,
1245                                 struct mdd_object *mdd_obj,
1246                                 const struct lu_fid *pfid,
1247                                 const struct lu_name *lname,
1248                                 struct thandle *handle)
1249 {
1250         return mdd_links_rename(env, mdd_obj, pfid, lname,
1251                                 NULL, NULL, handle, NULL, 0, 0);
1252 }
1253
1254 /** Read the link EA into a temp buffer.
1255  * Uses the name_buf since it is generally large.
1256  * \retval IS_ERR err
1257  * \retval ptr to \a lu_buf (always \a mti_big_buf)
1258  */
1259 struct lu_buf *mdd_links_get(const struct lu_env *env,
1260                              struct mdd_object *mdd_obj)
1261 {
1262         struct linkea_data ldata = { NULL };
1263         int rc;
1264
1265         rc = mdd_links_read(env, mdd_obj, &ldata);
1266         return rc ? ERR_PTR(rc) : ldata.ld_buf;
1267 }
1268
1269 int mdd_links_write(const struct lu_env *env, struct mdd_object *mdd_obj,
1270                     struct linkea_data *ldata, struct thandle *handle)
1271 {
1272         const struct lu_buf *buf;
1273         int                 rc;
1274
1275         if (ldata == NULL || ldata->ld_buf == NULL ||
1276             ldata->ld_leh == NULL)
1277                 return 0;
1278
1279         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_NO_LINKEA))
1280                 return 0;
1281
1282 again:
1283         buf = mdd_buf_get_const(env, ldata->ld_buf->lb_buf,
1284                                 ldata->ld_leh->leh_len);
1285         rc = mdo_xattr_set(env, mdd_obj, buf, XATTR_NAME_LINK, 0, handle);
1286         if (unlikely(rc == -ENOSPC)) {
1287                 rc = linkea_overflow_shrink(ldata);
1288                 if (likely(rc > 0))
1289                         goto again;
1290         }
1291
1292         return rc;
1293 }
1294
1295 static int mdd_declare_links_add(const struct lu_env *env,
1296                                  struct mdd_object *mdd_obj,
1297                                  struct thandle *handle,
1298                                  struct linkea_data *ldata)
1299 {
1300         int     rc;
1301         int     ea_len;
1302         void    *linkea;
1303
1304         if (ldata != NULL && ldata->ld_leh != NULL) {
1305                 ea_len = ldata->ld_leh->leh_len;
1306                 linkea = ldata->ld_buf->lb_buf;
1307         } else {
1308                 ea_len = MAX_LINKEA_SIZE;
1309                 linkea = NULL;
1310         }
1311
1312         rc = mdo_declare_xattr_set(env, mdd_obj,
1313                                    mdd_buf_get_const(env, linkea, ea_len),
1314                                    XATTR_NAME_LINK, 0, handle);
1315
1316         return rc;
1317 }
1318
1319 static inline int mdd_declare_links_del(const struct lu_env *env,
1320                                         struct mdd_object *c,
1321                                         struct thandle *handle)
1322 {
1323         int rc = 0;
1324
1325         /* For directory, the linkEA will be removed together
1326          * with the object. */
1327         if (!S_ISDIR(mdd_object_type(c)))
1328                 rc = mdd_declare_links_add(env, c, handle, NULL);
1329
1330         return rc;
1331 }
1332
1333 static int mdd_declare_link(const struct lu_env *env,
1334                             struct mdd_device *mdd,
1335                             struct mdd_object *p,
1336                             struct mdd_object *c,
1337                             const struct lu_name *name,
1338                             struct thandle *handle,
1339                             struct lu_attr *la,
1340                             struct linkea_data *data)
1341 {
1342         struct lu_fid tfid = *mdd_object_fid(c);
1343         int rc;
1344
1345         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_DANGLING3))
1346                 tfid.f_oid = cfs_fail_val;
1347
1348         rc = mdo_declare_index_insert(env, p, &tfid, mdd_object_type(c),
1349                                       name->ln_name, handle);
1350         if (rc != 0)
1351                 return rc;
1352
1353         rc = mdo_declare_ref_add(env, c, handle);
1354         if (rc != 0)
1355                 return rc;
1356
1357         la->la_valid = LA_CTIME | LA_MTIME;
1358         rc = mdo_declare_attr_set(env, p, la, handle);
1359         if (rc != 0)
1360                 return rc;
1361
1362         la->la_valid = LA_CTIME;
1363         rc = mdo_declare_attr_set(env, c, la, handle);
1364         if (rc != 0)
1365                 return rc;
1366
1367         rc = mdd_declare_links_add(env, c, handle, data);
1368         if (rc != 0)
1369                 return rc;
1370
1371         rc = mdd_declare_changelog_store(env, mdd, CL_HARDLINK, name, NULL,
1372                                          handle);
1373
1374         return rc;
1375 }
1376
1377 static int mdd_link(const struct lu_env *env, struct md_object *tgt_obj,
1378                     struct md_object *src_obj, const struct lu_name *lname,
1379                     struct md_attr *ma)
1380 {
1381         const char *name = lname->ln_name;
1382         struct lu_attr    *la = &mdd_env_info(env)->mti_la_for_fix;
1383         struct mdd_object *mdd_tobj = md2mdd_obj(tgt_obj);
1384         struct mdd_object *mdd_sobj = md2mdd_obj(src_obj);
1385         struct lu_attr    *cattr = MDD_ENV_VAR(env, cattr);
1386         struct lu_attr    *tattr = MDD_ENV_VAR(env, tattr);
1387         struct mdd_device *mdd = mdo2mdd(src_obj);
1388         struct thandle *handle;
1389         struct lu_fid *tfid = &mdd_env_info(env)->mti_fid2;
1390         struct linkea_data *ldata = &mdd_env_info(env)->mti_link_data;
1391         int rc;
1392         ENTRY;
1393
1394         rc = mdd_la_get(env, mdd_sobj, cattr);
1395         if (rc != 0)
1396                 RETURN(rc);
1397
1398         rc = mdd_la_get(env, mdd_tobj, tattr);
1399         if (rc != 0)
1400                 RETURN(rc);
1401
1402         /*
1403          * If we are using project inheritance, we only allow hard link
1404          * creation in our tree when the project IDs are the same;
1405          * otherwise the tree quota mechanism could be circumvented.
1406          */
1407         if ((tattr->la_flags & LUSTRE_PROJINHERIT_FL) &&
1408             (tattr->la_projid != cattr->la_projid))
1409                 RETURN(-EXDEV);
1410
1411         handle = mdd_trans_create(env, mdd);
1412         if (IS_ERR(handle))
1413                 GOTO(out_pending, rc = PTR_ERR(handle));
1414
1415         memset(ldata, 0, sizeof(*ldata));
1416
1417         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1418         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1419
1420         /* Note: even this function will change ldata, but it comes from
1421          * thread_info, which is completely temporary and only seen in
1422          * this function, so we do not need reset ldata once it fails.*/
1423         rc = mdd_linkea_prepare(env, mdd_sobj, NULL, NULL,
1424                                 mdd_object_fid(mdd_tobj), lname, 0, 0, ldata);
1425         if (rc != 0)
1426                 GOTO(stop, rc);
1427
1428         rc = mdd_declare_link(env, mdd, mdd_tobj, mdd_sobj, lname, handle,
1429                               la, ldata);
1430         if (rc)
1431                 GOTO(stop, rc);
1432
1433         rc = mdd_trans_start(env, mdd, handle);
1434         if (rc)
1435                 GOTO(stop, rc);
1436
1437         mdd_write_lock(env, mdd_sobj, DT_TGT_CHILD);
1438         rc = mdd_link_sanity_check(env, mdd_tobj, tattr, lname, mdd_sobj,
1439                                    cattr);
1440         if (rc)
1441                 GOTO(out_unlock, rc);
1442
1443         if (!OBD_FAIL_CHECK(OBD_FAIL_LFSCK_LESS_NLINK)) {
1444                 rc = mdo_ref_add(env, mdd_sobj, handle);
1445                 if (rc != 0)
1446                         GOTO(out_unlock, rc);
1447         }
1448
1449         *tfid = *mdd_object_fid(mdd_sobj);
1450         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_DANGLING3))
1451                 tfid->f_oid = cfs_fail_val;
1452
1453         rc = __mdd_index_insert_only(env, mdd_tobj, tfid,
1454                                      mdd_object_type(mdd_sobj), name, handle);
1455         if (rc != 0) {
1456                 mdo_ref_del(env, mdd_sobj, handle);
1457                 GOTO(out_unlock, rc);
1458         }
1459
1460         la->la_valid = LA_CTIME | LA_MTIME;
1461         rc = mdd_update_time(env, mdd_tobj, tattr, la, handle);
1462         if (rc)
1463                 GOTO(out_unlock, rc);
1464
1465         la->la_valid = LA_CTIME;
1466         rc = mdd_update_time(env, mdd_sobj, cattr, la, handle);
1467         if (rc == 0)
1468                 /* Note: The failure of links_add should not cause the
1469                  * link failure, so do not check return value. */
1470                 mdd_links_add(env, mdd_sobj, mdd_object_fid(mdd_tobj),
1471                               lname, handle, ldata, 0);
1472
1473         EXIT;
1474 out_unlock:
1475         mdd_write_unlock(env, mdd_sobj);
1476         if (rc == 0)
1477                 rc = mdd_changelog_ns_store(env, mdd, CL_HARDLINK, 0, mdd_sobj,
1478                                             mdd_object_fid(mdd_tobj), NULL,
1479                                             NULL, lname, NULL, handle);
1480 stop:
1481         rc = mdd_trans_stop(env, mdd, rc, handle);
1482         if (is_vmalloc_addr(ldata->ld_buf))
1483                 /* if we vmalloced a large buffer drop it */
1484                 lu_buf_free(ldata->ld_buf);
1485 out_pending:
1486         return rc;
1487 }
1488
1489 static int mdd_mark_orphan_object(const struct lu_env *env,
1490                                 struct mdd_object *obj, struct thandle *handle,
1491                                 bool declare)
1492 {
1493         struct lu_attr *attr = MDD_ENV_VAR(env, la_for_start);
1494         int rc;
1495
1496         attr->la_valid = LA_FLAGS;
1497         attr->la_flags = LUSTRE_ORPHAN_FL;
1498
1499         if (declare)
1500                 rc = mdo_declare_attr_set(env, obj, attr, handle);
1501         else
1502                 rc = mdo_attr_set(env, obj, attr, handle);
1503
1504         return rc;
1505 }
1506
1507 static int mdd_declare_finish_unlink(const struct lu_env *env,
1508                                      struct mdd_object *obj,
1509                                      struct thandle *handle)
1510 {
1511         int rc;
1512
1513         /* Sigh, we do not know if the unlink object will become orphan in
1514          * declare phase, but fortunately the flags here does not matter
1515          * in current declare implementation */
1516         rc = mdd_mark_orphan_object(env, obj, handle, true);
1517         if (rc != 0)
1518                 return rc;
1519
1520         rc = mdo_declare_destroy(env, obj, handle);
1521         if (rc != 0)
1522                 return rc;
1523
1524         rc = mdd_orphan_declare_insert(env, obj, mdd_object_type(obj), handle);
1525         if (rc != 0)
1526                 return rc;
1527
1528         return mdd_declare_links_del(env, obj, handle);
1529 }
1530
1531 /* caller should take a lock before calling */
1532 int mdd_finish_unlink(const struct lu_env *env,
1533                       struct mdd_object *obj, struct md_attr *ma,
1534                       struct mdd_object *pobj,
1535                       const struct lu_name *lname,
1536                       struct thandle *th)
1537 {
1538         int rc = 0;
1539         int is_dir = S_ISDIR(ma->ma_attr.la_mode);
1540         ENTRY;
1541
1542         LASSERT(mdd_write_locked(env, obj) != 0);
1543
1544         if (ma->ma_attr.la_nlink == 0 || is_dir) {
1545                 /* add new orphan and the object
1546                  * will be deleted during mdd_close() */
1547                 obj->mod_flags |= DEAD_OBJ;
1548                 if (obj->mod_count) {
1549                         rc = mdd_orphan_insert(env, obj, th);
1550                         if (rc == 0)
1551                                 CDEBUG(D_HA, "Object "DFID" is inserted into "
1552                                         "orphan list, open count = %d\n",
1553                                         PFID(mdd_object_fid(obj)),
1554                                         obj->mod_count);
1555                         else
1556                                 CERROR("Object "DFID" fail to be an orphan, "
1557                                        "open count = %d, maybe cause failed "
1558                                        "open replay\n",
1559                                         PFID(mdd_object_fid(obj)),
1560                                         obj->mod_count);
1561
1562                         /* mark object as an orphan here, not
1563                          * before mdd_orphan_insert() as racing
1564                          * mdd_la_get() may propagate ORPHAN_OBJ
1565                          * causing the asserition */
1566                         rc = mdd_mark_orphan_object(env, obj, th, false);
1567                 } else {
1568                         rc = mdo_destroy(env, obj, th);
1569                 }
1570         } else if (!is_dir) {
1571                 /* old files may not have link ea; ignore errors */
1572                 mdd_links_del(env, obj, mdd_object_fid(pobj), lname, th);
1573         }
1574
1575         RETURN(rc);
1576 }
1577
1578 /*
1579  * pobj maybe NULL
1580  * has mdd_write_lock on cobj already, but not on pobj yet
1581  */
1582 int mdd_unlink_sanity_check(const struct lu_env *env, struct mdd_object *pobj,
1583                             const struct lu_attr *pattr,
1584                             struct mdd_object *cobj,
1585                             const struct lu_attr *cattr)
1586 {
1587         int rc;
1588         ENTRY;
1589
1590         rc = mdd_may_delete(env, pobj, pattr, cobj, cattr, NULL, 1, 1);
1591
1592         RETURN(rc);
1593 }
1594
1595 static int mdd_declare_unlink(const struct lu_env *env, struct mdd_device *mdd,
1596                               struct mdd_object *p, struct mdd_object *c,
1597                               const struct lu_name *name, struct md_attr *ma,
1598                               struct thandle *handle, int no_name, int is_dir)
1599 {
1600         struct lu_attr  *la = &mdd_env_info(env)->mti_la_for_fix;
1601         int              rc;
1602
1603         if (!OBD_FAIL_CHECK(OBD_FAIL_LFSCK_DANGLING2)) {
1604                 if (likely(no_name == 0)) {
1605                         rc = mdo_declare_index_delete(env, p, name->ln_name,
1606                                                       handle);
1607                         if (rc != 0)
1608                                 return rc;
1609                 }
1610
1611                 if (is_dir != 0) {
1612                         rc = mdo_declare_ref_del(env, p, handle);
1613                         if (rc != 0)
1614                                 return rc;
1615                 }
1616         }
1617
1618         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1619         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1620         la->la_valid = LA_CTIME | LA_MTIME;
1621         rc = mdo_declare_attr_set(env, p, la, handle);
1622         if (rc)
1623                 return rc;
1624
1625         if (c != NULL) {
1626                 rc = mdo_declare_ref_del(env, c, handle);
1627                 if (rc)
1628                         return rc;
1629
1630                 rc = mdo_declare_ref_del(env, c, handle);
1631                 if (rc)
1632                         return rc;
1633
1634                 la->la_valid = LA_CTIME;
1635                 rc = mdo_declare_attr_set(env, c, la, handle);
1636                 if (rc)
1637                         return rc;
1638
1639                 rc = mdd_declare_finish_unlink(env, c, handle);
1640                 if (rc)
1641                         return rc;
1642
1643                 /* FIXME: need changelog for remove entry */
1644                 rc = mdd_declare_changelog_store(env, mdd, CL_UNLINK, name,
1645                                                  NULL, handle);
1646         }
1647
1648         return rc;
1649 }
1650
1651 /*
1652  * test if a file has an HSM archive
1653  * if HSM attributes are not found in ma update them from
1654  * HSM xattr
1655  */
1656 static bool mdd_hsm_archive_exists(const struct lu_env *env,
1657                                    struct mdd_object *obj,
1658                                    struct md_attr *ma)
1659 {
1660         ENTRY;
1661
1662         if (!(ma->ma_valid & MA_HSM)) {
1663                 /* no HSM MD provided, read xattr */
1664                 struct lu_buf   *hsm_buf;
1665                 const size_t     buflen = sizeof(struct hsm_attrs);
1666                 int              rc;
1667
1668                 hsm_buf = mdd_buf_get(env, NULL, 0);
1669                 lu_buf_alloc(hsm_buf, buflen);
1670                 rc = mdo_xattr_get(env, obj, hsm_buf, XATTR_NAME_HSM);
1671                 rc = lustre_buf2hsm(hsm_buf->lb_buf, rc, &ma->ma_hsm);
1672                 lu_buf_free(hsm_buf);
1673                 if (rc < 0)
1674                         RETURN(false);
1675
1676                 ma->ma_valid |= MA_HSM;
1677         }
1678         if (ma->ma_hsm.mh_flags & HS_EXISTS)
1679                 RETURN(true);
1680         RETURN(false);
1681 }
1682
1683 /**
1684  * Delete name entry and the object.
1685  * Note: no_name == 1 means it only destory the object, i.e. name_entry
1686  * does not exist for this object, and it could only happen during resending
1687  * of remote unlink. see the comments in mdt_reint_unlink. Unfortunately, lname
1688  * is also needed in this case(needed by changelog), so we have to add another
1689  * parameter(no_name)here. XXX: this is only needed in DNE phase I, on Phase II,
1690  * the ENOENT failure should be able to be fixed by redo mechanism.
1691  */
1692 static int mdd_unlink(const struct lu_env *env, struct md_object *pobj,
1693                       struct md_object *cobj, const struct lu_name *lname,
1694                       struct md_attr *ma, int no_name)
1695 {
1696         const char *name = lname->ln_name;
1697         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
1698         struct lu_attr *cattr = MDD_ENV_VAR(env, cattr);
1699         struct lu_attr *la = &mdd_env_info(env)->mti_la_for_fix;
1700         struct mdd_object *mdd_pobj = md2mdd_obj(pobj);
1701         struct mdd_object *mdd_cobj = NULL;
1702         struct mdd_device *mdd = mdo2mdd(pobj);
1703         struct thandle    *handle;
1704         int rc, is_dir = 0, cl_flags = 0;
1705         ENTRY;
1706
1707         /* let shutdown to start */
1708         CFS_FAIL_TIMEOUT(OBD_FAIL_TGT_REPLY_DATA_RACE, 1);
1709
1710         /* cobj == NULL means only delete name entry */
1711         if (likely(cobj != NULL)) {
1712                 mdd_cobj = md2mdd_obj(cobj);
1713                 if (mdd_object_exists(mdd_cobj) == 0)
1714                         RETURN(-ENOENT);
1715         }
1716
1717         rc = mdd_la_get(env, mdd_pobj, pattr);
1718         if (rc)
1719                 RETURN(rc);
1720
1721         if (likely(mdd_cobj != NULL)) {
1722                 /* fetch cattr */
1723                 rc = mdd_la_get(env, mdd_cobj, cattr);
1724                 if (rc)
1725                         RETURN(rc);
1726
1727                 is_dir = S_ISDIR(cattr->la_mode);
1728                 /* search for an existing archive.
1729                  * we should check ahead as the object
1730                  * can be destroyed in this transaction */
1731                 if (mdd_hsm_archive_exists(env, mdd_cobj, ma))
1732                         cl_flags |= CLF_UNLINK_HSM_EXISTS;
1733         }
1734
1735         rc = mdd_unlink_sanity_check(env, mdd_pobj, pattr, mdd_cobj, cattr);
1736         if (rc)
1737                 RETURN(rc);
1738
1739         handle = mdd_trans_create(env, mdd);
1740         if (IS_ERR(handle))
1741                 RETURN(PTR_ERR(handle));
1742
1743         rc = mdd_declare_unlink(env, mdd, mdd_pobj, mdd_cobj,
1744                                 lname, ma, handle, no_name, is_dir);
1745         if (rc)
1746                 GOTO(stop, rc);
1747
1748         rc = mdd_trans_start(env, mdd, handle);
1749         if (rc)
1750                 GOTO(stop, rc);
1751
1752         if (likely(mdd_cobj != NULL))
1753                 mdd_write_lock(env, mdd_cobj, DT_TGT_CHILD);
1754
1755         if (likely(no_name == 0) && !OBD_FAIL_CHECK(OBD_FAIL_LFSCK_DANGLING2)) {
1756                 rc = __mdd_index_delete(env, mdd_pobj, name, is_dir, handle);
1757                 if (rc)
1758                         GOTO(cleanup, rc);
1759         }
1760
1761         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_MUL_REF) ||
1762             OBD_FAIL_CHECK(OBD_FAIL_LFSCK_NO_NAMEENTRY))
1763                 GOTO(cleanup, rc = 0);
1764
1765         if (likely(mdd_cobj != NULL)) {
1766                 rc = mdo_ref_del(env, mdd_cobj, handle);
1767                 if (rc != 0) {
1768                         __mdd_index_insert_only(env, mdd_pobj,
1769                                                 mdd_object_fid(mdd_cobj),
1770                                                 mdd_object_type(mdd_cobj),
1771                                                 name, handle);
1772                         GOTO(cleanup, rc);
1773                 }
1774
1775                 if (is_dir)
1776                         /* unlink dot */
1777                         mdo_ref_del(env, mdd_cobj, handle);
1778
1779                 /* fetch updated nlink */
1780                 rc = mdd_la_get(env, mdd_cobj, cattr);
1781                 if (rc)
1782                         GOTO(cleanup, rc);
1783         }
1784
1785         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1786         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1787
1788         la->la_valid = LA_CTIME | LA_MTIME;
1789         rc = mdd_update_time(env, mdd_pobj, pattr, la, handle);
1790         if (rc)
1791                 GOTO(cleanup, rc);
1792
1793         /* Enough for only unlink the entry */
1794         if (unlikely(mdd_cobj == NULL))
1795                 GOTO(stop, rc);
1796
1797         if (cattr->la_nlink > 0 || mdd_cobj->mod_count > 0) {
1798                 /* update ctime of an unlinked file only if it is still
1799                  * opened or a link still exists */
1800                 la->la_valid = LA_CTIME;
1801                 rc = mdd_update_time(env, mdd_cobj, cattr, la, handle);
1802                 if (rc)
1803                         GOTO(cleanup, rc);
1804         }
1805
1806         /* XXX: this transfer to ma will be removed with LOD/OSP */
1807         ma->ma_attr = *cattr;
1808         ma->ma_valid |= MA_INODE;
1809         rc = mdd_finish_unlink(env, mdd_cobj, ma, mdd_pobj, lname, handle);
1810         if (rc != 0)
1811                 GOTO(cleanup, rc);
1812
1813         /* fetch updated nlink */
1814         rc = mdd_la_get(env, mdd_cobj, cattr);
1815         /* if object is removed then we can't get its attrs,
1816          * use last get */
1817         if (rc == -ENOENT) {
1818                 cattr->la_nlink = 0;
1819                 rc = 0;
1820         }
1821
1822         if (cattr->la_nlink == 0) {
1823                 ma->ma_attr = *cattr;
1824                 ma->ma_valid |= MA_INODE;
1825         }
1826
1827         EXIT;
1828 cleanup:
1829         if (likely(mdd_cobj != NULL))
1830                 mdd_write_unlock(env, mdd_cobj);
1831
1832         if (rc == 0) {
1833                 if (cattr->la_nlink == 0)
1834                         cl_flags |= CLF_UNLINK_LAST;
1835                 else
1836                         cl_flags &= ~CLF_UNLINK_HSM_EXISTS;
1837
1838                 rc = mdd_changelog_ns_store(env, mdd,
1839                         is_dir ? CL_RMDIR : CL_UNLINK, cl_flags,
1840                         mdd_cobj, mdd_object_fid(mdd_pobj), NULL, NULL,
1841                         lname, NULL, handle);
1842         }
1843
1844 stop:
1845         rc = mdd_trans_stop(env, mdd, rc, handle);
1846
1847         return rc;
1848 }
1849
1850 /*
1851  * The permission has been checked when obj created, no need check again.
1852  */
1853 static int mdd_cd_sanity_check(const struct lu_env *env,
1854                                struct mdd_object *obj)
1855 {
1856         ENTRY;
1857
1858         /* EEXIST check */
1859         if (!obj || mdd_is_dead_obj(obj))
1860                 RETURN(-ENOENT);
1861
1862         RETURN(0);
1863 }
1864
1865 static int mdd_create_data(const struct lu_env *env,
1866                            struct md_object *pobj,
1867                            struct md_object *cobj,
1868                            const struct md_op_spec *spec,
1869                            struct md_attr *ma)
1870 {
1871         struct mdd_device *mdd = mdo2mdd(cobj);
1872         struct mdd_object *mdd_pobj = md2mdd_obj(pobj);
1873         struct mdd_object *son = md2mdd_obj(cobj);
1874         struct thandle    *handle;
1875         const struct lu_buf *buf;
1876         struct lu_attr    *attr = MDD_ENV_VAR(env, cattr);
1877         struct dt_allocation_hint *hint = &mdd_env_info(env)->mti_hint;
1878         int                rc;
1879         ENTRY;
1880
1881         rc = mdd_cd_sanity_check(env, son);
1882         if (rc)
1883                 RETURN(rc);
1884
1885         if (!md_should_create(spec->sp_cr_flags))
1886                 RETURN(0);
1887
1888         /*
1889          * there are following use cases for this function:
1890          * 1) late striping - file was created with MDS_OPEN_DELAY_CREATE
1891          *    striping can be specified or not
1892          * 2) CMD?
1893          */
1894         rc = mdd_la_get(env, son, attr);
1895         if (rc)
1896                 RETURN(rc);
1897
1898         /* calling ->ah_make_hint() is used to transfer information from parent */
1899         mdd_object_make_hint(env, mdd_pobj, son, attr, spec, hint);
1900
1901         handle = mdd_trans_create(env, mdd);
1902         if (IS_ERR(handle))
1903                 GOTO(out_free, rc = PTR_ERR(handle));
1904
1905         /*
1906          * XXX: Setting the lov ea is not locked but setting the attr is locked?
1907          * Should this be fixed?
1908          */
1909         CDEBUG(D_OTHER, "ea %p/%u, cr_flags %#llo, no_create %u\n",
1910                spec->u.sp_ea.eadata, spec->u.sp_ea.eadatalen,
1911                spec->sp_cr_flags, spec->no_create);
1912
1913         if (spec->no_create || (spec->sp_cr_flags & MDS_OPEN_HAS_EA)) {
1914                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
1915                                         spec->u.sp_ea.eadatalen);
1916         } else {
1917                 buf = &LU_BUF_NULL;
1918         }
1919
1920         rc = dt_declare_xattr_set(env, mdd_object_child(son), buf,
1921                                   XATTR_NAME_LOV, 0, handle);
1922         if (rc)
1923                 GOTO(stop, rc);
1924
1925         rc = mdd_declare_changelog_store(env, mdd, CL_LAYOUT, NULL, NULL,
1926                                          handle);
1927         if (rc)
1928                 GOTO(stop, rc);
1929
1930         rc = mdd_trans_start(env, mdd, handle);
1931         if (rc)
1932                 GOTO(stop, rc);
1933
1934         rc = dt_xattr_set(env, mdd_object_child(son), buf, XATTR_NAME_LOV,
1935                           0, handle);
1936
1937         if (rc)
1938                 GOTO(stop, rc);
1939
1940         rc = mdd_changelog_data_store(env, mdd, CL_LAYOUT, 0, son, handle,
1941                                       NULL);
1942
1943 stop:
1944         rc = mdd_trans_stop(env, mdd, rc, handle);
1945
1946 out_free:
1947         RETURN(rc);
1948 }
1949
1950 static int mdd_declare_object_initialize(const struct lu_env *env,
1951                                          struct mdd_object *parent,
1952                                          struct mdd_object *child,
1953                                          const struct lu_attr *attr,
1954                                          struct thandle *handle)
1955 {
1956         int rc;
1957         ENTRY;
1958
1959         LASSERT(attr->la_valid & (LA_MODE | LA_TYPE));
1960         if (!S_ISDIR(attr->la_mode))
1961                 RETURN(0);
1962
1963         rc = mdo_declare_index_insert(env, child, mdd_object_fid(child),
1964                                       S_IFDIR, dot, handle);
1965         if (rc != 0)
1966                 RETURN(rc);
1967
1968         rc = mdo_declare_ref_add(env, child, handle);
1969         if (rc != 0)
1970                 RETURN(rc);
1971
1972         rc = mdo_declare_index_insert(env, child, mdd_object_fid(parent),
1973                                       S_IFDIR, dotdot, handle);
1974
1975         RETURN(rc);
1976 }
1977
1978 static int mdd_object_initialize(const struct lu_env *env,
1979                                  const struct lu_fid *pfid,
1980                                  struct mdd_object *child,
1981                                  struct lu_attr *attr,
1982                                  struct thandle *handle)
1983 {
1984         int rc = 0;
1985         ENTRY;
1986
1987         if (S_ISDIR(attr->la_mode)) {
1988                 /* Add "." and ".." for newly created dir */
1989                 mdo_ref_add(env, child, handle);
1990                 rc = __mdd_index_insert_only(env, child, mdd_object_fid(child),
1991                                              S_IFDIR, dot, handle);
1992                 if (rc == 0)
1993                         rc = __mdd_index_insert_only(env, child, pfid, S_IFDIR,
1994                                                      dotdot, handle);
1995                 if (rc != 0)
1996                         mdo_ref_del(env, child, handle);
1997         }
1998
1999         RETURN(rc);
2000 }
2001
2002 /**
2003  * This function checks whether it can create a file/dir under the
2004  * directory(@pobj). The directory(@pobj) is not being locked by
2005  * mdd lock.
2006  *
2007  * \param[in] env       execution environment
2008  * \param[in] pobj      the directory to create files
2009  * \param[in] pattr     the attributes of the directory
2010  * \param[in] lname     the name of the created file/dir
2011  * \param[in] cattr     the attributes of the file/dir
2012  * \param[in] spec      create specification
2013  *
2014  * \retval              = 0 it is allowed to create file/dir under
2015  *                      the directory
2016  * \retval              negative error not allowed to create file/dir
2017  *                      under the directory
2018  */
2019 static int mdd_create_sanity_check(const struct lu_env *env,
2020                                    struct md_object *pobj,
2021                                    const struct lu_attr *pattr,
2022                                    const struct lu_name *lname,
2023                                    struct lu_attr *cattr,
2024                                    struct md_op_spec *spec)
2025 {
2026         struct mdd_thread_info *info = mdd_env_info(env);
2027         struct lu_fid     *fid       = &info->mti_fid;
2028         struct mdd_object *obj       = md2mdd_obj(pobj);
2029         struct mdd_device *m         = mdo2mdd(pobj);
2030         bool            check_perm = true;
2031         int rc;
2032         ENTRY;
2033
2034         /* EEXIST check */
2035         if (mdd_is_dead_obj(obj))
2036                 RETURN(-ENOENT);
2037
2038         /*
2039          * In some cases this lookup is not needed - we know before if name
2040          * exists or not because MDT performs lookup for it.
2041          * name length check is done in lookup.
2042          */
2043         if (spec->sp_cr_lookup) {
2044                 /*
2045                  * Check if the name already exist, though it will be checked in
2046                  * _index_insert also, for avoiding rolling back if exists
2047                  * _index_insert.
2048                  */
2049                 rc = __mdd_lookup(env, pobj, pattr, lname, fid,
2050                                   MAY_WRITE | MAY_EXEC);
2051                 if (rc != -ENOENT)
2052                         RETURN(rc ? : -EEXIST);
2053
2054                 /* Permission is already being checked in mdd_lookup */
2055                 check_perm = false;
2056         }
2057
2058         if (S_ISDIR(cattr->la_mode) &&
2059             unlikely(spec != NULL && spec->sp_cr_flags & MDS_OPEN_HAS_EA) &&
2060             spec->u.sp_ea.eadata != NULL && spec->u.sp_ea.eadatalen > 0) {
2061                 const struct lmv_user_md *lum = spec->u.sp_ea.eadata;
2062
2063                 if (!lmv_user_magic_supported(le32_to_cpu(lum->lum_magic)) &&
2064                     le32_to_cpu(lum->lum_magic) != LMV_USER_MAGIC_V0) {
2065                         rc = -EINVAL;
2066                         CERROR("%s: invalid lmv_user_md: magic = %x, "
2067                                "stripe_offset = %d, stripe_count = %u: "
2068                                "rc = %d\n", mdd2obd_dev(m)->obd_name,
2069                                 le32_to_cpu(lum->lum_magic),
2070                                (int)le32_to_cpu(lum->lum_stripe_offset),
2071                                le32_to_cpu(lum->lum_stripe_count), rc);
2072                         return rc;
2073                 }
2074         }
2075
2076         rc = mdd_may_create(env, obj, pattr, NULL, check_perm);
2077         if (rc != 0)
2078                 RETURN(rc);
2079
2080         /* sgid check */
2081         if (pattr->la_mode & S_ISGID) {
2082                 struct lu_ucred *uc = lu_ucred(env);
2083
2084                 cattr->la_gid = pattr->la_gid;
2085
2086                 /* Directories are special, and always inherit S_ISGID */
2087                 if (S_ISDIR(cattr->la_mode)) {
2088                         cattr->la_mode |= S_ISGID;
2089                         cattr->la_valid |= LA_MODE;
2090                 } else if ((cattr->la_mode & (S_ISGID | S_IXGRP))
2091                                 == (S_ISGID | S_IXGRP) &&
2092                            !lustre_in_group_p(uc,
2093                                               (cattr->la_valid & LA_GID) ?
2094                                               cattr->la_gid : pattr->la_gid) &&
2095                            !md_capable(uc, CFS_CAP_FSETID)) {
2096                         cattr->la_mode &= ~S_ISGID;
2097                         cattr->la_valid |= LA_MODE;
2098                 }
2099         }
2100
2101         /* Inherit project ID from parent directory */
2102         if (pattr->la_flags & LUSTRE_PROJINHERIT_FL) {
2103                 cattr->la_projid = pattr->la_projid;
2104                 if (S_ISDIR(cattr->la_mode)) {
2105                         cattr->la_flags |= LUSTRE_PROJINHERIT_FL;
2106                         cattr->la_valid |= LA_FLAGS;
2107                 }
2108                 cattr->la_valid |= LA_PROJID;
2109         }
2110
2111         rc = mdd_name_check(m, lname);
2112         if (rc < 0)
2113                 RETURN(rc);
2114
2115         switch (cattr->la_mode & S_IFMT) {
2116         case S_IFLNK: {
2117                 unsigned int symlen = strlen(spec->u.sp_symname) + 1;
2118
2119                 if (symlen > m->mdd_dt_conf.ddp_symlink_max)
2120                         RETURN(-ENAMETOOLONG);
2121                 else
2122                         RETURN(0);
2123         }
2124         case S_IFDIR:
2125         case S_IFREG:
2126         case S_IFCHR:
2127         case S_IFBLK:
2128         case S_IFIFO:
2129         case S_IFSOCK:
2130                 rc = 0;
2131                 break;
2132         default:
2133                 rc = -EINVAL;
2134                 break;
2135         }
2136         RETURN(rc);
2137 }
2138
2139 static int mdd_declare_create_object(const struct lu_env *env,
2140                                      struct mdd_device *mdd,
2141                                      struct mdd_object *p, struct mdd_object *c,
2142                                      struct lu_attr *attr,
2143                                      struct thandle *handle,
2144                                      const struct md_op_spec *spec,
2145                                      struct lu_buf *def_acl_buf,
2146                                      struct lu_buf *acl_buf,
2147                                      struct lu_buf *hsm_buf,
2148                                      struct dt_allocation_hint *hint)
2149 {
2150         const struct lu_buf *buf;
2151         int rc;
2152
2153         rc = mdd_declare_create_object_internal(env, p, c, attr, handle, spec,
2154                                                 hint);
2155         if (rc)
2156                 GOTO(out, rc);
2157
2158 #ifdef CONFIG_LUSTRE_FS_POSIX_ACL
2159         if (def_acl_buf && def_acl_buf->lb_len > 0 && S_ISDIR(attr->la_mode)) {
2160                 /* if dir, then can inherit default ACl */
2161                 rc = mdo_declare_xattr_set(env, c, def_acl_buf,
2162                                            XATTR_NAME_ACL_DEFAULT,
2163                                            0, handle);
2164                 if (rc)
2165                         GOTO(out, rc);
2166         }
2167
2168         if (acl_buf && acl_buf->lb_len > 0) {
2169                 rc = mdo_declare_attr_set(env, c, attr, handle);
2170                 if (rc)
2171                         GOTO(out, rc);
2172
2173                 rc = mdo_declare_xattr_set(env, c, acl_buf,
2174                                            XATTR_NAME_ACL_ACCESS, 0, handle);
2175                 if (rc)
2176                         GOTO(out, rc);
2177         }
2178 #endif
2179         rc = mdd_declare_object_initialize(env, p, c, attr, handle);
2180         if (rc)
2181                 GOTO(out, rc);
2182
2183         /* replay case, create LOV EA from client data */
2184         if ((!(spec->sp_cr_flags & MDS_OPEN_DELAY_CREATE) && spec->no_create) ||
2185             (spec->sp_cr_flags & MDS_OPEN_HAS_EA && S_ISREG(attr->la_mode))) {
2186                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
2187                                         spec->u.sp_ea.eadatalen);
2188                 rc = mdo_declare_xattr_set(env, c, buf,
2189                                            S_ISDIR(attr->la_mode) ?
2190                                                 XATTR_NAME_LMV : XATTR_NAME_LOV,
2191                                            LU_XATTR_CREATE, handle);
2192                 if (rc)
2193                         GOTO(out, rc);
2194
2195                 if (spec->sp_cr_flags & MDS_OPEN_PCC) {
2196                         rc = mdo_declare_xattr_set(env, c, hsm_buf,
2197                                                    XATTR_NAME_HSM,
2198                                                    0, handle);
2199                         if (rc)
2200                                 GOTO(out, rc);
2201                 }
2202         }
2203
2204         if (S_ISLNK(attr->la_mode)) {
2205                 const char *target_name = spec->u.sp_symname;
2206                 int sym_len = strlen(target_name);
2207                 const struct lu_buf *buf;
2208
2209                 buf = mdd_buf_get_const(env, target_name, sym_len);
2210                 rc = dt_declare_record_write(env, mdd_object_child(c),
2211                                              buf, 0, handle);
2212                 if (rc)
2213                         GOTO(out, rc);
2214         }
2215
2216         if (spec->sp_cr_file_secctx_name != NULL) {
2217                 buf = mdd_buf_get_const(env, spec->sp_cr_file_secctx,
2218                                         spec->sp_cr_file_secctx_size);
2219                 rc = mdo_declare_xattr_set(env, c, buf,
2220                                            spec->sp_cr_file_secctx_name, 0,
2221                                            handle);
2222                 if (rc < 0)
2223                         GOTO(out, rc);
2224         }
2225
2226         if (spec->sp_cr_file_encctx != NULL) {
2227                 buf = mdd_buf_get_const(env, spec->sp_cr_file_encctx,
2228                                         spec->sp_cr_file_encctx_size);
2229                 rc = mdo_declare_xattr_set(env, c, buf,
2230                                            LL_XATTR_NAME_ENCRYPTION_CONTEXT, 0,
2231                                            handle);
2232                 if (rc < 0)
2233                         GOTO(out, rc);
2234         }
2235 out:
2236         return rc;
2237 }
2238
2239 static int mdd_declare_create(const struct lu_env *env, struct mdd_device *mdd,
2240                               struct mdd_object *p, struct mdd_object *c,
2241                               const struct lu_name *name,
2242                               struct lu_attr *attr,
2243                               struct thandle *handle,
2244                               const struct md_op_spec *spec,
2245                               struct linkea_data *ldata,
2246                               struct lu_buf *def_acl_buf,
2247                               struct lu_buf *acl_buf,
2248                               struct lu_buf *hsm_buf,
2249                               struct dt_allocation_hint *hint)
2250 {
2251         int rc;
2252
2253         rc = mdd_declare_create_object(env, mdd, p, c, attr, handle, spec,
2254                                        def_acl_buf, acl_buf, hsm_buf, hint);
2255         if (rc)
2256                 GOTO(out, rc);
2257
2258         if (S_ISDIR(attr->la_mode)) {
2259                 rc = mdo_declare_ref_add(env, p, handle);
2260                 if (rc)
2261                         GOTO(out, rc);
2262         }
2263
2264         if (unlikely(spec->sp_cr_flags & MDS_OPEN_VOLATILE)) {
2265                 rc = mdd_orphan_declare_insert(env, c, attr->la_mode, handle);
2266                 if (rc)
2267                         GOTO(out, rc);
2268         } else {
2269                 struct lu_attr *la = &mdd_env_info(env)->mti_la_for_fix;
2270                 enum changelog_rec_type type;
2271
2272                 rc = mdo_declare_index_insert(env, p, mdd_object_fid(c),
2273                                               attr->la_mode, name->ln_name,
2274                                               handle);
2275                 if (rc != 0)
2276                         return rc;
2277
2278                 rc = mdd_declare_links_add(env, c, handle, ldata);
2279                 if (rc)
2280                         return rc;
2281
2282                 *la = *attr;
2283                 la->la_valid = LA_CTIME | LA_MTIME;
2284                 rc = mdo_declare_attr_set(env, p, la, handle);
2285                 if (rc)
2286                         return rc;
2287
2288                 type = S_ISDIR(attr->la_mode) ? CL_MKDIR :
2289                        S_ISREG(attr->la_mode) ? CL_CREATE :
2290                        S_ISLNK(attr->la_mode) ? CL_SOFTLINK : CL_MKNOD;
2291
2292                 rc = mdd_declare_changelog_store(env, mdd, type, name, NULL,
2293                                                  handle);
2294                 if (rc)
2295                         return rc;
2296         }
2297 out:
2298         return rc;
2299 }
2300
2301 static int mdd_acl_init(const struct lu_env *env, struct mdd_object *pobj,
2302                         struct lu_attr *la, struct lu_buf *def_acl_buf,
2303                         struct lu_buf *acl_buf)
2304 {
2305         int     rc;
2306         ENTRY;
2307
2308         if (S_ISLNK(la->la_mode)) {
2309                 acl_buf->lb_len = 0;
2310                 def_acl_buf->lb_len = 0;
2311                 RETURN(0);
2312         }
2313
2314         mdd_read_lock(env, pobj, DT_TGT_PARENT);
2315         rc = mdo_xattr_get(env, pobj, def_acl_buf,
2316                            XATTR_NAME_ACL_DEFAULT);
2317         mdd_read_unlock(env, pobj);
2318         if (rc > 0) {
2319                 /* If there are default ACL, fix mode/ACL by default ACL */
2320                 def_acl_buf->lb_len = rc;
2321                 LASSERT(def_acl_buf->lb_len <= acl_buf->lb_len);
2322                 memcpy(acl_buf->lb_buf, def_acl_buf->lb_buf, rc);
2323                 acl_buf->lb_len = rc;
2324                 rc = __mdd_fix_mode_acl(env, acl_buf, &la->la_mode);
2325                 if (rc < 0)
2326                         RETURN(rc);
2327         } else if (rc == -ENODATA || rc == -EOPNOTSUPP) {
2328                 /* If there are no default ACL, fix mode by mask */
2329                 struct lu_ucred *uc = lu_ucred(env);
2330
2331                 /* The create triggered by MDT internal events, such as
2332                  * LFSCK reset, will not contain valid "uc". */
2333                 if (unlikely(uc != NULL))
2334                         la->la_mode &= ~uc->uc_umask;
2335                 rc = 0;
2336                 acl_buf->lb_len = 0;
2337                 def_acl_buf->lb_len = 0;
2338         }
2339
2340         RETURN(rc);
2341 }
2342
2343 /**
2344  * Create a metadata object and initialize it, set acl, xattr.
2345  **/
2346 static int mdd_create_object(const struct lu_env *env, struct mdd_object *pobj,
2347                              struct mdd_object *son, struct lu_attr *attr,
2348                              struct md_op_spec *spec, struct lu_buf *acl_buf,
2349                              struct lu_buf *def_acl_buf,
2350                              struct lu_buf *hsm_buf,
2351                              struct dt_allocation_hint *hint,
2352                              struct thandle *handle, bool initsecctx)
2353 {
2354         const struct lu_buf *buf;
2355         int rc;
2356
2357         mdd_write_lock(env, son, DT_TGT_CHILD);
2358         rc = mdd_create_object_internal(env, NULL, son, attr, handle, spec,
2359                                         hint);
2360         if (rc)
2361                 GOTO(unlock, rc);
2362
2363         /* Note: In DNE phase I, for striped dir, though sub-stripes will be
2364          * created in declare phase, they also needs to be added to master
2365          * object as sub-directory entry. So it has to initialize the master
2366          * object, then set dir striped EA.(in mdo_xattr_set) */
2367         rc = mdd_object_initialize(env, mdd_object_fid(pobj), son, attr,
2368                                    handle);
2369         if (rc != 0)
2370                 GOTO(err_destroy, rc);
2371
2372         /*
2373          * in case of replay we just set LOVEA provided by the client
2374          * XXX: I think it would be interesting to try "old" way where
2375          *      MDT calls this xattr_set(LOV) in a different transaction.
2376          *      probably this way we code can be made better.
2377          */
2378
2379         /* During creation, there are only a few cases we need do xattr_set to
2380          * create stripes.
2381          * 1. regular file: see comments above.
2382          * 2. dir: inherit default striping or pool settings from parent.
2383          * 3. create striped directory with provided stripeEA.
2384          * 4. create striped directory because inherit default layout from the
2385          * parent.
2386          */
2387         if (spec->no_create ||
2388             (S_ISREG(attr->la_mode) && spec->sp_cr_flags & MDS_OPEN_HAS_EA) ||
2389             S_ISDIR(attr->la_mode)) {
2390                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
2391                                         spec->u.sp_ea.eadatalen);
2392                 rc = mdo_xattr_set(env, son, buf,
2393                                    S_ISDIR(attr->la_mode) ? XATTR_NAME_LMV :
2394                                                             XATTR_NAME_LOV,
2395                                    LU_XATTR_CREATE, handle);
2396                 if (rc != 0)
2397                         GOTO(err_destroy, rc);
2398         }
2399
2400         if (S_ISREG(attr->la_mode) && spec->sp_cr_flags & MDS_OPEN_PCC) {
2401                 struct md_hsm mh;
2402
2403                 memset(&mh, 0, sizeof(mh));
2404                 mh.mh_flags = HS_EXISTS | HS_ARCHIVED | HS_RELEASED;
2405                 mh.mh_arch_id = spec->sp_archive_id;
2406                 lustre_hsm2buf(hsm_buf->lb_buf, &mh);
2407                 rc = mdo_xattr_set(env, son, hsm_buf, XATTR_NAME_HSM,
2408                                    0, handle);
2409                 if (rc != 0)
2410                         GOTO(err_destroy, rc);
2411         }
2412
2413 #ifdef CONFIG_LUSTRE_FS_POSIX_ACL
2414         if (def_acl_buf != NULL && def_acl_buf->lb_len > 0 &&
2415             S_ISDIR(attr->la_mode)) {
2416                 /* set default acl */
2417                 rc = mdo_xattr_set(env, son, def_acl_buf,
2418                                    XATTR_NAME_ACL_DEFAULT, 0,
2419                                    handle);
2420                 if (rc)
2421                         GOTO(err_destroy, rc);
2422         }
2423         /* set its own acl */
2424         if (acl_buf != NULL && acl_buf->lb_len > 0) {
2425                 rc = mdo_xattr_set(env, son, acl_buf,
2426                                    XATTR_NAME_ACL_ACCESS,
2427                                    0, handle);
2428                 if (rc)
2429                         GOTO(err_destroy, rc);
2430         }
2431 #endif
2432
2433         if (S_ISLNK(attr->la_mode)) {
2434                 struct dt_object *dt = mdd_object_child(son);
2435                 const char *target_name = spec->u.sp_symname;
2436                 int sym_len = strlen(target_name);
2437                 loff_t pos = 0;
2438
2439                 buf = mdd_buf_get_const(env, target_name, sym_len);
2440                 rc = dt->do_body_ops->dbo_write(env, dt, buf, &pos, handle);
2441                 if (rc == sym_len)
2442                         rc = 0;
2443                 else
2444                         GOTO(err_initlized, rc = -EFAULT);
2445         }
2446
2447         if (initsecctx && spec->sp_cr_file_secctx_name != NULL) {
2448                 buf = mdd_buf_get_const(env, spec->sp_cr_file_secctx,
2449                                         spec->sp_cr_file_secctx_size);
2450                 rc = mdo_xattr_set(env, son, buf, spec->sp_cr_file_secctx_name,
2451                                    0, handle);
2452                 if (rc < 0)
2453                         GOTO(err_initlized, rc);
2454         }
2455
2456         if (spec->sp_cr_file_encctx != NULL) {
2457                 buf = mdd_buf_get_const(env, spec->sp_cr_file_encctx,
2458                                         spec->sp_cr_file_encctx_size);
2459                 rc = mdo_xattr_set(env, son, buf,
2460                                    LL_XATTR_NAME_ENCRYPTION_CONTEXT, 0,
2461                                    handle);
2462                 if (rc < 0)
2463                         GOTO(err_initlized, rc);
2464         }
2465
2466 err_initlized:
2467         if (unlikely(rc != 0)) {
2468                 int rc2;
2469                 if (S_ISDIR(attr->la_mode)) {
2470                         /* Drop the reference, no need to delete "."/"..",
2471                          * because the object to be destroied directly. */
2472                         rc2 = mdo_ref_del(env, son, handle);
2473                         if (rc2 != 0)
2474                                 GOTO(unlock, rc);
2475                 }
2476                 rc2 = mdo_ref_del(env, son, handle);
2477                 if (rc2 != 0)
2478                         GOTO(unlock, rc);
2479 err_destroy:
2480                 mdo_destroy(env, son, handle);
2481         }
2482 unlock:
2483         mdd_write_unlock(env, son);
2484         RETURN(rc);
2485 }
2486
2487 static int mdd_index_delete(const struct lu_env *env,
2488                             struct mdd_object *mdd_pobj,
2489                             struct lu_attr *cattr,
2490                             const struct lu_name *lname)
2491 {
2492         struct mdd_device *mdd = mdo2mdd(&mdd_pobj->mod_obj);
2493         struct thandle *handle;
2494         int rc;
2495         ENTRY;
2496
2497         handle = mdd_trans_create(env, mdd);
2498         if (IS_ERR(handle))
2499                 RETURN(PTR_ERR(handle));
2500
2501         rc = mdo_declare_index_delete(env, mdd_pobj, lname->ln_name,
2502                                       handle);
2503         if (rc != 0)
2504                 GOTO(stop, rc);
2505
2506         if (S_ISDIR(cattr->la_mode)) {
2507                 rc = mdo_declare_ref_del(env, mdd_pobj, handle);
2508                 if (rc != 0)
2509                         GOTO(stop, rc);
2510         }
2511
2512         /* Since this will only be used in the error handler path,
2513          * Let's set the thandle to be local and not mess the transno */
2514         handle->th_local = 1;
2515         rc = mdd_trans_start(env, mdd, handle);
2516         if (rc)
2517                 GOTO(stop, rc);
2518
2519         rc = __mdd_index_delete(env, mdd_pobj, lname->ln_name,
2520                                 S_ISDIR(cattr->la_mode), handle);
2521         if (rc)
2522                 GOTO(stop, rc);
2523 stop:
2524         rc = mdd_trans_stop(env, mdd, rc, handle);
2525
2526         RETURN(rc);
2527 }
2528
2529 /**
2530  * Create object and insert it into namespace.
2531  *
2532  * Two operations have to be performed:
2533  *
2534  *  - an allocation of a new object (->do_create()), and
2535  *  - an insertion into a parent index (->dio_insert()).
2536  *
2537  * Due to locking, operation order is not important, when both are
2538  * successful, *but* error handling cases are quite different:
2539  *
2540  *  - if insertion is done first, and following object creation fails,
2541  *  insertion has to be rolled back, but this operation might fail
2542  *  also leaving us with dangling index entry.
2543  *
2544  *  - if creation is done first, is has to be undone if insertion fails,
2545  *  leaving us with leaked space, which is not good but not fatal.
2546  *
2547  * It seems that creation-first is simplest solution, but it is sub-optimal
2548  * in the frequent
2549  *
2550  * $ mkdir foo
2551  * $ mkdir foo
2552  *
2553  * case, because second mkdir is bound to create object, only to
2554  * destroy it immediately.
2555  *
2556  * To avoid this follow local file systems that do double lookup:
2557  *
2558  * 0. lookup -> -EEXIST (mdd_create_sanity_check())
2559  * 1. create            (mdd_create_object_internal())
2560  * 2. insert            (__mdd_index_insert(), lookup again)
2561  *
2562  * \param[in] pobj      parent object
2563  * \param[in] lname     name of child being created
2564  * \param[in,out] child child object being created
2565  * \param[in] spec      additional create parameters
2566  * \param[in] ma        attributes for new child object
2567  *
2568  * \retval              0 on success
2569  * \retval              negative errno on failure
2570  */
2571 int mdd_create(const struct lu_env *env, struct md_object *pobj,
2572                       const struct lu_name *lname, struct md_object *child,
2573                       struct md_op_spec *spec, struct md_attr *ma)
2574 {
2575         struct mdd_thread_info  *info = mdd_env_info(env);
2576         struct lu_attr          *la = &info->mti_la_for_fix;
2577         struct mdd_object       *mdd_pobj = md2mdd_obj(pobj);
2578         struct mdd_object       *son = md2mdd_obj(child);
2579         struct mdd_device       *mdd = mdo2mdd(pobj);
2580         struct lu_attr          *attr = &ma->ma_attr;
2581         struct thandle          *handle;
2582         struct lu_attr          *pattr = &info->mti_pattr;
2583         struct lu_buf           acl_buf;
2584         struct lu_buf           def_acl_buf;
2585         struct lu_buf           hsm_buf;
2586         struct linkea_data      *ldata = &info->mti_link_data;
2587         const char              *name = lname->ln_name;
2588         struct dt_allocation_hint *hint = &mdd_env_info(env)->mti_hint;
2589         int                      rc;
2590         int                      rc2;
2591         ENTRY;
2592
2593         rc = mdd_la_get(env, mdd_pobj, pattr);
2594         if (rc != 0)
2595                 RETURN(rc);
2596
2597         /* Sanity checks before big job. */
2598         rc = mdd_create_sanity_check(env, pobj, pattr, lname, attr, spec);
2599         if (rc)
2600                 RETURN(rc);
2601
2602         if (OBD_FAIL_CHECK(OBD_FAIL_MDS_DQACQ_NET))
2603                 GOTO(out_free, rc = -EINPROGRESS);
2604
2605         handle = mdd_trans_create(env, mdd);
2606         if (IS_ERR(handle))
2607                 GOTO(out_free, rc = PTR_ERR(handle));
2608
2609         lu_buf_check_and_alloc(&info->mti_xattr_buf,
2610                         min_t(unsigned int, mdd->mdd_dt_conf.ddp_max_ea_size,
2611                               XATTR_SIZE_MAX));
2612         acl_buf = info->mti_xattr_buf;
2613         def_acl_buf.lb_buf = info->mti_key;
2614         def_acl_buf.lb_len = sizeof(info->mti_key);
2615         rc = mdd_acl_init(env, mdd_pobj, attr, &def_acl_buf, &acl_buf);
2616         if (rc < 0)
2617                 GOTO(out_stop, rc);
2618
2619         if (S_ISDIR(attr->la_mode)) {
2620                 struct lmv_user_md *lmu = spec->u.sp_ea.eadata;
2621
2622                 /*
2623                  * migrate may create 1-stripe directory, so lod_ah_init()
2624                  * doesn't adjust stripe count from lmu.
2625                  */
2626                 if (lmu && lmu->lum_stripe_count == cpu_to_le32(1))
2627                         lmu->lum_stripe_count = 0;
2628         }
2629
2630         mdd_object_make_hint(env, mdd_pobj, son, attr, spec, hint);
2631
2632         memset(ldata, 0, sizeof(*ldata));
2633         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_BAD_PARENT)) {
2634                 struct lu_fid tfid = *mdd_object_fid(mdd_pobj);
2635
2636                 tfid.f_oid--;
2637                 rc = mdd_linkea_prepare(env, son, NULL, NULL,
2638                                         &tfid, lname, 1, 0, ldata);
2639         } else {
2640                 rc = mdd_linkea_prepare(env, son, NULL, NULL,
2641                                         mdd_object_fid(mdd_pobj),
2642                                         lname, 1, 0, ldata);
2643         }
2644
2645         if (spec->sp_cr_flags & MDS_OPEN_PCC) {
2646                 LASSERT(spec->sp_cr_flags & MDS_OPEN_HAS_EA);
2647
2648                 memset(&hsm_buf, 0, sizeof(hsm_buf));
2649                 lu_buf_alloc(&hsm_buf, sizeof(struct hsm_attrs));
2650                 if (hsm_buf.lb_buf == NULL)
2651                         GOTO(out_stop, rc = -ENOMEM);
2652         }
2653
2654         rc = mdd_declare_create(env, mdd, mdd_pobj, son, lname, attr,
2655                                 handle, spec, ldata, &def_acl_buf, &acl_buf,
2656                                 &hsm_buf, hint);
2657         if (rc)
2658                 GOTO(out_stop, rc);
2659
2660         rc = mdd_trans_start(env, mdd, handle);
2661         if (rc)
2662                 GOTO(out_stop, rc);
2663
2664         rc = mdd_create_object(env, mdd_pobj, son, attr, spec, &acl_buf,
2665                                &def_acl_buf, &hsm_buf, hint, handle, true);
2666         if (rc != 0)
2667                 GOTO(out_stop, rc);
2668
2669         if (unlikely(spec->sp_cr_flags & MDS_OPEN_VOLATILE)) {
2670                 mdd_write_lock(env, son, DT_TGT_CHILD);
2671                 son->mod_flags |= VOLATILE_OBJ;
2672                 rc = mdd_orphan_insert(env, son, handle);
2673                 GOTO(out_volatile, rc);
2674         } else {
2675                 rc = __mdd_index_insert(env, mdd_pobj, mdd_object_fid(son),
2676                                         attr->la_mode, name, handle);
2677                 if (rc != 0)
2678                         GOTO(err_created, rc);
2679
2680                 mdd_links_add(env, son, mdd_object_fid(mdd_pobj), lname,
2681                               handle, ldata, 1);
2682
2683                 /* update parent directory mtime/ctime */
2684                 *la = *attr;
2685                 la->la_valid = LA_CTIME | LA_MTIME;
2686                 rc = mdd_update_time(env, mdd_pobj, pattr, la, handle);
2687                 if (rc)
2688                         GOTO(err_insert, rc);
2689         }
2690
2691         EXIT;
2692 err_insert:
2693         if (rc != 0) {
2694                 if (spec->sp_cr_flags & MDS_OPEN_VOLATILE)
2695                         rc2 = mdd_orphan_delete(env, son, handle);
2696                 else
2697                         rc2 = __mdd_index_delete(env, mdd_pobj, name,
2698                                                  S_ISDIR(attr->la_mode),
2699                                                  handle);
2700                 if (rc2 != 0)
2701                         goto out_stop;
2702
2703 err_created:
2704                 mdd_write_lock(env, son, DT_TGT_CHILD);
2705                 if (S_ISDIR(attr->la_mode)) {
2706                         /* Drop the reference, no need to delete "."/"..",
2707                          * because the object is to be destroyed directly. */
2708                         rc2 = mdo_ref_del(env, son, handle);
2709                         if (rc2 != 0) {
2710                                 mdd_write_unlock(env, son);
2711                                 goto out_stop;
2712                         }
2713                 }
2714 out_volatile:
2715                 /* For volatile files drop one link immediately, since there is
2716                  * no filename in the namespace, and save any error returned. */
2717                 rc2 = mdo_ref_del(env, son, handle);
2718                 if (rc2 != 0) {
2719                         mdd_write_unlock(env, son);
2720                         if (unlikely(rc == 0))
2721                                 rc = rc2;
2722                         goto out_stop;
2723                 }
2724
2725                 /* Don't destroy the volatile object on success */
2726                 if (likely(rc != 0))
2727                         mdo_destroy(env, son, handle);
2728                 mdd_write_unlock(env, son);
2729         }
2730
2731         if (rc == 0 && fid_is_namespace_visible(mdd_object_fid(son)) &&
2732             likely((spec->sp_cr_flags & MDS_OPEN_VOLATILE) == 0))
2733                 rc = mdd_changelog_ns_store(env, mdd,
2734                                 S_ISDIR(attr->la_mode) ? CL_MKDIR :
2735                                 S_ISREG(attr->la_mode) ? CL_CREATE :
2736                                 S_ISLNK(attr->la_mode) ? CL_SOFTLINK : CL_MKNOD,
2737                                 0, son, mdd_object_fid(mdd_pobj), NULL, NULL,
2738                                 lname, NULL, handle);
2739 out_stop:
2740         rc2 = mdd_trans_stop(env, mdd, rc, handle);
2741         if (rc == 0) {
2742                 /* If creation fails, it is most likely due to the remote update
2743                  * failure, because local transaction will mostly succeed at
2744                  * this stage. There is no easy way to rollback all of previous
2745                  * updates, so let's remove the object from namespace, and
2746                  * LFSCK should handle the orphan object. */
2747                 if (rc2 < 0 && !mdd_object_remote(mdd_pobj))
2748                         mdd_index_delete(env, mdd_pobj, attr, lname);
2749                 rc = rc2;
2750         }
2751 out_free:
2752         if (is_vmalloc_addr(ldata->ld_buf))
2753                 /* if we vmalloced a large buffer drop it */
2754                 lu_buf_free(ldata->ld_buf);
2755
2756         if (spec->sp_cr_flags & MDS_OPEN_PCC)
2757                 lu_buf_free(&hsm_buf);
2758
2759         /* The child object shouldn't be cached anymore */
2760         if (rc)
2761                 set_bit(LU_OBJECT_HEARD_BANSHEE,
2762                         &child->mo_lu.lo_header->loh_flags);
2763         return rc;
2764 }
2765
2766 /*
2767  * Get locks on parents in proper order
2768  * RETURN: < 0 - error, rename_order if successful
2769  */
2770 enum rename_order {
2771         MDD_RN_SAME,
2772         MDD_RN_SRCTGT,
2773         MDD_RN_TGTSRC
2774 };
2775
2776 static int mdd_rename_order(const struct lu_env *env,
2777                             struct mdd_device *mdd,
2778                             struct mdd_object *src_pobj,
2779                             const struct lu_attr *pattr,
2780                             struct mdd_object *tgt_pobj)
2781 {
2782         /* order of locking, 1 - tgt-src, 0 - src-tgt*/
2783         int rc;
2784
2785         ENTRY;
2786         if (src_pobj == tgt_pobj)
2787                 RETURN(MDD_RN_SAME);
2788
2789         /* compared the parent child relationship of src_p & tgt_p */
2790         if (lu_fid_eq(&mdd->mdd_root_fid, mdd_object_fid(src_pobj))) {
2791                 rc = MDD_RN_SRCTGT;
2792         } else if (lu_fid_eq(&mdd->mdd_root_fid, mdd_object_fid(tgt_pobj))) {
2793                 rc = MDD_RN_TGTSRC;
2794         } else {
2795                 rc = mdd_is_parent(env, mdd, src_pobj, pattr,
2796                                    mdd_object_fid(tgt_pobj));
2797                 if (rc == -EREMOTE)
2798                         rc = 0;
2799
2800                 if (rc == 1)
2801                         rc = MDD_RN_TGTSRC;
2802                 else if (rc == 0)
2803                         rc = MDD_RN_SRCTGT;
2804         }
2805
2806         RETURN(rc);
2807 }
2808
2809 /* has not mdd_write{read}_lock on any obj yet. */
2810 static int mdd_rename_sanity_check(const struct lu_env *env,
2811                                    struct mdd_object *src_pobj,
2812                                    const struct lu_attr *pattr,
2813                                    struct mdd_object *tgt_pobj,
2814                                    const struct lu_attr *tpattr,
2815                                    struct mdd_object *sobj,
2816                                    const struct lu_attr *cattr,
2817                                    struct mdd_object *tobj,
2818                                    const struct lu_attr *tattr)
2819 {
2820         int rc = 0;
2821         ENTRY;
2822
2823         /* XXX: when get here, sobj must NOT be NULL,
2824          * the other case has been processed in cld_rename
2825          * before mdd_rename and enable MDS_PERM_BYPASS. */
2826         LASSERT(sobj);
2827
2828         /*
2829          * If we are using project inheritance, we only allow renames
2830          * into our tree when the project IDs are the same; otherwise
2831          * tree quota mechanism would be circumvented.
2832          */
2833         if (((tpattr->la_flags & LUSTRE_PROJINHERIT_FL) &&
2834             tpattr->la_projid != cattr->la_projid) ||
2835             ((pattr->la_flags & LUSTRE_PROJINHERIT_FL) &&
2836             (pattr->la_projid != tpattr->la_projid)))
2837                 RETURN(-EXDEV);
2838
2839         rc = mdd_may_delete(env, src_pobj, pattr, sobj, cattr, NULL, 1, 0);
2840         if (rc)
2841                 RETURN(rc);
2842
2843         /* XXX: when get here, "tobj == NULL" means tobj must
2844          * NOT exist (neither on remote MDS, such case has been
2845          * processed in cld_rename before mdd_rename and enable
2846          * MDS_PERM_BYPASS).
2847          * So check may_create, but not check may_unlink. */
2848         if (tobj == NULL)
2849                 rc = mdd_may_create(env, tgt_pobj, tpattr, NULL,
2850                                     (src_pobj != tgt_pobj));
2851         else
2852                 rc = mdd_may_delete(env, tgt_pobj, tpattr, tobj, tattr, cattr,
2853                                     (src_pobj != tgt_pobj), 1);
2854
2855         if (!rc && !tobj && (src_pobj != tgt_pobj) && S_ISDIR(cattr->la_mode))
2856                 rc = __mdd_may_link(env, tgt_pobj, tpattr);
2857
2858         RETURN(rc);
2859 }
2860
2861 static int mdd_declare_rename(const struct lu_env *env,
2862                               struct mdd_device *mdd,
2863                               struct mdd_object *mdd_spobj,
2864                               struct mdd_object *mdd_tpobj,
2865                               struct mdd_object *mdd_sobj,
2866                               struct mdd_object *mdd_tobj,
2867                               const struct lu_name *sname,
2868                               const struct lu_name *tname,
2869                               struct md_attr *ma,
2870                               struct linkea_data *ldata,
2871                               struct thandle *handle)
2872 {
2873         struct lu_attr *la = &mdd_env_info(env)->mti_la_for_fix;
2874         int rc;
2875
2876         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
2877         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
2878
2879         LASSERT(mdd_spobj);
2880         LASSERT(mdd_tpobj);
2881         LASSERT(mdd_sobj);
2882
2883         /* name from source dir */
2884         rc = mdo_declare_index_delete(env, mdd_spobj, sname->ln_name, handle);
2885         if (rc)
2886                 return rc;
2887
2888         /* .. from source child */
2889         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
2890                 /* source child can be directory, count by source dir's nlink */
2891                 rc = mdo_declare_ref_del(env, mdd_spobj, handle);
2892                 if (rc)
2893                         return rc;
2894                 if (mdd_spobj != mdd_tpobj) {
2895                         rc = mdo_declare_index_delete(env, mdd_sobj, dotdot,
2896                                                       handle);
2897                         if (rc != 0)
2898                                 return rc;
2899
2900                         rc = mdo_declare_index_insert(env, mdd_sobj,
2901                                                       mdd_object_fid(mdd_tpobj),
2902                                                       S_IFDIR, dotdot, handle);
2903                         if (rc != 0)
2904                                 return rc;
2905                 }
2906
2907                 /* new target child can be directory,
2908                  * counted by target dir's nlink */
2909                 rc = mdo_declare_ref_add(env, mdd_tpobj, handle);
2910                 if (rc != 0)
2911                         return rc;
2912         }
2913
2914         la->la_valid = LA_CTIME | LA_MTIME;
2915         rc = mdo_declare_attr_set(env, mdd_spobj, la, handle);
2916         if (rc != 0)
2917                 return rc;
2918
2919         rc = mdo_declare_attr_set(env, mdd_tpobj, la, handle);
2920         if (rc != 0)
2921                 return rc;
2922
2923         la->la_valid = LA_CTIME;
2924         rc = mdo_declare_attr_set(env, mdd_sobj, la, handle);
2925         if (rc)
2926                 return rc;
2927
2928         rc = mdd_declare_links_add(env, mdd_sobj, handle, ldata);
2929         if (rc)
2930                 return rc;
2931
2932         /* new name */
2933         rc = mdo_declare_index_insert(env, mdd_tpobj, mdd_object_fid(mdd_sobj),
2934                                       mdd_object_type(mdd_sobj),
2935                                       tname->ln_name, handle);
2936         if (rc != 0)
2937                 return rc;
2938
2939         if (mdd_tobj && mdd_object_exists(mdd_tobj)) {
2940                 /* delete target child in target parent directory */
2941                 rc = mdo_declare_index_delete(env, mdd_tpobj, tname->ln_name,
2942                                               handle);
2943                 if (rc)
2944                         return rc;
2945
2946                 rc = mdo_declare_ref_del(env, mdd_tobj, handle);
2947                 if (rc)
2948                         return rc;
2949
2950                 if (S_ISDIR(mdd_object_type(mdd_tobj))) {
2951                         /* target child can be directory,
2952                          * delete "." reference in target child directory */
2953                         rc = mdo_declare_ref_del(env, mdd_tobj, handle);
2954                         if (rc)
2955                                 return rc;
2956
2957                         /* delete ".." reference in target parent directory */
2958                         rc = mdo_declare_ref_del(env, mdd_tpobj, handle);
2959                         if (rc)
2960                                 return rc;
2961                 }
2962
2963                 la->la_valid = LA_CTIME;
2964                 rc = mdo_declare_attr_set(env, mdd_tobj, la, handle);
2965                 if (rc)
2966                         return rc;
2967
2968                 rc = mdd_declare_finish_unlink(env, mdd_tobj, handle);
2969                 if (rc)
2970                         return rc;
2971         }
2972
2973         rc = mdd_declare_changelog_store(env, mdd, CL_RENAME, tname, sname,
2974                                          handle);
2975         if (rc)
2976                 return rc;
2977
2978         return rc;
2979 }
2980
2981 /* src object can be remote that is why we use only fid and type of object */
2982 static int mdd_rename(const struct lu_env *env,
2983                       struct md_object *src_pobj, struct md_object *tgt_pobj,
2984                       const struct lu_fid *lf, const struct lu_name *lsname,
2985                       struct md_object *tobj, const struct lu_name *ltname,
2986                       struct md_attr *ma)
2987 {
2988         const char *sname = lsname->ln_name;
2989         const char *tname = ltname->ln_name;
2990         struct lu_attr    *la = &mdd_env_info(env)->mti_la_for_fix;
2991         struct mdd_object *mdd_spobj = md2mdd_obj(src_pobj); /* source parent */
2992         struct mdd_object *mdd_tpobj = md2mdd_obj(tgt_pobj);
2993         struct mdd_device *mdd = mdo2mdd(src_pobj);
2994         struct mdd_object *mdd_sobj = NULL;                  /* source object */
2995         struct mdd_object *mdd_tobj = NULL;
2996         struct lu_attr *cattr = MDD_ENV_VAR(env, cattr);
2997         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
2998         struct lu_attr *tattr = MDD_ENV_VAR(env, tattr);
2999         struct lu_attr *tpattr = MDD_ENV_VAR(env, tpattr);
3000         struct thandle *handle;
3001         struct linkea_data  *ldata = &mdd_env_info(env)->mti_link_data;
3002         const struct lu_fid *tpobj_fid = mdd_object_fid(mdd_tpobj);
3003         const struct lu_fid *spobj_fid = mdd_object_fid(mdd_spobj);
3004         bool is_dir;
3005         bool tobj_ref = 0;
3006         bool tobj_locked = 0;
3007         unsigned cl_flags = 0;
3008         int rc, rc2;
3009         ENTRY;
3010
3011         /* let unlink to complete and commit */
3012         CFS_FAIL_TIMEOUT(OBD_FAIL_TGT_REPLY_DATA_RACE, 2 + cfs_fail_val);
3013
3014         if (tobj)
3015                 mdd_tobj = md2mdd_obj(tobj);
3016
3017         mdd_sobj = mdd_object_find(env, mdd, lf);
3018         if (IS_ERR(mdd_sobj))
3019                 RETURN(PTR_ERR(mdd_sobj));
3020
3021         rc = mdd_la_get(env, mdd_sobj, cattr);
3022         if (rc)
3023                 GOTO(out_pending, rc);
3024
3025         rc = mdd_la_get(env, mdd_spobj, pattr);
3026         if (rc)
3027                 GOTO(out_pending, rc);
3028
3029         if (mdd_tobj) {
3030                 rc = mdd_la_get(env, mdd_tobj, tattr);
3031                 if (rc)
3032                         GOTO(out_pending, rc);
3033                 /* search for an existing archive.
3034                  * we should check ahead as the object
3035                  * can be destroyed in this transaction */
3036                 if (mdd_hsm_archive_exists(env, mdd_tobj, ma))
3037                         cl_flags |= CLF_RENAME_LAST_EXISTS;
3038         }
3039
3040         rc = mdd_la_get(env, mdd_tpobj, tpattr);
3041         if (rc)
3042                 GOTO(out_pending, rc);
3043
3044         rc = mdd_rename_sanity_check(env, mdd_spobj, pattr, mdd_tpobj, tpattr,
3045                                      mdd_sobj, cattr, mdd_tobj, tattr);
3046         if (rc)
3047                 GOTO(out_pending, rc);
3048
3049         rc = mdd_name_check(mdd, ltname);
3050         if (rc < 0)
3051                 GOTO(out_pending, rc);
3052
3053         /* FIXME: Should consider tobj and sobj too in rename_lock. */
3054         rc = mdd_rename_order(env, mdd, mdd_spobj, pattr, mdd_tpobj);
3055         if (rc < 0)
3056                 GOTO(out_pending, rc);
3057
3058         handle = mdd_trans_create(env, mdd);
3059         if (IS_ERR(handle))
3060                 GOTO(out_pending, rc = PTR_ERR(handle));
3061
3062         memset(ldata, 0, sizeof(*ldata));
3063         rc = mdd_linkea_prepare(env, mdd_sobj, mdd_object_fid(mdd_spobj),
3064                                 lsname, mdd_object_fid(mdd_tpobj), ltname,
3065                                 1, 0, ldata);
3066         if (rc)
3067                 GOTO(stop, rc);
3068
3069         rc = mdd_declare_rename(env, mdd, mdd_spobj, mdd_tpobj, mdd_sobj,
3070                                 mdd_tobj, lsname, ltname, ma, ldata, handle);
3071         if (rc)
3072                 GOTO(stop, rc);
3073
3074         rc = mdd_trans_start(env, mdd, handle);
3075         if (rc)
3076                 GOTO(stop, rc);
3077
3078         is_dir = S_ISDIR(cattr->la_mode);
3079
3080         /* Remove source name from source directory */
3081         rc = __mdd_index_delete(env, mdd_spobj, sname, is_dir, handle);
3082         if (rc != 0)
3083                 GOTO(stop, rc);
3084
3085         /* "mv dir1 dir2" needs "dir1/.." link update */
3086         if (is_dir && !lu_fid_eq(spobj_fid, tpobj_fid)) {
3087                 rc = __mdd_index_delete_only(env, mdd_sobj, dotdot, handle);
3088                 if (rc != 0)
3089                         GOTO(fixup_spobj2, rc);
3090
3091                 rc = __mdd_index_insert_only(env, mdd_sobj, tpobj_fid, S_IFDIR,
3092                                              dotdot, handle);
3093                 if (rc != 0)
3094                         GOTO(fixup_spobj, rc);
3095         }
3096
3097         if (mdd_tobj != NULL && mdd_object_exists(mdd_tobj)) {
3098                 rc = __mdd_index_delete(env, mdd_tpobj, tname, is_dir, handle);
3099                 if (rc != 0)
3100                         /* tname might been renamed to something else */
3101                         GOTO(fixup_spobj, rc);
3102         }
3103
3104         /* Insert new fid with target name into target dir */
3105         rc = __mdd_index_insert(env, mdd_tpobj, lf, cattr->la_mode,
3106                                 tname, handle);
3107         if (rc != 0)
3108                 GOTO(fixup_tpobj, rc);
3109
3110         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
3111         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
3112
3113         /* XXX: mdd_sobj must be local one if it is NOT NULL. */
3114         la->la_valid = LA_CTIME;
3115         rc = mdd_update_time(env, mdd_sobj, cattr, la, handle);
3116         if (rc)
3117                 GOTO(fixup_tpobj, rc);
3118
3119         /* Update the linkEA for the source object */
3120         mdd_write_lock(env, mdd_sobj, DT_SRC_CHILD);
3121         rc = mdd_links_rename(env, mdd_sobj, mdd_object_fid(mdd_spobj),
3122                               lsname, mdd_object_fid(mdd_tpobj), ltname,
3123                               handle, ldata, 0, 0);
3124         if (rc == -ENOENT)
3125                 /* Old files might not have EA entry */
3126                 mdd_links_add(env, mdd_sobj, mdd_object_fid(mdd_spobj),
3127                               lsname, handle, NULL, 0);
3128         mdd_write_unlock(env, mdd_sobj);
3129         /* We don't fail the transaction if the link ea can't be
3130            updated -- fid2path will use alternate lookup method. */
3131         rc = 0;
3132
3133         /* Remove old target object
3134          * For tobj is remote case cmm layer has processed
3135          * and set tobj to NULL then. So when tobj is NOT NULL,
3136          * it must be local one.
3137          */
3138         if (tobj && mdd_object_exists(mdd_tobj)) {
3139                 mdd_write_lock(env, mdd_tobj, DT_TGT_CHILD);
3140                 tobj_locked = 1;
3141                 if (mdd_is_dead_obj(mdd_tobj)) {
3142                         /* shld not be dead, something is wrong */
3143                         CERROR("tobj is dead, something is wrong\n");
3144                         rc = -EINVAL;
3145                         goto cleanup;
3146                 }
3147                 mdo_ref_del(env, mdd_tobj, handle);
3148
3149                 /* Remove dot reference. */
3150                 if (S_ISDIR(tattr->la_mode))
3151                         mdo_ref_del(env, mdd_tobj, handle);
3152                 tobj_ref = 1;
3153
3154                 /* fetch updated nlink */
3155                 rc = mdd_la_get(env, mdd_tobj, tattr);
3156                 if (rc != 0) {
3157                         CERROR("%s: Failed to get nlink for tobj "
3158                                 DFID": rc = %d\n",
3159                                 mdd2obd_dev(mdd)->obd_name,
3160                                 PFID(tpobj_fid), rc);
3161                         GOTO(fixup_tpobj, rc);
3162                 }
3163
3164                 la->la_valid = LA_CTIME;
3165                 rc = mdd_update_time(env, mdd_tobj, tattr, la, handle);
3166                 if (rc != 0) {
3167                         CERROR("%s: Failed to set ctime for tobj "
3168                                 DFID": rc = %d\n",
3169                                 mdd2obd_dev(mdd)->obd_name,
3170                                 PFID(tpobj_fid), rc);
3171                         GOTO(fixup_tpobj, rc);
3172                 }
3173
3174                 /* XXX: this transfer to ma will be removed with LOD/OSP */
3175                 ma->ma_attr = *tattr;
3176                 ma->ma_valid |= MA_INODE;
3177                 rc = mdd_finish_unlink(env, mdd_tobj, ma, mdd_tpobj, ltname,
3178                                        handle);
3179                 if (rc != 0) {
3180                         CERROR("%s: Failed to unlink tobj "
3181                                 DFID": rc = %d\n",
3182                                 mdd2obd_dev(mdd)->obd_name,
3183                                 PFID(tpobj_fid), rc);
3184                         GOTO(fixup_tpobj, rc);
3185                 }
3186
3187                 /* fetch updated nlink */
3188                 rc = mdd_la_get(env, mdd_tobj, tattr);
3189                 if (rc == -ENOENT) {
3190                         /* the object got removed, let's
3191                          * return the latest known attributes */
3192                         tattr->la_nlink = 0;
3193                         rc = 0;
3194                 } else if (rc != 0) {
3195                         CERROR("%s: Failed to get nlink for tobj "
3196                                 DFID": rc = %d\n",
3197                                 mdd2obd_dev(mdd)->obd_name,
3198                                 PFID(tpobj_fid), rc);
3199                         GOTO(fixup_tpobj, rc);
3200                 }
3201                 /* XXX: this transfer to ma will be removed with LOD/OSP */
3202                 ma->ma_attr = *tattr;
3203                 ma->ma_valid |= MA_INODE;
3204
3205                 if (tattr->la_nlink == 0)
3206                         cl_flags |= CLF_RENAME_LAST;
3207                 else
3208                         cl_flags &= ~CLF_RENAME_LAST_EXISTS;
3209         }
3210
3211         la->la_valid = LA_CTIME | LA_MTIME;
3212         rc = mdd_update_time(env, mdd_spobj, pattr, la, handle);
3213         if (rc)
3214                 GOTO(fixup_tpobj, rc);
3215
3216         if (mdd_spobj != mdd_tpobj) {
3217                 la->la_valid = LA_CTIME | LA_MTIME;
3218                 rc = mdd_update_time(env, mdd_tpobj, tpattr, la, handle);
3219                 if (rc != 0)
3220                         GOTO(fixup_tpobj, rc);
3221         }
3222
3223         EXIT;
3224
3225 fixup_tpobj:
3226         if (rc) {
3227                 rc2 = __mdd_index_delete(env, mdd_tpobj, tname, is_dir, handle);
3228                 if (rc2)
3229                         CWARN("tp obj fix error %d\n",rc2);
3230
3231                 if (mdd_tobj && mdd_object_exists(mdd_tobj) &&
3232                     !mdd_is_dead_obj(mdd_tobj)) {
3233                         if (tobj_ref) {
3234                                 mdo_ref_add(env, mdd_tobj, handle);
3235                                 if (is_dir)
3236                                         mdo_ref_add(env, mdd_tobj, handle);
3237                         }
3238
3239                         rc2 = __mdd_index_insert(env, mdd_tpobj,
3240                                                  mdd_object_fid(mdd_tobj),
3241                                                  mdd_object_type(mdd_tobj),
3242                                                  tname, handle);
3243                         if (rc2 != 0)
3244                                 CWARN("tp obj fix error: rc = %d\n", rc2);
3245                 }
3246         }
3247
3248 fixup_spobj:
3249         if (rc && is_dir && mdd_sobj && mdd_spobj != mdd_tpobj) {
3250                 rc2 = __mdd_index_delete_only(env, mdd_sobj, dotdot, handle);
3251                 if (rc2)
3252                         CWARN("%s: sp obj dotdot delete error: rc = %d\n",
3253                                mdd2obd_dev(mdd)->obd_name, rc2);
3254
3255
3256                 rc2 = __mdd_index_insert_only(env, mdd_sobj, spobj_fid, S_IFDIR,
3257                                               dotdot, handle);
3258                 if (rc2 != 0)
3259                         CWARN("%s: sp obj dotdot insert error: rc = %d\n",
3260                               mdd2obd_dev(mdd)->obd_name, rc2);
3261         }
3262
3263 fixup_spobj2:
3264         if (rc != 0) {
3265                 rc2 = __mdd_index_insert(env, mdd_spobj, lf,
3266                                          mdd_object_type(mdd_sobj), sname,
3267                                          handle);
3268                 if (rc2 != 0)
3269                         CWARN("sp obj fix error: rc = %d\n", rc2);
3270         }
3271
3272 cleanup:
3273         if (tobj_locked)
3274                 mdd_write_unlock(env, mdd_tobj);
3275
3276         if (rc == 0)
3277                 rc = mdd_changelog_ns_store(env, mdd, CL_RENAME, cl_flags,
3278                                             mdd_tobj, tpobj_fid, lf, spobj_fid,
3279                                             ltname, lsname, handle);
3280
3281 stop:
3282         rc = mdd_trans_stop(env, mdd, rc, handle);
3283
3284 out_pending:
3285         mdd_object_put(env, mdd_sobj);
3286         return rc;
3287 }
3288
3289 /**
3290  * Check whether we should migrate the file/dir
3291  * return val
3292  *      < 0  permission check failed or other error.
3293  *      = 0  the file can be migrated.
3294  **/
3295 static int mdd_migrate_sanity_check(const struct lu_env *env,
3296                                     struct mdd_device *mdd,
3297                                     struct mdd_object *spobj,
3298                                     struct mdd_object *tpobj,
3299                                     struct mdd_object *sobj,
3300                                     struct mdd_object *tobj,
3301                                     const struct lu_attr *spattr,
3302                                     const struct lu_attr *tpattr,
3303                                     const struct lu_attr *attr)
3304 {
3305         int rc;
3306
3307         ENTRY;
3308
3309         if (!mdd_object_remote(sobj)) {
3310                 mdd_read_lock(env, sobj, DT_SRC_CHILD);
3311                 if (sobj->mod_count > 0) {
3312                         CDEBUG(D_INFO, "%s: "DFID" is opened, count %d\n",
3313                                mdd_obj_dev_name(sobj),
3314                                PFID(mdd_object_fid(sobj)),
3315                                sobj->mod_count);
3316                         mdd_read_unlock(env, sobj);
3317                         RETURN(-EBUSY);
3318                 }
3319                 mdd_read_unlock(env, sobj);
3320         }
3321
3322         if (mdd_object_exists(tobj))
3323                 RETURN(-EEXIST);
3324
3325         rc = mdd_rename_sanity_check(env, spobj, spattr, tpobj, tpattr, sobj,
3326                                      attr, NULL, NULL);
3327         RETURN(rc);
3328 }
3329
3330 typedef int (*mdd_xattr_cb)(const struct lu_env *env,
3331                             struct mdd_object *obj,
3332                             const struct lu_buf *buf,
3333                             const char *name,
3334                             int fl, struct thandle *handle);
3335
3336 /* iterate xattrs, but ignore LMA, LMV, and LINKEA if 'skip_linkea' is set. */
3337 static int mdd_iterate_xattrs(const struct lu_env *env,
3338                               struct mdd_object *sobj,
3339                               struct mdd_object *tobj,
3340                               bool skip_linkea,
3341                               struct thandle *handle,
3342                               mdd_xattr_cb cb)
3343 {
3344         struct mdd_thread_info *info = mdd_env_info(env);
3345         char *xname;
3346         struct lu_buf list_xbuf;
3347         struct lu_buf cbxbuf;
3348         struct lu_buf xbuf = { NULL };
3349         int list_xsize;
3350         int xlen;
3351         int rem;
3352         int xsize;
3353         int rc;
3354
3355         ENTRY;
3356
3357         /* retrieve xattr list from the old object */
3358         list_xsize = mdo_xattr_list(env, sobj, &LU_BUF_NULL);
3359         if (list_xsize == -ENODATA)
3360                 RETURN(0);
3361
3362         if (list_xsize < 0)
3363                 RETURN(list_xsize);
3364
3365         lu_buf_check_and_alloc(&info->mti_big_buf, list_xsize);
3366         if (info->mti_big_buf.lb_buf == NULL)
3367                 RETURN(-ENOMEM);
3368
3369         list_xbuf.lb_buf = info->mti_big_buf.lb_buf;
3370         list_xbuf.lb_len = list_xsize;
3371         rc = mdo_xattr_list(env, sobj, &list_xbuf);
3372         if (rc < 0)
3373                 RETURN(rc);
3374
3375         rem = rc;
3376         rc = 0;
3377         xname = list_xbuf.lb_buf;
3378         while (rem > 0) {
3379                 xlen = strnlen(xname, rem - 1) + 1;
3380                 if (strcmp(XATTR_NAME_LMA, xname) == 0 ||
3381                     strcmp(XATTR_NAME_LMV, xname) == 0)
3382                         goto next;
3383
3384                 if (skip_linkea &&
3385                     strcmp(XATTR_NAME_LINK, xname) == 0)
3386                         goto next;
3387
3388                 xsize = mdo_xattr_get(env, sobj, &LU_BUF_NULL, xname);
3389                 if (xsize == -ENODATA)
3390                         goto next;
3391                 if (xsize < 0)
3392                         GOTO(out, rc = xsize);
3393
3394                 lu_buf_check_and_alloc(&xbuf, xsize);
3395                 if (xbuf.lb_buf == NULL)
3396                         GOTO(out, rc = -ENOMEM);
3397
3398                 rc = mdo_xattr_get(env, sobj, &xbuf, xname);
3399                 if (rc == -ENODATA)
3400                         goto next;
3401                 if (rc < 0)
3402                         GOTO(out, rc);
3403
3404                 cbxbuf = xbuf;
3405                 cbxbuf.lb_len = xsize;
3406 repeat:
3407                 rc = cb(env, tobj, &cbxbuf, xname, 0, handle);
3408                 if (unlikely(rc == -ENOSPC &&
3409                              strcmp(xname, XATTR_NAME_LINK) == 0)) {
3410                         rc = linkea_overflow_shrink(
3411                                         (struct linkea_data *)(cbxbuf.lb_buf));
3412                         if (likely(rc > 0)) {
3413                                 cbxbuf.lb_len = rc;
3414                                 goto repeat;
3415                         }
3416                 }
3417
3418                 if (rc)
3419                         GOTO(out, rc);
3420 next:
3421                 xname += xlen;
3422                 rem -= xlen;
3423         }
3424
3425 out:
3426         lu_buf_free(&xbuf);
3427         RETURN(rc);
3428 }
3429
3430 typedef int (*mdd_linkea_cb)(const struct lu_env *env,
3431                              struct mdd_object *sobj,
3432                              struct mdd_object *tobj,
3433                              const struct lu_name *sname,
3434                              const struct lu_fid *sfid,
3435                              const struct lu_name *lname,
3436                              const struct lu_fid *fid,
3437                              void *opaque,
3438                              struct thandle *handle);
3439
3440 static int mdd_declare_update_link(const struct lu_env *env,
3441                                    struct mdd_object *sobj,
3442                                    struct mdd_object *tobj,
3443                                    const struct lu_name *tname,
3444                                    const struct lu_fid *tpfid,
3445                                    const struct lu_name *lname,
3446                                    const struct lu_fid *fid,
3447                                    void *unused,
3448                                    struct thandle *handle)
3449 {
3450         struct mdd_device *mdd = mdo2mdd(&sobj->mod_obj);
3451         struct mdd_object *pobj;
3452         int rc;
3453
3454         /* ignore tobj */
3455         if (lu_fid_eq(tpfid, fid) && tname->ln_namelen == lname->ln_namelen &&
3456             !strcmp(tname->ln_name, lname->ln_name))
3457                 return 0;
3458
3459         pobj = mdd_object_find(env, mdd, fid);
3460         if (IS_ERR(pobj))
3461                 return PTR_ERR(pobj);
3462
3463
3464         rc = mdo_declare_index_delete(env, pobj, lname->ln_name, handle);
3465         if (!rc)
3466                 rc = mdo_declare_index_insert(env, pobj, mdd_object_fid(tobj),
3467                                               mdd_object_type(sobj),
3468                                               lname->ln_name, handle);
3469         mdd_object_put(env, pobj);
3470         if (rc)
3471                 return rc;
3472
3473         rc = mdo_declare_ref_add(env, tobj, handle);
3474         if (rc)
3475                 return rc;
3476
3477         rc = mdo_declare_ref_del(env, sobj, handle);
3478         return rc;
3479 }
3480
3481 static int mdd_update_link(const struct lu_env *env,
3482                            struct mdd_object *sobj,
3483                            struct mdd_object *tobj,
3484                            const struct lu_name *tname,
3485                            const struct lu_fid *tpfid,
3486                            const struct lu_name *lname,
3487                            const struct lu_fid *fid,
3488                            void *unused,
3489                            struct thandle *handle)
3490 {
3491         struct mdd_device *mdd = mdo2mdd(&sobj->mod_obj);
3492         struct mdd_object *pobj;
3493         int rc;
3494
3495         ENTRY;
3496
3497         LASSERT(lu_name_is_valid(lname));
3498
3499         /* ignore tobj */
3500         if (lu_fid_eq(tpfid, fid) && tname->ln_namelen == lname->ln_namelen &&
3501             !strncmp(tname->ln_name, lname->ln_name, lname->ln_namelen))
3502                 RETURN(0);
3503
3504         CDEBUG(D_INFO, "update "DFID"/"DNAME":"DFID"\n",
3505                PFID(fid), PNAME(lname), PFID(mdd_object_fid(tobj)));
3506
3507         pobj = mdd_object_find(env, mdd, fid);
3508         if (IS_ERR(pobj)) {
3509                 CWARN("%s: cannot find obj "DFID": %ld\n",
3510                       mdd2obd_dev(mdd)->obd_name, PFID(fid), PTR_ERR(pobj));
3511                 RETURN(PTR_ERR(pobj));
3512         }
3513
3514         if (!mdd_object_exists(pobj)) {
3515                 CDEBUG(D_INFO, DFID" doesn't exist\n", PFID(fid));
3516                 mdd_object_put(env, pobj);
3517                 RETURN(-ENOENT);
3518         }
3519
3520         mdd_write_lock(env, pobj, DT_TGT_PARENT);
3521         rc = __mdd_index_delete_only(env, pobj, lname->ln_name, handle);
3522         if (!rc)
3523                 rc = __mdd_index_insert_only(env, pobj, mdd_object_fid(tobj),
3524                                              mdd_object_type(sobj),
3525                                              lname->ln_name, handle);
3526         mdd_write_unlock(env, pobj);
3527         mdd_object_put(env, pobj);
3528         if (rc)
3529                 RETURN(rc);
3530
3531         mdd_write_lock(env, tobj, DT_TGT_CHILD);
3532         rc = mdo_ref_add(env, tobj, handle);
3533         mdd_write_unlock(env, tobj);
3534         if (rc)
3535                 RETURN(rc);
3536
3537         mdd_write_lock(env, sobj, DT_SRC_CHILD);
3538         rc = mdo_ref_del(env, sobj, handle);
3539         mdd_write_unlock(env, sobj);
3540
3541         RETURN(rc);
3542 }
3543
3544 static inline int mdd_fld_lookup(const struct lu_env *env,
3545                                  struct mdd_device *mdd,
3546                                  const struct lu_fid *fid,
3547                                  __u32 *mdt_index)
3548 {
3549         struct lu_seq_range *range = &mdd_env_info(env)->mti_range;
3550         struct seq_server_site *ss;
3551         int rc;
3552
3553         ss = mdd->mdd_md_dev.md_lu_dev.ld_site->ld_seq_site;
3554
3555         range->lsr_flags = LU_SEQ_RANGE_MDT;
3556         rc = fld_server_lookup(env, ss->ss_server_fld, fid->f_seq, range);
3557         if (rc)
3558                 return rc;
3559
3560         *mdt_index = range->lsr_index;
3561
3562         return 0;
3563 }
3564
3565 static int mdd_is_link_on_source_mdt(const struct lu_env *env,
3566                                      struct mdd_object *sobj,
3567                                      struct mdd_object *tobj,
3568                                      const struct lu_name *tname,
3569                                      const struct lu_fid *tpfid,
3570                                      const struct lu_name *lname,
3571                                      const struct lu_fid *fid,
3572                                      void *opaque,
3573                                      struct thandle *handle)
3574 {
3575         struct mdd_device *mdd = mdo2mdd(&sobj->mod_obj);
3576         __u32 source_mdt_index = *(__u32 *)opaque;
3577         __u32 link_mdt_index;
3578         int rc;
3579
3580         ENTRY;
3581
3582         /* ignore tobj */
3583         if (lu_fid_eq(tpfid, fid) && tname->ln_namelen == lname->ln_namelen &&
3584             !strcmp(tname->ln_name, lname->ln_name))
3585                 return 0;
3586
3587         rc = mdd_fld_lookup(env, mdd, fid, &link_mdt_index);
3588         if (rc)
3589                 RETURN(rc);
3590
3591         RETURN(link_mdt_index == source_mdt_index);
3592 }
3593
3594 static int mdd_iterate_linkea(const struct lu_env *env,
3595                               struct mdd_object *sobj,
3596                               struct mdd_object *tobj,
3597                               const struct lu_name *tname,
3598                               const struct lu_fid *tpfid,
3599                               struct linkea_data *ldata,
3600                               void *opaque,
3601                               struct thandle *handle,
3602                               mdd_linkea_cb cb)
3603 {
3604         struct mdd_thread_info *info = mdd_env_info(env);
3605         char *filename = info->mti_name;
3606         struct lu_name lname;
3607         struct lu_fid fid;
3608         int rc = 0;
3609
3610         if (!ldata->ld_buf)
3611                 return 0;
3612
3613         for (linkea_first_entry(ldata); ldata->ld_lee && !rc;
3614              linkea_next_entry(ldata)) {
3615                 linkea_entry_unpack(ldata->ld_lee, &ldata->ld_reclen, &lname,
3616                                     &fid);
3617
3618                 /* Note: lname might miss \0 at the end */
3619                 snprintf(filename, sizeof(info->mti_name), "%.*s",
3620                          lname.ln_namelen, lname.ln_name);
3621                 lname.ln_name = filename;
3622
3623                 CDEBUG(D_INFO, DFID"/"DNAME"\n", PFID(&fid), PNAME(&lname));
3624
3625                 rc = cb(env, sobj, tobj, tname, tpfid, &lname, &fid, opaque,
3626                         handle);
3627         }
3628
3629         return rc;
3630 }
3631
3632 /**
3633  * Prepare linkea, and check whether file needs migrate: if source still has
3634  * link on source MDT, no need to migrate, just update namespace on source and
3635  * target parents.
3636  *
3637  * \retval      0 do migrate
3638  * \retval      1 don't migrate
3639  * \retval      -errno on failure
3640  */
3641 static int mdd_migrate_linkea_prepare(const struct lu_env *env,
3642                                       struct mdd_device *mdd,
3643                                       struct mdd_object *spobj,
3644                                       struct mdd_object *tpobj,
3645                                       struct mdd_object *sobj,
3646                                       const struct lu_name *lname,
3647                                       const struct lu_attr *attr,
3648                                       struct linkea_data *ldata)
3649 {
3650         __u32 source_mdt_index;
3651         int rc;
3652
3653         ENTRY;
3654
3655         memset(ldata, 0, sizeof(*ldata));
3656         rc = mdd_linkea_prepare(env, sobj, mdd_object_fid(spobj), lname,
3657                                 mdd_object_fid(tpobj), lname, 1, 0, ldata);
3658         if (rc)
3659                 RETURN(rc);
3660
3661         /*
3662          * Then it will check if the file should be migrated. If the file has
3663          * mulitple links, we only need migrate the file if all of its entries
3664          * has been migrated to the remote MDT.
3665          */
3666         if (S_ISDIR(attr->la_mode) || attr->la_nlink < 2)
3667                 RETURN(0);
3668
3669         /* If there are still links locally, don't migrate this file */
3670         LASSERT(ldata->ld_leh != NULL);
3671
3672         /*
3673          * If linkEA is overflow, it means there are some unknown name entries
3674          * under unknown parents, which will prevent the migration.
3675          */
3676         if (unlikely(ldata->ld_leh->leh_overflow_time))
3677                 RETURN(-EOVERFLOW);
3678
3679         rc = mdd_fld_lookup(env, mdd, mdd_object_fid(sobj), &source_mdt_index);
3680         if (rc)
3681                 RETURN(rc);
3682
3683         rc = mdd_iterate_linkea(env, sobj, NULL, lname, mdd_object_fid(tpobj),
3684                                 ldata, &source_mdt_index, NULL,
3685                                 mdd_is_link_on_source_mdt);
3686         RETURN(rc);
3687 }
3688
3689 static int mdd_declare_migrate_update(const struct lu_env *env,
3690                                       struct mdd_object *spobj,
3691                                       struct mdd_object *tpobj,
3692                                       struct mdd_object *obj,
3693                                       const struct lu_name *lname,
3694                                       struct lu_attr *attr,
3695                                       struct lu_attr *spattr,
3696                                       struct lu_attr *tpattr,
3697                                       struct linkea_data *ldata,
3698                                       struct md_attr *ma,
3699                                       struct thandle *handle)
3700 {
3701         struct mdd_thread_info *info = mdd_env_info(env);
3702         struct lu_attr *la = &info->mti_la_for_fix;
3703         int rc;
3704
3705         rc = mdo_declare_index_delete(env, spobj, lname->ln_name, handle);
3706         if (rc)
3707                 return rc;
3708
3709         if (S_ISDIR(attr->la_mode)) {
3710                 rc = mdo_declare_ref_del(env, spobj, handle);
3711                 if (rc)
3712                         return rc;
3713         }
3714
3715         rc = mdo_declare_index_insert(env, tpobj, mdd_object_fid(obj),
3716                                       attr->la_mode & S_IFMT,
3717                                       lname->ln_name, handle);
3718         if (rc)
3719                 return rc;
3720
3721         rc = mdd_declare_links_add(env, obj, handle, ldata);
3722         if (rc)
3723                 return rc;
3724
3725         if (S_ISDIR(attr->la_mode)) {
3726                 rc = mdo_declare_ref_add(env, tpobj, handle);
3727                 if (rc)
3728                         return rc;
3729         }
3730
3731         la->la_valid = LA_CTIME | LA_MTIME;
3732         rc = mdo_declare_attr_set(env, spobj, la, handle);
3733         if (rc)
3734                 return rc;
3735
3736         if (tpobj != spobj) {
3737                 rc = mdo_declare_attr_set(env, tpobj, la, handle);
3738                 if (rc)
3739                         return rc;
3740         }
3741
3742         return rc;
3743 }
3744
3745 static int mdd_declare_migrate_create(const struct lu_env *env,
3746                                       struct mdd_object *spobj,
3747                                       struct mdd_object *tpobj,
3748                                       struct mdd_object *sobj,
3749                                       struct mdd_object *tobj,
3750                                       const struct lu_name *lname,
3751                                       struct lu_attr *spattr,
3752                                       struct lu_attr *tpattr,
3753                                       struct lu_attr *attr,
3754                                       struct lu_buf *sbuf,
3755                                       struct linkea_data *ldata,
3756                                       struct md_attr *ma,
3757                                       struct md_op_spec *spec,
3758                                       struct dt_allocation_hint *hint,
3759                                       struct thandle *handle)
3760 {
3761         struct mdd_thread_info *info = mdd_env_info(env);
3762         struct md_layout_change *mlc = &info->mti_mlc;
3763         struct lmv_mds_md_v1 *lmv = sbuf->lb_buf;
3764         int rc;
3765
3766         ENTRY;
3767
3768         if (S_ISDIR(attr->la_mode)) {
3769                 struct lmv_user_md *lum = spec->u.sp_ea.eadata;
3770
3771                 mlc->mlc_opc = MD_LAYOUT_DETACH;
3772                 rc = mdo_declare_layout_change(env, sobj, mlc, handle);
3773                 if (rc)
3774                         return rc;
3775
3776                 lum->lum_hash_type |= cpu_to_le32(LMV_HASH_FLAG_MIGRATION);
3777         } else if (S_ISLNK(attr->la_mode)) {
3778                 spec->u.sp_symname = sbuf->lb_buf;
3779         } else if (S_ISREG(attr->la_mode)) {
3780                 spec->sp_cr_flags |= MDS_OPEN_DELAY_CREATE;
3781                 spec->sp_cr_flags &= ~MDS_OPEN_HAS_EA;
3782         }
3783
3784         mdd_object_make_hint(env, tpobj, tobj, attr, spec, hint);
3785
3786         rc = mdd_declare_create(env, mdo2mdd(&tpobj->mod_obj), tpobj, tobj,
3787                                 lname, attr, handle, spec, ldata, NULL, NULL,
3788                                 NULL, hint);
3789         if (rc)
3790                 return rc;
3791
3792         /*
3793          * tobj mode will be used in mdo_declare_layout_change(), but it's not
3794          * createb yet, copy from sobj.
3795          */
3796         tobj->mod_obj.mo_lu.lo_header->loh_attr &= ~S_IFMT;
3797         tobj->mod_obj.mo_lu.lo_header->loh_attr |=
3798                 sobj->mod_obj.mo_lu.lo_header->loh_attr & S_IFMT;
3799
3800         if (S_ISDIR(attr->la_mode)) {
3801                 if (!lmv) {
3802                         /* if sobj is not striped, fake a 1-stripe LMV */
3803                         LASSERT(sizeof(info->mti_key) >
3804                                 lmv_mds_md_size(1, LMV_MAGIC_V1));
3805                         lmv = (typeof(lmv))info->mti_key;
3806                         memset(lmv, 0, sizeof(*lmv));
3807                         lmv->lmv_magic = cpu_to_le32(LMV_MAGIC_V1);
3808                         lmv->lmv_stripe_count = cpu_to_le32(1);
3809                         lmv->lmv_hash_type = cpu_to_le32(LMV_HASH_TYPE_DEFAULT);
3810                         fid_le_to_cpu(&lmv->lmv_stripe_fids[0],
3811                                       mdd_object_fid(sobj));
3812                         mlc->mlc_buf.lb_buf = lmv;
3813                         mlc->mlc_buf.lb_len = lmv_mds_md_size(1, LMV_MAGIC_V1);
3814                 } else {
3815                         mlc->mlc_buf = *sbuf;
3816                 }
3817                 mlc->mlc_opc = MD_LAYOUT_ATTACH;
3818                 rc = mdo_declare_layout_change(env, tobj, mlc, handle);
3819                 if (rc)
3820                         return rc;
3821         }
3822
3823         rc = mdd_iterate_xattrs(env, sobj, tobj, true, handle,
3824                                 mdo_declare_xattr_set);
3825         if (rc)
3826                 return rc;
3827
3828         if (S_ISREG(attr->la_mode)) {
3829                 struct lu_buf fid_buf;
3830
3831                 handle->th_complex = 1;
3832
3833                 /* target may be remote, update PFID via sobj. */
3834                 fid_buf.lb_buf = (void *)mdd_object_fid(tobj);
3835                 fid_buf.lb_len = sizeof(struct lu_fid);
3836                 rc = mdo_declare_xattr_set(env, sobj, &fid_buf, XATTR_NAME_FID,
3837                                            0, handle);
3838                 if (rc)
3839                         return rc;
3840
3841                 rc = mdo_declare_xattr_del(env, sobj, XATTR_NAME_LOV, handle);
3842                 if (rc)
3843                         return rc;
3844         }
3845
3846         if (!S_ISDIR(attr->la_mode)) {
3847                 rc = mdd_iterate_linkea(env, sobj, tobj, lname,
3848                                         mdd_object_fid(tpobj), ldata, NULL,
3849                                         handle, mdd_declare_update_link);
3850                 if (rc)
3851                         return rc;
3852         }
3853
3854         if (!S_ISDIR(attr->la_mode) || lmv) {
3855                 rc = mdo_declare_ref_del(env, sobj, handle);
3856                 if (rc)
3857                         return rc;
3858
3859                 if (S_ISDIR(attr->la_mode)) {
3860                         rc = mdo_declare_ref_del(env, sobj, handle);
3861                         if (rc)
3862                                 return rc;
3863                 }
3864
3865                 rc = mdo_declare_destroy(env, sobj, handle);
3866                 if (rc)
3867                         return rc;
3868         }
3869
3870         rc = mdd_declare_migrate_update(env, spobj, tpobj, tobj, lname, attr,
3871                                         spattr, tpattr, ldata, ma, handle);
3872         return rc;
3873 }
3874
3875 /**
3876  * migrate dirent from \a spobj to \a tpobj.
3877  **/
3878 static int mdd_migrate_update(const struct lu_env *env,
3879                               struct mdd_object *spobj,
3880                               struct mdd_object *tpobj,
3881                               struct mdd_object *obj,
3882                               const struct lu_name *lname,
3883                               struct lu_attr *attr,
3884                               struct lu_attr *spattr,
3885                               struct lu_attr *tpattr,
3886                               struct linkea_data *ldata,
3887                               struct md_attr *ma,
3888                               struct thandle *handle)
3889 {
3890         struct mdd_thread_info *info = mdd_env_info(env);
3891         struct lu_attr *la = &info->mti_la_for_fix;
3892         int rc;
3893
3894         ENTRY;
3895
3896         CDEBUG(D_INFO, "update "DFID"/%s to "DFID"/"DFID"\n",
3897                PFID(mdd_object_fid(spobj)), lname->ln_name,
3898                PFID(mdd_object_fid(tpobj)), PFID(mdd_object_fid(obj)));
3899
3900         rc = __mdd_index_delete(env, spobj, lname->ln_name,
3901                                 S_ISDIR(attr->la_mode), handle);
3902         if (rc)
3903                 RETURN(rc);
3904
3905         rc = __mdd_index_insert(env, tpobj, mdd_object_fid(obj),
3906                                 attr->la_mode & S_IFMT,
3907                                 lname->ln_name, handle);
3908         if (rc)
3909                 RETURN(rc);
3910
3911         rc = mdd_links_write(env, obj, ldata, handle);
3912         if (rc)
3913                 RETURN(rc);
3914
3915         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
3916         la->la_valid = LA_CTIME | LA_MTIME;
3917         mdd_write_lock(env, spobj, DT_SRC_PARENT);
3918         rc = mdd_update_time(env, spobj, spattr, la, handle);
3919         mdd_write_unlock(env, spobj);
3920         if (rc)
3921                 RETURN(rc);
3922
3923         if (tpobj != spobj) {
3924                 la->la_valid = LA_CTIME | LA_MTIME;
3925                 mdd_write_lock(env, tpobj, DT_TGT_PARENT);
3926                 rc = mdd_update_time(env, tpobj, tpattr, la, handle);
3927                 mdd_write_unlock(env, tpobj);
3928                 if (rc)
3929                         RETURN(rc);
3930         }
3931
3932         RETURN(rc);
3933 }
3934
3935 /**
3936  * Migrate file/dir to target MDT.
3937  *
3938  * Create target according to \a spec, and then migrate xattrs, if it's
3939  * directory, migrate source stripes to target.
3940  *
3941  * \param[in] env       execution environment
3942  * \param[in] spobj     source parent object
3943  * \param[in] tpobj     target parent object
3944  * \param[in] sobj      source object
3945  * \param[in] tobj      target object
3946  * \param[in] lname     file name
3947  * \param[in] spattr    source parent attributes
3948  * \param[in] tpattr    target parent attributes
3949  * \param[in] attr      source attributes
3950  * \param[in] sbuf      source LMV buf
3951  * \param[in] spec      migrate create spec
3952  * \param[in] hint      target creation hint
3953  * \param[in] handle    tranasction handle
3954  *
3955  * \retval      0 on success
3956  * \retval      -errno on failure
3957  **/
3958 static int mdd_migrate_create(const struct lu_env *env,
3959                               struct mdd_object *spobj,
3960                               struct mdd_object *tpobj,
3961                               struct mdd_object *sobj,
3962                               struct mdd_object *tobj,
3963                               const struct lu_name *lname,
3964                               struct lu_attr *spattr,
3965                               struct lu_attr *tpattr,
3966                               struct lu_attr *attr,
3967                               const struct lu_buf *sbuf,
3968                               struct linkea_data *ldata,
3969                               struct md_attr *ma,
3970                               struct md_op_spec *spec,
3971                               struct dt_allocation_hint *hint,
3972                               struct thandle *handle)
3973 {
3974         int rc;
3975
3976         ENTRY;
3977
3978         /*
3979          * migrate sobj stripes to tobj if it's directory:
3980          * 1. detach stripes from sobj.
3981          * 2. attach stripes to tobj, see mdd_declare_migrate_mdt().
3982          * 3. create stripes for tobj, see lod_xattr_set_lmv().
3983          */
3984         if (S_ISDIR(attr->la_mode)) {
3985                 struct mdd_thread_info *info = mdd_env_info(env);
3986                 struct md_layout_change *mlc = &info->mti_mlc;
3987
3988                 mlc->mlc_opc = MD_LAYOUT_DETACH;
3989
3990                 mdd_write_lock(env, sobj, DT_SRC_PARENT);
3991                 rc = mdo_layout_change(env, sobj, mlc, handle);
3992                 mdd_write_unlock(env, sobj);
3993                 if (rc)
3994                         RETURN(rc);
3995         }
3996
3997         /* don't set nlink from sobj */
3998         attr->la_valid &= ~LA_NLINK;
3999
4000         rc = mdd_create_object(env, tpobj, tobj, attr, spec, NULL, NULL, NULL,
4001                                hint, handle, false);
4002         if (rc)
4003                 RETURN(rc);
4004
4005         mdd_write_lock(env, tobj, DT_TGT_CHILD);
4006         rc = mdd_iterate_xattrs(env, sobj, tobj, true, handle, mdo_xattr_set);
4007         mdd_write_unlock(env, tobj);
4008         if (rc)
4009                 RETURN(rc);
4010
4011         /* for regular file, update OST objects XATTR_NAME_FID */
4012         if (S_ISREG(attr->la_mode)) {
4013                 struct lu_buf fid_buf;
4014
4015                 /* target may be remote, update PFID via sobj. */
4016                 fid_buf.lb_buf = (void *)mdd_object_fid(tobj);
4017                 fid_buf.lb_len = sizeof(struct lu_fid);
4018                 rc = mdo_xattr_set(env, sobj, &fid_buf, XATTR_NAME_FID, 0,
4019                                    handle);
4020                 if (rc)
4021                         RETURN(rc);
4022
4023                 /* delete LOV to avoid deleting OST objs when destroying sobj */
4024                 mdd_write_lock(env, sobj, DT_SRC_CHILD);
4025                 rc = mdo_xattr_del(env, sobj, XATTR_NAME_LOV, handle);
4026                 mdd_write_unlock(env, sobj);
4027                 /* O_DELAY_CREATE file may not have LOV, ignore -ENODATA */
4028                 if (rc && rc != -ENODATA)
4029                         RETURN(rc);
4030                 rc = 0;
4031         }
4032
4033         /* update links FID */
4034         if (!S_ISDIR(attr->la_mode)) {
4035                 rc = mdd_iterate_linkea(env, sobj, tobj, lname,
4036                                         mdd_object_fid(tpobj), ldata,
4037                                         NULL, handle, mdd_update_link);
4038                 if (rc)
4039                         RETURN(rc);
4040         }
4041
4042         /* don't destroy sobj if it's plain directory */
4043         if (!S_ISDIR(attr->la_mode) || sbuf->lb_buf) {
4044                 mdd_write_lock(env, sobj, DT_SRC_CHILD);
4045                 rc = mdo_ref_del(env, sobj, handle);
4046                 if (!rc) {
4047                         if (S_ISDIR(attr->la_mode))
4048                                 rc = mdo_ref_del(env, sobj, handle);
4049                         if (!rc)
4050                                 rc = mdo_destroy(env, sobj, handle);
4051                 }
4052                 mdd_write_unlock(env, sobj);
4053                 if (rc)
4054                         RETURN(rc);
4055         }
4056
4057         rc = mdd_migrate_update(env, spobj, tpobj, tobj, lname, attr,
4058                                 spattr, tpattr, ldata, ma, handle);
4059
4060         RETURN(rc);
4061 }
4062
4063 /* NB: if user issued different migrate command, we can't adjust it silently
4064  * here, because this command will decide target MDT in subdir migration in
4065  * LMV.
4066  */
4067 static int mdd_migrate_cmd_check(struct mdd_device *mdd,
4068                                  const struct lmv_mds_md_v1 *lmv,
4069                                  const struct lmv_user_md_v1 *lum,
4070                                  const struct lu_name *lname)
4071 {
4072         __u32 lum_stripe_count = lum->lum_stripe_count;
4073         __u32 lmv_hash_type = lmv->lmv_hash_type;
4074         char *mdt_hash_name[] = { "none",
4075                                   LMV_HASH_NAME_ALL_CHARS,
4076                                   LMV_HASH_NAME_FNV_1A_64,
4077                                   LMV_HASH_NAME_CRUSH,
4078         };
4079
4080         if (!lmv_is_sane(lmv))
4081                 return -EBADF;
4082
4083         /* if stripe_count unspecified, set to 1 */
4084         if (!lum_stripe_count)
4085                 lum_stripe_count = cpu_to_le32(1);
4086
4087         lmv_hash_type &= ~cpu_to_le32(LMV_HASH_FLAG_MIGRATION);
4088
4089         /* TODO: check specific MDTs */
4090         if (lum_stripe_count != lmv->lmv_migrate_offset ||
4091             lum->lum_stripe_offset != lmv->lmv_master_mdt_index ||
4092             (lum->lum_hash_type && lum->lum_hash_type != lmv_hash_type)) {
4093                 CERROR("%s: '"DNAME"' migration was interrupted, run 'lfs migrate -m %d -c %d -H %s "DNAME"' to finish migration.\n",
4094                         mdd2obd_dev(mdd)->obd_name, PNAME(lname),
4095                         le32_to_cpu(lmv->lmv_master_mdt_index),
4096                         le32_to_cpu(lmv->lmv_migrate_offset),
4097                         mdt_hash_name[le32_to_cpu(lmv_hash_type)],
4098                         PNAME(lname));
4099                 return -EPERM;
4100         }
4101
4102         return -EALREADY;
4103 }
4104
4105 /**
4106  * Migrate directory or file.
4107  *
4108  * migrate source to target in following steps:
4109  *   1. create target, append source stripes after target's if it's directory,
4110  *      migrate xattrs and update fid of source links.
4111  *   2. update namespace: migrate dirent from source parent to target parent,
4112  *      update file linkea, and destroy source if it's not needed any more.
4113  *
4114  * \param[in] env       execution environment
4115  * \param[in] md_pobj   parent master object
4116  * \param[in] md_sobj   source object
4117  * \param[in] lname     file name
4118  * \param[in] md_tobj   target object
4119  * \param[in] spec      target creation spec
4120  * \param[in] ma        used to update \a pobj mtime and ctime
4121  *
4122  * \retval              0 on success
4123  * \retval              -errno on failure
4124  */
4125 static int mdd_migrate(const struct lu_env *env, struct md_object *md_pobj,
4126                        struct md_object *md_sobj, const struct lu_name *lname,
4127                        struct md_object *md_tobj, struct md_op_spec *spec,
4128                        struct md_attr *ma)
4129 {
4130         struct mdd_device *mdd = mdo2mdd(md_pobj);
4131         struct mdd_thread_info *info = mdd_env_info(env);
4132         struct mdd_object *pobj = md2mdd_obj(md_pobj);
4133         struct mdd_object *sobj = md2mdd_obj(md_sobj);
4134         struct mdd_object *tobj = md2mdd_obj(md_tobj);
4135         struct mdd_object *spobj = NULL;
4136         struct mdd_object *tpobj = NULL;
4137         struct lu_attr *spattr = &info->mti_pattr;
4138         struct lu_attr *tpattr = &info->mti_tpattr;
4139         struct lu_attr *attr = &info->mti_cattr;
4140         struct linkea_data *ldata = &info->mti_link_data;
4141         struct dt_allocation_hint *hint = &info->mti_hint;
4142         struct lu_fid *fid = &info->mti_fid2;
4143         struct lu_buf pbuf = { NULL };
4144         struct lu_buf sbuf = { NULL };
4145         struct lmv_mds_md_v1 *lmv;
4146         struct thandle *handle;
4147         bool nsonly = false;
4148         int rc;
4149
4150         ENTRY;
4151
4152         rc = mdd_la_get(env, sobj, attr);
4153         if (rc)
4154                 RETURN(rc);
4155
4156         /* locate source and target stripe on pobj, which are the real parent */
4157         rc = mdd_stripe_get(env, pobj, &pbuf, XATTR_NAME_LMV);
4158         if (rc < 0 && rc != -ENODATA)
4159                 RETURN(rc);
4160
4161         lmv = pbuf.lb_buf;
4162         if (lmv) {
4163                 int index;
4164
4165                 if (!lmv_is_sane(lmv))
4166                         GOTO(out, rc = -EBADF);
4167
4168                 /* locate target parent stripe */
4169                 /* fail check here to make sure top dir migration succeed. */
4170                 if (lmv_is_migrating(lmv) &&
4171                     OBD_FAIL_CHECK_RESET(OBD_FAIL_MIGRATE_ENTRIES, 0))
4172                         GOTO(out, rc = -EIO);
4173
4174                 index = lmv_name_to_stripe_index(lmv, lname->ln_name,
4175                                                  lname->ln_namelen);
4176                 if (index < 0)
4177                         GOTO(out, rc = index);
4178
4179                 fid_le_to_cpu(fid, &lmv->lmv_stripe_fids[index]);
4180                 tpobj = mdd_object_find(env, mdd, fid);
4181                 if (IS_ERR(tpobj))
4182                         GOTO(out, rc = PTR_ERR(tpobj));
4183
4184                 /* locate source parent stripe */
4185                 if (lmv_is_layout_changing(lmv)) {
4186                         index = lmv_name_to_stripe_index_old(lmv,
4187                                                              lname->ln_name,
4188                                                              lname->ln_namelen);
4189                         if (index < 0)
4190                                 GOTO(out, rc = index);
4191
4192                         fid_le_to_cpu(fid, &lmv->lmv_stripe_fids[index]);
4193                         spobj = mdd_object_find(env, mdd, fid);
4194                         if (IS_ERR(spobj))
4195                                 GOTO(out, rc = PTR_ERR(spobj));
4196
4197                         /* parent stripe unchanged */
4198                         if (spobj == tpobj) {
4199                                 if (!lmv_is_restriping(lmv))
4200                                         GOTO(out, rc = -EINVAL);
4201                                 GOTO(out, rc = -EALREADY);
4202                         }
4203                         nsonly = spec->sp_migrate_nsonly;
4204                 } else {
4205                         spobj = tpobj;
4206                         mdd_object_get(spobj);
4207                 }
4208         } else {
4209                 tpobj = pobj;
4210                 spobj = pobj;
4211                 mdd_object_get(tpobj);
4212                 mdd_object_get(spobj);
4213         }
4214
4215         rc = mdd_la_get(env, spobj, spattr);
4216         if (rc)
4217                 GOTO(out, rc);
4218
4219         rc = mdd_la_get(env, tpobj, tpattr);
4220         if (rc)
4221                 GOTO(out, rc);
4222
4223         if (S_ISDIR(attr->la_mode) && !nsonly) {
4224                 struct lmv_user_md_v1 *lum = spec->u.sp_ea.eadata;
4225
4226                 LASSERT(lum);
4227
4228                 /* if user use default value '0' for stripe_count, we need to
4229                  * adjust it to '1' to create a 1-stripe directory.
4230                  */
4231                 if (lum->lum_stripe_count == 0)
4232                         lum->lum_stripe_count = cpu_to_le32(1);
4233
4234                 rc = mdd_stripe_get(env, sobj, &sbuf, XATTR_NAME_LMV);
4235                 if (rc && rc != -ENODATA)
4236                         GOTO(out, rc);
4237
4238                 lmv = sbuf.lb_buf;
4239                 if (lmv) {
4240                         if (!lmv_is_sane(lmv))
4241                                 GOTO(out, rc = -EBADF);
4242                         if (lmv_is_migrating(lmv)) {
4243                                 rc = mdd_migrate_cmd_check(mdd, lmv, lum,
4244                                                            lname);
4245                                 GOTO(out, rc);
4246                         }
4247                 }
4248         } else if (!S_ISDIR(attr->la_mode)) {
4249                 if (spobj == tpobj)
4250                         GOTO(out, rc = -EALREADY);
4251
4252                 /* update namespace only if @sobj is on MDT where @tpobj is. */
4253                 if (!mdd_object_remote(tpobj))
4254                         nsonly = true;
4255
4256                 if (S_ISLNK(attr->la_mode)) {
4257                         lu_buf_check_and_alloc(&sbuf, attr->la_size + 1);
4258                         if (!sbuf.lb_buf)
4259                                 GOTO(out, rc = -ENOMEM);
4260
4261                         rc = mdd_readlink(env, &sobj->mod_obj, &sbuf);
4262                         if (rc <= 0) {
4263                                 rc = rc ?: -EFAULT;
4264                                 CERROR("%s: "DFID" readlink failed: rc = %d\n",
4265                                        mdd2obd_dev(mdd)->obd_name,
4266                                        PFID(mdd_object_fid(sobj)), rc);
4267                                 GOTO(out, rc);
4268                         }
4269                 }
4270         }
4271
4272         /* linkea needs update upon FID or parent stripe change */
4273         rc = mdd_migrate_linkea_prepare(env, mdd, spobj, tpobj, sobj, lname,
4274                                         attr, ldata);
4275         if (rc > 0)
4276                 /* update namespace only if @sobj has link on its MDT. */
4277                 nsonly = true;
4278         else if (rc < 0)
4279                 GOTO(out, rc);
4280
4281         rc = mdd_migrate_sanity_check(env, mdd, spobj, tpobj, sobj, tobj,
4282                                       spattr, tpattr, attr);
4283         if (rc)
4284                 GOTO(out, rc);
4285
4286         handle = mdd_trans_create(env, mdd);
4287         if (IS_ERR(handle))
4288                 GOTO(out, rc = PTR_ERR(handle));
4289
4290         if (nsonly)
4291                 rc = mdd_declare_migrate_update(env, spobj, tpobj, sobj, lname,
4292                                                 attr, spattr, tpattr, ldata, ma,
4293                                                 handle);
4294         else
4295                 rc = mdd_declare_migrate_create(env, spobj, tpobj, sobj, tobj,
4296                                                 lname, spattr, tpattr, attr,
4297                                                 &sbuf, ldata, ma, spec, hint,
4298                                                 handle);
4299         if (rc)
4300                 GOTO(stop_trans, rc);
4301
4302         rc = mdd_declare_changelog_store(env, mdd, CL_MIGRATE, lname, NULL,
4303                                          handle);
4304         if (rc)
4305                 GOTO(stop_trans, rc);
4306
4307         rc = mdd_trans_start(env, mdd, handle);
4308         if (rc)
4309                 GOTO(stop_trans, rc);
4310
4311         if (nsonly)
4312                 rc = mdd_migrate_update(env, spobj, tpobj, sobj, lname, attr,
4313                                         spattr, tpattr, ldata, ma, handle);
4314         else
4315                 rc = mdd_migrate_create(env, spobj, tpobj, sobj, tobj, lname,
4316                                         spattr, tpattr, attr, &sbuf, ldata, ma,
4317                                         spec, hint, handle);
4318         if (rc)
4319                 GOTO(stop_trans, rc);
4320
4321         rc = mdd_changelog_ns_store(env, mdd, CL_MIGRATE, 0,
4322                                     nsonly ? sobj : tobj, mdd_object_fid(spobj),
4323                                     mdd_object_fid(sobj), mdd_object_fid(tpobj),
4324                                     lname, lname, handle);
4325         if (rc)
4326                 GOTO(stop_trans, rc);
4327         EXIT;
4328
4329 stop_trans:
4330         rc = mdd_trans_stop(env, mdd, rc, handle);
4331 out:
4332         if (!IS_ERR_OR_NULL(spobj))
4333                 mdd_object_put(env, spobj);
4334         if (!IS_ERR_OR_NULL(tpobj))
4335                 mdd_object_put(env, tpobj);
4336         lu_buf_free(&sbuf);
4337         lu_buf_free(&pbuf);
4338
4339         return rc;
4340 }
4341
4342 static int mdd_declare_1sd_collapse(const struct lu_env *env,
4343                                     struct mdd_object *pobj,
4344                                     struct mdd_object *obj,
4345                                     struct mdd_object *stripe,
4346                                     struct lu_attr *attr,
4347                                     struct md_layout_change *mlc,
4348                                     struct lu_name *lname,
4349                                     struct thandle *handle)
4350 {
4351         int rc;
4352
4353         mlc->mlc_opc = MD_LAYOUT_DETACH;
4354         rc = mdo_declare_layout_change(env, obj, mlc, handle);
4355         if (rc)
4356                 return rc;
4357
4358         rc = mdo_declare_index_insert(env, stripe, mdd_object_fid(pobj),
4359                                       S_IFDIR, dotdot, handle);
4360         if (rc)
4361                 return rc;
4362
4363         rc = mdd_iterate_xattrs(env, obj, stripe, false, handle,
4364                                 mdo_declare_xattr_set);
4365         if (rc)
4366                 return rc;
4367
4368         rc = mdo_declare_xattr_del(env, stripe, XATTR_NAME_LMV, handle);
4369         if (rc)
4370                 return rc;
4371
4372         rc = mdo_declare_attr_set(env, stripe, attr, handle);
4373         if (rc)
4374                 return rc;
4375
4376         rc = mdo_declare_index_delete(env, pobj, lname->ln_name, handle);
4377         if (rc)
4378                 return rc;
4379
4380         rc = mdo_declare_index_insert(env, pobj, mdd_object_fid(stripe),
4381                                       attr->la_mode, lname->ln_name, handle);
4382         if (rc)
4383                 return rc;
4384
4385         rc = mdo_declare_ref_del(env, obj, handle);
4386         if (rc)
4387                 return rc;
4388
4389         rc = mdo_declare_ref_del(env, obj, handle);
4390         if (rc)
4391                 return rc;
4392
4393         rc = mdo_declare_destroy(env, obj, handle);
4394         if (rc)
4395                 return rc;
4396
4397         return rc;
4398 }
4399
4400 /* transform one-stripe directory to a plain directory */
4401 static int mdd_1sd_collapse(const struct lu_env *env,
4402                             struct mdd_object *pobj,
4403                             struct mdd_object *obj,
4404                             struct mdd_object *stripe,
4405                             struct lu_attr *attr,
4406                             struct md_layout_change *mlc,
4407                             struct lu_name *lname,
4408                             struct thandle *handle)
4409 {
4410         int rc;
4411
4412         ENTRY;
4413
4414         /* replace 1-stripe directory with its stripe */
4415         mlc->mlc_opc = MD_LAYOUT_DETACH;
4416
4417         mdd_write_lock(env, obj, DT_SRC_PARENT);
4418         rc = mdo_layout_change(env, obj, mlc, handle);
4419         mdd_write_unlock(env, obj);
4420         if (rc)
4421                 RETURN(rc);
4422
4423         mdd_write_lock(env, pobj, DT_SRC_PARENT);
4424         mdd_write_lock(env, obj, DT_SRC_CHILD);
4425
4426         /* insert dotdot to stripe which points to parent */
4427         rc = __mdd_index_insert_only(env, stripe, mdd_object_fid(pobj),
4428                                      S_IFDIR, dotdot, handle);
4429         if (rc)
4430                 GOTO(out, rc);
4431
4432         /* copy xattrs including linkea */
4433         rc = mdd_iterate_xattrs(env, obj, stripe, false, handle, mdo_xattr_set);
4434         if (rc)
4435                 GOTO(out, rc);
4436
4437         /* delete LMV */
4438         rc = mdo_xattr_del(env, stripe, XATTR_NAME_LMV, handle);
4439         if (rc)
4440                 GOTO(out, rc);
4441
4442         /* don't set nlink from parent */
4443         attr->la_valid &= ~LA_NLINK;
4444
4445         rc = mdo_attr_set(env, stripe, attr, handle);
4446         if (rc)
4447                 GOTO(out, rc);
4448
4449         /* delete dir name from parent */
4450         rc = __mdd_index_delete_only(env, pobj, lname->ln_name, handle);
4451         if (rc)
4452                 GOTO(out, rc);
4453
4454         /* insert stripe to parent with dir name */
4455         rc = __mdd_index_insert_only(env, pobj, mdd_object_fid(stripe),
4456                                      attr->la_mode, lname->ln_name, handle);
4457         if (rc)
4458                 GOTO(out, rc);
4459
4460         /* destroy dir obj */
4461         rc = mdo_ref_del(env, obj, handle);
4462         if (rc)
4463                 GOTO(out, rc);
4464
4465         rc = mdo_ref_del(env, obj, handle);
4466         if (rc)
4467                 GOTO(out, rc);
4468
4469         rc = mdo_destroy(env, obj, handle);
4470         if (rc)
4471                 GOTO(out, rc);
4472
4473         EXIT;
4474 out:
4475         mdd_write_unlock(env, obj);
4476         mdd_write_unlock(env, pobj);
4477
4478         return rc;
4479 }
4480
4481 /*
4482  * shrink directory stripes after migration/merge
4483  */
4484 int mdd_dir_layout_shrink(const struct lu_env *env,
4485                           struct md_object *md_obj,
4486                           struct md_layout_change *mlc)
4487 {
4488         struct mdd_device *mdd = mdo2mdd(md_obj);
4489         struct mdd_thread_info *info = mdd_env_info(env);
4490         struct mdd_object *obj = md2mdd_obj(md_obj);
4491         struct mdd_object *pobj = NULL;
4492         struct mdd_object *stripe = NULL;
4493         struct lu_attr *attr = &info->mti_pattr;
4494         struct lu_fid *fid = &info->mti_fid2;
4495         struct lu_name lname = { NULL };
4496         struct lu_buf lmv_buf = { NULL };
4497         struct lmv_mds_md_v1 *lmv;
4498         struct lmv_user_md *lmu;
4499         struct thandle *handle;
4500         int rc;
4501
4502         ENTRY;
4503
4504         rc = mdd_la_get(env, obj, attr);
4505         if (rc)
4506                 RETURN(rc);
4507
4508         if (!S_ISDIR(attr->la_mode))
4509                 RETURN(-ENOTDIR);
4510
4511         rc = mdd_stripe_get(env, obj, &lmv_buf, XATTR_NAME_LMV);
4512         if (rc < 0)
4513                 RETURN(rc);
4514
4515         lmv = lmv_buf.lb_buf;
4516         if (!lmv_is_sane(lmv))
4517                 RETURN(-EBADF);
4518
4519         lmu = mlc->mlc_buf.lb_buf;
4520
4521         /* adjust the default value '0' to '1' */
4522         if (lmu->lum_stripe_count == 0)
4523                 lmu->lum_stripe_count = cpu_to_le32(1);
4524
4525         /* these were checked in MDT */
4526         LASSERT(le32_to_cpu(lmu->lum_stripe_count) <
4527                 le32_to_cpu(lmv->lmv_stripe_count));
4528         LASSERT(!lmv_is_splitting(lmv));
4529         LASSERT(lmv_is_migrating(lmv) || lmv_is_merging(lmv));
4530
4531         /* if dir stripe count will be shrunk to 1, it needs to be transformed
4532          * to a plain dir, which will cause FID change and namespace update.
4533          */
4534         if (le32_to_cpu(lmu->lum_stripe_count) == 1) {
4535                 struct linkea_data *ldata = &info->mti_link_data;
4536                 char *filename = info->mti_name;
4537
4538                 rc = mdd_links_read(env, obj, ldata);
4539                 if (rc)
4540                         GOTO(out, rc);
4541
4542                 if (ldata->ld_leh->leh_reccount > 1)
4543                         GOTO(out, rc = -EINVAL);
4544
4545                 linkea_first_entry(ldata);
4546                 if (!ldata->ld_lee)
4547                         GOTO(out, rc = -ENODATA);
4548
4549                 linkea_entry_unpack(ldata->ld_lee, &ldata->ld_reclen, &lname,
4550                                     fid);
4551
4552                 /* Note: lname might miss \0 at the end */
4553                 snprintf(filename, sizeof(info->mti_name), "%.*s",
4554                          lname.ln_namelen, lname.ln_name);
4555                 lname.ln_name = filename;
4556
4557                 pobj = mdd_object_find(env, mdd, fid);
4558                 if (IS_ERR(pobj)) {
4559                         rc = PTR_ERR(pobj);
4560                         pobj = NULL;
4561                         GOTO(out, rc);
4562                 }
4563
4564                 fid_le_to_cpu(fid, &lmv->lmv_stripe_fids[0]);
4565
4566                 stripe = mdd_object_find(env, mdd, fid);
4567                 if (IS_ERR(stripe)) {
4568                         mdd_object_put(env, pobj);
4569                         pobj = NULL;
4570                         GOTO(out, rc = PTR_ERR(stripe));
4571                 }
4572         }
4573
4574         handle = mdd_trans_create(env, mdd);
4575         if (IS_ERR(handle))
4576                 GOTO(out, rc = PTR_ERR(handle));
4577
4578         mlc->mlc_opc = MD_LAYOUT_SHRINK;
4579         rc = mdo_declare_layout_change(env, obj, mlc, handle);
4580         if (rc)
4581                 GOTO(stop_trans, rc);
4582
4583         if (le32_to_cpu(lmu->lum_stripe_count) == 1) {
4584                 rc = mdd_declare_1sd_collapse(env, pobj, obj, stripe, attr, mlc,
4585                                               &lname, handle);
4586                 if (rc)
4587                         GOTO(stop_trans, rc);
4588         }
4589
4590         rc = mdd_declare_changelog_store(env, mdd, CL_LAYOUT, NULL, NULL,
4591                                          handle);
4592         if (rc)
4593                 GOTO(stop_trans, rc);
4594
4595         rc = mdd_trans_start(env, mdd, handle);
4596         if (rc)
4597                 GOTO(stop_trans, rc);
4598
4599         mdd_write_lock(env, obj, DT_SRC_PARENT);
4600         mlc->mlc_opc = MD_LAYOUT_SHRINK;
4601         rc = mdo_layout_change(env, obj, mlc, handle);
4602         mdd_write_unlock(env, obj);
4603         if (rc)
4604                 GOTO(stop_trans, rc);
4605
4606         if (le32_to_cpu(lmu->lum_stripe_count) == 1) {
4607                 rc = mdd_1sd_collapse(env, pobj, obj, stripe, attr, mlc, &lname,
4608                                       handle);
4609                 if (rc)
4610                         GOTO(stop_trans, rc);
4611         }
4612
4613         rc = mdd_changelog_data_store_xattr(env, mdd, CL_LAYOUT, 0, obj,
4614                                             XATTR_NAME_LMV, handle);
4615         GOTO(stop_trans, rc);
4616
4617 stop_trans:
4618         rc = mdd_trans_stop(env, mdd, rc, handle);
4619 out:
4620         if (pobj) {
4621                 mdd_object_put(env, stripe);
4622                 mdd_object_put(env, pobj);
4623         }
4624         lu_buf_free(&lmv_buf);
4625         return rc;
4626 }
4627
4628 static int mdd_dir_declare_split_plain(const struct lu_env *env,
4629                                         struct mdd_device *mdd,
4630                                         struct mdd_object *pobj,
4631                                         struct mdd_object *obj,
4632                                         struct mdd_object *tobj,
4633                                         struct md_layout_change *mlc,
4634                                         struct dt_allocation_hint *hint,
4635                                         struct thandle *handle)
4636 {
4637         struct mdd_thread_info *info = mdd_env_info(env);
4638         const struct lu_name *lname = mlc->mlc_name;
4639         struct lu_attr *la = &info->mti_la_for_fix;
4640         struct lmv_user_md_v1 *lum = mlc->mlc_spec->u.sp_ea.eadata;
4641         struct linkea_data *ldata = &info->mti_link_data;
4642         struct lmv_mds_md_v1 *lmv;
4643         __u32 count;
4644         int rc;
4645
4646         mlc->mlc_opc = MD_LAYOUT_DETACH;
4647         rc = mdo_declare_layout_change(env, obj, mlc, handle);
4648         if (rc)
4649                 return rc;
4650
4651         memset(ldata, 0, sizeof(*ldata));
4652         rc = mdd_linkea_prepare(env, obj, NULL, NULL, mdd_object_fid(pobj),
4653                                 lname, 1, 0, ldata);
4654         if (rc)
4655                 return rc;
4656
4657         count = lum->lum_stripe_count;
4658         lum->lum_stripe_count = 0;
4659         mdd_object_make_hint(env, pobj, tobj, mlc->mlc_attr, mlc->mlc_spec,
4660                              hint);
4661         rc = mdd_declare_create(env, mdo2mdd(&pobj->mod_obj), pobj, tobj,
4662                                 lname, mlc->mlc_attr, handle, mlc->mlc_spec,
4663                                 ldata, NULL, NULL, NULL, hint);
4664         if (rc)
4665                 return rc;
4666
4667         /* tobj mode will be used in lod_declare_xattr_set(), but it's not
4668          * created yet.
4669          */
4670         tobj->mod_obj.mo_lu.lo_header->loh_attr |= S_IFDIR;
4671
4672         lmv = (typeof(lmv))info->mti_key;
4673         memset(lmv, 0, sizeof(*lmv));
4674         lmv->lmv_magic = cpu_to_le32(LMV_MAGIC_V1);
4675         lmv->lmv_stripe_count = cpu_to_le32(1);
4676         lmv->lmv_hash_type = cpu_to_le32(LMV_HASH_TYPE_DEFAULT);
4677         fid_le_to_cpu(&lmv->lmv_stripe_fids[0], mdd_object_fid(obj));
4678
4679         mlc->mlc_opc = MD_LAYOUT_ATTACH;
4680         mlc->mlc_buf.lb_buf = lmv;
4681         mlc->mlc_buf.lb_len = lmv_mds_md_size(1, LMV_MAGIC_V1);
4682         rc = mdo_declare_layout_change(env, tobj, mlc, handle);
4683         if (rc)
4684                 return rc;
4685
4686         rc = mdd_iterate_xattrs(env, obj, tobj, true, handle,
4687                                 mdo_declare_xattr_set);
4688         if (rc)
4689                 return rc;
4690
4691         lum->lum_stripe_count = count;
4692         mlc->mlc_opc = MD_LAYOUT_SPLIT;
4693         rc = mdo_declare_layout_change(env, tobj, mlc, handle);
4694         if (rc)
4695                 return rc;
4696
4697         rc = mdo_declare_index_delete(env, pobj, lname->ln_name, handle);
4698         if (rc)
4699                 return rc;
4700
4701         rc = mdo_declare_index_insert(env, pobj, mdd_object_fid(tobj),
4702                                       S_IFDIR, lname->ln_name, handle);
4703         if (rc)
4704                 return rc;
4705
4706         la->la_valid = LA_CTIME | LA_MTIME;
4707         rc = mdo_declare_attr_set(env, obj, la, handle);
4708         if (rc)
4709                 return rc;
4710
4711         rc = mdo_declare_attr_set(env, pobj, la, handle);
4712         if (rc)
4713                 return rc;
4714
4715         rc = mdd_declare_changelog_store(env, mdd, CL_MIGRATE, lname, NULL,
4716                                          handle);
4717         return rc;
4718 }
4719
4720 /**
4721  * plain directory split:
4722  * 1. create \a tobj as plain directory.
4723  * 2. append \a obj as first stripe of \a tobj.
4724  * 3. migrate xattrs from \a obj to \a tobj.
4725  * 4. split \a tobj to specific stripe count.
4726  */
4727 static int mdd_dir_split_plain(const struct lu_env *env,
4728                                 struct mdd_device *mdd,
4729                                 struct mdd_object *pobj,
4730                                 struct mdd_object *obj,
4731                                 struct mdd_object *tobj,
4732                                 struct md_layout_change *mlc,
4733                                 struct dt_allocation_hint *hint,
4734                                 struct thandle *handle)
4735 {
4736         struct mdd_thread_info *info = mdd_env_info(env);
4737         struct lu_attr *pattr = &info->mti_pattr;
4738         struct lu_attr *la = &info->mti_la_for_fix;
4739         const struct lu_name *lname = mlc->mlc_name;
4740         struct linkea_data *ldata = &info->mti_link_data;
4741         int rc;
4742
4743         ENTRY;
4744
4745         /* copy linkea out and set on target later */
4746         rc = mdd_links_read(env, obj, ldata);
4747         if (rc)
4748                 RETURN(rc);
4749
4750         mlc->mlc_opc = MD_LAYOUT_DETACH;
4751         rc = mdo_layout_change(env, obj, mlc, handle);
4752         if (rc)
4753                 RETURN(rc);
4754
4755         /* don't set nlink from obj */
4756         mlc->mlc_attr->la_valid &= ~LA_NLINK;
4757
4758         rc = mdd_create_object(env, pobj, tobj, mlc->mlc_attr, mlc->mlc_spec,
4759                                NULL, NULL, NULL, hint, handle, false);
4760         if (rc)
4761                 RETURN(rc);
4762
4763         rc = mdd_iterate_xattrs(env, obj, tobj, true, handle, mdo_xattr_set);
4764         if (rc)
4765                 RETURN(rc);
4766
4767         rc = mdd_links_write(env, tobj, ldata, handle);
4768         if (rc)
4769                 RETURN(rc);
4770
4771         rc = __mdd_index_delete(env, pobj, lname->ln_name, true, handle);
4772         if (rc)
4773                 RETURN(rc);
4774
4775         rc = __mdd_index_insert(env, pobj, mdd_object_fid(tobj), S_IFDIR,
4776                                 lname->ln_name, handle);
4777         if (rc)
4778                 RETURN(rc);
4779
4780         la->la_ctime = la->la_mtime = mlc->mlc_attr->la_mtime;
4781         la->la_valid = LA_CTIME | LA_MTIME;
4782
4783         mdd_write_lock(env, obj, DT_SRC_CHILD);
4784         rc = mdd_update_time(env, tobj, mlc->mlc_attr, la, handle);
4785         mdd_write_unlock(env, obj);
4786         if (rc)
4787                 RETURN(rc);
4788
4789         rc = mdd_la_get(env, pobj, pattr);
4790         if (rc)
4791                 RETURN(rc);
4792
4793         la->la_valid = LA_CTIME | LA_MTIME;
4794
4795         mdd_write_lock(env, pobj, DT_SRC_PARENT);
4796         rc = mdd_update_time(env, pobj, pattr, la, handle);
4797         mdd_write_unlock(env, pobj);
4798         if (rc)
4799                 RETURN(rc);
4800
4801         /* FID changes, record it as CL_MIGRATE */
4802         rc = mdd_changelog_ns_store(env, mdd, CL_MIGRATE, 0, tobj,
4803                                     mdd_object_fid(pobj), mdd_object_fid(obj),
4804                                     mdd_object_fid(pobj), lname, lname, handle);
4805         RETURN(rc);
4806 }
4807
4808 int mdd_dir_layout_split(const struct lu_env *env, struct md_object *o,
4809                          struct md_layout_change *mlc)
4810 {
4811         struct mdd_thread_info *info = mdd_env_info(env);
4812         struct mdd_device *mdd = mdo2mdd(o);
4813         struct mdd_object *obj = md2mdd_obj(o);
4814         struct mdd_object *pobj = md2mdd_obj(mlc->mlc_parent);
4815         struct mdd_object *tobj = md2mdd_obj(mlc->mlc_target);
4816         struct dt_allocation_hint *hint = &info->mti_hint;
4817         bool is_plain = false;
4818         struct thandle *handle;
4819         int rc;
4820
4821         ENTRY;
4822
4823         LASSERT(S_ISDIR(mdd_object_type(obj)));
4824
4825         rc = mdo_xattr_get(env, obj, &LU_BUF_NULL, XATTR_NAME_LMV);
4826         if (rc == -ENODATA)
4827                 is_plain = true;
4828         else if (rc < 0)
4829                 RETURN(rc);
4830
4831         handle = mdd_trans_create(env, mdd);
4832         if (IS_ERR(handle))
4833                 RETURN(PTR_ERR(handle));
4834
4835         if (is_plain) {
4836                 rc = mdd_dir_declare_split_plain(env, mdd, pobj, obj, tobj, mlc,
4837                                                  hint, handle);
4838         } else {
4839                 mlc->mlc_opc = MD_LAYOUT_SPLIT;
4840                 rc = mdo_declare_layout_change(env, obj, mlc, handle);
4841                 if (rc)
4842                         GOTO(stop_trans, rc);
4843
4844                 rc = mdd_declare_changelog_store(env, mdd, CL_LAYOUT, NULL,
4845                                                  NULL, handle);
4846         }
4847         if (rc)
4848                 GOTO(stop_trans, rc);
4849
4850         rc = mdd_trans_start(env, mdd, handle);
4851         if (rc)
4852                 GOTO(stop_trans, rc);
4853
4854         if (is_plain) {
4855                 rc = mdd_dir_split_plain(env, mdd, pobj, obj, tobj, mlc, hint,
4856                                          handle);
4857         } else {
4858                 mdd_write_lock(env, obj, DT_TGT_CHILD);
4859                 rc = mdo_xattr_set(env, obj, NULL, XATTR_NAME_LMV,
4860                                    LU_XATTR_CREATE, handle);
4861                 mdd_write_unlock(env, obj);
4862                 if (rc)
4863                         GOTO(stop_trans, rc);
4864
4865                 rc = mdd_changelog_data_store_xattr(env, mdd, CL_LAYOUT, 0, obj,
4866                                                     XATTR_NAME_LMV, handle);
4867         }
4868         if (rc)
4869                 GOTO(stop_trans, rc);
4870
4871         EXIT;
4872
4873 stop_trans:
4874         rc = mdd_trans_stop(env, mdd, rc, handle);
4875
4876         return rc;
4877 }
4878
4879 const struct md_dir_operations mdd_dir_ops = {
4880         .mdo_is_subdir     = mdd_is_subdir,
4881         .mdo_lookup        = mdd_lookup,
4882         .mdo_create        = mdd_create,
4883         .mdo_rename        = mdd_rename,
4884         .mdo_link          = mdd_link,
4885         .mdo_unlink        = mdd_unlink,
4886         .mdo_create_data   = mdd_create_data,
4887         .mdo_migrate       = mdd_migrate,
4888 };