Whamcloud - gitweb
LU-12275 sec: force file name encryption policy to null
[fs/lustre-release.git] / lustre / mdd / mdd_dir.c
1 /*
2  * GPL HEADER START
3  *
4  * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
5  *
6  * This program is free software; you can redistribute it and/or modify
7  * it under the terms of the GNU General Public License version 2 only,
8  * as published by the Free Software Foundation.
9  *
10  * This program is distributed in the hope that it will be useful, but
11  * WITHOUT ANY WARRANTY; without even the implied warranty of
12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13  * General Public License version 2 for more details (a copy is included
14  * in the LICENSE file that accompanied this code).
15  *
16  * You should have received a copy of the GNU General Public License
17  * version 2 along with this program; If not, see
18  * http://www.gnu.org/licenses/gpl-2.0.html
19  *
20  * GPL HEADER END
21  */
22 /*
23  * Copyright (c) 2007, 2010, Oracle and/or its affiliates. All rights reserved.
24  * Use is subject to license terms.
25  *
26  * Copyright (c) 2011, 2017, Intel Corporation.
27  */
28 /*
29  * This file is part of Lustre, http://www.lustre.org/
30  * Lustre is a trademark of Sun Microsystems, Inc.
31  *
32  * lustre/mdd/mdd_dir.c
33  *
34  * Lustre Metadata Server (mdd) routines
35  *
36  * Author: Wang Di <wangdi@intel.com>
37  */
38
39 #define DEBUG_SUBSYSTEM S_MDS
40
41 #include <obd_class.h>
42 #include <obd_support.h>
43 #include <lustre_mds.h>
44 #include <lustre_fid.h>
45 #include <lustre_lmv.h>
46 #include <lustre_idmap.h>
47
48 #include "mdd_internal.h"
49
50 static const char dot[] = ".";
51 static const char dotdot[] = "..";
52
53 static struct lu_name lname_dotdot = {
54         .ln_name        = (char *) dotdot,
55         .ln_namelen     = sizeof(dotdot) - 1,
56 };
57
58 static inline int
59 mdd_name_check(struct mdd_device *m, const struct lu_name *ln)
60 {
61         if (!lu_name_is_valid(ln))
62                 return -EINVAL;
63         else if (ln->ln_namelen > m->mdd_dt_conf.ddp_max_name_len)
64                 return -ENAMETOOLONG;
65         else
66                 return 0;
67 }
68
69 /* Get FID from name and parent */
70 static int
71 __mdd_lookup(const struct lu_env *env, struct md_object *pobj,
72              const struct lu_attr *pattr, const struct lu_name *lname,
73              struct lu_fid* fid, int mask)
74 {
75         const char *name = lname->ln_name;
76         const struct dt_key *key = (const struct dt_key *)name;
77         struct mdd_object *mdd_obj = md2mdd_obj(pobj);
78         struct dt_object *dir = mdd_object_child(mdd_obj);
79         int rc;
80
81         ENTRY;
82
83         if (unlikely(mdd_is_dead_obj(mdd_obj)))
84                 RETURN(-ESTALE);
85
86         if (!mdd_object_exists(mdd_obj))
87                 RETURN(-ESTALE);
88
89         if (mdd_object_remote(mdd_obj)) {
90                 CDEBUG(D_INFO, "%s: Object "DFID" located on remote server\n",
91                        mdd_obj_dev_name(mdd_obj),
92                        PFID(mdd_object_fid(mdd_obj)));
93         }
94
95         rc = mdd_permission_internal_locked(env, mdd_obj, pattr, mask,
96                                             DT_TGT_PARENT);
97         if (rc)
98                 RETURN(rc);
99
100         if (likely(S_ISDIR(mdd_object_type(mdd_obj)) &&
101                    dt_try_as_dir(env, dir)))
102                 rc = dt_lookup(env, dir, (struct dt_rec *)fid, key);
103         else
104                 rc = -ENOTDIR;
105
106         RETURN(rc);
107 }
108
109 int mdd_lookup(const struct lu_env *env,
110                struct md_object *pobj, const struct lu_name *lname,
111                struct lu_fid *fid, struct md_op_spec *spec)
112 {
113         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
114         int rc;
115         ENTRY;
116
117         rc = mdd_la_get(env, md2mdd_obj(pobj), pattr);
118         if (rc != 0)
119                 RETURN(rc);
120
121         rc = __mdd_lookup(env, pobj, pattr, lname, fid,
122                           (spec != NULL && spec->sp_permitted) ? 0 : MAY_EXEC);
123         RETURN(rc);
124 }
125
126 /** Read the link EA into a temp buffer.
127  * Uses the mdd_thread_info::mti_big_buf since it is generally large.
128  * A pointer to the buffer is stored in \a ldata::ld_buf.
129  *
130  * \retval 0 or error
131  */
132 static int __mdd_links_read(const struct lu_env *env,
133                             struct mdd_object *mdd_obj,
134                             struct linkea_data *ldata)
135 {
136         int rc;
137
138         if (!mdd_object_exists(mdd_obj))
139                 return -ENODATA;
140
141         /* First try a small buf */
142         LASSERT(env != NULL);
143         ldata->ld_buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_link_buf,
144                                                PAGE_SIZE);
145         if (ldata->ld_buf->lb_buf == NULL)
146                 return -ENOMEM;
147
148         rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf, XATTR_NAME_LINK);
149         if (rc == -ERANGE) {
150                 /* Buf was too small, figure out what we need. */
151                 lu_buf_free(ldata->ld_buf);
152                 rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf,
153                                    XATTR_NAME_LINK);
154                 if (rc < 0)
155                         return rc;
156                 ldata->ld_buf = lu_buf_check_and_alloc(ldata->ld_buf, rc);
157                 if (ldata->ld_buf->lb_buf == NULL)
158                         return -ENOMEM;
159                 rc = mdo_xattr_get(env, mdd_obj, ldata->ld_buf,
160                                   XATTR_NAME_LINK);
161         }
162         if (rc < 0) {
163                 lu_buf_free(ldata->ld_buf);
164                 ldata->ld_buf = NULL;
165                 return rc;
166         }
167
168         return linkea_init(ldata);
169 }
170
171 int mdd_links_read(const struct lu_env *env,
172                    struct mdd_object *mdd_obj,
173                    struct linkea_data *ldata)
174 {
175         int rc;
176
177         rc = __mdd_links_read(env, mdd_obj, ldata);
178         if (!rc)
179                 rc = linkea_init(ldata);
180
181         return rc;
182 }
183
184 static int mdd_links_read_with_rec(const struct lu_env *env,
185                                    struct mdd_object *mdd_obj,
186                                    struct linkea_data *ldata)
187 {
188         int rc;
189
190         rc = __mdd_links_read(env, mdd_obj, ldata);
191         if (!rc)
192                 rc = linkea_init_with_rec(ldata);
193
194         return rc;
195 }
196
197 /**
198  * Get parent FID of the directory
199  *
200  * Read parent FID from linkEA, if that fails, then do lookup
201  * dotdot to get the parent FID.
202  *
203  * \param[in] env       execution environment
204  * \param[in] obj       object from which to find the parent FID
205  * \param[in] attr      attribute of the object
206  * \param[out] fid      fid to get the parent FID
207  *
208  * \retval              0 if getting the parent FID succeeds.
209  * \retval              negative errno if getting the parent FID fails.
210  **/
211 static inline int mdd_parent_fid(const struct lu_env *env,
212                                  struct mdd_object *obj,
213                                  const struct lu_attr *attr,
214                                  struct lu_fid *fid)
215 {
216         struct mdd_thread_info  *info = mdd_env_info(env);
217         struct linkea_data      ldata = { NULL };
218         struct lu_buf           *buf = &info->mti_link_buf;
219         struct lu_name          lname;
220         int                     rc = 0;
221
222         ENTRY;
223
224         LASSERTF(S_ISDIR(mdd_object_type(obj)),
225                  "%s: FID "DFID" is not a directory type = %o\n",
226                  mdd_obj_dev_name(obj), PFID(mdd_object_fid(obj)),
227                  mdd_object_type(obj));
228
229         buf = lu_buf_check_and_alloc(buf, PATH_MAX);
230         if (buf->lb_buf == NULL)
231                 GOTO(lookup, rc = 0);
232
233         ldata.ld_buf = buf;
234         rc = mdd_links_read_with_rec(env, obj, &ldata);
235         if (rc != 0)
236                 GOTO(lookup, rc);
237
238         /* the obj is not locked, don't cache attributes */
239         mdd_invalidate(env, &obj->mod_obj);
240
241         LASSERT(ldata.ld_leh != NULL);
242         /* Directory should only have 1 parent */
243         if (ldata.ld_leh->leh_reccount > 1)
244                 GOTO(lookup, rc);
245
246         ldata.ld_lee = (struct link_ea_entry *)(ldata.ld_leh + 1);
247
248         linkea_entry_unpack(ldata.ld_lee, &ldata.ld_reclen, &lname, fid);
249         if (likely(fid_is_sane(fid)))
250                 RETURN(0);
251 lookup:
252         rc =  __mdd_lookup(env, &obj->mod_obj, attr, &lname_dotdot, fid, 0);
253         RETURN(rc);
254 }
255
256 /*
257  * For root fid use special function, which does not compare version component
258  * of fid. Version component is different for root fids on all MDTs.
259  */
260 int mdd_is_root(struct mdd_device *mdd, const struct lu_fid *fid)
261 {
262         return fid_seq(&mdd->mdd_root_fid) == fid_seq(fid) &&
263                 fid_oid(&mdd->mdd_root_fid) == fid_oid(fid);
264 }
265
266 /*
267  * return 1: if \a tfid is the fid of the ancestor of \a mo;
268  * return 0: if not;
269  * otherwise: values < 0, errors.
270  */
271 static int mdd_is_parent(const struct lu_env *env,
272                         struct mdd_device *mdd,
273                         struct mdd_object *mo,
274                         const struct lu_attr *attr,
275                         const struct lu_fid *tfid)
276 {
277         struct mdd_object *mp;
278         struct lu_fid *pfid;
279         int rc;
280
281         LASSERT(!lu_fid_eq(mdd_object_fid(mo), tfid));
282         pfid = &mdd_env_info(env)->mti_fid;
283
284         if (mdd_is_root(mdd, mdd_object_fid(mo)))
285                 return 0;
286
287         if (mdd_is_root(mdd, tfid))
288                 return 1;
289
290         rc = mdd_parent_fid(env, mo, attr, pfid);
291         if (rc)
292                 return rc;
293
294         while (1) {
295                 if (lu_fid_eq(pfid, tfid))
296                         return 1;
297
298                 if (mdd_is_root(mdd, pfid))
299                         return 0;
300
301                 mp = mdd_object_find(env, mdd, pfid);
302                 if (IS_ERR(mp))
303                         return PTR_ERR(mp);
304
305                 if (!mdd_object_exists(mp)) {
306                         mdd_object_put(env, mp);
307                         return -ENOENT;
308                 }
309
310                 rc = mdd_parent_fid(env, mp, attr, pfid);
311                 mdd_object_put(env, mp);
312                 if (rc)
313                         return rc;
314         }
315
316         return 0;
317 }
318
319 /*
320  * No permission check is needed.
321  *
322  * returns 1: if fid is ancestor of @mo;
323  * returns 0: if fid is not an ancestor of @mo;
324  * returns < 0: if error
325  */
326 int mdd_is_subdir(const struct lu_env *env, struct md_object *mo,
327                   const struct lu_fid *fid)
328 {
329         struct mdd_device *mdd = mdo2mdd(mo);
330         struct lu_attr *attr = MDD_ENV_VAR(env, cattr);
331         int rc;
332         ENTRY;
333
334         if (!mdd_object_exists(md2mdd_obj(mo)))
335                 RETURN(-ENOENT);
336
337         if (!S_ISDIR(mdd_object_type(md2mdd_obj(mo))))
338                 RETURN(-ENOTDIR);
339
340         rc = mdd_la_get(env, md2mdd_obj(mo), attr);
341         if (rc != 0)
342                 RETURN(rc);
343
344         rc = mdd_is_parent(env, mdd, md2mdd_obj(mo), attr, fid);
345         RETURN(rc);
346 }
347
348 /*
349  * Check that @dir contains no entries except (possibly) dot and dotdot.
350  *
351  * Returns:
352  *
353  *             0        empty
354  *      -ENOTDIR        not a directory object
355  *    -ENOTEMPTY        not empty
356  *           -ve        other error
357  *
358  */
359 int mdd_dir_is_empty(const struct lu_env *env, struct mdd_object *dir)
360 {
361         struct dt_it     *it;
362         struct dt_object *obj;
363         const struct dt_it_ops *iops;
364         int result;
365         ENTRY;
366
367         obj = mdd_object_child(dir);
368         if (!dt_try_as_dir(env, obj))
369                 RETURN(-ENOTDIR);
370
371         iops = &obj->do_index_ops->dio_it;
372         it = iops->init(env, obj, LUDA_64BITHASH);
373         if (!IS_ERR(it)) {
374                 result = iops->get(env, it, (const struct dt_key *)"");
375                 if (result > 0) {
376                         int i;
377                         for (result = 0, i = 0; result == 0 && i < 3; ++i)
378                                 result = iops->next(env, it);
379                         if (result == 0)
380                                 result = -ENOTEMPTY;
381                         else if (result == 1)
382                                 result = 0;
383                 } else if (result == 0)
384                         /*
385                          * Huh? Index contains no zero key?
386                          */
387                         result = -EIO;
388
389                 iops->put(env, it);
390                 iops->fini(env, it);
391         } else {
392                 result = PTR_ERR(it);
393                 /* -ENODEV means no valid stripe */
394                 if (result == -ENODEV)
395                         RETURN(0);
396         }
397         RETURN(result);
398 }
399
400 /**
401  * Determine if the target object can be hard linked, and right now it only
402  * checks if the link count reach the maximum limit. Note: for ldiskfs, the
403  * directory nlink count might exceed the maximum link count(see
404  * osd_object_ref_add), so it only check nlink for non-directories.
405  *
406  * \param[in] env       thread environment
407  * \param[in] obj       object being linked to
408  * \param[in] la        attributes of \a obj
409  *
410  * \retval              0 if \a obj can be hard linked
411  * \retval              negative error if \a obj is a directory or has too
412  *                      many links
413  */
414 static int __mdd_may_link(const struct lu_env *env, struct mdd_object *obj,
415                           const struct lu_attr *la)
416 {
417         struct mdd_device *m = mdd_obj2mdd_dev(obj);
418         ENTRY;
419
420         LASSERT(la != NULL);
421
422         /* Subdir count limitation can be broken through
423          * (see osd_object_ref_add), so only check non-directory here. */
424         if (!S_ISDIR(la->la_mode) &&
425             la->la_nlink >= m->mdd_dt_conf.ddp_max_nlink)
426                 RETURN(-EMLINK);
427
428         RETURN(0);
429 }
430
431 /**
432  * Check whether it may create the cobj under the pobj.
433  *
434  * \param[in] env       execution environment
435  * \param[in] pobj      the parent directory
436  * \param[in] pattr     the attribute of the parent directory
437  * \param[in] cobj      the child to be created
438  * \param[in] check_perm        if check WRITE|EXEC permission for parent
439  *
440  * \retval              = 0 create the child under this dir is allowed
441  * \retval              negative errno create the child under this dir is
442  *                      not allowed
443  */
444 int mdd_may_create(const struct lu_env *env, struct mdd_object *pobj,
445                    const struct lu_attr *pattr, struct mdd_object *cobj,
446                    bool check_perm)
447 {
448         int rc = 0;
449         ENTRY;
450
451         if (cobj && mdd_object_exists(cobj))
452                 RETURN(-EEXIST);
453
454         if (mdd_is_dead_obj(pobj))
455                 RETURN(-ENOENT);
456
457         if (check_perm)
458                 rc = mdd_permission_internal_locked(env, pobj, pattr,
459                                                     MAY_WRITE | MAY_EXEC,
460                                                     DT_TGT_PARENT);
461         RETURN(rc);
462 }
463
464 /*
465  * Check whether can unlink from the pobj in the case of "cobj == NULL".
466  */
467 int mdd_may_unlink(const struct lu_env *env, struct mdd_object *pobj,
468                    const struct lu_attr *pattr, const struct lu_attr *attr)
469 {
470         int rc;
471         ENTRY;
472
473         if (mdd_is_dead_obj(pobj))
474                 RETURN(-ENOENT);
475
476         if (attr->la_flags & (LUSTRE_APPEND_FL | LUSTRE_IMMUTABLE_FL))
477                 RETURN(-EPERM);
478
479         rc = mdd_permission_internal_locked(env, pobj, pattr,
480                                             MAY_WRITE | MAY_EXEC,
481                                             DT_TGT_PARENT);
482         if (rc != 0)
483                 RETURN(rc);
484
485         if (pattr->la_flags & LUSTRE_APPEND_FL)
486                 RETURN(-EPERM);
487
488         RETURN(rc);
489 }
490
491 /*
492  * pobj == NULL is remote ops case, under such case, pobj's
493  * VTX feature has been checked already, no need check again.
494  */
495 static inline int mdd_is_sticky(const struct lu_env *env,
496                                 struct mdd_object *pobj,
497                                 const struct lu_attr *pattr,
498                                 struct mdd_object *cobj,
499                                 const struct lu_attr *cattr)
500 {
501         struct lu_ucred *uc = lu_ucred_assert(env);
502
503         if (pobj != NULL) {
504                 LASSERT(pattr != NULL);
505                 if (!(pattr->la_mode & S_ISVTX) ||
506                     (pattr->la_uid == uc->uc_fsuid))
507                         return 0;
508         }
509
510         LASSERT(cattr != NULL);
511         if (cattr->la_uid == uc->uc_fsuid)
512                 return 0;
513
514         return !md_capable(uc, CFS_CAP_FOWNER);
515 }
516
517 static int mdd_may_delete_entry(const struct lu_env *env,
518                                 struct mdd_object *pobj,
519                                 const struct lu_attr *pattr,
520                                 int check_perm)
521 {
522         ENTRY;
523
524         LASSERT(pobj != NULL);
525         if (!mdd_object_exists(pobj))
526                 RETURN(-ENOENT);
527
528         if (mdd_is_dead_obj(pobj))
529                 RETURN(-ENOENT);
530
531         if (check_perm) {
532                 int rc;
533                 rc = mdd_permission_internal_locked(env, pobj, pattr,
534                                             MAY_WRITE | MAY_EXEC,
535                                             DT_TGT_PARENT);
536                 if (rc)
537                         RETURN(rc);
538         }
539
540         if (pattr->la_flags & LUSTRE_APPEND_FL)
541                 RETURN(-EPERM);
542
543         RETURN(0);
544 }
545
546 /*
547  * Check whether it may delete the cobj from the pobj.
548  * pobj maybe NULL
549  */
550 int mdd_may_delete(const struct lu_env *env, struct mdd_object *tpobj,
551                    const struct lu_attr *tpattr, struct mdd_object *tobj,
552                    const struct lu_attr *tattr, const struct lu_attr *cattr,
553                    int check_perm, int check_empty)
554 {
555         int rc = 0;
556         ENTRY;
557
558         if (tpobj) {
559                 LASSERT(tpattr != NULL);
560                 rc = mdd_may_delete_entry(env, tpobj, tpattr, check_perm);
561                 if (rc != 0)
562                         RETURN(rc);
563         }
564
565         if (tobj == NULL)
566                 RETURN(0);
567
568         if (!mdd_object_exists(tobj))
569                 RETURN(-ENOENT);
570
571         if (mdd_is_dead_obj(tobj))
572                 RETURN(-ESTALE);
573
574         if (mdd_is_sticky(env, tpobj, tpattr, tobj, tattr))
575                 RETURN(-EPERM);
576
577         if (tattr->la_flags & (LUSTRE_APPEND_FL | LUSTRE_IMMUTABLE_FL))
578                 RETURN(-EPERM);
579
580         /* additional check the rename case */
581         if (cattr) {
582                 if (S_ISDIR(cattr->la_mode)) {
583                         if (!S_ISDIR(tattr->la_mode))
584                                 RETURN(-ENOTDIR);
585
586                         if (mdd_is_root(mdo2mdd(&tobj->mod_obj),
587                                         mdd_object_fid(tobj)))
588                                 RETURN(-EBUSY);
589                 } else if (S_ISDIR(tattr->la_mode))
590                         RETURN(-EISDIR);
591         }
592
593         if (S_ISDIR(tattr->la_mode) && check_empty)
594                 rc = mdd_dir_is_empty(env, tobj);
595
596         RETURN(rc);
597 }
598
599 /**
600  * Check whether it can create the link file(linked to @src_obj) under
601  * the target directory(@tgt_obj), and src_obj has been locked by
602  * mdd_write_lock.
603  *
604  * \param[in] env       execution environment
605  * \param[in] tgt_obj   the target directory
606  * \param[in] tattr     attributes of target directory
607  * \param[in] lname     the link name
608  * \param[in] src_obj   source object for link
609  * \param[in] cattr     attributes for source object
610  *
611  * \retval              = 0 it is allowed to create the link file under tgt_obj
612  * \retval              negative error not allowed to create the link file
613  */
614 static int mdd_link_sanity_check(const struct lu_env *env,
615                                  struct mdd_object *tgt_obj,
616                                  const struct lu_attr *tattr,
617                                  const struct lu_name *lname,
618                                  struct mdd_object *src_obj,
619                                  const struct lu_attr *cattr)
620 {
621         struct mdd_device *m = mdd_obj2mdd_dev(src_obj);
622         int rc = 0;
623         ENTRY;
624
625         if (!mdd_object_exists(src_obj))
626                 RETURN(-ENOENT);
627
628         if (mdd_is_dead_obj(src_obj))
629                 RETURN(-ESTALE);
630
631         /* Local ops, no lookup before link, check filename length here. */
632         rc = mdd_name_check(m, lname);
633         if (rc < 0)
634                 RETURN(rc);
635
636         if (cattr->la_flags & (LUSTRE_IMMUTABLE_FL | LUSTRE_APPEND_FL))
637                 RETURN(-EPERM);
638
639         if (S_ISDIR(mdd_object_type(src_obj)))
640                 RETURN(-EPERM);
641
642         LASSERT(src_obj != tgt_obj);
643         rc = mdd_may_create(env, tgt_obj, tattr, NULL, true);
644         if (rc != 0)
645                 RETURN(rc);
646
647         rc = __mdd_may_link(env, src_obj, cattr);
648
649         RETURN(rc);
650 }
651
652 static int __mdd_index_delete_only(const struct lu_env *env, struct mdd_object *pobj,
653                                    const char *name, struct thandle *handle)
654 {
655         struct dt_object *next = mdd_object_child(pobj);
656         int rc;
657         ENTRY;
658
659         if (dt_try_as_dir(env, next))
660                 rc = dt_delete(env, next, (struct dt_key *)name, handle);
661         else
662                 rc = -ENOTDIR;
663
664         RETURN(rc);
665 }
666
667 static int __mdd_index_insert_only(const struct lu_env *env,
668                                    struct mdd_object *pobj,
669                                    const struct lu_fid *lf, __u32 type,
670                                    const char *name,
671                                    struct thandle *handle)
672 {
673         struct dt_object *next = mdd_object_child(pobj);
674         int               rc;
675         ENTRY;
676
677         if (dt_try_as_dir(env, next)) {
678                 struct dt_insert_rec    *rec = &mdd_env_info(env)->mti_dt_rec;
679
680                 rec->rec_fid = lf;
681                 rec->rec_type = type;
682                 rc = dt_insert(env, next, (const struct dt_rec *)rec,
683                                (const struct dt_key *)name, handle);
684         } else {
685                 rc = -ENOTDIR;
686         }
687         RETURN(rc);
688 }
689
690 /* insert named index, add reference if isdir */
691 static int __mdd_index_insert(const struct lu_env *env, struct mdd_object *pobj,
692                               const struct lu_fid *lf, __u32 type,
693                               const char *name, struct thandle *handle)
694 {
695         int rc;
696         ENTRY;
697
698         rc = __mdd_index_insert_only(env, pobj, lf, type, name, handle);
699         if (rc == 0 && S_ISDIR(type)) {
700                 mdd_write_lock(env, pobj, DT_TGT_PARENT);
701                 mdo_ref_add(env, pobj, handle);
702                 mdd_write_unlock(env, pobj);
703         }
704
705         RETURN(rc);
706 }
707
708 /* delete named index, drop reference if isdir */
709 static int __mdd_index_delete(const struct lu_env *env, struct mdd_object *pobj,
710                               const char *name, int is_dir,
711                               struct thandle *handle)
712 {
713         int rc;
714         ENTRY;
715
716         rc = __mdd_index_delete_only(env, pobj, name, handle);
717         if (rc == 0 && is_dir) {
718                 mdd_write_lock(env, pobj, DT_TGT_PARENT);
719                 mdo_ref_del(env, pobj, handle);
720                 mdd_write_unlock(env, pobj);
721         }
722
723         RETURN(rc);
724 }
725
726 static int mdd_llog_record_calc_size(const struct lu_env *env,
727                                      const struct lu_name *tname,
728                                      const struct lu_name *sname)
729 {
730         const struct lu_ucred   *uc = lu_ucred(env);
731         enum changelog_rec_flags clf_flags = CLF_EXTRA_FLAGS;
732         enum changelog_rec_extra_flags crfe = CLFE_UIDGID | CLFE_NID;
733
734         if (sname != NULL)
735                 clf_flags |= CLF_RENAME;
736
737         if (uc != NULL && uc->uc_jobid[0] != '\0')
738                 clf_flags |= CLF_JOBID;
739
740         return llog_data_len(LLOG_CHANGELOG_HDR_SZ +
741                              changelog_rec_offset(clf_flags, crfe) +
742                              (tname != NULL ? tname->ln_namelen : 0) +
743                              (sname != NULL ? 1 + sname->ln_namelen : 0));
744 }
745
746 int mdd_declare_changelog_store(const struct lu_env *env,
747                                 struct mdd_device *mdd,
748                                 enum changelog_rec_type type,
749                                 const struct lu_name *tname,
750                                 const struct lu_name *sname,
751                                 struct thandle *handle)
752 {
753         struct obd_device               *obd = mdd2obd_dev(mdd);
754         struct llog_ctxt                *ctxt;
755         struct llog_changelog_rec       *rec;
756         struct lu_buf                   *buf;
757         struct thandle                  *llog_th;
758         int                              reclen;
759         int                              rc;
760
761         if (!mdd_changelog_enabled(env, mdd, type))
762                 return 0;
763
764         reclen = mdd_llog_record_calc_size(env, tname, sname);
765         buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_big_buf, reclen);
766         if (buf->lb_buf == NULL)
767                 return -ENOMEM;
768
769         rec = buf->lb_buf;
770         rec->cr_hdr.lrh_len = reclen;
771         rec->cr_hdr.lrh_type = CHANGELOG_REC;
772
773         ctxt = llog_get_context(obd, LLOG_CHANGELOG_ORIG_CTXT);
774         if (ctxt == NULL)
775                 return -ENXIO;
776
777         llog_th = thandle_get_sub(env, handle, ctxt->loc_handle->lgh_obj);
778         if (IS_ERR(llog_th))
779                 GOTO(out_put, rc = PTR_ERR(llog_th));
780
781         rc = llog_declare_add(env, ctxt->loc_handle, &rec->cr_hdr, llog_th);
782
783 out_put:
784         llog_ctxt_put(ctxt);
785
786         return rc;
787 }
788
789 int mdd_changelog_write_rec(const struct lu_env *env,
790                             struct llog_handle *loghandle,
791                             struct llog_rec_hdr *r,
792                             struct llog_cookie *cookie,
793                             int idx, struct thandle *th)
794 {
795         int rc;
796
797         if (r->lrh_type == CHANGELOG_REC) {
798                 struct mdd_device *mdd;
799                 struct llog_changelog_rec *rec;
800
801                 mdd = lu2mdd_dev(loghandle->lgh_ctxt->loc_obd->obd_lu_dev);
802                 rec = container_of(r, struct llog_changelog_rec, cr_hdr);
803
804                 spin_lock(&mdd->mdd_cl.mc_lock);
805                 rec->cr.cr_index = mdd->mdd_cl.mc_index + 1;
806                 spin_unlock(&mdd->mdd_cl.mc_lock);
807
808                 rc = llog_osd_ops.lop_write_rec(env, loghandle, r,
809                                                 cookie, idx, th);
810
811                 /*
812                  * if current llog is full, we will generate a new
813                  * llog, and since it's actually not an error, let's
814                  * avoid increasing index so that userspace apps
815                  * should not see a gap in the changelog sequence
816                  */
817                 if (!(rc == -ENOSPC && llog_is_full(loghandle))) {
818                         spin_lock(&mdd->mdd_cl.mc_lock);
819                         ++mdd->mdd_cl.mc_index;
820                         spin_unlock(&mdd->mdd_cl.mc_lock);
821                 }
822         } else {
823                 rc = llog_osd_ops.lop_write_rec(env, loghandle, r,
824                                                 cookie, idx, th);
825         }
826
827         return rc;
828 }
829
830 /** Add a changelog entry \a rec to the changelog llog
831  * \param mdd
832  * \param rec
833  * \param handle - currently ignored since llogs start their own transaction;
834  *              this will hopefully be fixed in llog rewrite
835  * \retval 0 ok
836  */
837 int mdd_changelog_store(const struct lu_env *env, struct mdd_device *mdd,
838                         struct llog_changelog_rec *rec, struct thandle *th)
839 {
840         struct obd_device       *obd = mdd2obd_dev(mdd);
841         struct llog_ctxt        *ctxt;
842         struct thandle          *llog_th;
843         int                      rc;
844
845         rec->cr_hdr.lrh_len = llog_data_len(sizeof(*rec) +
846                                             changelog_rec_varsize(&rec->cr));
847
848         /* llog_lvfs_write_rec sets the llog tail len */
849         rec->cr_hdr.lrh_type = CHANGELOG_REC;
850         rec->cr.cr_time = cl_time();
851
852         ctxt = llog_get_context(obd, LLOG_CHANGELOG_ORIG_CTXT);
853         if (ctxt == NULL)
854                 return -ENXIO;
855
856         llog_th = thandle_get_sub(env, th, ctxt->loc_handle->lgh_obj);
857         if (IS_ERR(llog_th))
858                 GOTO(out_put, rc = PTR_ERR(llog_th));
859
860         OBD_FAIL_TIMEOUT(OBD_FAIL_MDS_CHANGELOG_REORDER, cfs_fail_val);
861         /* nested journal transaction */
862         rc = llog_add(env, ctxt->loc_handle, &rec->cr_hdr, NULL, llog_th);
863
864         /* time to recover some space ?? */
865         if (likely(!mdd->mdd_changelog_gc ||
866                    mdd->mdd_cl.mc_gc_task != MDD_CHLG_GC_NONE ||
867                    mdd->mdd_changelog_min_gc_interval >=
868                         ktime_get_real_seconds() - mdd->mdd_cl.mc_gc_time))
869                 /* save a spin_lock trip */
870                 goto out_put;
871         spin_lock(&mdd->mdd_cl.mc_lock);
872         if (likely(mdd->mdd_changelog_gc &&
873                      mdd->mdd_cl.mc_gc_task == MDD_CHLG_GC_NONE &&
874                      ktime_get_real_seconds() - mdd->mdd_cl.mc_gc_time >
875                         mdd->mdd_changelog_min_gc_interval)) {
876                 if (unlikely(llog_cat_free_space(ctxt->loc_handle) <=
877                              mdd->mdd_changelog_min_free_cat_entries ||
878                              OBD_FAIL_CHECK(OBD_FAIL_FORCE_GC_THREAD))) {
879                         CWARN("%s:%s low on changelog_catalog free entries, "
880                               "starting ChangeLog garbage collection thread\n",
881                               obd->obd_name,
882                               OBD_FAIL_CHECK(OBD_FAIL_FORCE_GC_THREAD) ?
883                                 " simulate" : "");
884
885                         /* indicate further kthread run will occur outside
886                          * right after current journal transaction filling has
887                          * completed
888                          */
889                         mdd->mdd_cl.mc_gc_task = MDD_CHLG_GC_NEED;
890                 }
891                 /* next check in mdd_changelog_min_gc_interval anyway
892                  */
893                 mdd->mdd_cl.mc_gc_time = ktime_get_real_seconds();
894         }
895         spin_unlock(&mdd->mdd_cl.mc_lock);
896 out_put:
897         llog_ctxt_put(ctxt);
898         if (rc > 0)
899                 rc = 0;
900         return rc;
901 }
902
903 static void mdd_changelog_rec_ext_rename(struct changelog_rec *rec,
904                                          const struct lu_fid *sfid,
905                                          const struct lu_fid *spfid,
906                                          const struct lu_name *sname)
907 {
908         struct changelog_ext_rename *rnm = changelog_rec_rename(rec);
909         size_t extsize;
910
911         LASSERT(sfid != NULL);
912         LASSERT(spfid != NULL);
913         LASSERT(sname != NULL);
914
915         extsize = sname->ln_namelen + 1;
916
917         rnm->cr_sfid = *sfid;
918         rnm->cr_spfid = *spfid;
919
920         changelog_rec_name(rec)[rec->cr_namelen] = '\0';
921         strlcpy(changelog_rec_sname(rec), sname->ln_name, extsize);
922         rec->cr_namelen += extsize;
923 }
924
925 void mdd_changelog_rec_ext_jobid(struct changelog_rec *rec, const char *jobid)
926 {
927         struct changelog_ext_jobid *jid = changelog_rec_jobid(rec);
928
929         if (jobid == NULL || jobid[0] == '\0')
930                 return;
931
932         strlcpy(jid->cr_jobid, jobid, sizeof(jid->cr_jobid));
933 }
934
935 void mdd_changelog_rec_ext_extra_flags(struct changelog_rec *rec, __u64 eflags)
936 {
937         struct changelog_ext_extra_flags *ef = changelog_rec_extra_flags(rec);
938
939         ef->cr_extra_flags = eflags;
940 }
941
942 void mdd_changelog_rec_extra_uidgid(struct changelog_rec *rec,
943                                     __u64 uid, __u64 gid)
944 {
945         struct changelog_ext_uidgid *uidgid = changelog_rec_uidgid(rec);
946
947         uidgid->cr_uid = uid;
948         uidgid->cr_gid = gid;
949 }
950
951 void mdd_changelog_rec_extra_nid(struct changelog_rec *rec,
952                                  lnet_nid_t nid)
953 {
954         struct changelog_ext_nid *clnid = changelog_rec_nid(rec);
955
956         clnid->cr_nid = nid;
957 }
958
959 void mdd_changelog_rec_extra_omode(struct changelog_rec *rec, u32 flags)
960 {
961         struct changelog_ext_openmode *omd = changelog_rec_openmode(rec);
962
963         omd->cr_openflags = flags;
964 }
965
966 void mdd_changelog_rec_extra_xattr(struct changelog_rec *rec,
967                                    const char *xattr_name)
968 {
969         struct changelog_ext_xattr *xattr = changelog_rec_xattr(rec);
970
971         strlcpy(xattr->cr_xattr, xattr_name, sizeof(xattr->cr_xattr));
972 }
973
974 /** Store a namespace change changelog record
975  * If this fails, we must fail the whole transaction; we don't
976  * want the change to commit without the log entry.
977  * \param target - mdd_object of change
978  * \param tpfid - target parent dir/object fid
979  * \param sfid - source object fid
980  * \param spfid - source parent fid
981  * \param tname - target name string
982  * \param sname - source name string
983  * \param handle - transaction handle
984  */
985 int mdd_changelog_ns_store(const struct lu_env *env,
986                            struct mdd_device *mdd,
987                            enum changelog_rec_type type,
988                            enum changelog_rec_flags clf_flags,
989                            struct mdd_object *target,
990                            const struct lu_fid *tpfid,
991                            const struct lu_fid *sfid,
992                            const struct lu_fid *spfid,
993                            const struct lu_name *tname,
994                            const struct lu_name *sname,
995                            struct thandle *handle)
996 {
997         const struct lu_ucred           *uc = lu_ucred(env);
998         struct llog_changelog_rec       *rec;
999         struct lu_buf                   *buf;
1000         int                              reclen;
1001         __u64                            xflags = CLFE_INVALID;
1002         int                              rc;
1003         ENTRY;
1004
1005         if (!mdd_changelog_enabled(env, mdd, type))
1006                 RETURN(0);
1007
1008         LASSERT(tpfid != NULL);
1009         LASSERT(tname != NULL);
1010         LASSERT(handle != NULL);
1011
1012         reclen = mdd_llog_record_calc_size(env, tname, sname);
1013         buf = lu_buf_check_and_alloc(&mdd_env_info(env)->mti_big_buf, reclen);
1014         if (buf->lb_buf == NULL)
1015                 RETURN(-ENOMEM);
1016         rec = buf->lb_buf;
1017
1018         clf_flags &= CLF_FLAGMASK;
1019         clf_flags |= CLF_EXTRA_FLAGS;
1020
1021         if (uc) {
1022                 if (uc->uc_jobid[0] != '\0')
1023                         clf_flags |= CLF_JOBID;
1024                 xflags |= CLFE_UIDGID;
1025                 xflags |= CLFE_NID;
1026         }
1027
1028         if (sname != NULL)
1029                 clf_flags |= CLF_RENAME;
1030         else
1031                 clf_flags |= CLF_VERSION;
1032
1033         rec->cr.cr_flags = clf_flags;
1034
1035         if (clf_flags & CLF_EXTRA_FLAGS) {
1036                 mdd_changelog_rec_ext_extra_flags(&rec->cr, xflags);
1037                 if (xflags & CLFE_UIDGID)
1038                         mdd_changelog_rec_extra_uidgid(&rec->cr,
1039                                                        uc->uc_uid, uc->uc_gid);
1040                 if (xflags & CLFE_NID)
1041                         mdd_changelog_rec_extra_nid(&rec->cr, uc->uc_nid);
1042         }
1043
1044         rec->cr.cr_type = (__u32)type;
1045         rec->cr.cr_pfid = *tpfid;
1046         rec->cr.cr_namelen = tname->ln_namelen;
1047         memcpy(changelog_rec_name(&rec->cr), tname->ln_name, tname->ln_namelen);
1048
1049         if (clf_flags & CLF_RENAME)
1050                 mdd_changelog_rec_ext_rename(&rec->cr, sfid, spfid, sname);
1051
1052         if (clf_flags & CLF_JOBID)
1053                 mdd_changelog_rec_ext_jobid(&rec->cr, uc->uc_jobid);
1054
1055         if (likely(target != NULL)) {
1056                 rec->cr.cr_tfid = *mdd_object_fid(target);
1057                 target->mod_cltime = ktime_get();
1058         } else {
1059                 fid_zero(&rec->cr.cr_tfid);
1060         }
1061
1062         rc = mdd_changelog_store(env, mdd, rec, handle);
1063         if (rc < 0) {
1064                 CERROR("%s: cannot store changelog record: type = %d, "
1065                        "name = '%s', t = "DFID", p = "DFID": rc = %d\n",
1066                        mdd2obd_dev(mdd)->obd_name, type, tname->ln_name,
1067                        PFID(&rec->cr.cr_tfid), PFID(&rec->cr.cr_pfid), rc);
1068                 return -EFAULT;
1069         }
1070
1071         return 0;
1072 }
1073
1074 static int __mdd_links_add(const struct lu_env *env,
1075                            struct mdd_object *mdd_obj,
1076                            struct linkea_data *ldata,
1077                            const struct lu_name *lname,
1078                            const struct lu_fid *pfid,
1079                            int first, int check)
1080 {
1081         int rc;
1082
1083         if (ldata->ld_leh == NULL) {
1084                 rc = first ? -ENODATA : mdd_links_read(env, mdd_obj, ldata);
1085                 if (rc) {
1086                         if (rc != -ENODATA)
1087                                 return rc;
1088                         rc = linkea_data_new(ldata,
1089                                              &mdd_env_info(env)->mti_link_buf);
1090                         if (rc)
1091                                 return rc;
1092                 }
1093         }
1094
1095         if (check) {
1096                 rc = linkea_links_find(ldata, lname, pfid);
1097                 if (rc && rc != -ENOENT)
1098                         return rc;
1099                 if (rc == 0)
1100                         return -EEXIST;
1101         }
1102
1103         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_LINKEA_MORE)) {
1104                 struct lu_fid *tfid = &mdd_env_info(env)->mti_fid2;
1105
1106                 *tfid = *pfid;
1107                 tfid->f_ver = ~0;
1108                 linkea_add_buf(ldata, lname, tfid);
1109         }
1110
1111         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_LINKEA_MORE2))
1112                 linkea_add_buf(ldata, lname, pfid);
1113
1114         return linkea_add_buf(ldata, lname, pfid);
1115 }
1116
1117 static int __mdd_links_del(const struct lu_env *env,
1118                            struct mdd_object *mdd_obj,
1119                            struct linkea_data *ldata,
1120                            const struct lu_name *lname,
1121                            const struct lu_fid *pfid)
1122 {
1123         int rc;
1124
1125         if (ldata->ld_leh == NULL) {
1126                 rc = mdd_links_read(env, mdd_obj, ldata);
1127                 if (rc)
1128                         return rc;
1129         }
1130
1131         rc = linkea_links_find(ldata, lname, pfid);
1132         if (rc)
1133                 return rc;
1134
1135         linkea_del_buf(ldata, lname);
1136         return 0;
1137 }
1138
1139 static int mdd_linkea_prepare(const struct lu_env *env,
1140                               struct mdd_object *mdd_obj,
1141                               const struct lu_fid *oldpfid,
1142                               const struct lu_name *oldlname,
1143                               const struct lu_fid *newpfid,
1144                               const struct lu_name *newlname,
1145                               int first, int check,
1146                               struct linkea_data *ldata)
1147 {
1148         int rc = 0;
1149         ENTRY;
1150
1151         if (OBD_FAIL_CHECK(OBD_FAIL_FID_IGIF))
1152                 RETURN(0);
1153
1154         LASSERT(oldpfid != NULL || newpfid != NULL);
1155
1156         if (mdd_obj->mod_flags & DEAD_OBJ)
1157                 /* Unnecessary to update linkEA for dead object.  */
1158                 RETURN(0);
1159
1160         if (oldpfid != NULL) {
1161                 rc = __mdd_links_del(env, mdd_obj, ldata, oldlname, oldpfid);
1162                 if (rc) {
1163                         if ((check == 1) || (rc != -ENODATA && rc != -ENOENT))
1164                                 RETURN(rc);
1165
1166                         /* No changes done. */
1167                         rc = 0;
1168                 }
1169         }
1170
1171         /* If renaming, add the new record */
1172         if (newpfid != NULL)
1173                 rc = __mdd_links_add(env, mdd_obj, ldata, newlname, newpfid,
1174                                      first, check);
1175
1176         RETURN(rc);
1177 }
1178
1179 int mdd_links_rename(const struct lu_env *env,
1180                      struct mdd_object *mdd_obj,
1181                      const struct lu_fid *oldpfid,
1182                      const struct lu_name *oldlname,
1183                      const struct lu_fid *newpfid,
1184                      const struct lu_name *newlname,
1185                      struct thandle *handle,
1186                      struct linkea_data *ldata,
1187                      int first, int check)
1188 {
1189         int rc = 0;
1190         ENTRY;
1191
1192         if (ldata == NULL) {
1193                 ldata = &mdd_env_info(env)->mti_link_data;
1194                 memset(ldata, 0, sizeof(*ldata));
1195                 rc = mdd_linkea_prepare(env, mdd_obj, oldpfid, oldlname,
1196                                         newpfid, newlname, first, check, ldata);
1197                 if (rc)
1198                         GOTO(out, rc);
1199         }
1200
1201         if (!(mdd_obj->mod_flags & DEAD_OBJ))
1202                 rc = mdd_links_write(env, mdd_obj, ldata, handle);
1203
1204         GOTO(out, rc);
1205
1206 out:
1207         if (rc != 0) {
1208                 if (newlname == NULL)
1209                         CERROR("link_ea add failed %d "DFID"\n",
1210                                rc, PFID(mdd_object_fid(mdd_obj)));
1211                 else if (oldpfid == NULL)
1212                         CERROR("link_ea add '%.*s' failed %d "DFID"\n",
1213                                newlname->ln_namelen, newlname->ln_name, rc,
1214                                PFID(mdd_object_fid(mdd_obj)));
1215                 else if (newpfid == NULL)
1216                         CERROR("link_ea del '%.*s' failed %d "DFID"\n",
1217                                oldlname->ln_namelen, oldlname->ln_name, rc,
1218                                PFID(mdd_object_fid(mdd_obj)));
1219                 else
1220                         CERROR("link_ea rename '%.*s'->'%.*s' failed %d "DFID
1221                                "\n", oldlname->ln_namelen, oldlname->ln_name,
1222                                newlname->ln_namelen, newlname->ln_name, rc,
1223                                PFID(mdd_object_fid(mdd_obj)));
1224         }
1225
1226         if (is_vmalloc_addr(ldata->ld_buf))
1227                 /* if we vmalloced a large buffer drop it */
1228                 lu_buf_free(ldata->ld_buf);
1229
1230         return rc;
1231 }
1232
1233 static inline int mdd_links_add(const struct lu_env *env,
1234                                 struct mdd_object *mdd_obj,
1235                                 const struct lu_fid *pfid,
1236                                 const struct lu_name *lname,
1237                                 struct thandle *handle,
1238                                 struct linkea_data *ldata, int first)
1239 {
1240         return mdd_links_rename(env, mdd_obj, NULL, NULL,
1241                                 pfid, lname, handle, ldata, first, 0);
1242 }
1243
1244 static inline int mdd_links_del(const struct lu_env *env,
1245                                 struct mdd_object *mdd_obj,
1246                                 const struct lu_fid *pfid,
1247                                 const struct lu_name *lname,
1248                                 struct thandle *handle)
1249 {
1250         return mdd_links_rename(env, mdd_obj, pfid, lname,
1251                                 NULL, NULL, handle, NULL, 0, 0);
1252 }
1253
1254 /** Read the link EA into a temp buffer.
1255  * Uses the name_buf since it is generally large.
1256  * \retval IS_ERR err
1257  * \retval ptr to \a lu_buf (always \a mti_big_buf)
1258  */
1259 struct lu_buf *mdd_links_get(const struct lu_env *env,
1260                              struct mdd_object *mdd_obj)
1261 {
1262         struct linkea_data ldata = { NULL };
1263         int rc;
1264
1265         rc = mdd_links_read(env, mdd_obj, &ldata);
1266         return rc ? ERR_PTR(rc) : ldata.ld_buf;
1267 }
1268
1269 int mdd_links_write(const struct lu_env *env, struct mdd_object *mdd_obj,
1270                     struct linkea_data *ldata, struct thandle *handle)
1271 {
1272         const struct lu_buf *buf;
1273         int                 rc;
1274
1275         if (ldata == NULL || ldata->ld_buf == NULL ||
1276             ldata->ld_leh == NULL)
1277                 return 0;
1278
1279         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_NO_LINKEA))
1280                 return 0;
1281
1282 again:
1283         buf = mdd_buf_get_const(env, ldata->ld_buf->lb_buf,
1284                                 ldata->ld_leh->leh_len);
1285         rc = mdo_xattr_set(env, mdd_obj, buf, XATTR_NAME_LINK, 0, handle);
1286         if (unlikely(rc == -ENOSPC)) {
1287                 rc = linkea_overflow_shrink(ldata);
1288                 if (likely(rc > 0))
1289                         goto again;
1290         }
1291
1292         return rc;
1293 }
1294
1295 static int mdd_declare_links_add(const struct lu_env *env,
1296                                  struct mdd_object *mdd_obj,
1297                                  struct thandle *handle,
1298                                  struct linkea_data *ldata)
1299 {
1300         int     rc;
1301         int     ea_len;
1302         void    *linkea;
1303
1304         if (ldata != NULL && ldata->ld_leh != NULL) {
1305                 ea_len = ldata->ld_leh->leh_len;
1306                 linkea = ldata->ld_buf->lb_buf;
1307         } else {
1308                 ea_len = MAX_LINKEA_SIZE;
1309                 linkea = NULL;
1310         }
1311
1312         rc = mdo_declare_xattr_set(env, mdd_obj,
1313                                    mdd_buf_get_const(env, linkea, ea_len),
1314                                    XATTR_NAME_LINK, 0, handle);
1315
1316         return rc;
1317 }
1318
1319 static inline int mdd_declare_links_del(const struct lu_env *env,
1320                                         struct mdd_object *c,
1321                                         struct thandle *handle)
1322 {
1323         int rc = 0;
1324
1325         /* For directory, the linkEA will be removed together
1326          * with the object. */
1327         if (!S_ISDIR(mdd_object_type(c)))
1328                 rc = mdd_declare_links_add(env, c, handle, NULL);
1329
1330         return rc;
1331 }
1332
1333 static int mdd_declare_link(const struct lu_env *env,
1334                             struct mdd_device *mdd,
1335                             struct mdd_object *p,
1336                             struct mdd_object *c,
1337                             const struct lu_name *name,
1338                             struct thandle *handle,
1339                             struct lu_attr *la,
1340                             struct linkea_data *data)
1341 {
1342         struct lu_fid tfid = *mdd_object_fid(c);
1343         int rc;
1344
1345         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_DANGLING3))
1346                 tfid.f_oid = cfs_fail_val;
1347
1348         rc = mdo_declare_index_insert(env, p, &tfid, mdd_object_type(c),
1349                                       name->ln_name, handle);
1350         if (rc != 0)
1351                 return rc;
1352
1353         rc = mdo_declare_ref_add(env, c, handle);
1354         if (rc != 0)
1355                 return rc;
1356
1357         la->la_valid = LA_CTIME | LA_MTIME;
1358         rc = mdo_declare_attr_set(env, p, la, handle);
1359         if (rc != 0)
1360                 return rc;
1361
1362         la->la_valid = LA_CTIME;
1363         rc = mdo_declare_attr_set(env, c, la, handle);
1364         if (rc != 0)
1365                 return rc;
1366
1367         rc = mdd_declare_links_add(env, c, handle, data);
1368         if (rc != 0)
1369                 return rc;
1370
1371         rc = mdd_declare_changelog_store(env, mdd, CL_HARDLINK, name, NULL,
1372                                          handle);
1373
1374         return rc;
1375 }
1376
1377 static int mdd_link(const struct lu_env *env, struct md_object *tgt_obj,
1378                     struct md_object *src_obj, const struct lu_name *lname,
1379                     struct md_attr *ma)
1380 {
1381         const char *name = lname->ln_name;
1382         struct lu_attr    *la = &mdd_env_info(env)->mti_la_for_fix;
1383         struct mdd_object *mdd_tobj = md2mdd_obj(tgt_obj);
1384         struct mdd_object *mdd_sobj = md2mdd_obj(src_obj);
1385         struct lu_attr    *cattr = MDD_ENV_VAR(env, cattr);
1386         struct lu_attr    *tattr = MDD_ENV_VAR(env, tattr);
1387         struct mdd_device *mdd = mdo2mdd(src_obj);
1388         struct thandle *handle;
1389         struct lu_fid *tfid = &mdd_env_info(env)->mti_fid2;
1390         struct linkea_data *ldata = &mdd_env_info(env)->mti_link_data;
1391         int rc;
1392         ENTRY;
1393
1394         rc = mdd_la_get(env, mdd_sobj, cattr);
1395         if (rc != 0)
1396                 RETURN(rc);
1397
1398         rc = mdd_la_get(env, mdd_tobj, tattr);
1399         if (rc != 0)
1400                 RETURN(rc);
1401
1402         /*
1403          * If we are using project inheritance, we only allow hard link
1404          * creation in our tree when the project IDs are the same;
1405          * otherwise the tree quota mechanism could be circumvented.
1406          */
1407         if ((tattr->la_flags & LUSTRE_PROJINHERIT_FL) &&
1408             (tattr->la_projid != cattr->la_projid))
1409                 RETURN(-EXDEV);
1410
1411         handle = mdd_trans_create(env, mdd);
1412         if (IS_ERR(handle))
1413                 GOTO(out_pending, rc = PTR_ERR(handle));
1414
1415         memset(ldata, 0, sizeof(*ldata));
1416
1417         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1418         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1419
1420         /* Note: even this function will change ldata, but it comes from
1421          * thread_info, which is completely temporary and only seen in
1422          * this function, so we do not need reset ldata once it fails.*/
1423         rc = mdd_linkea_prepare(env, mdd_sobj, NULL, NULL,
1424                                 mdd_object_fid(mdd_tobj), lname, 0, 0, ldata);
1425         if (rc != 0)
1426                 GOTO(stop, rc);
1427
1428         rc = mdd_declare_link(env, mdd, mdd_tobj, mdd_sobj, lname, handle,
1429                               la, ldata);
1430         if (rc)
1431                 GOTO(stop, rc);
1432
1433         rc = mdd_trans_start(env, mdd, handle);
1434         if (rc)
1435                 GOTO(stop, rc);
1436
1437         mdd_write_lock(env, mdd_sobj, DT_TGT_CHILD);
1438         rc = mdd_link_sanity_check(env, mdd_tobj, tattr, lname, mdd_sobj,
1439                                    cattr);
1440         if (rc)
1441                 GOTO(out_unlock, rc);
1442
1443         if (!OBD_FAIL_CHECK(OBD_FAIL_LFSCK_LESS_NLINK)) {
1444                 rc = mdo_ref_add(env, mdd_sobj, handle);
1445                 if (rc != 0)
1446                         GOTO(out_unlock, rc);
1447         }
1448
1449         *tfid = *mdd_object_fid(mdd_sobj);
1450         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_DANGLING3))
1451                 tfid->f_oid = cfs_fail_val;
1452
1453         rc = __mdd_index_insert_only(env, mdd_tobj, tfid,
1454                                      mdd_object_type(mdd_sobj), name, handle);
1455         if (rc != 0) {
1456                 mdo_ref_del(env, mdd_sobj, handle);
1457                 GOTO(out_unlock, rc);
1458         }
1459
1460         la->la_valid = LA_CTIME | LA_MTIME;
1461         rc = mdd_update_time(env, mdd_tobj, tattr, la, handle);
1462         if (rc)
1463                 GOTO(out_unlock, rc);
1464
1465         la->la_valid = LA_CTIME;
1466         rc = mdd_update_time(env, mdd_sobj, cattr, la, handle);
1467         if (rc == 0)
1468                 /* Note: The failure of links_add should not cause the
1469                  * link failure, so do not check return value. */
1470                 mdd_links_add(env, mdd_sobj, mdd_object_fid(mdd_tobj),
1471                               lname, handle, ldata, 0);
1472
1473         EXIT;
1474 out_unlock:
1475         mdd_write_unlock(env, mdd_sobj);
1476         if (rc == 0)
1477                 rc = mdd_changelog_ns_store(env, mdd, CL_HARDLINK, 0, mdd_sobj,
1478                                             mdd_object_fid(mdd_tobj), NULL,
1479                                             NULL, lname, NULL, handle);
1480 stop:
1481         rc = mdd_trans_stop(env, mdd, rc, handle);
1482         if (is_vmalloc_addr(ldata->ld_buf))
1483                 /* if we vmalloced a large buffer drop it */
1484                 lu_buf_free(ldata->ld_buf);
1485 out_pending:
1486         return rc;
1487 }
1488
1489 static int mdd_mark_orphan_object(const struct lu_env *env,
1490                                 struct mdd_object *obj, struct thandle *handle,
1491                                 bool declare)
1492 {
1493         struct lu_attr *attr = MDD_ENV_VAR(env, la_for_start);
1494         int rc;
1495
1496         attr->la_valid = LA_FLAGS;
1497         attr->la_flags = LUSTRE_ORPHAN_FL;
1498
1499         if (declare)
1500                 rc = mdo_declare_attr_set(env, obj, attr, handle);
1501         else
1502                 rc = mdo_attr_set(env, obj, attr, handle);
1503
1504         return rc;
1505 }
1506
1507 static int mdd_declare_finish_unlink(const struct lu_env *env,
1508                                      struct mdd_object *obj,
1509                                      struct thandle *handle)
1510 {
1511         int rc;
1512
1513         /* Sigh, we do not know if the unlink object will become orphan in
1514          * declare phase, but fortunately the flags here does not matter
1515          * in current declare implementation */
1516         rc = mdd_mark_orphan_object(env, obj, handle, true);
1517         if (rc != 0)
1518                 return rc;
1519
1520         rc = mdo_declare_destroy(env, obj, handle);
1521         if (rc != 0)
1522                 return rc;
1523
1524         rc = mdd_orphan_declare_insert(env, obj, mdd_object_type(obj), handle);
1525         if (rc != 0)
1526                 return rc;
1527
1528         return mdd_declare_links_del(env, obj, handle);
1529 }
1530
1531 /* caller should take a lock before calling */
1532 int mdd_finish_unlink(const struct lu_env *env,
1533                       struct mdd_object *obj, struct md_attr *ma,
1534                       struct mdd_object *pobj,
1535                       const struct lu_name *lname,
1536                       struct thandle *th)
1537 {
1538         int rc = 0;
1539         int is_dir = S_ISDIR(ma->ma_attr.la_mode);
1540         ENTRY;
1541
1542         LASSERT(mdd_write_locked(env, obj) != 0);
1543
1544         if (ma->ma_attr.la_nlink == 0 || is_dir) {
1545                 /* add new orphan and the object
1546                  * will be deleted during mdd_close() */
1547                 obj->mod_flags |= DEAD_OBJ;
1548                 if (obj->mod_count) {
1549                         rc = mdd_orphan_insert(env, obj, th);
1550                         if (rc == 0)
1551                                 CDEBUG(D_HA, "Object "DFID" is inserted into "
1552                                         "orphan list, open count = %d\n",
1553                                         PFID(mdd_object_fid(obj)),
1554                                         obj->mod_count);
1555                         else
1556                                 CERROR("Object "DFID" fail to be an orphan, "
1557                                        "open count = %d, maybe cause failed "
1558                                        "open replay\n",
1559                                         PFID(mdd_object_fid(obj)),
1560                                         obj->mod_count);
1561
1562                         /* mark object as an orphan here, not
1563                          * before mdd_orphan_insert() as racing
1564                          * mdd_la_get() may propagate ORPHAN_OBJ
1565                          * causing the asserition */
1566                         rc = mdd_mark_orphan_object(env, obj, th, false);
1567                 } else {
1568                         rc = mdo_destroy(env, obj, th);
1569                 }
1570         } else if (!is_dir) {
1571                 /* old files may not have link ea; ignore errors */
1572                 mdd_links_del(env, obj, mdd_object_fid(pobj), lname, th);
1573         }
1574
1575         RETURN(rc);
1576 }
1577
1578 /*
1579  * pobj maybe NULL
1580  * has mdd_write_lock on cobj already, but not on pobj yet
1581  */
1582 int mdd_unlink_sanity_check(const struct lu_env *env, struct mdd_object *pobj,
1583                             const struct lu_attr *pattr,
1584                             struct mdd_object *cobj,
1585                             const struct lu_attr *cattr)
1586 {
1587         int rc;
1588         ENTRY;
1589
1590         rc = mdd_may_delete(env, pobj, pattr, cobj, cattr, NULL, 1, 1);
1591
1592         RETURN(rc);
1593 }
1594
1595 static int mdd_declare_unlink(const struct lu_env *env, struct mdd_device *mdd,
1596                               struct mdd_object *p, struct mdd_object *c,
1597                               const struct lu_name *name, struct md_attr *ma,
1598                               struct thandle *handle, int no_name, int is_dir)
1599 {
1600         struct lu_attr  *la = &mdd_env_info(env)->mti_la_for_fix;
1601         int              rc;
1602
1603         if (!OBD_FAIL_CHECK(OBD_FAIL_LFSCK_DANGLING2)) {
1604                 if (likely(no_name == 0)) {
1605                         rc = mdo_declare_index_delete(env, p, name->ln_name,
1606                                                       handle);
1607                         if (rc != 0)
1608                                 return rc;
1609                 }
1610
1611                 if (is_dir != 0) {
1612                         rc = mdo_declare_ref_del(env, p, handle);
1613                         if (rc != 0)
1614                                 return rc;
1615                 }
1616         }
1617
1618         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1619         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1620         la->la_valid = LA_CTIME | LA_MTIME;
1621         rc = mdo_declare_attr_set(env, p, la, handle);
1622         if (rc)
1623                 return rc;
1624
1625         if (c != NULL) {
1626                 rc = mdo_declare_ref_del(env, c, handle);
1627                 if (rc)
1628                         return rc;
1629
1630                 rc = mdo_declare_ref_del(env, c, handle);
1631                 if (rc)
1632                         return rc;
1633
1634                 la->la_valid = LA_CTIME;
1635                 rc = mdo_declare_attr_set(env, c, la, handle);
1636                 if (rc)
1637                         return rc;
1638
1639                 rc = mdd_declare_finish_unlink(env, c, handle);
1640                 if (rc)
1641                         return rc;
1642
1643                 /* FIXME: need changelog for remove entry */
1644                 rc = mdd_declare_changelog_store(env, mdd, CL_UNLINK, name,
1645                                                  NULL, handle);
1646         }
1647
1648         return rc;
1649 }
1650
1651 /*
1652  * test if a file has an HSM archive
1653  * if HSM attributes are not found in ma update them from
1654  * HSM xattr
1655  */
1656 static bool mdd_hsm_archive_exists(const struct lu_env *env,
1657                                    struct mdd_object *obj,
1658                                    struct md_attr *ma)
1659 {
1660         ENTRY;
1661
1662         if (!(ma->ma_valid & MA_HSM)) {
1663                 /* no HSM MD provided, read xattr */
1664                 struct lu_buf   *hsm_buf;
1665                 const size_t     buflen = sizeof(struct hsm_attrs);
1666                 int              rc;
1667
1668                 hsm_buf = mdd_buf_get(env, NULL, 0);
1669                 lu_buf_alloc(hsm_buf, buflen);
1670                 rc = mdo_xattr_get(env, obj, hsm_buf, XATTR_NAME_HSM);
1671                 rc = lustre_buf2hsm(hsm_buf->lb_buf, rc, &ma->ma_hsm);
1672                 lu_buf_free(hsm_buf);
1673                 if (rc < 0)
1674                         RETURN(false);
1675
1676                 ma->ma_valid |= MA_HSM;
1677         }
1678         if (ma->ma_hsm.mh_flags & HS_EXISTS)
1679                 RETURN(true);
1680         RETURN(false);
1681 }
1682
1683 /**
1684  * Delete name entry and the object.
1685  * Note: no_name == 1 means it only destory the object, i.e. name_entry
1686  * does not exist for this object, and it could only happen during resending
1687  * of remote unlink. see the comments in mdt_reint_unlink. Unfortunately, lname
1688  * is also needed in this case(needed by changelog), so we have to add another
1689  * parameter(no_name)here. XXX: this is only needed in DNE phase I, on Phase II,
1690  * the ENOENT failure should be able to be fixed by redo mechanism.
1691  */
1692 static int mdd_unlink(const struct lu_env *env, struct md_object *pobj,
1693                       struct md_object *cobj, const struct lu_name *lname,
1694                       struct md_attr *ma, int no_name)
1695 {
1696         const char *name = lname->ln_name;
1697         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
1698         struct lu_attr *cattr = MDD_ENV_VAR(env, cattr);
1699         struct lu_attr *la = &mdd_env_info(env)->mti_la_for_fix;
1700         struct mdd_object *mdd_pobj = md2mdd_obj(pobj);
1701         struct mdd_object *mdd_cobj = NULL;
1702         struct mdd_device *mdd = mdo2mdd(pobj);
1703         struct thandle    *handle;
1704         int rc, is_dir = 0, cl_flags = 0;
1705         ENTRY;
1706
1707         /* let shutdown to start */
1708         CFS_FAIL_TIMEOUT(OBD_FAIL_TGT_REPLY_DATA_RACE, 1);
1709
1710         /* cobj == NULL means only delete name entry */
1711         if (likely(cobj != NULL)) {
1712                 mdd_cobj = md2mdd_obj(cobj);
1713                 if (mdd_object_exists(mdd_cobj) == 0)
1714                         RETURN(-ENOENT);
1715         }
1716
1717         rc = mdd_la_get(env, mdd_pobj, pattr);
1718         if (rc)
1719                 RETURN(rc);
1720
1721         if (likely(mdd_cobj != NULL)) {
1722                 /* fetch cattr */
1723                 rc = mdd_la_get(env, mdd_cobj, cattr);
1724                 if (rc)
1725                         RETURN(rc);
1726
1727                 is_dir = S_ISDIR(cattr->la_mode);
1728                 /* search for an existing archive.
1729                  * we should check ahead as the object
1730                  * can be destroyed in this transaction */
1731                 if (mdd_hsm_archive_exists(env, mdd_cobj, ma))
1732                         cl_flags |= CLF_UNLINK_HSM_EXISTS;
1733         }
1734
1735         rc = mdd_unlink_sanity_check(env, mdd_pobj, pattr, mdd_cobj, cattr);
1736         if (rc)
1737                 RETURN(rc);
1738
1739         handle = mdd_trans_create(env, mdd);
1740         if (IS_ERR(handle))
1741                 RETURN(PTR_ERR(handle));
1742
1743         rc = mdd_declare_unlink(env, mdd, mdd_pobj, mdd_cobj,
1744                                 lname, ma, handle, no_name, is_dir);
1745         if (rc)
1746                 GOTO(stop, rc);
1747
1748         rc = mdd_trans_start(env, mdd, handle);
1749         if (rc)
1750                 GOTO(stop, rc);
1751
1752         if (likely(mdd_cobj != NULL))
1753                 mdd_write_lock(env, mdd_cobj, DT_TGT_CHILD);
1754
1755         if (likely(no_name == 0) && !OBD_FAIL_CHECK(OBD_FAIL_LFSCK_DANGLING2)) {
1756                 rc = __mdd_index_delete(env, mdd_pobj, name, is_dir, handle);
1757                 if (rc)
1758                         GOTO(cleanup, rc);
1759         }
1760
1761         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_MUL_REF) ||
1762             OBD_FAIL_CHECK(OBD_FAIL_LFSCK_NO_NAMEENTRY))
1763                 GOTO(cleanup, rc = 0);
1764
1765         if (likely(mdd_cobj != NULL)) {
1766                 rc = mdo_ref_del(env, mdd_cobj, handle);
1767                 if (rc != 0) {
1768                         __mdd_index_insert_only(env, mdd_pobj,
1769                                                 mdd_object_fid(mdd_cobj),
1770                                                 mdd_object_type(mdd_cobj),
1771                                                 name, handle);
1772                         GOTO(cleanup, rc);
1773                 }
1774
1775                 if (is_dir)
1776                         /* unlink dot */
1777                         mdo_ref_del(env, mdd_cobj, handle);
1778
1779                 /* fetch updated nlink */
1780                 rc = mdd_la_get(env, mdd_cobj, cattr);
1781                 if (rc)
1782                         GOTO(cleanup, rc);
1783         }
1784
1785         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
1786         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
1787
1788         la->la_valid = LA_CTIME | LA_MTIME;
1789         rc = mdd_update_time(env, mdd_pobj, pattr, la, handle);
1790         if (rc)
1791                 GOTO(cleanup, rc);
1792
1793         /* Enough for only unlink the entry */
1794         if (unlikely(mdd_cobj == NULL))
1795                 GOTO(stop, rc);
1796
1797         if (cattr->la_nlink > 0 || mdd_cobj->mod_count > 0) {
1798                 /* update ctime of an unlinked file only if it is still
1799                  * opened or a link still exists */
1800                 la->la_valid = LA_CTIME;
1801                 rc = mdd_update_time(env, mdd_cobj, cattr, la, handle);
1802                 if (rc)
1803                         GOTO(cleanup, rc);
1804         }
1805
1806         /* XXX: this transfer to ma will be removed with LOD/OSP */
1807         ma->ma_attr = *cattr;
1808         ma->ma_valid |= MA_INODE;
1809         rc = mdd_finish_unlink(env, mdd_cobj, ma, mdd_pobj, lname, handle);
1810         if (rc != 0)
1811                 GOTO(cleanup, rc);
1812
1813         /* fetch updated nlink */
1814         rc = mdd_la_get(env, mdd_cobj, cattr);
1815         /* if object is removed then we can't get its attrs,
1816          * use last get */
1817         if (rc == -ENOENT) {
1818                 cattr->la_nlink = 0;
1819                 rc = 0;
1820         }
1821
1822         if (cattr->la_nlink == 0) {
1823                 ma->ma_attr = *cattr;
1824                 ma->ma_valid |= MA_INODE;
1825         }
1826
1827         EXIT;
1828 cleanup:
1829         if (likely(mdd_cobj != NULL))
1830                 mdd_write_unlock(env, mdd_cobj);
1831
1832         if (rc == 0) {
1833                 if (cattr->la_nlink == 0)
1834                         cl_flags |= CLF_UNLINK_LAST;
1835                 else
1836                         cl_flags &= ~CLF_UNLINK_HSM_EXISTS;
1837
1838                 rc = mdd_changelog_ns_store(env, mdd,
1839                         is_dir ? CL_RMDIR : CL_UNLINK, cl_flags,
1840                         mdd_cobj, mdd_object_fid(mdd_pobj), NULL, NULL,
1841                         lname, NULL, handle);
1842         }
1843
1844 stop:
1845         rc = mdd_trans_stop(env, mdd, rc, handle);
1846
1847         return rc;
1848 }
1849
1850 /*
1851  * The permission has been checked when obj created, no need check again.
1852  */
1853 static int mdd_cd_sanity_check(const struct lu_env *env,
1854                                struct mdd_object *obj)
1855 {
1856         ENTRY;
1857
1858         /* EEXIST check */
1859         if (!obj || mdd_is_dead_obj(obj))
1860                 RETURN(-ENOENT);
1861
1862         RETURN(0);
1863 }
1864
1865 static int mdd_create_data(const struct lu_env *env,
1866                            struct md_object *pobj,
1867                            struct md_object *cobj,
1868                            const struct md_op_spec *spec,
1869                            struct md_attr *ma)
1870 {
1871         struct mdd_device *mdd = mdo2mdd(cobj);
1872         struct mdd_object *mdd_pobj = md2mdd_obj(pobj);
1873         struct mdd_object *son = md2mdd_obj(cobj);
1874         struct thandle    *handle;
1875         const struct lu_buf *buf;
1876         struct lu_attr    *attr = MDD_ENV_VAR(env, cattr);
1877         struct dt_allocation_hint *hint = &mdd_env_info(env)->mti_hint;
1878         int                rc;
1879         ENTRY;
1880
1881         rc = mdd_cd_sanity_check(env, son);
1882         if (rc)
1883                 RETURN(rc);
1884
1885         if (!md_should_create(spec->sp_cr_flags))
1886                 RETURN(0);
1887
1888         /*
1889          * there are following use cases for this function:
1890          * 1) late striping - file was created with MDS_OPEN_DELAY_CREATE
1891          *    striping can be specified or not
1892          * 2) CMD?
1893          */
1894         rc = mdd_la_get(env, son, attr);
1895         if (rc)
1896                 RETURN(rc);
1897
1898         /* calling ->ah_make_hint() is used to transfer information from parent */
1899         mdd_object_make_hint(env, mdd_pobj, son, attr, spec, hint);
1900
1901         handle = mdd_trans_create(env, mdd);
1902         if (IS_ERR(handle))
1903                 GOTO(out_free, rc = PTR_ERR(handle));
1904
1905         /*
1906          * XXX: Setting the lov ea is not locked but setting the attr is locked?
1907          * Should this be fixed?
1908          */
1909         CDEBUG(D_OTHER, "ea %p/%u, cr_flags %#llo, no_create %u\n",
1910                spec->u.sp_ea.eadata, spec->u.sp_ea.eadatalen,
1911                spec->sp_cr_flags, spec->no_create);
1912
1913         if (spec->no_create || (spec->sp_cr_flags & MDS_OPEN_HAS_EA)) {
1914                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
1915                                         spec->u.sp_ea.eadatalen);
1916         } else {
1917                 buf = &LU_BUF_NULL;
1918         }
1919
1920         rc = dt_declare_xattr_set(env, mdd_object_child(son), buf,
1921                                   XATTR_NAME_LOV, 0, handle);
1922         if (rc)
1923                 GOTO(stop, rc);
1924
1925         rc = mdd_declare_changelog_store(env, mdd, CL_LAYOUT, NULL, NULL,
1926                                          handle);
1927         if (rc)
1928                 GOTO(stop, rc);
1929
1930         rc = mdd_trans_start(env, mdd, handle);
1931         if (rc)
1932                 GOTO(stop, rc);
1933
1934         rc = dt_xattr_set(env, mdd_object_child(son), buf, XATTR_NAME_LOV,
1935                           0, handle);
1936
1937         if (rc)
1938                 GOTO(stop, rc);
1939
1940         rc = mdd_changelog_data_store(env, mdd, CL_LAYOUT, 0, son, handle);
1941
1942 stop:
1943         rc = mdd_trans_stop(env, mdd, rc, handle);
1944
1945 out_free:
1946         RETURN(rc);
1947 }
1948
1949 static int mdd_declare_object_initialize(const struct lu_env *env,
1950                                          struct mdd_object *parent,
1951                                          struct mdd_object *child,
1952                                          const struct lu_attr *attr,
1953                                          struct thandle *handle)
1954 {
1955         int rc;
1956         ENTRY;
1957
1958         LASSERT(attr->la_valid & (LA_MODE | LA_TYPE));
1959         if (!S_ISDIR(attr->la_mode))
1960                 RETURN(0);
1961
1962         rc = mdo_declare_index_insert(env, child, mdd_object_fid(child),
1963                                       S_IFDIR, dot, handle);
1964         if (rc != 0)
1965                 RETURN(rc);
1966
1967         rc = mdo_declare_ref_add(env, child, handle);
1968         if (rc != 0)
1969                 RETURN(rc);
1970
1971         rc = mdo_declare_index_insert(env, child, mdd_object_fid(parent),
1972                                       S_IFDIR, dotdot, handle);
1973
1974         RETURN(rc);
1975 }
1976
1977 static int mdd_object_initialize(const struct lu_env *env,
1978                                  const struct lu_fid *pfid,
1979                                  struct mdd_object *child,
1980                                  struct lu_attr *attr,
1981                                  struct thandle *handle)
1982 {
1983         int rc = 0;
1984         ENTRY;
1985
1986         if (S_ISDIR(attr->la_mode)) {
1987                 /* Add "." and ".." for newly created dir */
1988                 mdo_ref_add(env, child, handle);
1989                 rc = __mdd_index_insert_only(env, child, mdd_object_fid(child),
1990                                              S_IFDIR, dot, handle);
1991                 if (rc == 0)
1992                         rc = __mdd_index_insert_only(env, child, pfid, S_IFDIR,
1993                                                      dotdot, handle);
1994                 if (rc != 0)
1995                         mdo_ref_del(env, child, handle);
1996         }
1997
1998         RETURN(rc);
1999 }
2000
2001 /**
2002  * This function checks whether it can create a file/dir under the
2003  * directory(@pobj). The directory(@pobj) is not being locked by
2004  * mdd lock.
2005  *
2006  * \param[in] env       execution environment
2007  * \param[in] pobj      the directory to create files
2008  * \param[in] pattr     the attributes of the directory
2009  * \param[in] lname     the name of the created file/dir
2010  * \param[in] cattr     the attributes of the file/dir
2011  * \param[in] spec      create specification
2012  *
2013  * \retval              = 0 it is allowed to create file/dir under
2014  *                      the directory
2015  * \retval              negative error not allowed to create file/dir
2016  *                      under the directory
2017  */
2018 static int mdd_create_sanity_check(const struct lu_env *env,
2019                                    struct md_object *pobj,
2020                                    const struct lu_attr *pattr,
2021                                    const struct lu_name *lname,
2022                                    struct lu_attr *cattr,
2023                                    struct md_op_spec *spec)
2024 {
2025         struct mdd_thread_info *info = mdd_env_info(env);
2026         struct lu_fid     *fid       = &info->mti_fid;
2027         struct mdd_object *obj       = md2mdd_obj(pobj);
2028         struct mdd_device *m         = mdo2mdd(pobj);
2029         bool            check_perm = true;
2030         int rc;
2031         ENTRY;
2032
2033         /* EEXIST check */
2034         if (mdd_is_dead_obj(obj))
2035                 RETURN(-ENOENT);
2036
2037         /*
2038          * In some cases this lookup is not needed - we know before if name
2039          * exists or not because MDT performs lookup for it.
2040          * name length check is done in lookup.
2041          */
2042         if (spec->sp_cr_lookup) {
2043                 /*
2044                  * Check if the name already exist, though it will be checked in
2045                  * _index_insert also, for avoiding rolling back if exists
2046                  * _index_insert.
2047                  */
2048                 rc = __mdd_lookup(env, pobj, pattr, lname, fid,
2049                                   MAY_WRITE | MAY_EXEC);
2050                 if (rc != -ENOENT)
2051                         RETURN(rc ? : -EEXIST);
2052
2053                 /* Permission is already being checked in mdd_lookup */
2054                 check_perm = false;
2055         }
2056
2057         if (S_ISDIR(cattr->la_mode) &&
2058             unlikely(spec != NULL && spec->sp_cr_flags & MDS_OPEN_HAS_EA) &&
2059             spec->u.sp_ea.eadata != NULL && spec->u.sp_ea.eadatalen > 0) {
2060                 const struct lmv_user_md *lum = spec->u.sp_ea.eadata;
2061
2062                 if (!lmv_user_magic_supported(le32_to_cpu(lum->lum_magic)) &&
2063                     le32_to_cpu(lum->lum_magic) != LMV_USER_MAGIC_V0) {
2064                         rc = -EINVAL;
2065                         CERROR("%s: invalid lmv_user_md: magic = %x, "
2066                                "stripe_offset = %d, stripe_count = %u: "
2067                                "rc = %d\n", mdd2obd_dev(m)->obd_name,
2068                                 le32_to_cpu(lum->lum_magic),
2069                                (int)le32_to_cpu(lum->lum_stripe_offset),
2070                                le32_to_cpu(lum->lum_stripe_count), rc);
2071                         return rc;
2072                 }
2073         }
2074
2075         rc = mdd_may_create(env, obj, pattr, NULL, check_perm);
2076         if (rc != 0)
2077                 RETURN(rc);
2078
2079         /* sgid check */
2080         if (pattr->la_mode & S_ISGID) {
2081                 struct lu_ucred *uc = lu_ucred(env);
2082
2083                 cattr->la_gid = pattr->la_gid;
2084
2085                 /* Directories are special, and always inherit S_ISGID */
2086                 if (S_ISDIR(cattr->la_mode)) {
2087                         cattr->la_mode |= S_ISGID;
2088                         cattr->la_valid |= LA_MODE;
2089                 } else if ((cattr->la_mode & (S_ISGID | S_IXGRP))
2090                                 == (S_ISGID | S_IXGRP) &&
2091                            !lustre_in_group_p(uc,
2092                                               (cattr->la_valid & LA_GID) ?
2093                                               cattr->la_gid : pattr->la_gid) &&
2094                            !md_capable(uc, CFS_CAP_FSETID)) {
2095                         cattr->la_mode &= ~S_ISGID;
2096                         cattr->la_valid |= LA_MODE;
2097                 }
2098         }
2099
2100         /* Inherit project ID from parent directory */
2101         if (pattr->la_flags & LUSTRE_PROJINHERIT_FL) {
2102                 cattr->la_projid = pattr->la_projid;
2103                 if (S_ISDIR(cattr->la_mode)) {
2104                         cattr->la_flags |= LUSTRE_PROJINHERIT_FL;
2105                         cattr->la_valid |= LA_FLAGS;
2106                 }
2107                 cattr->la_valid |= LA_PROJID;
2108         }
2109
2110         rc = mdd_name_check(m, lname);
2111         if (rc < 0)
2112                 RETURN(rc);
2113
2114         switch (cattr->la_mode & S_IFMT) {
2115         case S_IFLNK: {
2116                 unsigned int symlen = strlen(spec->u.sp_symname) + 1;
2117
2118                 if (symlen > m->mdd_dt_conf.ddp_symlink_max)
2119                         RETURN(-ENAMETOOLONG);
2120                 else
2121                         RETURN(0);
2122         }
2123         case S_IFDIR:
2124         case S_IFREG:
2125         case S_IFCHR:
2126         case S_IFBLK:
2127         case S_IFIFO:
2128         case S_IFSOCK:
2129                 rc = 0;
2130                 break;
2131         default:
2132                 rc = -EINVAL;
2133                 break;
2134         }
2135         RETURN(rc);
2136 }
2137
2138 static int mdd_declare_create_object(const struct lu_env *env,
2139                                      struct mdd_device *mdd,
2140                                      struct mdd_object *p, struct mdd_object *c,
2141                                      struct lu_attr *attr,
2142                                      struct thandle *handle,
2143                                      const struct md_op_spec *spec,
2144                                      struct lu_buf *def_acl_buf,
2145                                      struct lu_buf *acl_buf,
2146                                      struct lu_buf *hsm_buf,
2147                                      struct dt_allocation_hint *hint)
2148 {
2149         const struct lu_buf *buf;
2150         int rc;
2151
2152         rc = mdd_declare_create_object_internal(env, p, c, attr, handle, spec,
2153                                                 hint);
2154         if (rc)
2155                 GOTO(out, rc);
2156
2157 #ifdef CONFIG_LUSTRE_FS_POSIX_ACL
2158         if (def_acl_buf && def_acl_buf->lb_len > 0 && S_ISDIR(attr->la_mode)) {
2159                 /* if dir, then can inherit default ACl */
2160                 rc = mdo_declare_xattr_set(env, c, def_acl_buf,
2161                                            XATTR_NAME_ACL_DEFAULT,
2162                                            0, handle);
2163                 if (rc)
2164                         GOTO(out, rc);
2165         }
2166
2167         if (acl_buf && acl_buf->lb_len > 0) {
2168                 rc = mdo_declare_attr_set(env, c, attr, handle);
2169                 if (rc)
2170                         GOTO(out, rc);
2171
2172                 rc = mdo_declare_xattr_set(env, c, acl_buf,
2173                                            XATTR_NAME_ACL_ACCESS, 0, handle);
2174                 if (rc)
2175                         GOTO(out, rc);
2176         }
2177 #endif
2178         rc = mdd_declare_object_initialize(env, p, c, attr, handle);
2179         if (rc)
2180                 GOTO(out, rc);
2181
2182         /* replay case, create LOV EA from client data */
2183         if ((!(spec->sp_cr_flags & MDS_OPEN_DELAY_CREATE) && spec->no_create) ||
2184             (spec->sp_cr_flags & MDS_OPEN_HAS_EA && S_ISREG(attr->la_mode))) {
2185                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
2186                                         spec->u.sp_ea.eadatalen);
2187                 rc = mdo_declare_xattr_set(env, c, buf,
2188                                            S_ISDIR(attr->la_mode) ?
2189                                                 XATTR_NAME_LMV : XATTR_NAME_LOV,
2190                                            LU_XATTR_CREATE, handle);
2191                 if (rc)
2192                         GOTO(out, rc);
2193
2194                 if (spec->sp_cr_flags & MDS_OPEN_PCC) {
2195                         rc = mdo_declare_xattr_set(env, c, hsm_buf,
2196                                                    XATTR_NAME_HSM,
2197                                                    0, handle);
2198                         if (rc)
2199                                 GOTO(out, rc);
2200                 }
2201         }
2202
2203         if (S_ISLNK(attr->la_mode)) {
2204                 const char *target_name = spec->u.sp_symname;
2205                 int sym_len = strlen(target_name);
2206                 const struct lu_buf *buf;
2207
2208                 buf = mdd_buf_get_const(env, target_name, sym_len);
2209                 rc = dt_declare_record_write(env, mdd_object_child(c),
2210                                              buf, 0, handle);
2211                 if (rc)
2212                         GOTO(out, rc);
2213         }
2214
2215         if (spec->sp_cr_file_secctx_name != NULL) {
2216                 buf = mdd_buf_get_const(env, spec->sp_cr_file_secctx,
2217                                         spec->sp_cr_file_secctx_size);
2218                 rc = mdo_declare_xattr_set(env, c, buf,
2219                                            spec->sp_cr_file_secctx_name, 0,
2220                                            handle);
2221                 if (rc < 0)
2222                         GOTO(out, rc);
2223         }
2224 out:
2225         return rc;
2226 }
2227
2228 static int mdd_declare_create(const struct lu_env *env, struct mdd_device *mdd,
2229                               struct mdd_object *p, struct mdd_object *c,
2230                               const struct lu_name *name,
2231                               struct lu_attr *attr,
2232                               struct thandle *handle,
2233                               const struct md_op_spec *spec,
2234                               struct linkea_data *ldata,
2235                               struct lu_buf *def_acl_buf,
2236                               struct lu_buf *acl_buf,
2237                               struct lu_buf *hsm_buf,
2238                               struct dt_allocation_hint *hint)
2239 {
2240         int rc;
2241
2242         rc = mdd_declare_create_object(env, mdd, p, c, attr, handle, spec,
2243                                        def_acl_buf, acl_buf, hsm_buf, hint);
2244         if (rc)
2245                 GOTO(out, rc);
2246
2247         if (S_ISDIR(attr->la_mode)) {
2248                 rc = mdo_declare_ref_add(env, p, handle);
2249                 if (rc)
2250                         GOTO(out, rc);
2251         }
2252
2253         if (unlikely(spec->sp_cr_flags & MDS_OPEN_VOLATILE)) {
2254                 rc = mdd_orphan_declare_insert(env, c, attr->la_mode, handle);
2255                 if (rc)
2256                         GOTO(out, rc);
2257         } else {
2258                 struct lu_attr *la = &mdd_env_info(env)->mti_la_for_fix;
2259                 enum changelog_rec_type type;
2260
2261                 rc = mdo_declare_index_insert(env, p, mdd_object_fid(c),
2262                                               attr->la_mode, name->ln_name,
2263                                               handle);
2264                 if (rc != 0)
2265                         return rc;
2266
2267                 rc = mdd_declare_links_add(env, c, handle, ldata);
2268                 if (rc)
2269                         return rc;
2270
2271                 *la = *attr;
2272                 la->la_valid = LA_CTIME | LA_MTIME;
2273                 rc = mdo_declare_attr_set(env, p, la, handle);
2274                 if (rc)
2275                         return rc;
2276
2277                 type = S_ISDIR(attr->la_mode) ? CL_MKDIR :
2278                        S_ISREG(attr->la_mode) ? CL_CREATE :
2279                        S_ISLNK(attr->la_mode) ? CL_SOFTLINK : CL_MKNOD;
2280
2281                 rc = mdd_declare_changelog_store(env, mdd, type, name, NULL,
2282                                                  handle);
2283                 if (rc)
2284                         return rc;
2285         }
2286 out:
2287         return rc;
2288 }
2289
2290 static int mdd_acl_init(const struct lu_env *env, struct mdd_object *pobj,
2291                         struct lu_attr *la, struct lu_buf *def_acl_buf,
2292                         struct lu_buf *acl_buf)
2293 {
2294         int     rc;
2295         ENTRY;
2296
2297         if (S_ISLNK(la->la_mode)) {
2298                 acl_buf->lb_len = 0;
2299                 def_acl_buf->lb_len = 0;
2300                 RETURN(0);
2301         }
2302
2303         mdd_read_lock(env, pobj, DT_TGT_PARENT);
2304         rc = mdo_xattr_get(env, pobj, def_acl_buf,
2305                            XATTR_NAME_ACL_DEFAULT);
2306         mdd_read_unlock(env, pobj);
2307         if (rc > 0) {
2308                 /* If there are default ACL, fix mode/ACL by default ACL */
2309                 def_acl_buf->lb_len = rc;
2310                 LASSERT(def_acl_buf->lb_len <= acl_buf->lb_len);
2311                 memcpy(acl_buf->lb_buf, def_acl_buf->lb_buf, rc);
2312                 acl_buf->lb_len = rc;
2313                 rc = __mdd_fix_mode_acl(env, acl_buf, &la->la_mode);
2314                 if (rc < 0)
2315                         RETURN(rc);
2316         } else if (rc == -ENODATA || rc == -EOPNOTSUPP) {
2317                 /* If there are no default ACL, fix mode by mask */
2318                 struct lu_ucred *uc = lu_ucred(env);
2319
2320                 /* The create triggered by MDT internal events, such as
2321                  * LFSCK reset, will not contain valid "uc". */
2322                 if (unlikely(uc != NULL))
2323                         la->la_mode &= ~uc->uc_umask;
2324                 rc = 0;
2325                 acl_buf->lb_len = 0;
2326                 def_acl_buf->lb_len = 0;
2327         }
2328
2329         RETURN(rc);
2330 }
2331
2332 /**
2333  * Create a metadata object and initialize it, set acl, xattr.
2334  **/
2335 static int mdd_create_object(const struct lu_env *env, struct mdd_object *pobj,
2336                              struct mdd_object *son, struct lu_attr *attr,
2337                              struct md_op_spec *spec, struct lu_buf *acl_buf,
2338                              struct lu_buf *def_acl_buf,
2339                              struct lu_buf *hsm_buf,
2340                              struct dt_allocation_hint *hint,
2341                              struct thandle *handle, bool initsecctx)
2342 {
2343         const struct lu_buf *buf;
2344         int rc;
2345
2346         mdd_write_lock(env, son, DT_TGT_CHILD);
2347         rc = mdd_create_object_internal(env, NULL, son, attr, handle, spec,
2348                                         hint);
2349         if (rc)
2350                 GOTO(unlock, rc);
2351
2352         /* Note: In DNE phase I, for striped dir, though sub-stripes will be
2353          * created in declare phase, they also needs to be added to master
2354          * object as sub-directory entry. So it has to initialize the master
2355          * object, then set dir striped EA.(in mdo_xattr_set) */
2356         rc = mdd_object_initialize(env, mdd_object_fid(pobj), son, attr,
2357                                    handle);
2358         if (rc != 0)
2359                 GOTO(err_destroy, rc);
2360
2361         /*
2362          * in case of replay we just set LOVEA provided by the client
2363          * XXX: I think it would be interesting to try "old" way where
2364          *      MDT calls this xattr_set(LOV) in a different transaction.
2365          *      probably this way we code can be made better.
2366          */
2367
2368         /* During creation, there are only a few cases we need do xattr_set to
2369          * create stripes.
2370          * 1. regular file: see comments above.
2371          * 2. dir: inherit default striping or pool settings from parent.
2372          * 3. create striped directory with provided stripeEA.
2373          * 4. create striped directory because inherit default layout from the
2374          * parent.
2375          */
2376         if (spec->no_create ||
2377             (S_ISREG(attr->la_mode) && spec->sp_cr_flags & MDS_OPEN_HAS_EA) ||
2378             S_ISDIR(attr->la_mode)) {
2379                 buf = mdd_buf_get_const(env, spec->u.sp_ea.eadata,
2380                                         spec->u.sp_ea.eadatalen);
2381                 rc = mdo_xattr_set(env, son, buf,
2382                                    S_ISDIR(attr->la_mode) ? XATTR_NAME_LMV :
2383                                                             XATTR_NAME_LOV,
2384                                    LU_XATTR_CREATE, handle);
2385                 if (rc != 0)
2386                         GOTO(err_destroy, rc);
2387         }
2388
2389         if (S_ISREG(attr->la_mode) && spec->sp_cr_flags & MDS_OPEN_PCC) {
2390                 struct md_hsm mh;
2391
2392                 memset(&mh, 0, sizeof(mh));
2393                 mh.mh_flags = HS_EXISTS | HS_ARCHIVED | HS_RELEASED;
2394                 mh.mh_arch_id = spec->sp_archive_id;
2395                 lustre_hsm2buf(hsm_buf->lb_buf, &mh);
2396                 rc = mdo_xattr_set(env, son, hsm_buf, XATTR_NAME_HSM,
2397                                    0, handle);
2398                 if (rc != 0)
2399                         GOTO(err_destroy, rc);
2400         }
2401
2402 #ifdef CONFIG_LUSTRE_FS_POSIX_ACL
2403         if (def_acl_buf != NULL && def_acl_buf->lb_len > 0 &&
2404             S_ISDIR(attr->la_mode)) {
2405                 /* set default acl */
2406                 rc = mdo_xattr_set(env, son, def_acl_buf,
2407                                    XATTR_NAME_ACL_DEFAULT, 0,
2408                                    handle);
2409                 if (rc)
2410                         GOTO(err_destroy, rc);
2411         }
2412         /* set its own acl */
2413         if (acl_buf != NULL && acl_buf->lb_len > 0) {
2414                 rc = mdo_xattr_set(env, son, acl_buf,
2415                                    XATTR_NAME_ACL_ACCESS,
2416                                    0, handle);
2417                 if (rc)
2418                         GOTO(err_destroy, rc);
2419         }
2420 #endif
2421
2422         if (S_ISLNK(attr->la_mode)) {
2423                 struct dt_object *dt = mdd_object_child(son);
2424                 const char *target_name = spec->u.sp_symname;
2425                 int sym_len = strlen(target_name);
2426                 loff_t pos = 0;
2427
2428                 buf = mdd_buf_get_const(env, target_name, sym_len);
2429                 rc = dt->do_body_ops->dbo_write(env, dt, buf, &pos, handle);
2430                 if (rc == sym_len)
2431                         rc = 0;
2432                 else
2433                         GOTO(err_initlized, rc = -EFAULT);
2434         }
2435
2436         if (initsecctx && spec->sp_cr_file_secctx_name != NULL) {
2437                 buf = mdd_buf_get_const(env, spec->sp_cr_file_secctx,
2438                                         spec->sp_cr_file_secctx_size);
2439                 rc = mdo_xattr_set(env, son, buf, spec->sp_cr_file_secctx_name,
2440                                    0, handle);
2441                 if (rc < 0)
2442                         GOTO(err_initlized, rc);
2443         }
2444
2445 err_initlized:
2446         if (unlikely(rc != 0)) {
2447                 int rc2;
2448                 if (S_ISDIR(attr->la_mode)) {
2449                         /* Drop the reference, no need to delete "."/"..",
2450                          * because the object to be destroied directly. */
2451                         rc2 = mdo_ref_del(env, son, handle);
2452                         if (rc2 != 0)
2453                                 GOTO(unlock, rc);
2454                 }
2455                 rc2 = mdo_ref_del(env, son, handle);
2456                 if (rc2 != 0)
2457                         GOTO(unlock, rc);
2458 err_destroy:
2459                 mdo_destroy(env, son, handle);
2460         }
2461 unlock:
2462         mdd_write_unlock(env, son);
2463         RETURN(rc);
2464 }
2465
2466 static int mdd_index_delete(const struct lu_env *env,
2467                             struct mdd_object *mdd_pobj,
2468                             struct lu_attr *cattr,
2469                             const struct lu_name *lname)
2470 {
2471         struct mdd_device *mdd = mdo2mdd(&mdd_pobj->mod_obj);
2472         struct thandle *handle;
2473         int rc;
2474         ENTRY;
2475
2476         handle = mdd_trans_create(env, mdd);
2477         if (IS_ERR(handle))
2478                 RETURN(PTR_ERR(handle));
2479
2480         rc = mdo_declare_index_delete(env, mdd_pobj, lname->ln_name,
2481                                       handle);
2482         if (rc != 0)
2483                 GOTO(stop, rc);
2484
2485         if (S_ISDIR(cattr->la_mode)) {
2486                 rc = mdo_declare_ref_del(env, mdd_pobj, handle);
2487                 if (rc != 0)
2488                         GOTO(stop, rc);
2489         }
2490
2491         /* Since this will only be used in the error handler path,
2492          * Let's set the thandle to be local and not mess the transno */
2493         handle->th_local = 1;
2494         rc = mdd_trans_start(env, mdd, handle);
2495         if (rc)
2496                 GOTO(stop, rc);
2497
2498         rc = __mdd_index_delete(env, mdd_pobj, lname->ln_name,
2499                                 S_ISDIR(cattr->la_mode), handle);
2500         if (rc)
2501                 GOTO(stop, rc);
2502 stop:
2503         rc = mdd_trans_stop(env, mdd, rc, handle);
2504
2505         RETURN(rc);
2506 }
2507
2508 /**
2509  * Create object and insert it into namespace.
2510  *
2511  * Two operations have to be performed:
2512  *
2513  *  - an allocation of a new object (->do_create()), and
2514  *  - an insertion into a parent index (->dio_insert()).
2515  *
2516  * Due to locking, operation order is not important, when both are
2517  * successful, *but* error handling cases are quite different:
2518  *
2519  *  - if insertion is done first, and following object creation fails,
2520  *  insertion has to be rolled back, but this operation might fail
2521  *  also leaving us with dangling index entry.
2522  *
2523  *  - if creation is done first, is has to be undone if insertion fails,
2524  *  leaving us with leaked space, which is not good but not fatal.
2525  *
2526  * It seems that creation-first is simplest solution, but it is sub-optimal
2527  * in the frequent
2528  *
2529  * $ mkdir foo
2530  * $ mkdir foo
2531  *
2532  * case, because second mkdir is bound to create object, only to
2533  * destroy it immediately.
2534  *
2535  * To avoid this follow local file systems that do double lookup:
2536  *
2537  * 0. lookup -> -EEXIST (mdd_create_sanity_check())
2538  * 1. create            (mdd_create_object_internal())
2539  * 2. insert            (__mdd_index_insert(), lookup again)
2540  *
2541  * \param[in] pobj      parent object
2542  * \param[in] lname     name of child being created
2543  * \param[in,out] child child object being created
2544  * \param[in] spec      additional create parameters
2545  * \param[in] ma        attributes for new child object
2546  *
2547  * \retval              0 on success
2548  * \retval              negative errno on failure
2549  */
2550 int mdd_create(const struct lu_env *env, struct md_object *pobj,
2551                       const struct lu_name *lname, struct md_object *child,
2552                       struct md_op_spec *spec, struct md_attr *ma)
2553 {
2554         struct mdd_thread_info  *info = mdd_env_info(env);
2555         struct lu_attr          *la = &info->mti_la_for_fix;
2556         struct mdd_object       *mdd_pobj = md2mdd_obj(pobj);
2557         struct mdd_object       *son = md2mdd_obj(child);
2558         struct mdd_device       *mdd = mdo2mdd(pobj);
2559         struct lu_attr          *attr = &ma->ma_attr;
2560         struct thandle          *handle;
2561         struct lu_attr          *pattr = &info->mti_pattr;
2562         struct lu_buf           acl_buf;
2563         struct lu_buf           def_acl_buf;
2564         struct lu_buf           hsm_buf;
2565         struct linkea_data      *ldata = &info->mti_link_data;
2566         const char              *name = lname->ln_name;
2567         struct dt_allocation_hint *hint = &mdd_env_info(env)->mti_hint;
2568         int                      rc;
2569         int                      rc2;
2570         ENTRY;
2571
2572         rc = mdd_la_get(env, mdd_pobj, pattr);
2573         if (rc != 0)
2574                 RETURN(rc);
2575
2576         /* Sanity checks before big job. */
2577         rc = mdd_create_sanity_check(env, pobj, pattr, lname, attr, spec);
2578         if (rc)
2579                 RETURN(rc);
2580
2581         if (OBD_FAIL_CHECK(OBD_FAIL_MDS_DQACQ_NET))
2582                 GOTO(out_free, rc = -EINPROGRESS);
2583
2584         handle = mdd_trans_create(env, mdd);
2585         if (IS_ERR(handle))
2586                 GOTO(out_free, rc = PTR_ERR(handle));
2587
2588         lu_buf_check_and_alloc(&info->mti_xattr_buf,
2589                         min_t(unsigned int, mdd->mdd_dt_conf.ddp_max_ea_size,
2590                               XATTR_SIZE_MAX));
2591         acl_buf = info->mti_xattr_buf;
2592         def_acl_buf.lb_buf = info->mti_key;
2593         def_acl_buf.lb_len = sizeof(info->mti_key);
2594         rc = mdd_acl_init(env, mdd_pobj, attr, &def_acl_buf, &acl_buf);
2595         if (rc < 0)
2596                 GOTO(out_stop, rc);
2597
2598         if (S_ISDIR(attr->la_mode)) {
2599                 struct lmv_user_md *lmu = spec->u.sp_ea.eadata;
2600
2601                 /*
2602                  * migrate may create 1-stripe directory, so lod_ah_init()
2603                  * doesn't adjust stripe count from lmu.
2604                  */
2605                 if (lmu && lmu->lum_stripe_count == cpu_to_le32(1))
2606                         lmu->lum_stripe_count = 0;
2607         }
2608
2609         mdd_object_make_hint(env, mdd_pobj, son, attr, spec, hint);
2610
2611         memset(ldata, 0, sizeof(*ldata));
2612         if (OBD_FAIL_CHECK(OBD_FAIL_LFSCK_BAD_PARENT)) {
2613                 struct lu_fid tfid = *mdd_object_fid(mdd_pobj);
2614
2615                 tfid.f_oid--;
2616                 rc = mdd_linkea_prepare(env, son, NULL, NULL,
2617                                         &tfid, lname, 1, 0, ldata);
2618         } else {
2619                 rc = mdd_linkea_prepare(env, son, NULL, NULL,
2620                                         mdd_object_fid(mdd_pobj),
2621                                         lname, 1, 0, ldata);
2622         }
2623
2624         if (spec->sp_cr_flags & MDS_OPEN_PCC) {
2625                 LASSERT(spec->sp_cr_flags & MDS_OPEN_HAS_EA);
2626
2627                 memset(&hsm_buf, 0, sizeof(hsm_buf));
2628                 lu_buf_alloc(&hsm_buf, sizeof(struct hsm_attrs));
2629                 if (hsm_buf.lb_buf == NULL)
2630                         GOTO(out_stop, rc = -ENOMEM);
2631         }
2632
2633         rc = mdd_declare_create(env, mdd, mdd_pobj, son, lname, attr,
2634                                 handle, spec, ldata, &def_acl_buf, &acl_buf,
2635                                 &hsm_buf, hint);
2636         if (rc)
2637                 GOTO(out_stop, rc);
2638
2639         rc = mdd_trans_start(env, mdd, handle);
2640         if (rc)
2641                 GOTO(out_stop, rc);
2642
2643         rc = mdd_create_object(env, mdd_pobj, son, attr, spec, &acl_buf,
2644                                &def_acl_buf, &hsm_buf, hint, handle, true);
2645         if (rc != 0)
2646                 GOTO(out_stop, rc);
2647
2648         if (unlikely(spec->sp_cr_flags & MDS_OPEN_VOLATILE)) {
2649                 mdd_write_lock(env, son, DT_TGT_CHILD);
2650                 son->mod_flags |= VOLATILE_OBJ;
2651                 rc = mdd_orphan_insert(env, son, handle);
2652                 GOTO(out_volatile, rc);
2653         } else {
2654                 rc = __mdd_index_insert(env, mdd_pobj, mdd_object_fid(son),
2655                                         attr->la_mode, name, handle);
2656                 if (rc != 0)
2657                         GOTO(err_created, rc);
2658
2659                 mdd_links_add(env, son, mdd_object_fid(mdd_pobj), lname,
2660                               handle, ldata, 1);
2661
2662                 /* update parent directory mtime/ctime */
2663                 *la = *attr;
2664                 la->la_valid = LA_CTIME | LA_MTIME;
2665                 rc = mdd_update_time(env, mdd_pobj, pattr, la, handle);
2666                 if (rc)
2667                         GOTO(err_insert, rc);
2668         }
2669
2670         EXIT;
2671 err_insert:
2672         if (rc != 0) {
2673                 if (spec->sp_cr_flags & MDS_OPEN_VOLATILE)
2674                         rc2 = mdd_orphan_delete(env, son, handle);
2675                 else
2676                         rc2 = __mdd_index_delete(env, mdd_pobj, name,
2677                                                  S_ISDIR(attr->la_mode),
2678                                                  handle);
2679                 if (rc2 != 0)
2680                         goto out_stop;
2681
2682 err_created:
2683                 mdd_write_lock(env, son, DT_TGT_CHILD);
2684                 if (S_ISDIR(attr->la_mode)) {
2685                         /* Drop the reference, no need to delete "."/"..",
2686                          * because the object is to be destroyed directly. */
2687                         rc2 = mdo_ref_del(env, son, handle);
2688                         if (rc2 != 0) {
2689                                 mdd_write_unlock(env, son);
2690                                 goto out_stop;
2691                         }
2692                 }
2693 out_volatile:
2694                 /* For volatile files drop one link immediately, since there is
2695                  * no filename in the namespace, and save any error returned. */
2696                 rc2 = mdo_ref_del(env, son, handle);
2697                 if (rc2 != 0) {
2698                         mdd_write_unlock(env, son);
2699                         if (unlikely(rc == 0))
2700                                 rc = rc2;
2701                         goto out_stop;
2702                 }
2703
2704                 /* Don't destroy the volatile object on success */
2705                 if (likely(rc != 0))
2706                         mdo_destroy(env, son, handle);
2707                 mdd_write_unlock(env, son);
2708         }
2709
2710         if (rc == 0 && fid_is_namespace_visible(mdd_object_fid(son)) &&
2711             likely((spec->sp_cr_flags & MDS_OPEN_VOLATILE) == 0))
2712                 rc = mdd_changelog_ns_store(env, mdd,
2713                                 S_ISDIR(attr->la_mode) ? CL_MKDIR :
2714                                 S_ISREG(attr->la_mode) ? CL_CREATE :
2715                                 S_ISLNK(attr->la_mode) ? CL_SOFTLINK : CL_MKNOD,
2716                                 0, son, mdd_object_fid(mdd_pobj), NULL, NULL,
2717                                 lname, NULL, handle);
2718 out_stop:
2719         rc2 = mdd_trans_stop(env, mdd, rc, handle);
2720         if (rc == 0) {
2721                 /* If creation fails, it is most likely due to the remote update
2722                  * failure, because local transaction will mostly succeed at
2723                  * this stage. There is no easy way to rollback all of previous
2724                  * updates, so let's remove the object from namespace, and
2725                  * LFSCK should handle the orphan object. */
2726                 if (rc2 < 0 && !mdd_object_remote(mdd_pobj))
2727                         mdd_index_delete(env, mdd_pobj, attr, lname);
2728                 rc = rc2;
2729         }
2730 out_free:
2731         if (is_vmalloc_addr(ldata->ld_buf))
2732                 /* if we vmalloced a large buffer drop it */
2733                 lu_buf_free(ldata->ld_buf);
2734
2735         if (spec->sp_cr_flags & MDS_OPEN_PCC)
2736                 lu_buf_free(&hsm_buf);
2737
2738         /* The child object shouldn't be cached anymore */
2739         if (rc)
2740                 set_bit(LU_OBJECT_HEARD_BANSHEE,
2741                         &child->mo_lu.lo_header->loh_flags);
2742         return rc;
2743 }
2744
2745 /*
2746  * Get locks on parents in proper order
2747  * RETURN: < 0 - error, rename_order if successful
2748  */
2749 enum rename_order {
2750         MDD_RN_SAME,
2751         MDD_RN_SRCTGT,
2752         MDD_RN_TGTSRC
2753 };
2754
2755 static int mdd_rename_order(const struct lu_env *env,
2756                             struct mdd_device *mdd,
2757                             struct mdd_object *src_pobj,
2758                             const struct lu_attr *pattr,
2759                             struct mdd_object *tgt_pobj)
2760 {
2761         /* order of locking, 1 - tgt-src, 0 - src-tgt*/
2762         int rc;
2763
2764         ENTRY;
2765         if (src_pobj == tgt_pobj)
2766                 RETURN(MDD_RN_SAME);
2767
2768         /* compared the parent child relationship of src_p & tgt_p */
2769         if (lu_fid_eq(&mdd->mdd_root_fid, mdd_object_fid(src_pobj))) {
2770                 rc = MDD_RN_SRCTGT;
2771         } else if (lu_fid_eq(&mdd->mdd_root_fid, mdd_object_fid(tgt_pobj))) {
2772                 rc = MDD_RN_TGTSRC;
2773         } else {
2774                 rc = mdd_is_parent(env, mdd, src_pobj, pattr,
2775                                    mdd_object_fid(tgt_pobj));
2776                 if (rc == -EREMOTE)
2777                         rc = 0;
2778
2779                 if (rc == 1)
2780                         rc = MDD_RN_TGTSRC;
2781                 else if (rc == 0)
2782                         rc = MDD_RN_SRCTGT;
2783         }
2784
2785         RETURN(rc);
2786 }
2787
2788 /* has not mdd_write{read}_lock on any obj yet. */
2789 static int mdd_rename_sanity_check(const struct lu_env *env,
2790                                    struct mdd_object *src_pobj,
2791                                    const struct lu_attr *pattr,
2792                                    struct mdd_object *tgt_pobj,
2793                                    const struct lu_attr *tpattr,
2794                                    struct mdd_object *sobj,
2795                                    const struct lu_attr *cattr,
2796                                    struct mdd_object *tobj,
2797                                    const struct lu_attr *tattr)
2798 {
2799         int rc = 0;
2800         ENTRY;
2801
2802         /* XXX: when get here, sobj must NOT be NULL,
2803          * the other case has been processed in cld_rename
2804          * before mdd_rename and enable MDS_PERM_BYPASS. */
2805         LASSERT(sobj);
2806
2807         /*
2808          * If we are using project inheritance, we only allow renames
2809          * into our tree when the project IDs are the same; otherwise
2810          * tree quota mechanism would be circumvented.
2811          */
2812         if (((tpattr->la_flags & LUSTRE_PROJINHERIT_FL) &&
2813             tpattr->la_projid != cattr->la_projid) ||
2814             ((pattr->la_flags & LUSTRE_PROJINHERIT_FL) &&
2815             (pattr->la_projid != tpattr->la_projid)))
2816                 RETURN(-EXDEV);
2817
2818         rc = mdd_may_delete(env, src_pobj, pattr, sobj, cattr, NULL, 1, 0);
2819         if (rc)
2820                 RETURN(rc);
2821
2822         /* XXX: when get here, "tobj == NULL" means tobj must
2823          * NOT exist (neither on remote MDS, such case has been
2824          * processed in cld_rename before mdd_rename and enable
2825          * MDS_PERM_BYPASS).
2826          * So check may_create, but not check may_unlink. */
2827         if (tobj == NULL)
2828                 rc = mdd_may_create(env, tgt_pobj, tpattr, NULL,
2829                                     (src_pobj != tgt_pobj));
2830         else
2831                 rc = mdd_may_delete(env, tgt_pobj, tpattr, tobj, tattr, cattr,
2832                                     (src_pobj != tgt_pobj), 1);
2833
2834         if (!rc && !tobj && (src_pobj != tgt_pobj) && S_ISDIR(cattr->la_mode))
2835                 rc = __mdd_may_link(env, tgt_pobj, tpattr);
2836
2837         RETURN(rc);
2838 }
2839
2840 static int mdd_declare_rename(const struct lu_env *env,
2841                               struct mdd_device *mdd,
2842                               struct mdd_object *mdd_spobj,
2843                               struct mdd_object *mdd_tpobj,
2844                               struct mdd_object *mdd_sobj,
2845                               struct mdd_object *mdd_tobj,
2846                               const struct lu_name *sname,
2847                               const struct lu_name *tname,
2848                               struct md_attr *ma,
2849                               struct linkea_data *ldata,
2850                               struct thandle *handle)
2851 {
2852         struct lu_attr *la = &mdd_env_info(env)->mti_la_for_fix;
2853         int rc;
2854
2855         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
2856         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
2857
2858         LASSERT(mdd_spobj);
2859         LASSERT(mdd_tpobj);
2860         LASSERT(mdd_sobj);
2861
2862         /* name from source dir */
2863         rc = mdo_declare_index_delete(env, mdd_spobj, sname->ln_name, handle);
2864         if (rc)
2865                 return rc;
2866
2867         /* .. from source child */
2868         if (S_ISDIR(mdd_object_type(mdd_sobj))) {
2869                 /* source child can be directory, count by source dir's nlink */
2870                 rc = mdo_declare_ref_del(env, mdd_spobj, handle);
2871                 if (rc)
2872                         return rc;
2873                 if (mdd_spobj != mdd_tpobj) {
2874                         rc = mdo_declare_index_delete(env, mdd_sobj, dotdot,
2875                                                       handle);
2876                         if (rc != 0)
2877                                 return rc;
2878
2879                         rc = mdo_declare_index_insert(env, mdd_sobj,
2880                                                       mdd_object_fid(mdd_tpobj),
2881                                                       S_IFDIR, dotdot, handle);
2882                         if (rc != 0)
2883                                 return rc;
2884                 }
2885
2886                 /* new target child can be directory,
2887                  * counted by target dir's nlink */
2888                 rc = mdo_declare_ref_add(env, mdd_tpobj, handle);
2889                 if (rc != 0)
2890                         return rc;
2891         }
2892
2893         la->la_valid = LA_CTIME | LA_MTIME;
2894         rc = mdo_declare_attr_set(env, mdd_spobj, la, handle);
2895         if (rc != 0)
2896                 return rc;
2897
2898         rc = mdo_declare_attr_set(env, mdd_tpobj, la, handle);
2899         if (rc != 0)
2900                 return rc;
2901
2902         la->la_valid = LA_CTIME;
2903         rc = mdo_declare_attr_set(env, mdd_sobj, la, handle);
2904         if (rc)
2905                 return rc;
2906
2907         rc = mdd_declare_links_add(env, mdd_sobj, handle, ldata);
2908         if (rc)
2909                 return rc;
2910
2911         /* new name */
2912         rc = mdo_declare_index_insert(env, mdd_tpobj, mdd_object_fid(mdd_sobj),
2913                                       mdd_object_type(mdd_sobj),
2914                                       tname->ln_name, handle);
2915         if (rc != 0)
2916                 return rc;
2917
2918         if (mdd_tobj && mdd_object_exists(mdd_tobj)) {
2919                 /* delete target child in target parent directory */
2920                 rc = mdo_declare_index_delete(env, mdd_tpobj, tname->ln_name,
2921                                               handle);
2922                 if (rc)
2923                         return rc;
2924
2925                 rc = mdo_declare_ref_del(env, mdd_tobj, handle);
2926                 if (rc)
2927                         return rc;
2928
2929                 if (S_ISDIR(mdd_object_type(mdd_tobj))) {
2930                         /* target child can be directory,
2931                          * delete "." reference in target child directory */
2932                         rc = mdo_declare_ref_del(env, mdd_tobj, handle);
2933                         if (rc)
2934                                 return rc;
2935
2936                         /* delete ".." reference in target parent directory */
2937                         rc = mdo_declare_ref_del(env, mdd_tpobj, handle);
2938                         if (rc)
2939                                 return rc;
2940                 }
2941
2942                 la->la_valid = LA_CTIME;
2943                 rc = mdo_declare_attr_set(env, mdd_tobj, la, handle);
2944                 if (rc)
2945                         return rc;
2946
2947                 rc = mdd_declare_finish_unlink(env, mdd_tobj, handle);
2948                 if (rc)
2949                         return rc;
2950         }
2951
2952         rc = mdd_declare_changelog_store(env, mdd, CL_RENAME, tname, sname,
2953                                          handle);
2954         if (rc)
2955                 return rc;
2956
2957         return rc;
2958 }
2959
2960 /* src object can be remote that is why we use only fid and type of object */
2961 static int mdd_rename(const struct lu_env *env,
2962                       struct md_object *src_pobj, struct md_object *tgt_pobj,
2963                       const struct lu_fid *lf, const struct lu_name *lsname,
2964                       struct md_object *tobj, const struct lu_name *ltname,
2965                       struct md_attr *ma)
2966 {
2967         const char *sname = lsname->ln_name;
2968         const char *tname = ltname->ln_name;
2969         struct lu_attr    *la = &mdd_env_info(env)->mti_la_for_fix;
2970         struct mdd_object *mdd_spobj = md2mdd_obj(src_pobj); /* source parent */
2971         struct mdd_object *mdd_tpobj = md2mdd_obj(tgt_pobj);
2972         struct mdd_device *mdd = mdo2mdd(src_pobj);
2973         struct mdd_object *mdd_sobj = NULL;                  /* source object */
2974         struct mdd_object *mdd_tobj = NULL;
2975         struct lu_attr *cattr = MDD_ENV_VAR(env, cattr);
2976         struct lu_attr *pattr = MDD_ENV_VAR(env, pattr);
2977         struct lu_attr *tattr = MDD_ENV_VAR(env, tattr);
2978         struct lu_attr *tpattr = MDD_ENV_VAR(env, tpattr);
2979         struct thandle *handle;
2980         struct linkea_data  *ldata = &mdd_env_info(env)->mti_link_data;
2981         const struct lu_fid *tpobj_fid = mdd_object_fid(mdd_tpobj);
2982         const struct lu_fid *spobj_fid = mdd_object_fid(mdd_spobj);
2983         bool is_dir;
2984         bool tobj_ref = 0;
2985         bool tobj_locked = 0;
2986         unsigned cl_flags = 0;
2987         int rc, rc2;
2988         ENTRY;
2989
2990         /* let unlink to complete and commit */
2991         CFS_FAIL_TIMEOUT(OBD_FAIL_TGT_REPLY_DATA_RACE, 2 + cfs_fail_val);
2992
2993         if (tobj)
2994                 mdd_tobj = md2mdd_obj(tobj);
2995
2996         mdd_sobj = mdd_object_find(env, mdd, lf);
2997         if (IS_ERR(mdd_sobj))
2998                 RETURN(PTR_ERR(mdd_sobj));
2999
3000         rc = mdd_la_get(env, mdd_sobj, cattr);
3001         if (rc)
3002                 GOTO(out_pending, rc);
3003
3004         rc = mdd_la_get(env, mdd_spobj, pattr);
3005         if (rc)
3006                 GOTO(out_pending, rc);
3007
3008         if (mdd_tobj) {
3009                 rc = mdd_la_get(env, mdd_tobj, tattr);
3010                 if (rc)
3011                         GOTO(out_pending, rc);
3012                 /* search for an existing archive.
3013                  * we should check ahead as the object
3014                  * can be destroyed in this transaction */
3015                 if (mdd_hsm_archive_exists(env, mdd_tobj, ma))
3016                         cl_flags |= CLF_RENAME_LAST_EXISTS;
3017         }
3018
3019         rc = mdd_la_get(env, mdd_tpobj, tpattr);
3020         if (rc)
3021                 GOTO(out_pending, rc);
3022
3023         rc = mdd_rename_sanity_check(env, mdd_spobj, pattr, mdd_tpobj, tpattr,
3024                                      mdd_sobj, cattr, mdd_tobj, tattr);
3025         if (rc)
3026                 GOTO(out_pending, rc);
3027
3028         rc = mdd_name_check(mdd, ltname);
3029         if (rc < 0)
3030                 GOTO(out_pending, rc);
3031
3032         /* FIXME: Should consider tobj and sobj too in rename_lock. */
3033         rc = mdd_rename_order(env, mdd, mdd_spobj, pattr, mdd_tpobj);
3034         if (rc < 0)
3035                 GOTO(out_pending, rc);
3036
3037         handle = mdd_trans_create(env, mdd);
3038         if (IS_ERR(handle))
3039                 GOTO(out_pending, rc = PTR_ERR(handle));
3040
3041         memset(ldata, 0, sizeof(*ldata));
3042         rc = mdd_linkea_prepare(env, mdd_sobj, mdd_object_fid(mdd_spobj),
3043                                 lsname, mdd_object_fid(mdd_tpobj), ltname,
3044                                 1, 0, ldata);
3045         if (rc)
3046                 GOTO(stop, rc);
3047
3048         rc = mdd_declare_rename(env, mdd, mdd_spobj, mdd_tpobj, mdd_sobj,
3049                                 mdd_tobj, lsname, ltname, ma, ldata, handle);
3050         if (rc)
3051                 GOTO(stop, rc);
3052
3053         rc = mdd_trans_start(env, mdd, handle);
3054         if (rc)
3055                 GOTO(stop, rc);
3056
3057         is_dir = S_ISDIR(cattr->la_mode);
3058
3059         /* Remove source name from source directory */
3060         rc = __mdd_index_delete(env, mdd_spobj, sname, is_dir, handle);
3061         if (rc != 0)
3062                 GOTO(stop, rc);
3063
3064         /* "mv dir1 dir2" needs "dir1/.." link update */
3065         if (is_dir && !lu_fid_eq(spobj_fid, tpobj_fid)) {
3066                 rc = __mdd_index_delete_only(env, mdd_sobj, dotdot, handle);
3067                 if (rc != 0)
3068                         GOTO(fixup_spobj2, rc);
3069
3070                 rc = __mdd_index_insert_only(env, mdd_sobj, tpobj_fid, S_IFDIR,
3071                                              dotdot, handle);
3072                 if (rc != 0)
3073                         GOTO(fixup_spobj, rc);
3074         }
3075
3076         if (mdd_tobj != NULL && mdd_object_exists(mdd_tobj)) {
3077                 rc = __mdd_index_delete(env, mdd_tpobj, tname, is_dir, handle);
3078                 if (rc != 0)
3079                         /* tname might been renamed to something else */
3080                         GOTO(fixup_spobj, rc);
3081         }
3082
3083         /* Insert new fid with target name into target dir */
3084         rc = __mdd_index_insert(env, mdd_tpobj, lf, cattr->la_mode,
3085                                 tname, handle);
3086         if (rc != 0)
3087                 GOTO(fixup_tpobj, rc);
3088
3089         LASSERT(ma->ma_attr.la_valid & LA_CTIME);
3090         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
3091
3092         /* XXX: mdd_sobj must be local one if it is NOT NULL. */
3093         la->la_valid = LA_CTIME;
3094         rc = mdd_update_time(env, mdd_sobj, cattr, la, handle);
3095         if (rc)
3096                 GOTO(fixup_tpobj, rc);
3097
3098         /* Update the linkEA for the source object */
3099         mdd_write_lock(env, mdd_sobj, DT_SRC_CHILD);
3100         rc = mdd_links_rename(env, mdd_sobj, mdd_object_fid(mdd_spobj),
3101                               lsname, mdd_object_fid(mdd_tpobj), ltname,
3102                               handle, ldata, 0, 0);
3103         if (rc == -ENOENT)
3104                 /* Old files might not have EA entry */
3105                 mdd_links_add(env, mdd_sobj, mdd_object_fid(mdd_spobj),
3106                               lsname, handle, NULL, 0);
3107         mdd_write_unlock(env, mdd_sobj);
3108         /* We don't fail the transaction if the link ea can't be
3109            updated -- fid2path will use alternate lookup method. */
3110         rc = 0;
3111
3112         /* Remove old target object
3113          * For tobj is remote case cmm layer has processed
3114          * and set tobj to NULL then. So when tobj is NOT NULL,
3115          * it must be local one.
3116          */
3117         if (tobj && mdd_object_exists(mdd_tobj)) {
3118                 mdd_write_lock(env, mdd_tobj, DT_TGT_CHILD);
3119                 tobj_locked = 1;
3120                 if (mdd_is_dead_obj(mdd_tobj)) {
3121                         /* shld not be dead, something is wrong */
3122                         CERROR("tobj is dead, something is wrong\n");
3123                         rc = -EINVAL;
3124                         goto cleanup;
3125                 }
3126                 mdo_ref_del(env, mdd_tobj, handle);
3127
3128                 /* Remove dot reference. */
3129                 if (S_ISDIR(tattr->la_mode))
3130                         mdo_ref_del(env, mdd_tobj, handle);
3131                 tobj_ref = 1;
3132
3133                 /* fetch updated nlink */
3134                 rc = mdd_la_get(env, mdd_tobj, tattr);
3135                 if (rc != 0) {
3136                         CERROR("%s: Failed to get nlink for tobj "
3137                                 DFID": rc = %d\n",
3138                                 mdd2obd_dev(mdd)->obd_name,
3139                                 PFID(tpobj_fid), rc);
3140                         GOTO(fixup_tpobj, rc);
3141                 }
3142
3143                 la->la_valid = LA_CTIME;
3144                 rc = mdd_update_time(env, mdd_tobj, tattr, la, handle);
3145                 if (rc != 0) {
3146                         CERROR("%s: Failed to set ctime for tobj "
3147                                 DFID": rc = %d\n",
3148                                 mdd2obd_dev(mdd)->obd_name,
3149                                 PFID(tpobj_fid), rc);
3150                         GOTO(fixup_tpobj, rc);
3151                 }
3152
3153                 /* XXX: this transfer to ma will be removed with LOD/OSP */
3154                 ma->ma_attr = *tattr;
3155                 ma->ma_valid |= MA_INODE;
3156                 rc = mdd_finish_unlink(env, mdd_tobj, ma, mdd_tpobj, ltname,
3157                                        handle);
3158                 if (rc != 0) {
3159                         CERROR("%s: Failed to unlink tobj "
3160                                 DFID": rc = %d\n",
3161                                 mdd2obd_dev(mdd)->obd_name,
3162                                 PFID(tpobj_fid), rc);
3163                         GOTO(fixup_tpobj, rc);
3164                 }
3165
3166                 /* fetch updated nlink */
3167                 rc = mdd_la_get(env, mdd_tobj, tattr);
3168                 if (rc == -ENOENT) {
3169                         /* the object got removed, let's
3170                          * return the latest known attributes */
3171                         tattr->la_nlink = 0;
3172                         rc = 0;
3173                 } else if (rc != 0) {
3174                         CERROR("%s: Failed to get nlink for tobj "
3175                                 DFID": rc = %d\n",
3176                                 mdd2obd_dev(mdd)->obd_name,
3177                                 PFID(tpobj_fid), rc);
3178                         GOTO(fixup_tpobj, rc);
3179                 }
3180                 /* XXX: this transfer to ma will be removed with LOD/OSP */
3181                 ma->ma_attr = *tattr;
3182                 ma->ma_valid |= MA_INODE;
3183
3184                 if (tattr->la_nlink == 0)
3185                         cl_flags |= CLF_RENAME_LAST;
3186                 else
3187                         cl_flags &= ~CLF_RENAME_LAST_EXISTS;
3188         }
3189
3190         la->la_valid = LA_CTIME | LA_MTIME;
3191         rc = mdd_update_time(env, mdd_spobj, pattr, la, handle);
3192         if (rc)
3193                 GOTO(fixup_tpobj, rc);
3194
3195         if (mdd_spobj != mdd_tpobj) {
3196                 la->la_valid = LA_CTIME | LA_MTIME;
3197                 rc = mdd_update_time(env, mdd_tpobj, tpattr, la, handle);
3198                 if (rc != 0)
3199                         GOTO(fixup_tpobj, rc);
3200         }
3201
3202         EXIT;
3203
3204 fixup_tpobj:
3205         if (rc) {
3206                 rc2 = __mdd_index_delete(env, mdd_tpobj, tname, is_dir, handle);
3207                 if (rc2)
3208                         CWARN("tp obj fix error %d\n",rc2);
3209
3210                 if (mdd_tobj && mdd_object_exists(mdd_tobj) &&
3211                     !mdd_is_dead_obj(mdd_tobj)) {
3212                         if (tobj_ref) {
3213                                 mdo_ref_add(env, mdd_tobj, handle);
3214                                 if (is_dir)
3215                                         mdo_ref_add(env, mdd_tobj, handle);
3216                         }
3217
3218                         rc2 = __mdd_index_insert(env, mdd_tpobj,
3219                                                  mdd_object_fid(mdd_tobj),
3220                                                  mdd_object_type(mdd_tobj),
3221                                                  tname, handle);
3222                         if (rc2 != 0)
3223                                 CWARN("tp obj fix error: rc = %d\n", rc2);
3224                 }
3225         }
3226
3227 fixup_spobj:
3228         if (rc && is_dir && mdd_sobj && mdd_spobj != mdd_tpobj) {
3229                 rc2 = __mdd_index_delete_only(env, mdd_sobj, dotdot, handle);
3230                 if (rc2)
3231                         CWARN("%s: sp obj dotdot delete error: rc = %d\n",
3232                                mdd2obd_dev(mdd)->obd_name, rc2);
3233
3234
3235                 rc2 = __mdd_index_insert_only(env, mdd_sobj, spobj_fid, S_IFDIR,
3236                                               dotdot, handle);
3237                 if (rc2 != 0)
3238                         CWARN("%s: sp obj dotdot insert error: rc = %d\n",
3239                               mdd2obd_dev(mdd)->obd_name, rc2);
3240         }
3241
3242 fixup_spobj2:
3243         if (rc != 0) {
3244                 rc2 = __mdd_index_insert(env, mdd_spobj, lf,
3245                                          mdd_object_type(mdd_sobj), sname,
3246                                          handle);
3247                 if (rc2 != 0)
3248                         CWARN("sp obj fix error: rc = %d\n", rc2);
3249         }
3250
3251 cleanup:
3252         if (tobj_locked)
3253                 mdd_write_unlock(env, mdd_tobj);
3254
3255         if (rc == 0)
3256                 rc = mdd_changelog_ns_store(env, mdd, CL_RENAME, cl_flags,
3257                                             mdd_tobj, tpobj_fid, lf, spobj_fid,
3258                                             ltname, lsname, handle);
3259
3260 stop:
3261         rc = mdd_trans_stop(env, mdd, rc, handle);
3262
3263 out_pending:
3264         mdd_object_put(env, mdd_sobj);
3265         return rc;
3266 }
3267
3268 /**
3269  * Check whether we should migrate the file/dir
3270  * return val
3271  *      < 0  permission check failed or other error.
3272  *      = 0  the file can be migrated.
3273  **/
3274 static int mdd_migrate_sanity_check(const struct lu_env *env,
3275                                     struct mdd_device *mdd,
3276                                     struct mdd_object *spobj,
3277                                     struct mdd_object *tpobj,
3278                                     struct mdd_object *sobj,
3279                                     struct mdd_object *tobj,
3280                                     const struct lu_attr *spattr,
3281                                     const struct lu_attr *tpattr,
3282                                     const struct lu_attr *attr)
3283 {
3284         int rc;
3285
3286         ENTRY;
3287
3288         if (!mdd_object_remote(sobj)) {
3289                 mdd_read_lock(env, sobj, DT_SRC_CHILD);
3290                 if (sobj->mod_count > 0) {
3291                         CDEBUG(D_INFO, "%s: "DFID" is opened, count %d\n",
3292                                mdd_obj_dev_name(sobj),
3293                                PFID(mdd_object_fid(sobj)),
3294                                sobj->mod_count);
3295                         mdd_read_unlock(env, sobj);
3296                         RETURN(-EBUSY);
3297                 }
3298                 mdd_read_unlock(env, sobj);
3299         }
3300
3301         if (mdd_object_exists(tobj))
3302                 RETURN(-EEXIST);
3303
3304         rc = mdd_rename_sanity_check(env, spobj, spattr, tpobj, tpattr, sobj,
3305                                      attr, NULL, NULL);
3306         RETURN(rc);
3307 }
3308
3309 typedef int (*mdd_xattr_cb)(const struct lu_env *env,
3310                             struct mdd_object *obj,
3311                             const struct lu_buf *buf,
3312                             const char *name,
3313                             int fl, struct thandle *handle);
3314
3315 /* iterate xattrs, but ignore LMA, LMV, and LINKEA if 'skip_linkea' is set. */
3316 static int mdd_iterate_xattrs(const struct lu_env *env,
3317                               struct mdd_object *sobj,
3318                               struct mdd_object *tobj,
3319                               bool skip_linkea,
3320                               struct thandle *handle,
3321                               mdd_xattr_cb cb)
3322 {
3323         struct mdd_thread_info *info = mdd_env_info(env);
3324         char *xname;
3325         struct lu_buf list_xbuf;
3326         struct lu_buf cbxbuf;
3327         struct lu_buf xbuf = { NULL };
3328         int list_xsize;
3329         int xlen;
3330         int rem;
3331         int xsize;
3332         int rc;
3333
3334         ENTRY;
3335
3336         /* retrieve xattr list from the old object */
3337         list_xsize = mdo_xattr_list(env, sobj, &LU_BUF_NULL);
3338         if (list_xsize == -ENODATA)
3339                 RETURN(0);
3340
3341         if (list_xsize < 0)
3342                 RETURN(list_xsize);
3343
3344         lu_buf_check_and_alloc(&info->mti_big_buf, list_xsize);
3345         if (info->mti_big_buf.lb_buf == NULL)
3346                 RETURN(-ENOMEM);
3347
3348         list_xbuf.lb_buf = info->mti_big_buf.lb_buf;
3349         list_xbuf.lb_len = list_xsize;
3350         rc = mdo_xattr_list(env, sobj, &list_xbuf);
3351         if (rc < 0)
3352                 RETURN(rc);
3353
3354         rem = rc;
3355         rc = 0;
3356         xname = list_xbuf.lb_buf;
3357         while (rem > 0) {
3358                 xlen = strnlen(xname, rem - 1) + 1;
3359                 if (strcmp(XATTR_NAME_LMA, xname) == 0 ||
3360                     strcmp(XATTR_NAME_LMV, xname) == 0)
3361                         goto next;
3362
3363                 if (skip_linkea &&
3364                     strcmp(XATTR_NAME_LINK, xname) == 0)
3365                         goto next;
3366
3367                 xsize = mdo_xattr_get(env, sobj, &LU_BUF_NULL, xname);
3368                 if (xsize == -ENODATA)
3369                         goto next;
3370                 if (xsize < 0)
3371                         GOTO(out, rc = xsize);
3372
3373                 lu_buf_check_and_alloc(&xbuf, xsize);
3374                 if (xbuf.lb_buf == NULL)
3375                         GOTO(out, rc = -ENOMEM);
3376
3377                 rc = mdo_xattr_get(env, sobj, &xbuf, xname);
3378                 if (rc == -ENODATA)
3379                         goto next;
3380                 if (rc < 0)
3381                         GOTO(out, rc);
3382
3383                 cbxbuf = xbuf;
3384                 cbxbuf.lb_len = xsize;
3385 repeat:
3386                 rc = cb(env, tobj, &cbxbuf, xname, 0, handle);
3387                 if (unlikely(rc == -ENOSPC &&
3388                              strcmp(xname, XATTR_NAME_LINK) == 0)) {
3389                         rc = linkea_overflow_shrink(
3390                                         (struct linkea_data *)(cbxbuf.lb_buf));
3391                         if (likely(rc > 0)) {
3392                                 cbxbuf.lb_len = rc;
3393                                 goto repeat;
3394                         }
3395                 }
3396
3397                 if (rc)
3398                         GOTO(out, rc);
3399 next:
3400                 xname += xlen;
3401                 rem -= xlen;
3402         }
3403
3404 out:
3405         lu_buf_free(&xbuf);
3406         RETURN(rc);
3407 }
3408
3409 typedef int (*mdd_linkea_cb)(const struct lu_env *env,
3410                              struct mdd_object *sobj,
3411                              struct mdd_object *tobj,
3412                              const struct lu_name *sname,
3413                              const struct lu_fid *sfid,
3414                              const struct lu_name *lname,
3415                              const struct lu_fid *fid,
3416                              void *opaque,
3417                              struct thandle *handle);
3418
3419 static int mdd_declare_update_link(const struct lu_env *env,
3420                                    struct mdd_object *sobj,
3421                                    struct mdd_object *tobj,
3422                                    const struct lu_name *tname,
3423                                    const struct lu_fid *tpfid,
3424                                    const struct lu_name *lname,
3425                                    const struct lu_fid *fid,
3426                                    void *unused,
3427                                    struct thandle *handle)
3428 {
3429         struct mdd_device *mdd = mdo2mdd(&sobj->mod_obj);
3430         struct mdd_object *pobj;
3431         int rc;
3432
3433         /* ignore tobj */
3434         if (lu_fid_eq(tpfid, fid) && tname->ln_namelen == lname->ln_namelen &&
3435             !strcmp(tname->ln_name, lname->ln_name))
3436                 return 0;
3437
3438         pobj = mdd_object_find(env, mdd, fid);
3439         if (IS_ERR(pobj))
3440                 return PTR_ERR(pobj);
3441
3442
3443         rc = mdo_declare_index_delete(env, pobj, lname->ln_name, handle);
3444         if (!rc)
3445                 rc = mdo_declare_index_insert(env, pobj, mdd_object_fid(tobj),
3446                                               mdd_object_type(sobj),
3447                                               lname->ln_name, handle);
3448         mdd_object_put(env, pobj);
3449         if (rc)
3450                 return rc;
3451
3452         rc = mdo_declare_ref_add(env, tobj, handle);
3453         if (rc)
3454                 return rc;
3455
3456         rc = mdo_declare_ref_del(env, sobj, handle);
3457         return rc;
3458 }
3459
3460 static int mdd_update_link(const struct lu_env *env,
3461                            struct mdd_object *sobj,
3462                            struct mdd_object *tobj,
3463                            const struct lu_name *tname,
3464                            const struct lu_fid *tpfid,
3465                            const struct lu_name *lname,
3466                            const struct lu_fid *fid,
3467                            void *unused,
3468                            struct thandle *handle)
3469 {
3470         struct mdd_device *mdd = mdo2mdd(&sobj->mod_obj);
3471         struct mdd_object *pobj;
3472         int rc;
3473
3474         ENTRY;
3475
3476         LASSERT(lu_name_is_valid(lname));
3477
3478         /* ignore tobj */
3479         if (lu_fid_eq(tpfid, fid) && tname->ln_namelen == lname->ln_namelen &&
3480             !strncmp(tname->ln_name, lname->ln_name, lname->ln_namelen))
3481                 RETURN(0);
3482
3483         CDEBUG(D_INFO, "update "DFID"/"DNAME":"DFID"\n",
3484                PFID(fid), PNAME(lname), PFID(mdd_object_fid(tobj)));
3485
3486         pobj = mdd_object_find(env, mdd, fid);
3487         if (IS_ERR(pobj)) {
3488                 CWARN("%s: cannot find obj "DFID": %ld\n",
3489                       mdd2obd_dev(mdd)->obd_name, PFID(fid), PTR_ERR(pobj));
3490                 RETURN(PTR_ERR(pobj));
3491         }
3492
3493         if (!mdd_object_exists(pobj)) {
3494                 CDEBUG(D_INFO, DFID" doesn't exist\n", PFID(fid));
3495                 mdd_object_put(env, pobj);
3496                 RETURN(-ENOENT);
3497         }
3498
3499         mdd_write_lock(env, pobj, DT_TGT_PARENT);
3500         rc = __mdd_index_delete_only(env, pobj, lname->ln_name, handle);
3501         if (!rc)
3502                 rc = __mdd_index_insert_only(env, pobj, mdd_object_fid(tobj),
3503                                              mdd_object_type(sobj),
3504                                              lname->ln_name, handle);
3505         mdd_write_unlock(env, pobj);
3506         mdd_object_put(env, pobj);
3507         if (rc)
3508                 RETURN(rc);
3509
3510         mdd_write_lock(env, tobj, DT_TGT_CHILD);
3511         rc = mdo_ref_add(env, tobj, handle);
3512         mdd_write_unlock(env, tobj);
3513         if (rc)
3514                 RETURN(rc);
3515
3516         mdd_write_lock(env, sobj, DT_SRC_CHILD);
3517         rc = mdo_ref_del(env, sobj, handle);
3518         mdd_write_unlock(env, sobj);
3519
3520         RETURN(rc);
3521 }
3522
3523 static inline int mdd_fld_lookup(const struct lu_env *env,
3524                                  struct mdd_device *mdd,
3525                                  const struct lu_fid *fid,
3526                                  __u32 *mdt_index)
3527 {
3528         struct lu_seq_range *range = &mdd_env_info(env)->mti_range;
3529         struct seq_server_site *ss;
3530         int rc;
3531
3532         ss = mdd->mdd_md_dev.md_lu_dev.ld_site->ld_seq_site;
3533
3534         range->lsr_flags = LU_SEQ_RANGE_MDT;
3535         rc = fld_server_lookup(env, ss->ss_server_fld, fid->f_seq, range);
3536         if (rc)
3537                 return rc;
3538
3539         *mdt_index = range->lsr_index;
3540
3541         return 0;
3542 }
3543
3544 static int mdd_is_link_on_source_mdt(const struct lu_env *env,
3545                                      struct mdd_object *sobj,
3546                                      struct mdd_object *tobj,
3547                                      const struct lu_name *tname,
3548                                      const struct lu_fid *tpfid,
3549                                      const struct lu_name *lname,
3550                                      const struct lu_fid *fid,
3551                                      void *opaque,
3552                                      struct thandle *handle)
3553 {
3554         struct mdd_device *mdd = mdo2mdd(&sobj->mod_obj);
3555         __u32 source_mdt_index = *(__u32 *)opaque;
3556         __u32 link_mdt_index;
3557         int rc;
3558
3559         ENTRY;
3560
3561         /* ignore tobj */
3562         if (lu_fid_eq(tpfid, fid) && tname->ln_namelen == lname->ln_namelen &&
3563             !strcmp(tname->ln_name, lname->ln_name))
3564                 return 0;
3565
3566         rc = mdd_fld_lookup(env, mdd, fid, &link_mdt_index);
3567         if (rc)
3568                 RETURN(rc);
3569
3570         RETURN(link_mdt_index == source_mdt_index);
3571 }
3572
3573 static int mdd_iterate_linkea(const struct lu_env *env,
3574                               struct mdd_object *sobj,
3575                               struct mdd_object *tobj,
3576                               const struct lu_name *tname,
3577                               const struct lu_fid *tpfid,
3578                               struct linkea_data *ldata,
3579                               void *opaque,
3580                               struct thandle *handle,
3581                               mdd_linkea_cb cb)
3582 {
3583         struct mdd_thread_info *info = mdd_env_info(env);
3584         char *filename = info->mti_name;
3585         struct lu_name lname;
3586         struct lu_fid fid;
3587         int rc = 0;
3588
3589         if (!ldata->ld_buf)
3590                 return 0;
3591
3592         for (linkea_first_entry(ldata); ldata->ld_lee && !rc;
3593              linkea_next_entry(ldata)) {
3594                 linkea_entry_unpack(ldata->ld_lee, &ldata->ld_reclen, &lname,
3595                                     &fid);
3596
3597                 /* Note: lname might miss \0 at the end */
3598                 snprintf(filename, sizeof(info->mti_name), "%.*s",
3599                          lname.ln_namelen, lname.ln_name);
3600                 lname.ln_name = filename;
3601
3602                 CDEBUG(D_INFO, DFID"/"DNAME"\n", PFID(&fid), PNAME(&lname));
3603
3604                 rc = cb(env, sobj, tobj, tname, tpfid, &lname, &fid, opaque,
3605                         handle);
3606         }
3607
3608         return rc;
3609 }
3610
3611 /**
3612  * Prepare linkea, and check whether file needs migrate: if source still has
3613  * link on source MDT, no need to migrate, just update namespace on source and
3614  * target parents.
3615  *
3616  * \retval      0 do migrate
3617  * \retval      1 don't migrate
3618  * \retval      -errno on failure
3619  */
3620 static int mdd_migrate_linkea_prepare(const struct lu_env *env,
3621                                       struct mdd_device *mdd,
3622                                       struct mdd_object *spobj,
3623                                       struct mdd_object *tpobj,
3624                                       struct mdd_object *sobj,
3625                                       const struct lu_name *lname,
3626                                       const struct lu_attr *attr,
3627                                       struct linkea_data *ldata)
3628 {
3629         __u32 source_mdt_index;
3630         int rc;
3631
3632         ENTRY;
3633
3634         memset(ldata, 0, sizeof(*ldata));
3635         rc = mdd_linkea_prepare(env, sobj, mdd_object_fid(spobj), lname,
3636                                 mdd_object_fid(tpobj), lname, 1, 0, ldata);
3637         if (rc)
3638                 RETURN(rc);
3639
3640         /*
3641          * Then it will check if the file should be migrated. If the file has
3642          * mulitple links, we only need migrate the file if all of its entries
3643          * has been migrated to the remote MDT.
3644          */
3645         if (S_ISDIR(attr->la_mode) || attr->la_nlink < 2)
3646                 RETURN(0);
3647
3648         /* If there are still links locally, don't migrate this file */
3649         LASSERT(ldata->ld_leh != NULL);
3650
3651         /*
3652          * If linkEA is overflow, it means there are some unknown name entries
3653          * under unknown parents, which will prevent the migration.
3654          */
3655         if (unlikely(ldata->ld_leh->leh_overflow_time))
3656                 RETURN(-EOVERFLOW);
3657
3658         rc = mdd_fld_lookup(env, mdd, mdd_object_fid(sobj), &source_mdt_index);
3659         if (rc)
3660                 RETURN(rc);
3661
3662         rc = mdd_iterate_linkea(env, sobj, NULL, lname, mdd_object_fid(tpobj),
3663                                 ldata, &source_mdt_index, NULL,
3664                                 mdd_is_link_on_source_mdt);
3665         RETURN(rc);
3666 }
3667
3668 static int mdd_declare_migrate_update(const struct lu_env *env,
3669                                       struct mdd_object *spobj,
3670                                       struct mdd_object *tpobj,
3671                                       struct mdd_object *obj,
3672                                       const struct lu_name *lname,
3673                                       struct lu_attr *attr,
3674                                       struct lu_attr *spattr,
3675                                       struct lu_attr *tpattr,
3676                                       struct linkea_data *ldata,
3677                                       struct md_attr *ma,
3678                                       struct thandle *handle)
3679 {
3680         struct mdd_thread_info *info = mdd_env_info(env);
3681         struct lu_attr *la = &info->mti_la_for_fix;
3682         int rc;
3683
3684         rc = mdo_declare_index_delete(env, spobj, lname->ln_name, handle);
3685         if (rc)
3686                 return rc;
3687
3688         if (S_ISDIR(attr->la_mode)) {
3689                 rc = mdo_declare_ref_del(env, spobj, handle);
3690                 if (rc)
3691                         return rc;
3692         }
3693
3694         rc = mdo_declare_index_insert(env, tpobj, mdd_object_fid(obj),
3695                                       attr->la_mode & S_IFMT,
3696                                       lname->ln_name, handle);
3697         if (rc)
3698                 return rc;
3699
3700         rc = mdd_declare_links_add(env, obj, handle, ldata);
3701         if (rc)
3702                 return rc;
3703
3704         if (S_ISDIR(attr->la_mode)) {
3705                 rc = mdo_declare_ref_add(env, tpobj, handle);
3706                 if (rc)
3707                         return rc;
3708         }
3709
3710         la->la_valid = LA_CTIME | LA_MTIME;
3711         rc = mdo_declare_attr_set(env, spobj, la, handle);
3712         if (rc)
3713                 return rc;
3714
3715         if (tpobj != spobj) {
3716                 rc = mdo_declare_attr_set(env, tpobj, la, handle);
3717                 if (rc)
3718                         return rc;
3719         }
3720
3721         return rc;
3722 }
3723
3724 static int mdd_declare_migrate_create(const struct lu_env *env,
3725                                       struct mdd_object *spobj,
3726                                       struct mdd_object *tpobj,
3727                                       struct mdd_object *sobj,
3728                                       struct mdd_object *tobj,
3729                                       const struct lu_name *lname,
3730                                       struct lu_attr *spattr,
3731                                       struct lu_attr *tpattr,
3732                                       struct lu_attr *attr,
3733                                       struct lu_buf *sbuf,
3734                                       struct linkea_data *ldata,
3735                                       struct md_attr *ma,
3736                                       struct md_op_spec *spec,
3737                                       struct dt_allocation_hint *hint,
3738                                       struct thandle *handle)
3739 {
3740         struct mdd_thread_info *info = mdd_env_info(env);
3741         struct md_layout_change *mlc = &info->mti_mlc;
3742         struct lmv_mds_md_v1 *lmv = sbuf->lb_buf;
3743         int rc;
3744
3745         ENTRY;
3746
3747         if (S_ISDIR(attr->la_mode)) {
3748                 struct lmv_user_md *lum = spec->u.sp_ea.eadata;
3749
3750                 mlc->mlc_opc = MD_LAYOUT_DETACH;
3751                 rc = mdo_declare_layout_change(env, sobj, mlc, handle);
3752                 if (rc)
3753                         return rc;
3754
3755                 lum->lum_hash_type |= cpu_to_le32(LMV_HASH_FLAG_MIGRATION);
3756         } else if (S_ISLNK(attr->la_mode)) {
3757                 spec->u.sp_symname = sbuf->lb_buf;
3758         } else if (S_ISREG(attr->la_mode)) {
3759                 spec->sp_cr_flags |= MDS_OPEN_DELAY_CREATE;
3760                 spec->sp_cr_flags &= ~MDS_OPEN_HAS_EA;
3761         }
3762
3763         mdd_object_make_hint(env, tpobj, tobj, attr, spec, hint);
3764
3765         rc = mdd_declare_create(env, mdo2mdd(&tpobj->mod_obj), tpobj, tobj,
3766                                 lname, attr, handle, spec, ldata, NULL, NULL,
3767                                 NULL, hint);
3768         if (rc)
3769                 return rc;
3770
3771         /*
3772          * tobj mode will be used in mdo_declare_layout_change(), but it's not
3773          * createb yet, copy from sobj.
3774          */
3775         tobj->mod_obj.mo_lu.lo_header->loh_attr &= ~S_IFMT;
3776         tobj->mod_obj.mo_lu.lo_header->loh_attr |=
3777                 sobj->mod_obj.mo_lu.lo_header->loh_attr & S_IFMT;
3778
3779         if (S_ISDIR(attr->la_mode)) {
3780                 if (!lmv) {
3781                         /* if sobj is not striped, fake a 1-stripe LMV */
3782                         LASSERT(sizeof(info->mti_key) >
3783                                 lmv_mds_md_size(1, LMV_MAGIC_V1));
3784                         lmv = (typeof(lmv))info->mti_key;
3785                         memset(lmv, 0, sizeof(*lmv));
3786                         lmv->lmv_magic = cpu_to_le32(LMV_MAGIC_V1);
3787                         lmv->lmv_stripe_count = cpu_to_le32(1);
3788                         lmv->lmv_hash_type = cpu_to_le32(LMV_HASH_TYPE_DEFAULT);
3789                         fid_le_to_cpu(&lmv->lmv_stripe_fids[0],
3790                                       mdd_object_fid(sobj));
3791                         mlc->mlc_buf.lb_buf = lmv;
3792                         mlc->mlc_buf.lb_len = lmv_mds_md_size(1, LMV_MAGIC_V1);
3793                 } else {
3794                         mlc->mlc_buf = *sbuf;
3795                 }
3796                 mlc->mlc_opc = MD_LAYOUT_ATTACH;
3797                 rc = mdo_declare_layout_change(env, tobj, mlc, handle);
3798                 if (rc)
3799                         return rc;
3800         }
3801
3802         rc = mdd_iterate_xattrs(env, sobj, tobj, true, handle,
3803                                 mdo_declare_xattr_set);
3804         if (rc)
3805                 return rc;
3806
3807         if (S_ISREG(attr->la_mode)) {
3808                 struct lu_buf fid_buf;
3809
3810                 handle->th_complex = 1;
3811
3812                 /* target may be remote, update PFID via sobj. */
3813                 fid_buf.lb_buf = (void *)mdd_object_fid(tobj);
3814                 fid_buf.lb_len = sizeof(struct lu_fid);
3815                 rc = mdo_declare_xattr_set(env, sobj, &fid_buf, XATTR_NAME_FID,
3816                                            0, handle);
3817                 if (rc)
3818                         return rc;
3819
3820                 rc = mdo_declare_xattr_del(env, sobj, XATTR_NAME_LOV, handle);
3821                 if (rc)
3822                         return rc;
3823         }
3824
3825         if (!S_ISDIR(attr->la_mode)) {
3826                 rc = mdd_iterate_linkea(env, sobj, tobj, lname,
3827                                         mdd_object_fid(tpobj), ldata, NULL,
3828                                         handle, mdd_declare_update_link);
3829                 if (rc)
3830                         return rc;
3831         }
3832
3833         if (!S_ISDIR(attr->la_mode) || lmv) {
3834                 rc = mdo_declare_ref_del(env, sobj, handle);
3835                 if (rc)
3836                         return rc;
3837
3838                 if (S_ISDIR(attr->la_mode)) {
3839                         rc = mdo_declare_ref_del(env, sobj, handle);
3840                         if (rc)
3841                                 return rc;
3842                 }
3843
3844                 rc = mdo_declare_destroy(env, sobj, handle);
3845                 if (rc)
3846                         return rc;
3847         }
3848
3849         rc = mdd_declare_migrate_update(env, spobj, tpobj, tobj, lname, attr,
3850                                         spattr, tpattr, ldata, ma, handle);
3851         return rc;
3852 }
3853
3854 /**
3855  * migrate dirent from \a spobj to \a tpobj.
3856  **/
3857 static int mdd_migrate_update(const struct lu_env *env,
3858                               struct mdd_object *spobj,
3859                               struct mdd_object *tpobj,
3860                               struct mdd_object *obj,
3861                               const struct lu_name *lname,
3862                               struct lu_attr *attr,
3863                               struct lu_attr *spattr,
3864                               struct lu_attr *tpattr,
3865                               struct linkea_data *ldata,
3866                               struct md_attr *ma,
3867                               struct thandle *handle)
3868 {
3869         struct mdd_thread_info *info = mdd_env_info(env);
3870         struct lu_attr *la = &info->mti_la_for_fix;
3871         int rc;
3872
3873         ENTRY;
3874
3875         CDEBUG(D_INFO, "update "DFID"/%s to "DFID"/"DFID"\n",
3876                PFID(mdd_object_fid(spobj)), lname->ln_name,
3877                PFID(mdd_object_fid(tpobj)), PFID(mdd_object_fid(obj)));
3878
3879         rc = __mdd_index_delete(env, spobj, lname->ln_name,
3880                                 S_ISDIR(attr->la_mode), handle);
3881         if (rc)
3882                 RETURN(rc);
3883
3884         rc = __mdd_index_insert(env, tpobj, mdd_object_fid(obj),
3885                                 attr->la_mode & S_IFMT,
3886                                 lname->ln_name, handle);
3887         if (rc)
3888                 RETURN(rc);
3889
3890         rc = mdd_links_write(env, obj, ldata, handle);
3891         if (rc)
3892                 RETURN(rc);
3893
3894         la->la_ctime = la->la_mtime = ma->ma_attr.la_ctime;
3895         la->la_valid = LA_CTIME | LA_MTIME;
3896         mdd_write_lock(env, spobj, DT_SRC_PARENT);
3897         rc = mdd_update_time(env, spobj, spattr, la, handle);
3898         mdd_write_unlock(env, spobj);
3899         if (rc)
3900                 RETURN(rc);
3901
3902         if (tpobj != spobj) {
3903                 la->la_valid = LA_CTIME | LA_MTIME;
3904                 mdd_write_lock(env, tpobj, DT_TGT_PARENT);
3905                 rc = mdd_update_time(env, tpobj, tpattr, la, handle);
3906                 mdd_write_unlock(env, tpobj);
3907                 if (rc)
3908                         RETURN(rc);
3909         }
3910
3911         RETURN(rc);
3912 }
3913
3914 /**
3915  * Migrate file/dir to target MDT.
3916  *
3917  * Create target according to \a spec, and then migrate xattrs, if it's
3918  * directory, migrate source stripes to target.
3919  *
3920  * \param[in] env       execution environment
3921  * \param[in] spobj     source parent object
3922  * \param[in] tpobj     target parent object
3923  * \param[in] sobj      source object
3924  * \param[in] tobj      target object
3925  * \param[in] lname     file name
3926  * \param[in] spattr    source parent attributes
3927  * \param[in] tpattr    target parent attributes
3928  * \param[in] attr      source attributes
3929  * \param[in] sbuf      source LMV buf
3930  * \param[in] spec      migrate create spec
3931  * \param[in] hint      target creation hint
3932  * \param[in] handle    tranasction handle
3933  *
3934  * \retval      0 on success
3935  * \retval      -errno on failure
3936  **/
3937 static int mdd_migrate_create(const struct lu_env *env,
3938                               struct mdd_object *spobj,
3939                               struct mdd_object *tpobj,
3940                               struct mdd_object *sobj,
3941                               struct mdd_object *tobj,
3942                               const struct lu_name *lname,
3943                               struct lu_attr *spattr,
3944                               struct lu_attr *tpattr,
3945                               struct lu_attr *attr,
3946                               const struct lu_buf *sbuf,
3947                               struct linkea_data *ldata,
3948                               struct md_attr *ma,
3949                               struct md_op_spec *spec,
3950                               struct dt_allocation_hint *hint,
3951                               struct thandle *handle)
3952 {
3953         int rc;
3954
3955         ENTRY;
3956
3957         /*
3958          * migrate sobj stripes to tobj if it's directory:
3959          * 1. detach stripes from sobj.
3960          * 2. attach stripes to tobj, see mdd_declare_migrate_mdt().
3961          * 3. create stripes for tobj, see lod_xattr_set_lmv().
3962          */
3963         if (S_ISDIR(attr->la_mode)) {
3964                 struct mdd_thread_info *info = mdd_env_info(env);
3965                 struct md_layout_change *mlc = &info->mti_mlc;
3966
3967                 mlc->mlc_opc = MD_LAYOUT_DETACH;
3968
3969                 mdd_write_lock(env, sobj, DT_SRC_PARENT);
3970                 rc = mdo_layout_change(env, sobj, mlc, handle);
3971                 mdd_write_unlock(env, sobj);
3972                 if (rc)
3973                         RETURN(rc);
3974         }
3975
3976         /* don't set nlink from sobj */
3977         attr->la_valid &= ~LA_NLINK;
3978
3979         rc = mdd_create_object(env, tpobj, tobj, attr, spec, NULL, NULL, NULL,
3980                                hint, handle, false);
3981         if (rc)
3982                 RETURN(rc);
3983
3984         mdd_write_lock(env, tobj, DT_TGT_CHILD);
3985         rc = mdd_iterate_xattrs(env, sobj, tobj, true, handle, mdo_xattr_set);
3986         mdd_write_unlock(env, tobj);
3987         if (rc)
3988                 RETURN(rc);
3989
3990         /* for regular file, update OST objects XATTR_NAME_FID */
3991         if (S_ISREG(attr->la_mode)) {
3992                 struct lu_buf fid_buf;
3993
3994                 /* target may be remote, update PFID via sobj. */
3995                 fid_buf.lb_buf = (void *)mdd_object_fid(tobj);
3996                 fid_buf.lb_len = sizeof(struct lu_fid);
3997                 rc = mdo_xattr_set(env, sobj, &fid_buf, XATTR_NAME_FID, 0,
3998                                    handle);
3999                 if (rc)
4000                         RETURN(rc);
4001
4002                 /* delete LOV to avoid deleting OST objs when destroying sobj */
4003                 mdd_write_lock(env, sobj, DT_SRC_CHILD);
4004                 rc = mdo_xattr_del(env, sobj, XATTR_NAME_LOV, handle);
4005                 mdd_write_unlock(env, sobj);
4006                 /* O_DELAY_CREATE file may not have LOV, ignore -ENODATA */
4007                 if (rc && rc != -ENODATA)
4008                         RETURN(rc);
4009                 rc = 0;
4010         }
4011
4012         /* update links FID */
4013         if (!S_ISDIR(attr->la_mode)) {
4014                 rc = mdd_iterate_linkea(env, sobj, tobj, lname,
4015                                         mdd_object_fid(tpobj), ldata,
4016                                         NULL, handle, mdd_update_link);
4017                 if (rc)
4018                         RETURN(rc);
4019         }
4020
4021         /* don't destroy sobj if it's plain directory */
4022         if (!S_ISDIR(attr->la_mode) || sbuf->lb_buf) {
4023                 mdd_write_lock(env, sobj, DT_SRC_CHILD);
4024                 rc = mdo_ref_del(env, sobj, handle);
4025                 if (!rc) {
4026                         if (S_ISDIR(attr->la_mode))
4027                                 rc = mdo_ref_del(env, sobj, handle);
4028                         if (!rc)
4029                                 rc = mdo_destroy(env, sobj, handle);
4030                 }
4031                 mdd_write_unlock(env, sobj);
4032                 if (rc)
4033                         RETURN(rc);
4034         }
4035
4036         rc = mdd_migrate_update(env, spobj, tpobj, tobj, lname, attr,
4037                                 spattr, tpattr, ldata, ma, handle);
4038
4039         RETURN(rc);
4040 }
4041
4042 /* NB: if user issued different migrate command, we can't adjust it silently
4043  * here, because this command will decide target MDT in subdir migration in
4044  * LMV.
4045  */
4046 static int mdd_migrate_cmd_check(struct mdd_device *mdd,
4047                                  const struct lmv_mds_md_v1 *lmv,
4048                                  const struct lmv_user_md_v1 *lum,
4049                                  const struct lu_name *lname)
4050 {
4051         __u32 lum_stripe_count = lum->lum_stripe_count;
4052         __u32 lmv_hash_type = lmv->lmv_hash_type;
4053         char *mdt_hash_name[] = { "none",
4054                                   LMV_HASH_NAME_ALL_CHARS,
4055                                   LMV_HASH_NAME_FNV_1A_64,
4056                                   LMV_HASH_NAME_CRUSH,
4057         };
4058
4059         if (!lmv_is_sane(lmv))
4060                 return -EBADF;
4061
4062         /* if stripe_count unspecified, set to 1 */
4063         if (!lum_stripe_count)
4064                 lum_stripe_count = cpu_to_le32(1);
4065
4066         lmv_hash_type &= ~cpu_to_le32(LMV_HASH_FLAG_MIGRATION);
4067
4068         /* TODO: check specific MDTs */
4069         if (lum_stripe_count != lmv->lmv_migrate_offset ||
4070             lum->lum_stripe_offset != lmv->lmv_master_mdt_index ||
4071             (lum->lum_hash_type && lum->lum_hash_type != lmv_hash_type)) {
4072                 CERROR("%s: '"DNAME"' migration was interrupted, run 'lfs migrate -m %d -c %d -H %s "DNAME"' to finish migration.\n",
4073                         mdd2obd_dev(mdd)->obd_name, PNAME(lname),
4074                         le32_to_cpu(lmv->lmv_master_mdt_index),
4075                         le32_to_cpu(lmv->lmv_migrate_offset),
4076                         mdt_hash_name[le32_to_cpu(lmv_hash_type)],
4077                         PNAME(lname));
4078                 return -EPERM;
4079         }
4080
4081         return -EALREADY;
4082 }
4083
4084 /**
4085  * Migrate directory or file.
4086  *
4087  * migrate source to target in following steps:
4088  *   1. create target, append source stripes after target's if it's directory,
4089  *      migrate xattrs and update fid of source links.
4090  *   2. update namespace: migrate dirent from source parent to target parent,
4091  *      update file linkea, and destroy source if it's not needed any more.
4092  *
4093  * \param[in] env       execution environment
4094  * \param[in] md_pobj   parent master object
4095  * \param[in] md_sobj   source object
4096  * \param[in] lname     file name
4097  * \param[in] md_tobj   target object
4098  * \param[in] spec      target creation spec
4099  * \param[in] ma        used to update \a pobj mtime and ctime
4100  *
4101  * \retval              0 on success
4102  * \retval              -errno on failure
4103  */
4104 static int mdd_migrate(const struct lu_env *env, struct md_object *md_pobj,
4105                        struct md_object *md_sobj, const struct lu_name *lname,
4106                        struct md_object *md_tobj, struct md_op_spec *spec,
4107                        struct md_attr *ma)
4108 {
4109         struct mdd_device *mdd = mdo2mdd(md_pobj);
4110         struct mdd_thread_info *info = mdd_env_info(env);
4111         struct mdd_object *pobj = md2mdd_obj(md_pobj);
4112         struct mdd_object *sobj = md2mdd_obj(md_sobj);
4113         struct mdd_object *tobj = md2mdd_obj(md_tobj);
4114         struct mdd_object *spobj = NULL;
4115         struct mdd_object *tpobj = NULL;
4116         struct lu_attr *spattr = &info->mti_pattr;
4117         struct lu_attr *tpattr = &info->mti_tpattr;
4118         struct lu_attr *attr = &info->mti_cattr;
4119         struct linkea_data *ldata = &info->mti_link_data;
4120         struct dt_allocation_hint *hint = &info->mti_hint;
4121         struct lu_fid *fid = &info->mti_fid2;
4122         struct lu_buf pbuf = { NULL };
4123         struct lu_buf sbuf = { NULL };
4124         struct lmv_mds_md_v1 *lmv;
4125         struct thandle *handle;
4126         bool nsonly = false;
4127         int rc;
4128
4129         ENTRY;
4130
4131         rc = mdd_la_get(env, sobj, attr);
4132         if (rc)
4133                 RETURN(rc);
4134
4135         /* locate source and target stripe on pobj, which are the real parent */
4136         rc = mdd_stripe_get(env, pobj, &pbuf, XATTR_NAME_LMV);
4137         if (rc < 0 && rc != -ENODATA)
4138                 RETURN(rc);
4139
4140         lmv = pbuf.lb_buf;
4141         if (lmv) {
4142                 int index;
4143
4144                 if (!lmv_is_sane(lmv))
4145                         GOTO(out, rc = -EBADF);
4146
4147                 /* locate target parent stripe */
4148                 /* fail check here to make sure top dir migration succeed. */
4149                 if (lmv_is_migrating(lmv) &&
4150                     OBD_FAIL_CHECK_RESET(OBD_FAIL_MIGRATE_ENTRIES, 0))
4151                         GOTO(out, rc = -EIO);
4152
4153                 index = lmv_name_to_stripe_index(lmv, lname->ln_name,
4154                                                  lname->ln_namelen);
4155                 if (index < 0)
4156                         GOTO(out, rc = index);
4157
4158                 fid_le_to_cpu(fid, &lmv->lmv_stripe_fids[index]);
4159                 tpobj = mdd_object_find(env, mdd, fid);
4160                 if (IS_ERR(tpobj))
4161                         GOTO(out, rc = PTR_ERR(tpobj));
4162
4163                 /* locate source parent stripe */
4164                 if (lmv_is_layout_changing(lmv)) {
4165                         index = lmv_name_to_stripe_index_old(lmv,
4166                                                              lname->ln_name,
4167                                                              lname->ln_namelen);
4168                         if (index < 0)
4169                                 GOTO(out, rc = index);
4170
4171                         fid_le_to_cpu(fid, &lmv->lmv_stripe_fids[index]);
4172                         spobj = mdd_object_find(env, mdd, fid);
4173                         if (IS_ERR(spobj))
4174                                 GOTO(out, rc = PTR_ERR(spobj));
4175
4176                         /* parent stripe unchanged */
4177                         if (spobj == tpobj) {
4178                                 if (!lmv_is_restriping(lmv))
4179                                         GOTO(out, rc = -EINVAL);
4180                                 GOTO(out, rc = -EALREADY);
4181                         }
4182                         nsonly = spec->sp_migrate_nsonly;
4183                 } else {
4184                         spobj = tpobj;
4185                         mdd_object_get(spobj);
4186                 }
4187         } else {
4188                 tpobj = pobj;
4189                 spobj = pobj;
4190                 mdd_object_get(tpobj);
4191                 mdd_object_get(spobj);
4192         }
4193
4194         rc = mdd_la_get(env, spobj, spattr);
4195         if (rc)
4196                 GOTO(out, rc);
4197
4198         rc = mdd_la_get(env, tpobj, tpattr);
4199         if (rc)
4200                 GOTO(out, rc);
4201
4202         if (S_ISDIR(attr->la_mode) && !nsonly) {
4203                 struct lmv_user_md_v1 *lum = spec->u.sp_ea.eadata;
4204
4205                 LASSERT(lum);
4206
4207                 /* if user use default value '0' for stripe_count, we need to
4208                  * adjust it to '1' to create a 1-stripe directory.
4209                  */
4210                 if (lum->lum_stripe_count == 0)
4211                         lum->lum_stripe_count = cpu_to_le32(1);
4212
4213                 rc = mdd_stripe_get(env, sobj, &sbuf, XATTR_NAME_LMV);
4214                 if (rc && rc != -ENODATA)
4215                         GOTO(out, rc);
4216
4217                 lmv = sbuf.lb_buf;
4218                 if (lmv) {
4219                         if (!lmv_is_sane(lmv))
4220                                 GOTO(out, rc = -EBADF);
4221                         if (lmv_is_migrating(lmv)) {
4222                                 rc = mdd_migrate_cmd_check(mdd, lmv, lum,
4223                                                            lname);
4224                                 GOTO(out, rc);
4225                         }
4226                 }
4227         } else if (!S_ISDIR(attr->la_mode)) {
4228                 if (spobj == tpobj)
4229                         GOTO(out, rc = -EALREADY);
4230
4231                 /* update namespace only if @sobj is on MDT where @tpobj is. */
4232                 if (!mdd_object_remote(tpobj))
4233                         nsonly = true;
4234
4235                 if (S_ISLNK(attr->la_mode)) {
4236                         lu_buf_check_and_alloc(&sbuf, attr->la_size + 1);
4237                         if (!sbuf.lb_buf)
4238                                 GOTO(out, rc = -ENOMEM);
4239
4240                         rc = mdd_readlink(env, &sobj->mod_obj, &sbuf);
4241                         if (rc <= 0) {
4242                                 rc = rc ?: -EFAULT;
4243                                 CERROR("%s: "DFID" readlink failed: rc = %d\n",
4244                                        mdd2obd_dev(mdd)->obd_name,
4245                                        PFID(mdd_object_fid(sobj)), rc);
4246                                 GOTO(out, rc);
4247                         }
4248                 }
4249         }
4250
4251         /* linkea needs update upon FID or parent stripe change */
4252         rc = mdd_migrate_linkea_prepare(env, mdd, spobj, tpobj, sobj, lname,
4253                                         attr, ldata);
4254         if (rc > 0)
4255                 /* update namespace only if @sobj has link on its MDT. */
4256                 nsonly = true;
4257         else if (rc < 0)
4258                 GOTO(out, rc);
4259
4260         rc = mdd_migrate_sanity_check(env, mdd, spobj, tpobj, sobj, tobj,
4261                                       spattr, tpattr, attr);
4262         if (rc)
4263                 GOTO(out, rc);
4264
4265         handle = mdd_trans_create(env, mdd);
4266         if (IS_ERR(handle))
4267                 GOTO(out, rc = PTR_ERR(handle));
4268
4269         if (nsonly)
4270                 rc = mdd_declare_migrate_update(env, spobj, tpobj, sobj, lname,
4271                                                 attr, spattr, tpattr, ldata, ma,
4272                                                 handle);
4273         else
4274                 rc = mdd_declare_migrate_create(env, spobj, tpobj, sobj, tobj,
4275                                                 lname, spattr, tpattr, attr,
4276                                                 &sbuf, ldata, ma, spec, hint,
4277                                                 handle);
4278         if (rc)
4279                 GOTO(stop_trans, rc);
4280
4281         rc = mdd_declare_changelog_store(env, mdd, CL_MIGRATE, lname, NULL,
4282                                          handle);
4283         if (rc)
4284                 GOTO(stop_trans, rc);
4285
4286         rc = mdd_trans_start(env, mdd, handle);
4287         if (rc)
4288                 GOTO(stop_trans, rc);
4289
4290         if (nsonly)
4291                 rc = mdd_migrate_update(env, spobj, tpobj, sobj, lname, attr,
4292                                         spattr, tpattr, ldata, ma, handle);
4293         else
4294                 rc = mdd_migrate_create(env, spobj, tpobj, sobj, tobj, lname,
4295                                         spattr, tpattr, attr, &sbuf, ldata, ma,
4296                                         spec, hint, handle);
4297         if (rc)
4298                 GOTO(stop_trans, rc);
4299
4300         rc = mdd_changelog_ns_store(env, mdd, CL_MIGRATE, 0,
4301                                     nsonly ? sobj : tobj, mdd_object_fid(spobj),
4302                                     mdd_object_fid(sobj), mdd_object_fid(tpobj),
4303                                     lname, lname, handle);
4304         if (rc)
4305                 GOTO(stop_trans, rc);
4306         EXIT;
4307
4308 stop_trans:
4309         rc = mdd_trans_stop(env, mdd, rc, handle);
4310 out:
4311         if (!IS_ERR_OR_NULL(spobj))
4312                 mdd_object_put(env, spobj);
4313         if (!IS_ERR_OR_NULL(tpobj))
4314                 mdd_object_put(env, tpobj);
4315         lu_buf_free(&sbuf);
4316         lu_buf_free(&pbuf);
4317
4318         return rc;
4319 }
4320
4321 static int mdd_declare_1sd_collapse(const struct lu_env *env,
4322                                     struct mdd_object *pobj,
4323                                     struct mdd_object *obj,
4324                                     struct mdd_object *stripe,
4325                                     struct lu_attr *attr,
4326                                     struct md_layout_change *mlc,
4327                                     struct lu_name *lname,
4328                                     struct thandle *handle)
4329 {
4330         int rc;
4331
4332         mlc->mlc_opc = MD_LAYOUT_DETACH;
4333         rc = mdo_declare_layout_change(env, obj, mlc, handle);
4334         if (rc)
4335                 return rc;
4336
4337         rc = mdo_declare_index_insert(env, stripe, mdd_object_fid(pobj),
4338                                       S_IFDIR, dotdot, handle);
4339         if (rc)
4340                 return rc;
4341
4342         rc = mdd_iterate_xattrs(env, obj, stripe, false, handle,
4343                                 mdo_declare_xattr_set);
4344         if (rc)
4345                 return rc;
4346
4347         rc = mdo_declare_xattr_del(env, stripe, XATTR_NAME_LMV, handle);
4348         if (rc)
4349                 return rc;
4350
4351         rc = mdo_declare_attr_set(env, stripe, attr, handle);
4352         if (rc)
4353                 return rc;
4354
4355         rc = mdo_declare_index_delete(env, pobj, lname->ln_name, handle);
4356         if (rc)
4357                 return rc;
4358
4359         rc = mdo_declare_index_insert(env, pobj, mdd_object_fid(stripe),
4360                                       attr->la_mode, lname->ln_name, handle);
4361         if (rc)
4362                 return rc;
4363
4364         rc = mdo_declare_ref_del(env, obj, handle);
4365         if (rc)
4366                 return rc;
4367
4368         rc = mdo_declare_ref_del(env, obj, handle);
4369         if (rc)
4370                 return rc;
4371
4372         rc = mdo_declare_destroy(env, obj, handle);
4373         if (rc)
4374                 return rc;
4375
4376         return rc;
4377 }
4378
4379 /* transform one-stripe directory to a plain directory */
4380 static int mdd_1sd_collapse(const struct lu_env *env,
4381                             struct mdd_object *pobj,
4382                             struct mdd_object *obj,
4383                             struct mdd_object *stripe,
4384                             struct lu_attr *attr,
4385                             struct md_layout_change *mlc,
4386                             struct lu_name *lname,
4387                             struct thandle *handle)
4388 {
4389         int rc;
4390
4391         ENTRY;
4392
4393         /* replace 1-stripe directory with its stripe */
4394         mlc->mlc_opc = MD_LAYOUT_DETACH;
4395
4396         mdd_write_lock(env, obj, DT_SRC_PARENT);
4397         rc = mdo_layout_change(env, obj, mlc, handle);
4398         mdd_write_unlock(env, obj);
4399         if (rc)
4400                 RETURN(rc);
4401
4402         mdd_write_lock(env, pobj, DT_SRC_PARENT);
4403         mdd_write_lock(env, obj, DT_SRC_CHILD);
4404
4405         /* insert dotdot to stripe which points to parent */
4406         rc = __mdd_index_insert_only(env, stripe, mdd_object_fid(pobj),
4407                                      S_IFDIR, dotdot, handle);
4408         if (rc)
4409                 GOTO(out, rc);
4410
4411         /* copy xattrs including linkea */
4412         rc = mdd_iterate_xattrs(env, obj, stripe, false, handle, mdo_xattr_set);
4413         if (rc)
4414                 GOTO(out, rc);
4415
4416         /* delete LMV */
4417         rc = mdo_xattr_del(env, stripe, XATTR_NAME_LMV, handle);
4418         if (rc)
4419                 GOTO(out, rc);
4420
4421         /* don't set nlink from parent */
4422         attr->la_valid &= ~LA_NLINK;
4423
4424         rc = mdo_attr_set(env, stripe, attr, handle);
4425         if (rc)
4426                 GOTO(out, rc);
4427
4428         /* delete dir name from parent */
4429         rc = __mdd_index_delete_only(env, pobj, lname->ln_name, handle);
4430         if (rc)
4431                 GOTO(out, rc);
4432
4433         /* insert stripe to parent with dir name */
4434         rc = __mdd_index_insert_only(env, pobj, mdd_object_fid(stripe),
4435                                      attr->la_mode, lname->ln_name, handle);
4436         if (rc)
4437                 GOTO(out, rc);
4438
4439         /* destroy dir obj */
4440         rc = mdo_ref_del(env, obj, handle);
4441         if (rc)
4442                 GOTO(out, rc);
4443
4444         rc = mdo_ref_del(env, obj, handle);
4445         if (rc)
4446                 GOTO(out, rc);
4447
4448         rc = mdo_destroy(env, obj, handle);
4449         if (rc)
4450                 GOTO(out, rc);
4451
4452         EXIT;
4453 out:
4454         mdd_write_unlock(env, obj);
4455         mdd_write_unlock(env, pobj);
4456
4457         return rc;
4458 }
4459
4460 /*
4461  * shrink directory stripes after migration/merge
4462  */
4463 int mdd_dir_layout_shrink(const struct lu_env *env,
4464                           struct md_object *md_obj,
4465                           struct md_layout_change *mlc)
4466 {
4467         struct mdd_device *mdd = mdo2mdd(md_obj);
4468         struct mdd_thread_info *info = mdd_env_info(env);
4469         struct mdd_object *obj = md2mdd_obj(md_obj);
4470         struct mdd_object *pobj = NULL;
4471         struct mdd_object *stripe = NULL;
4472         struct lu_attr *attr = &info->mti_pattr;
4473         struct lu_fid *fid = &info->mti_fid2;
4474         struct lu_name lname = { NULL };
4475         struct lu_buf lmv_buf = { NULL };
4476         struct lmv_mds_md_v1 *lmv;
4477         struct lmv_user_md *lmu;
4478         struct thandle *handle;
4479         int rc;
4480
4481         ENTRY;
4482
4483         rc = mdd_la_get(env, obj, attr);
4484         if (rc)
4485                 RETURN(rc);
4486
4487         if (!S_ISDIR(attr->la_mode))
4488                 RETURN(-ENOTDIR);
4489
4490         rc = mdd_stripe_get(env, obj, &lmv_buf, XATTR_NAME_LMV);
4491         if (rc < 0)
4492                 RETURN(rc);
4493
4494         lmv = lmv_buf.lb_buf;
4495         if (!lmv_is_sane(lmv))
4496                 RETURN(-EBADF);
4497
4498         lmu = mlc->mlc_buf.lb_buf;
4499
4500         /* adjust the default value '0' to '1' */
4501         if (lmu->lum_stripe_count == 0)
4502                 lmu->lum_stripe_count = cpu_to_le32(1);
4503
4504         /* these were checked in MDT */
4505         LASSERT(le32_to_cpu(lmu->lum_stripe_count) <
4506                 le32_to_cpu(lmv->lmv_stripe_count));
4507         LASSERT(!lmv_is_splitting(lmv));
4508         LASSERT(lmv_is_migrating(lmv) || lmv_is_merging(lmv));
4509
4510         /* if dir stripe count will be shrunk to 1, it needs to be transformed
4511          * to a plain dir, which will cause FID change and namespace update.
4512          */
4513         if (le32_to_cpu(lmu->lum_stripe_count) == 1) {
4514                 struct linkea_data *ldata = &info->mti_link_data;
4515                 char *filename = info->mti_name;
4516
4517                 rc = mdd_links_read(env, obj, ldata);
4518                 if (rc)
4519                         GOTO(out, rc);
4520
4521                 if (ldata->ld_leh->leh_reccount > 1)
4522                         GOTO(out, rc = -EINVAL);
4523
4524                 linkea_first_entry(ldata);
4525                 if (!ldata->ld_lee)
4526                         GOTO(out, rc = -ENODATA);
4527
4528                 linkea_entry_unpack(ldata->ld_lee, &ldata->ld_reclen, &lname,
4529                                     fid);
4530
4531                 /* Note: lname might miss \0 at the end */
4532                 snprintf(filename, sizeof(info->mti_name), "%.*s",
4533                          lname.ln_namelen, lname.ln_name);
4534                 lname.ln_name = filename;
4535
4536                 pobj = mdd_object_find(env, mdd, fid);
4537                 if (IS_ERR(pobj)) {
4538                         rc = PTR_ERR(pobj);
4539                         pobj = NULL;
4540                         GOTO(out, rc);
4541                 }
4542
4543                 fid_le_to_cpu(fid, &lmv->lmv_stripe_fids[0]);
4544
4545                 stripe = mdd_object_find(env, mdd, fid);
4546                 if (IS_ERR(stripe)) {
4547                         mdd_object_put(env, pobj);
4548                         pobj = NULL;
4549                         GOTO(out, rc = PTR_ERR(stripe));
4550                 }
4551         }
4552
4553         handle = mdd_trans_create(env, mdd);
4554         if (IS_ERR(handle))
4555                 GOTO(out, rc = PTR_ERR(handle));
4556
4557         mlc->mlc_opc = MD_LAYOUT_SHRINK;
4558         rc = mdo_declare_layout_change(env, obj, mlc, handle);
4559         if (rc)
4560                 GOTO(stop_trans, rc);
4561
4562         if (le32_to_cpu(lmu->lum_stripe_count) == 1) {
4563                 rc = mdd_declare_1sd_collapse(env, pobj, obj, stripe, attr, mlc,
4564                                               &lname, handle);
4565                 if (rc)
4566                         GOTO(stop_trans, rc);
4567         }
4568
4569         rc = mdd_declare_changelog_store(env, mdd, CL_LAYOUT, NULL, NULL,
4570                                          handle);
4571         if (rc)
4572                 GOTO(stop_trans, rc);
4573
4574         rc = mdd_trans_start(env, mdd, handle);
4575         if (rc)
4576                 GOTO(stop_trans, rc);
4577
4578         mdd_write_lock(env, obj, DT_SRC_PARENT);
4579         mlc->mlc_opc = MD_LAYOUT_SHRINK;
4580         rc = mdo_layout_change(env, obj, mlc, handle);
4581         mdd_write_unlock(env, obj);
4582         if (rc)
4583                 GOTO(stop_trans, rc);
4584
4585         if (le32_to_cpu(lmu->lum_stripe_count) == 1) {
4586                 rc = mdd_1sd_collapse(env, pobj, obj, stripe, attr, mlc, &lname,
4587                                       handle);
4588                 if (rc)
4589                         GOTO(stop_trans, rc);
4590         }
4591
4592         rc = mdd_changelog_data_store_xattr(env, mdd, CL_LAYOUT, 0, obj,
4593                                             XATTR_NAME_LMV, handle);
4594         GOTO(stop_trans, rc);
4595
4596 stop_trans:
4597         rc = mdd_trans_stop(env, mdd, rc, handle);
4598 out:
4599         if (pobj) {
4600                 mdd_object_put(env, stripe);
4601                 mdd_object_put(env, pobj);
4602         }
4603         lu_buf_free(&lmv_buf);
4604         return rc;
4605 }
4606
4607 static int mdd_dir_declare_split_plain(const struct lu_env *env,
4608                                         struct mdd_device *mdd,
4609                                         struct mdd_object *pobj,
4610                                         struct mdd_object *obj,
4611                                         struct mdd_object *tobj,
4612                                         struct md_layout_change *mlc,
4613                                         struct dt_allocation_hint *hint,
4614                                         struct thandle *handle)
4615 {
4616         struct mdd_thread_info *info = mdd_env_info(env);
4617         const struct lu_name *lname = mlc->mlc_name;
4618         struct lu_attr *la = &info->mti_la_for_fix;
4619         struct lmv_user_md_v1 *lum = mlc->mlc_spec->u.sp_ea.eadata;
4620         struct linkea_data *ldata = &info->mti_link_data;
4621         struct lmv_mds_md_v1 *lmv;
4622         __u32 count;
4623         int rc;
4624
4625         mlc->mlc_opc = MD_LAYOUT_DETACH;
4626         rc = mdo_declare_layout_change(env, obj, mlc, handle);
4627         if (rc)
4628                 return rc;
4629
4630         memset(ldata, 0, sizeof(*ldata));
4631         rc = mdd_linkea_prepare(env, obj, NULL, NULL, mdd_object_fid(pobj),
4632                                 lname, 1, 0, ldata);
4633         if (rc)
4634                 return rc;
4635
4636         count = lum->lum_stripe_count;
4637         lum->lum_stripe_count = 0;
4638         mdd_object_make_hint(env, pobj, tobj, mlc->mlc_attr, mlc->mlc_spec,
4639                              hint);
4640         rc = mdd_declare_create(env, mdo2mdd(&pobj->mod_obj), pobj, tobj,
4641                                 lname, mlc->mlc_attr, handle, mlc->mlc_spec,
4642                                 ldata, NULL, NULL, NULL, hint);
4643         if (rc)
4644                 return rc;
4645
4646         /* tobj mode will be used in lod_declare_xattr_set(), but it's not
4647          * created yet.
4648          */
4649         tobj->mod_obj.mo_lu.lo_header->loh_attr |= S_IFDIR;
4650
4651         lmv = (typeof(lmv))info->mti_key;
4652         memset(lmv, 0, sizeof(*lmv));
4653         lmv->lmv_magic = cpu_to_le32(LMV_MAGIC_V1);
4654         lmv->lmv_stripe_count = cpu_to_le32(1);
4655         lmv->lmv_hash_type = cpu_to_le32(LMV_HASH_TYPE_DEFAULT);
4656         fid_le_to_cpu(&lmv->lmv_stripe_fids[0], mdd_object_fid(obj));
4657
4658         mlc->mlc_opc = MD_LAYOUT_ATTACH;
4659         mlc->mlc_buf.lb_buf = lmv;
4660         mlc->mlc_buf.lb_len = lmv_mds_md_size(1, LMV_MAGIC_V1);
4661         rc = mdo_declare_layout_change(env, tobj, mlc, handle);
4662         if (rc)
4663                 return rc;
4664
4665         rc = mdd_iterate_xattrs(env, obj, tobj, true, handle,
4666                                 mdo_declare_xattr_set);
4667         if (rc)
4668                 return rc;
4669
4670         lum->lum_stripe_count = count;
4671         mlc->mlc_opc = MD_LAYOUT_SPLIT;
4672         rc = mdo_declare_layout_change(env, tobj, mlc, handle);
4673         if (rc)
4674                 return rc;
4675
4676         rc = mdo_declare_index_delete(env, pobj, lname->ln_name, handle);
4677         if (rc)
4678                 return rc;
4679
4680         rc = mdo_declare_index_insert(env, pobj, mdd_object_fid(tobj),
4681                                       S_IFDIR, lname->ln_name, handle);
4682         if (rc)
4683                 return rc;
4684
4685         la->la_valid = LA_CTIME | LA_MTIME;
4686         rc = mdo_declare_attr_set(env, obj, la, handle);
4687         if (rc)
4688                 return rc;
4689
4690         rc = mdo_declare_attr_set(env, pobj, la, handle);
4691         if (rc)
4692                 return rc;
4693
4694         rc = mdd_declare_changelog_store(env, mdd, CL_MIGRATE, lname, NULL,
4695                                          handle);
4696         return rc;
4697 }
4698
4699 /**
4700  * plain directory split:
4701  * 1. create \a tobj as plain directory.
4702  * 2. append \a obj as first stripe of \a tobj.
4703  * 3. migrate xattrs from \a obj to \a tobj.
4704  * 4. split \a tobj to specific stripe count.
4705  */
4706 static int mdd_dir_split_plain(const struct lu_env *env,
4707                                 struct mdd_device *mdd,
4708                                 struct mdd_object *pobj,
4709                                 struct mdd_object *obj,
4710                                 struct mdd_object *tobj,
4711                                 struct md_layout_change *mlc,
4712                                 struct dt_allocation_hint *hint,
4713                                 struct thandle *handle)
4714 {
4715         struct mdd_thread_info *info = mdd_env_info(env);
4716         struct lu_attr *pattr = &info->mti_pattr;
4717         struct lu_attr *la = &info->mti_la_for_fix;
4718         const struct lu_name *lname = mlc->mlc_name;
4719         struct linkea_data *ldata = &info->mti_link_data;
4720         int rc;
4721
4722         ENTRY;
4723
4724         /* copy linkea out and set on target later */
4725         rc = mdd_links_read(env, obj, ldata);
4726         if (rc)
4727                 RETURN(rc);
4728
4729         mlc->mlc_opc = MD_LAYOUT_DETACH;
4730         rc = mdo_layout_change(env, obj, mlc, handle);
4731         if (rc)
4732                 RETURN(rc);
4733
4734         /* don't set nlink from obj */
4735         mlc->mlc_attr->la_valid &= ~LA_NLINK;
4736
4737         rc = mdd_create_object(env, pobj, tobj, mlc->mlc_attr, mlc->mlc_spec,
4738                                NULL, NULL, NULL, hint, handle, false);
4739         if (rc)
4740                 RETURN(rc);
4741
4742         rc = mdd_iterate_xattrs(env, obj, tobj, true, handle, mdo_xattr_set);
4743         if (rc)
4744                 RETURN(rc);
4745
4746         rc = mdd_links_write(env, tobj, ldata, handle);
4747         if (rc)
4748                 RETURN(rc);
4749
4750         rc = __mdd_index_delete(env, pobj, lname->ln_name, true, handle);
4751         if (rc)
4752                 RETURN(rc);
4753
4754         rc = __mdd_index_insert(env, pobj, mdd_object_fid(tobj), S_IFDIR,
4755                                 lname->ln_name, handle);
4756         if (rc)
4757                 RETURN(rc);
4758
4759         la->la_ctime = la->la_mtime = mlc->mlc_attr->la_mtime;
4760         la->la_valid = LA_CTIME | LA_MTIME;
4761
4762         mdd_write_lock(env, obj, DT_SRC_CHILD);
4763         rc = mdd_update_time(env, tobj, mlc->mlc_attr, la, handle);
4764         mdd_write_unlock(env, obj);
4765         if (rc)
4766                 RETURN(rc);
4767
4768         rc = mdd_la_get(env, pobj, pattr);
4769         if (rc)
4770                 RETURN(rc);
4771
4772         la->la_valid = LA_CTIME | LA_MTIME;
4773
4774         mdd_write_lock(env, pobj, DT_SRC_PARENT);
4775         rc = mdd_update_time(env, pobj, pattr, la, handle);
4776         mdd_write_unlock(env, pobj);
4777         if (rc)
4778                 RETURN(rc);
4779
4780         /* FID changes, record it as CL_MIGRATE */
4781         rc = mdd_changelog_ns_store(env, mdd, CL_MIGRATE, 0, tobj,
4782                                     mdd_object_fid(pobj), mdd_object_fid(obj),
4783                                     mdd_object_fid(pobj), lname, lname, handle);
4784         RETURN(rc);
4785 }
4786
4787 int mdd_dir_layout_split(const struct lu_env *env, struct md_object *o,
4788                          struct md_layout_change *mlc)
4789 {
4790         struct mdd_thread_info *info = mdd_env_info(env);
4791         struct mdd_device *mdd = mdo2mdd(o);
4792         struct mdd_object *obj = md2mdd_obj(o);
4793         struct mdd_object *pobj = md2mdd_obj(mlc->mlc_parent);
4794         struct mdd_object *tobj = md2mdd_obj(mlc->mlc_target);
4795         struct dt_allocation_hint *hint = &info->mti_hint;
4796         bool is_plain = false;
4797         struct thandle *handle;
4798         int rc;
4799
4800         ENTRY;
4801
4802         LASSERT(S_ISDIR(mdd_object_type(obj)));
4803
4804         rc = mdo_xattr_get(env, obj, &LU_BUF_NULL, XATTR_NAME_LMV);
4805         if (rc == -ENODATA)
4806                 is_plain = true;
4807         else if (rc < 0)
4808                 RETURN(rc);
4809
4810         handle = mdd_trans_create(env, mdd);
4811         if (IS_ERR(handle))
4812                 RETURN(PTR_ERR(handle));
4813
4814         if (is_plain) {
4815                 rc = mdd_dir_declare_split_plain(env, mdd, pobj, obj, tobj, mlc,
4816                                                  hint, handle);
4817         } else {
4818                 mlc->mlc_opc = MD_LAYOUT_SPLIT;
4819                 rc = mdo_declare_layout_change(env, obj, mlc, handle);
4820                 if (rc)
4821                         GOTO(stop_trans, rc);
4822
4823                 rc = mdd_declare_changelog_store(env, mdd, CL_LAYOUT, NULL,
4824                                                  NULL, handle);
4825         }
4826         if (rc)
4827                 GOTO(stop_trans, rc);
4828
4829         rc = mdd_trans_start(env, mdd, handle);
4830         if (rc)
4831                 GOTO(stop_trans, rc);
4832
4833         if (is_plain) {
4834                 rc = mdd_dir_split_plain(env, mdd, pobj, obj, tobj, mlc, hint,
4835                                          handle);
4836         } else {
4837                 mdd_write_lock(env, obj, DT_TGT_CHILD);
4838                 rc = mdo_xattr_set(env, obj, NULL, XATTR_NAME_LMV,
4839                                    LU_XATTR_CREATE, handle);
4840                 mdd_write_unlock(env, obj);
4841                 if (rc)
4842                         GOTO(stop_trans, rc);
4843
4844                 rc = mdd_changelog_data_store_xattr(env, mdd, CL_LAYOUT, 0, obj,
4845                                                     XATTR_NAME_LMV, handle);
4846         }
4847         if (rc)
4848                 GOTO(stop_trans, rc);
4849
4850         EXIT;
4851
4852 stop_trans:
4853         rc = mdd_trans_stop(env, mdd, rc, handle);
4854
4855         return rc;
4856 }
4857
4858 const struct md_dir_operations mdd_dir_ops = {
4859         .mdo_is_subdir     = mdd_is_subdir,
4860         .mdo_lookup        = mdd_lookup,
4861         .mdo_create        = mdd_create,
4862         .mdo_rename        = mdd_rename,
4863         .mdo_link          = mdd_link,
4864         .mdo_unlink        = mdd_unlink,
4865         .mdo_create_data   = mdd_create_data,
4866         .mdo_migrate       = mdd_migrate,
4867 };