Whamcloud - gitweb
LU-9367 llite: restore ll_file_getstripe in ll_lov_setstripe
[fs/lustre-release.git] / lustre / llite / file.c
index c876263..d6591f5 100644 (file)
@@ -47,7 +47,7 @@
 #endif
 #include <lustre/ll_fiemap.h>
 
-#include <lustre_ioctl.h>
+#include <uapi/linux/lustre_ioctl.h>
 #include <lustre_swab.h>
 
 #include "cl_object.h"
@@ -348,10 +348,9 @@ int ll_file_release(struct inode *inode, struct file *file)
        RETURN(rc);
 }
 
-static int ll_intent_file_open(struct file *file, void *lmm, int lmmsize,
+static int ll_intent_file_open(struct dentry *de, void *lmm, int lmmsize,
                                struct lookup_intent *itp)
 {
-       struct dentry *de = file_dentry(file);
        struct ll_sb_info *sbi = ll_i2sbi(de->d_inode);
        struct dentry *parent = de->d_parent;
        const char *name = NULL;
@@ -608,7 +607,8 @@ restart:
                         * to get file with different fid.
                         */
                        it->it_flags |= MDS_OPEN_BY_FID;
-                        rc = ll_intent_file_open(file, NULL, 0, it);
+                       rc = ll_intent_file_open(file_dentry(file), NULL, 0,
+                                                it);
                         if (rc)
                                 GOTO(out_openerr, rc);
 
@@ -1013,8 +1013,10 @@ int ll_merge_attr(const struct lu_env *env, struct inode *inode)
         * All in all, the atime in Lustre does not strictly comply with
         * POSIX. Solving this problem needs to send an RPC to MDT for each
         * read, this will hurt performance. */
-       if (LTIME_S(inode->i_atime) < lli->lli_atime)
+       if (LTIME_S(inode->i_atime) < lli->lli_atime || lli->lli_update_atime) {
                LTIME_S(inode->i_atime) = lli->lli_atime;
+               lli->lli_update_atime = 0;
+       }
        LTIME_S(inode->i_mtime) = lli->lli_mtime;
        LTIME_S(inode->i_ctime) = lli->lli_ctime;
 
@@ -1081,27 +1083,120 @@ static bool file_is_noatime(const struct file *file)
        return false;
 }
 
-static void ll_io_init(struct cl_io *io, const struct file *file, int write)
+static int ll_file_io_ptask(struct cfs_ptask *ptask);
+
+static void ll_io_init(struct cl_io *io, struct file *file, enum cl_io_type iot)
 {
-       struct inode *inode = file_inode((struct file *)file);
-
-        io->u.ci_rw.crw_nonblock = file->f_flags & O_NONBLOCK;
-       if (write) {
-               io->u.ci_wr.wr_append = !!(file->f_flags & O_APPEND);
-               io->u.ci_wr.wr_sync = file->f_flags & O_SYNC ||
-                                     file->f_flags & O_DIRECT ||
-                                     IS_SYNC(inode);
-       }
-        io->ci_obj     = ll_i2info(inode)->lli_clob;
-        io->ci_lockreq = CILR_MAYBE;
-        if (ll_file_nolock(file)) {
-                io->ci_lockreq = CILR_NEVER;
-                io->ci_no_srvlock = 1;
-        } else if (file->f_flags & O_APPEND) {
-                io->ci_lockreq = CILR_MANDATORY;
-        }
+       struct inode *inode = file_inode(file);
 
+       memset(&io->u.ci_rw.rw_iter, 0, sizeof(io->u.ci_rw.rw_iter));
+       init_sync_kiocb(&io->u.ci_rw.rw_iocb, file);
+       io->u.ci_rw.rw_file = file;
+       io->u.ci_rw.rw_ptask = ll_file_io_ptask;
+       io->u.ci_rw.rw_nonblock = !!(file->f_flags & O_NONBLOCK);
+       if (iot == CIT_WRITE) {
+               io->u.ci_rw.rw_append = !!(file->f_flags & O_APPEND);
+               io->u.ci_rw.rw_sync   = !!(file->f_flags & O_SYNC ||
+                                          file->f_flags & O_DIRECT ||
+                                          IS_SYNC(inode));
+       }
+       io->ci_obj = ll_i2info(inode)->lli_clob;
+       io->ci_lockreq = CILR_MAYBE;
+       if (ll_file_nolock(file)) {
+               io->ci_lockreq = CILR_NEVER;
+               io->ci_no_srvlock = 1;
+       } else if (file->f_flags & O_APPEND) {
+               io->ci_lockreq = CILR_MANDATORY;
+       }
        io->ci_noatime = file_is_noatime(file);
+       if (ll_i2sbi(inode)->ll_flags & LL_SBI_PIO)
+               io->ci_pio = !io->u.ci_rw.rw_append;
+       else
+               io->ci_pio = 0;
+}
+
+static int ll_file_io_ptask(struct cfs_ptask *ptask)
+{
+       struct cl_io_pt *pt = ptask->pt_cbdata;
+       struct file *file = pt->cip_file;
+       struct lu_env *env;
+       struct cl_io *io;
+       loff_t pos = pt->cip_pos;
+       int rc;
+       __u16 refcheck;
+       ENTRY;
+
+       env = cl_env_get(&refcheck);
+       if (IS_ERR(env))
+               RETURN(PTR_ERR(env));
+
+       CDEBUG(D_VFSTRACE, "%s: %s range: [%llu, %llu)\n",
+               file_dentry(file)->d_name.name,
+               pt->cip_iot == CIT_READ ? "read" : "write",
+               pos, pos + pt->cip_count);
+
+restart:
+       io = vvp_env_thread_io(env);
+       ll_io_init(io, file, pt->cip_iot);
+       io->u.ci_rw.rw_iter = pt->cip_iter;
+       io->u.ci_rw.rw_iocb = pt->cip_iocb;
+       io->ci_pio = 0; /* It's already in parallel task */
+
+       rc = cl_io_rw_init(env, io, pt->cip_iot, pos,
+                          pt->cip_count - pt->cip_result);
+       if (!rc) {
+               struct vvp_io *vio = vvp_env_io(env);
+
+               vio->vui_io_subtype = IO_NORMAL;
+               vio->vui_fd = LUSTRE_FPRIVATE(file);
+
+               ll_cl_add(file, env, io, LCC_RW);
+               rc = cl_io_loop(env, io);
+               ll_cl_remove(file, env);
+       } else {
+               /* cl_io_rw_init() handled IO */
+               rc = io->ci_result;
+       }
+
+       if (OBD_FAIL_CHECK_RESET(OBD_FAIL_LLITE_PTASK_IO_FAIL, 0)) {
+               if (io->ci_nob > 0)
+                       io->ci_nob /= 2;
+               rc = -EIO;
+       }
+
+       if (io->ci_nob > 0) {
+               pt->cip_result += io->ci_nob;
+               iov_iter_advance(&pt->cip_iter, io->ci_nob);
+               pos += io->ci_nob;
+               pt->cip_iocb.ki_pos = pos;
+#ifdef HAVE_KIOCB_KI_LEFT
+               pt->cip_iocb.ki_left = pt->cip_count - pt->cip_result;
+#elif defined(HAVE_KI_NBYTES)
+               pt->cip_iocb.ki_nbytes = pt->cip_count - pt->cip_result;
+#endif
+       }
+
+       cl_io_fini(env, io);
+
+       if ((rc == 0 || rc == -ENODATA) &&
+           pt->cip_result < pt->cip_count &&
+           io->ci_need_restart) {
+               CDEBUG(D_VFSTRACE,
+                       "%s: restart %s range: [%llu, %llu) ret: %zd, rc: %d\n",
+                       file_dentry(file)->d_name.name,
+                       pt->cip_iot == CIT_READ ? "read" : "write",
+                       pos, pos + pt->cip_count - pt->cip_result,
+                       pt->cip_result, rc);
+               goto restart;
+       }
+
+       CDEBUG(D_VFSTRACE, "%s: %s ret: %zd, rc: %d\n",
+               file_dentry(file)->d_name.name,
+               pt->cip_iot == CIT_READ ? "read" : "write",
+               pt->cip_result, rc);
+
+       cl_env_put(env, &refcheck);
+       RETURN(pt->cip_result > 0 ? 0 : rc);
 }
 
 static ssize_t
@@ -1109,39 +1204,45 @@ ll_file_io_generic(const struct lu_env *env, struct vvp_io_args *args,
                   struct file *file, enum cl_io_type iot,
                   loff_t *ppos, size_t count)
 {
+       struct range_lock       range;
        struct vvp_io           *vio = vvp_env_io(env);
        struct inode            *inode = file_inode(file);
        struct ll_inode_info    *lli = ll_i2info(inode);
        struct ll_file_data     *fd  = LUSTRE_FPRIVATE(file);
        struct cl_io            *io;
+       loff_t                  pos = *ppos;
        ssize_t                 result = 0;
        int                     rc = 0;
-       struct range_lock       range;
 
        ENTRY;
 
-       CDEBUG(D_VFSTRACE, "file: %s, type: %d ppos: %llu, count: %zu\n",
-               file_dentry(file)->d_name.name, iot, *ppos, count);
+       CDEBUG(D_VFSTRACE, "%s: %s range: [%llu, %llu)\n",
+               file_dentry(file)->d_name.name,
+               iot == CIT_READ ? "read" : "write", pos, pos + count);
 
 restart:
        io = vvp_env_thread_io(env);
-       ll_io_init(io, file, iot == CIT_WRITE);
+       ll_io_init(io, file, iot);
+       if (args->via_io_subtype == IO_NORMAL) {
+               io->u.ci_rw.rw_iter = *args->u.normal.via_iter;
+               io->u.ci_rw.rw_iocb = *args->u.normal.via_iocb;
+       } else {
+               io->ci_pio = 0;
+       }
 
-       if (cl_io_rw_init(env, io, iot, *ppos, count) == 0) {
+       if (cl_io_rw_init(env, io, iot, pos, count) == 0) {
                bool range_locked = false;
 
                if (file->f_flags & O_APPEND)
                        range_lock_init(&range, 0, LUSTRE_EOF);
                else
-                       range_lock_init(&range, *ppos, *ppos + count - 1);
+                       range_lock_init(&range, pos, pos + count - 1);
 
                vio->vui_fd  = LUSTRE_FPRIVATE(file);
                vio->vui_io_subtype = args->via_io_subtype;
 
                switch (vio->vui_io_subtype) {
                case IO_NORMAL:
-                       vio->vui_iter = args->u.normal.via_iter;
-                       vio->vui_iocb = args->u.normal.via_iocb;
                        /* Direct IO reads must also take range lock,
                         * or multiple reads will try to work on the same pages
                         * See LU-6227 for details. */
@@ -1167,7 +1268,16 @@ restart:
                }
 
                ll_cl_add(file, env, io, LCC_RW);
+               if (io->ci_pio && iot == CIT_WRITE && !IS_NOSEC(inode) &&
+                   !lli->lli_inode_locked) {
+                       inode_lock(inode);
+                       lli->lli_inode_locked = 1;
+               }
                rc = cl_io_loop(env, io);
+               if (lli->lli_inode_locked) {
+                       lli->lli_inode_locked = 0;
+                       inode_unlock(inode);
+               }
                ll_cl_remove(file, env);
 
                if (range_locked) {
@@ -1182,23 +1292,31 @@ restart:
 
        if (io->ci_nob > 0) {
                result += io->ci_nob;
-               count -= io->ci_nob;
-               *ppos = io->u.ci_wr.wr.crw_pos; /* for splice */
+               count  -= io->ci_nob;
 
-               /* prepare IO restart */
-               if (count > 0 && args->via_io_subtype == IO_NORMAL)
-                       args->u.normal.via_iter = vio->vui_iter;
+               if (args->via_io_subtype == IO_NORMAL) {
+                       iov_iter_advance(args->u.normal.via_iter, io->ci_nob);
+                       pos += io->ci_nob;
+                       args->u.normal.via_iocb->ki_pos = pos;
+#ifdef HAVE_KIOCB_KI_LEFT
+                       args->u.normal.via_iocb->ki_left = count;
+#elif defined(HAVE_KI_NBYTES)
+                       args->u.normal.via_iocb->ki_nbytes = count;
+#endif
+               } else {
+                       /* for splice */
+                       pos = io->u.ci_rw.rw_range.cir_pos;
+               }
        }
-       GOTO(out, rc);
 out:
        cl_io_fini(env, io);
 
        if ((rc == 0 || rc == -ENODATA) && count > 0 && io->ci_need_restart) {
                CDEBUG(D_VFSTRACE,
-                      "%s: restart %s from %lld, count:%zu, result: %zd\n",
-                      file_dentry(file)->d_name.name,
-                      iot == CIT_READ ? "read" : "write",
-                      *ppos, count, result);
+                       "%s: restart %s range: [%llu, %llu) ret: %zd, rc: %d\n",
+                       file_dentry(file)->d_name.name,
+                       iot == CIT_READ ? "read" : "write",
+                       pos, pos + count, result, rc);
                goto restart;
        }
 
@@ -1222,9 +1340,13 @@ out:
                }
        }
 
-       CDEBUG(D_VFSTRACE, "iot: %d, result: %zd\n", iot, result);
+       CDEBUG(D_VFSTRACE, "%s: %s *ppos: %llu, pos: %llu, ret: %zd, rc: %d\n",
+               file_dentry(file)->d_name.name,
+               iot == CIT_READ ? "read" : "write", *ppos, pos, result, rc);
 
-       return result > 0 ? result : rc;
+       *ppos = pos;
+
+       RETURN(result > 0 ? result : rc);
 }
 
 /**
@@ -1410,15 +1532,18 @@ static ssize_t ll_file_aio_read(struct kiocb *iocb, const struct iovec *iov,
 static ssize_t ll_file_read(struct file *file, char __user *buf, size_t count,
                            loff_t *ppos)
 {
+       struct lu_env *env;
        struct iovec   iov = { .iov_base = buf, .iov_len = count };
-        struct kiocb  *kiocb;
-        ssize_t        result;
-        ENTRY;
+       struct kiocb  *kiocb;
+       ssize_t        result;
+       __u16          refcheck;
+       ENTRY;
 
-       OBD_ALLOC_PTR(kiocb);
-       if (kiocb == NULL)
-               RETURN(-ENOMEM);
+       env = cl_env_get(&refcheck);
+       if (IS_ERR(env))
+               RETURN(PTR_ERR(env));
 
+       kiocb = &ll_env_info(env)->lti_kiocb;
         init_sync_kiocb(kiocb, file);
         kiocb->ki_pos = *ppos;
 #ifdef HAVE_KIOCB_KI_LEFT
@@ -1430,7 +1555,7 @@ static ssize_t ll_file_read(struct file *file, char __user *buf, size_t count,
        result = ll_file_aio_read(kiocb, &iov, 1, kiocb->ki_pos);
        *ppos = kiocb->ki_pos;
 
-       OBD_FREE_PTR(kiocb);
+       cl_env_put(env, &refcheck);
        RETURN(result);
 }
 
@@ -1519,9 +1644,8 @@ static ssize_t ll_file_splice_read(struct file *in_file, loff_t *ppos,
         RETURN(result);
 }
 
-int ll_lov_setstripe_ea_info(struct inode *inode, struct file *file,
-                             __u64  flags, struct lov_user_md *lum,
-                            int lum_size)
+int ll_lov_setstripe_ea_info(struct inode *inode, struct dentry *dentry,
+                            __u64 flags, struct lov_user_md *lum, int lum_size)
 {
        struct lookup_intent oit = {
                .it_op = IT_OPEN,
@@ -1531,16 +1655,15 @@ int ll_lov_setstripe_ea_info(struct inode *inode, struct file *file,
        ENTRY;
 
        ll_inode_size_lock(inode);
-       rc = ll_intent_file_open(file, lum, lum_size, &oit);
+       rc = ll_intent_file_open(dentry, lum, lum_size, &oit);
        if (rc < 0)
                GOTO(out_unlock, rc);
 
-       ll_release_openhandle(file_dentry(file), &oit);
+       ll_release_openhandle(dentry, &oit);
 
 out_unlock:
        ll_inode_size_unlock(inode);
        ll_intent_release(&oit);
-       cl_lov_delay_create_clear(&file->f_flags);
 
        RETURN(rc);
 }
@@ -1588,10 +1711,10 @@ int ll_lov_getstripe_ea_info(struct inode *inode, const char *filename,
         lmm = req_capsule_server_sized_get(&req->rq_pill, &RMF_MDT_MD, lmmsize);
         LASSERT(lmm != NULL);
 
-        if ((lmm->lmm_magic != cpu_to_le32(LOV_MAGIC_V1)) &&
-            (lmm->lmm_magic != cpu_to_le32(LOV_MAGIC_V3))) {
-                GOTO(out, rc = -EPROTO);
-        }
+       if (lmm->lmm_magic != cpu_to_le32(LOV_MAGIC_V1) &&
+           lmm->lmm_magic != cpu_to_le32(LOV_MAGIC_V3) &&
+           lmm->lmm_magic != cpu_to_le32(LOV_MAGIC_COMP_V1))
+               GOTO(out, rc = -EPROTO);
 
         /*
          * This is coming from the MDS, so is probably in
@@ -1601,26 +1724,35 @@ int ll_lov_getstripe_ea_info(struct inode *inode, const char *filename,
         if (LOV_MAGIC != cpu_to_le32(LOV_MAGIC)) {
                int stripe_count;
 
-               stripe_count = le16_to_cpu(lmm->lmm_stripe_count);
-               if (le32_to_cpu(lmm->lmm_pattern) & LOV_PATTERN_F_RELEASED)
-                       stripe_count = 0;
+               if (lmm->lmm_magic == cpu_to_le32(LOV_MAGIC_V1) ||
+                   lmm->lmm_magic == cpu_to_le32(LOV_MAGIC_V3)) {
+                       stripe_count = le16_to_cpu(lmm->lmm_stripe_count);
+                       if (le32_to_cpu(lmm->lmm_pattern) &
+                           LOV_PATTERN_F_RELEASED)
+                               stripe_count = 0;
+               }
 
                 /* if function called for directory - we should
                  * avoid swab not existent lsm objects */
                 if (lmm->lmm_magic == cpu_to_le32(LOV_MAGIC_V1)) {
-                        lustre_swab_lov_user_md_v1((struct lov_user_md_v1 *)lmm);
+                       lustre_swab_lov_user_md_v1(
+                                       (struct lov_user_md_v1 *)lmm);
                        if (S_ISREG(body->mbo_mode))
                                lustre_swab_lov_user_md_objects(
                                    ((struct lov_user_md_v1 *)lmm)->lmm_objects,
                                    stripe_count);
                } else if (lmm->lmm_magic == cpu_to_le32(LOV_MAGIC_V3)) {
                        lustre_swab_lov_user_md_v3(
-                               (struct lov_user_md_v3 *)lmm);
+                                       (struct lov_user_md_v3 *)lmm);
                        if (S_ISREG(body->mbo_mode))
-                                lustre_swab_lov_user_md_objects(
-                                 ((struct lov_user_md_v3 *)lmm)->lmm_objects,
-                                 stripe_count);
-                }
+                               lustre_swab_lov_user_md_objects(
+                                ((struct lov_user_md_v3 *)lmm)->lmm_objects,
+                                stripe_count);
+               } else if (lmm->lmm_magic ==
+                          cpu_to_le32(LOV_MAGIC_COMP_V1)) {
+                       lustre_swab_lov_comp_md_v1(
+                                       (struct lov_comp_md_v1 *)lmm);
+               }
         }
 
 out:
@@ -1631,7 +1763,7 @@ out:
 }
 
 static int ll_lov_setea(struct inode *inode, struct file *file,
-                            unsigned long arg)
+                       void __user *arg)
 {
        __u64                    flags = MDS_OPEN_HAS_OBJS | FMODE_WRITE;
        struct lov_user_md      *lump;
@@ -1647,18 +1779,19 @@ static int ll_lov_setea(struct inode *inode, struct file *file,
        if (lump == NULL)
                 RETURN(-ENOMEM);
 
-       if (copy_from_user(lump, (struct lov_user_md __user *)arg, lum_size))
+       if (copy_from_user(lump, arg, lum_size))
                GOTO(out_lump, rc = -EFAULT);
 
-       rc = ll_lov_setstripe_ea_info(inode, file, flags, lump, lum_size);
+       rc = ll_lov_setstripe_ea_info(inode, file_dentry(file), flags, lump,
+                                     lum_size);
+       cl_lov_delay_create_clear(&file->f_flags);
 
 out_lump:
        OBD_FREE_LARGE(lump, lum_size);
        RETURN(rc);
 }
 
-static int ll_file_getstripe(struct inode *inode,
-                            struct lov_user_md __user *lum)
+static int ll_file_getstripe(struct inode *inode, void __user *lum, size_t size)
 {
        struct lu_env   *env;
        __u16           refcheck;
@@ -1669,13 +1802,13 @@ static int ll_file_getstripe(struct inode *inode,
        if (IS_ERR(env))
                RETURN(PTR_ERR(env));
 
-       rc = cl_object_getstripe(env, ll_i2info(inode)->lli_clob, lum);
+       rc = cl_object_getstripe(env, ll_i2info(inode)->lli_clob, lum, size);
        cl_env_put(env, &refcheck);
        RETURN(rc);
 }
 
 static int ll_lov_setstripe(struct inode *inode, struct file *file,
-                           unsigned long arg)
+                           void __user *arg)
 {
        struct lov_user_md __user *lum = (struct lov_user_md __user *)arg;
        struct lov_user_md        *klum;
@@ -1688,16 +1821,24 @@ static int ll_lov_setstripe(struct inode *inode, struct file *file,
                RETURN(rc);
 
        lum_size = rc;
-       rc = ll_lov_setstripe_ea_info(inode, file, flags, klum, lum_size);
-       if (rc == 0) {
+       rc = ll_lov_setstripe_ea_info(inode, file_dentry(file), flags, klum,
+                                     lum_size);
+       if (!rc) {
                __u32 gen;
 
-               put_user(0, &lum->lmm_stripe_count);
+               rc = put_user(0, &lum->lmm_stripe_count);
+               if (rc)
+                       GOTO(out, rc);
+
+               rc = ll_layout_refresh(inode, &gen);
+               if (rc)
+                       GOTO(out, rc);
 
-               ll_layout_refresh(inode, &gen);
-               rc = ll_file_getstripe(inode, (struct lov_user_md __user *)arg);
+               rc = ll_file_getstripe(inode, arg, lum_size);
        }
+       cl_lov_delay_create_clear(&file->f_flags);
 
+out:
        OBD_FREE(klum, lum_size);
        RETURN(rc);
 }
@@ -1705,11 +1846,12 @@ static int ll_lov_setstripe(struct inode *inode, struct file *file,
 static int
 ll_get_grouplock(struct inode *inode, struct file *file, unsigned long arg)
 {
-        struct ll_inode_info   *lli = ll_i2info(inode);
-        struct ll_file_data    *fd = LUSTRE_FPRIVATE(file);
-       struct ll_grouplock     grouplock;
-        int                     rc;
-        ENTRY;
+       struct ll_inode_info *lli = ll_i2info(inode);
+       struct cl_object *obj = lli->lli_clob;
+       struct ll_file_data *fd = LUSTRE_FPRIVATE(file);
+       struct ll_grouplock grouplock;
+       int rc;
+       ENTRY;
 
        if (arg == 0) {
                CWARN("group id for group lock must not be 0\n");
@@ -1729,6 +1871,31 @@ ll_get_grouplock(struct inode *inode, struct file *file, unsigned long arg)
        LASSERT(fd->fd_grouplock.lg_lock == NULL);
        spin_unlock(&lli->lli_lock);
 
+       /**
+        * XXX: group lock needs to protect all OST objects while PFL
+        * can add new OST objects during the IO, so we'd instantiate
+        * all OST objects before getting its group lock.
+        */
+       if (obj) {
+               struct lu_env *env;
+               __u16 refcheck;
+               struct cl_layout cl = {
+                       .cl_is_composite = false,
+               };
+
+               env = cl_env_get(&refcheck);
+               if (IS_ERR(env))
+                       RETURN(PTR_ERR(env));
+
+               rc = cl_object_layout_get(env, obj, &cl);
+               if (!rc && cl.cl_is_composite)
+                       rc = ll_layout_write_intent(inode, 0, OBD_OBJECT_EOF);
+
+               cl_env_put(env, &refcheck);
+               if (rc)
+                       RETURN(rc);
+       }
+
        rc = cl_get_grouplock(ll_i2info(inode)->lli_clob,
                              arg, (file->f_flags & O_NONBLOCK), &grouplock);
        if (rc)
@@ -2333,6 +2500,60 @@ static int ll_ladvise(struct inode *inode, struct file *file, __u64 flags,
        RETURN(rc);
 }
 
+int ll_ioctl_fsgetxattr(struct inode *inode, unsigned int cmd,
+                       unsigned long arg)
+{
+       struct fsxattr fsxattr;
+
+       if (copy_from_user(&fsxattr,
+                          (const struct fsxattr __user *)arg,
+                          sizeof(fsxattr)))
+               RETURN(-EFAULT);
+
+       fsxattr.fsx_projid = ll_i2info(inode)->lli_projid;
+       if (copy_to_user((struct fsxattr __user *)arg,
+                        &fsxattr, sizeof(fsxattr)))
+               RETURN(-EFAULT);
+
+       RETURN(0);
+}
+
+int ll_ioctl_fssetxattr(struct inode *inode, unsigned int cmd,
+                       unsigned long arg)
+{
+
+       struct md_op_data *op_data;
+       struct ptlrpc_request *req = NULL;
+       int rc = 0;
+       struct fsxattr fsxattr;
+
+       /* only root could change project ID */
+       if (!cfs_capable(CFS_CAP_SYS_ADMIN))
+               RETURN(-EPERM);
+
+       op_data = ll_prep_md_op_data(NULL, inode, NULL, NULL, 0, 0,
+                                    LUSTRE_OPC_ANY, NULL);
+       if (IS_ERR(op_data))
+               RETURN(PTR_ERR(op_data));
+
+       if (copy_from_user(&fsxattr,
+                          (const struct fsxattr __user *)arg,
+                          sizeof(fsxattr)))
+               GOTO(out_fsxattr1, rc = -EFAULT);
+
+       op_data->op_projid = fsxattr.fsx_projid;
+       op_data->op_attr.ia_valid |= MDS_ATTR_PROJID;
+       rc = md_setattr(ll_i2sbi(inode)->ll_md_exp, op_data, NULL,
+                       0, &req);
+       ptlrpc_req_finished(req);
+
+out_fsxattr1:
+       ll_finish_md_op_data(op_data);
+       RETURN(rc);
+
+
+}
+
 static long
 ll_file_ioctl(struct file *file, unsigned int cmd, unsigned long arg)
 {
@@ -2375,16 +2596,17 @@ ll_file_ioctl(struct file *file, unsigned int cmd, unsigned long arg)
                         fd->fd_flags &= ~flags;
                 }
                 RETURN(0);
-        case LL_IOC_LOV_SETSTRIPE:
-                RETURN(ll_lov_setstripe(inode, file, arg));
-        case LL_IOC_LOV_SETEA:
-                RETURN(ll_lov_setea(inode, file, arg));
+       case LL_IOC_LOV_SETSTRIPE:
+       case LL_IOC_LOV_SETSTRIPE_NEW:
+               RETURN(ll_lov_setstripe(inode, file, (void __user *)arg));
+       case LL_IOC_LOV_SETEA:
+               RETURN(ll_lov_setea(inode, file, (void __user *)arg));
        case LL_IOC_LOV_SWAP_LAYOUTS: {
                struct file *file2;
                struct lustre_swap_layouts lsl;
 
                if (copy_from_user(&lsl, (char __user *)arg,
-                                      sizeof(struct lustre_swap_layouts)))
+                                  sizeof(struct lustre_swap_layouts)))
                        RETURN(-EFAULT);
 
                if ((file->f_flags & O_ACCMODE) == O_RDONLY)
@@ -2425,8 +2647,8 @@ out:
                RETURN(rc);
        }
        case LL_IOC_LOV_GETSTRIPE:
-               RETURN(ll_file_getstripe(inode,
-                                        (struct lov_user_md __user *)arg));
+       case LL_IOC_LOV_GETSTRIPE_NEW:
+               RETURN(ll_file_getstripe(inode, (void __user *)arg, 0));
         case FSFILT_IOC_GETFLAGS:
         case FSFILT_IOC_SETFLAGS:
                 RETURN(ll_iocontrol(inode, file, cmd, arg));
@@ -2728,6 +2950,10 @@ out_ladvise:
                OBD_FREE(ladvise_hdr, alloc_size);
                RETURN(rc);
        }
+       case LL_IOC_FSGETXATTR:
+               RETURN(ll_ioctl_fsgetxattr(inode, cmd, arg));
+       case LL_IOC_FSSETXATTR:
+               RETURN(ll_ioctl_fssetxattr(inode, cmd, arg));
        default: {
                int err;
 
@@ -2917,6 +3143,7 @@ int cl_sync_file_range(struct inode *inode, loff_t start, loff_t end,
 int ll_fsync(struct file *file, loff_t start, loff_t end, int datasync)
 {
        struct dentry *dentry = file_dentry(file);
+       bool lock_inode;
 #elif defined(HAVE_FILE_FSYNC_2ARGS)
 int ll_fsync(struct file *file, int datasync)
 {
@@ -2941,7 +3168,9 @@ int ll_fsync(struct file *file, struct dentry *dentry, int datasync)
 
 #ifdef HAVE_FILE_FSYNC_4ARGS
        rc = filemap_write_and_wait_range(inode->i_mapping, start, end);
-       inode_lock(inode);
+       lock_inode = !lli->lli_inode_locked;
+       if (lock_inode)
+               inode_lock(inode);
 #else
        /* fsync's caller has already called _fdata{sync,write}, we want
         * that IO to finish before calling the osc and mdc sync methods */
@@ -2981,7 +3210,8 @@ int ll_fsync(struct file *file, struct dentry *dentry, int datasync)
        }
 
 #ifdef HAVE_FILE_FSYNC_4ARGS
-       inode_unlock(inode);
+       if (lock_inode)
+               inode_unlock(inode);
 #endif
        RETURN(rc);
 }
@@ -3186,7 +3416,7 @@ int ll_migrate(struct inode *parent, struct file *file, int mdtidx,
                RETURN(PTR_ERR(op_data));
 
        /* Get child FID first */
-       qstr.hash = full_name_hash(name, namelen);
+       qstr.hash = ll_full_name_hash(file_dentry(file), name, namelen);
        qstr.name = name;
        qstr.len = namelen;
        dchild = d_lookup(file_dentry(file), &qstr);
@@ -3257,15 +3487,12 @@ again:
        op_data->op_cli_flags = CLI_MIGRATE;
        rc = md_rename(ll_i2sbi(parent)->ll_md_exp, op_data, name,
                       namelen, name, namelen, &request);
-       if (rc == 0)
+       if (rc == 0) {
+               LASSERT(request != NULL);
                ll_update_times(request, parent);
 
-       if (request != NULL) {
                body = req_capsule_server_get(&request->rq_pill, &RMF_MDT_BODY);
-               if (body == NULL) {
-                       ptlrpc_req_finished(request);
-                       GOTO(out_close, rc = -EPROTO);
-               }
+               LASSERT(body != NULL);
 
                /* If the server does release layout lock, then we cleanup
                 * the client och here, otherwise release it in out_close: */
@@ -3278,14 +3505,17 @@ again:
                        OBD_FREE_PTR(och);
                        och = NULL;
                }
+       }
+
+       if (request != NULL) {
                ptlrpc_req_finished(request);
+               request = NULL;
        }
 
        /* Try again if the file layout has changed. */
-       if (rc == -EAGAIN && S_ISREG(child_inode->i_mode)) {
-               request = NULL;
+       if (rc == -EAGAIN && S_ISREG(child_inode->i_mode))
                goto again;
-       }
+
 out_close:
        if (och != NULL) /* close the file */
                ll_lease_close(och, child_inode, NULL);
@@ -3554,6 +3784,18 @@ ll_inode_revalidate(struct dentry *dentry, __u64 ibits)
        RETURN(rc);
 }
 
+static inline dev_t ll_compat_encode_dev(dev_t dev)
+{
+       /* The compat_sys_*stat*() syscalls will fail unless the
+        * device majors and minors are both less than 256. Note that
+        * the value returned here will be passed through
+        * old_encode_dev() in cp_compat_stat(). And so we are not
+        * trying to return a valid compat (u16) device number, just
+        * one that will pass the old_valid_dev() check. */
+
+       return MKDEV(MAJOR(dev) & 0xff, MINOR(dev) & 0xff);
+}
+
 int ll_getattr(struct vfsmount *mnt, struct dentry *de, struct kstat *stat)
 {
         struct inode *inode = de->d_inode;
@@ -3570,19 +3812,23 @@ int ll_getattr(struct vfsmount *mnt, struct dentry *de, struct kstat *stat)
 
        OBD_FAIL_TIMEOUT(OBD_FAIL_GETATTR_DELAY, 30);
 
-       stat->dev = inode->i_sb->s_dev;
-       if (ll_need_32bit_api(sbi))
+       if (ll_need_32bit_api(sbi)) {
                stat->ino = cl_fid_build_ino(&lli->lli_fid, 1);
-       else
+               stat->dev = ll_compat_encode_dev(inode->i_sb->s_dev);
+               stat->rdev = ll_compat_encode_dev(inode->i_rdev);
+       } else {
                stat->ino = inode->i_ino;
+               stat->dev = inode->i_sb->s_dev;
+               stat->rdev = inode->i_rdev;
+       }
+
        stat->mode = inode->i_mode;
        stat->uid = inode->i_uid;
        stat->gid = inode->i_gid;
-       stat->rdev = inode->i_rdev;
        stat->atime = inode->i_atime;
        stat->mtime = inode->i_mtime;
        stat->ctime = inode->i_ctime;
-       stat->blksize = 1 << inode->i_blkbits;
+       stat->blksize = sbi->ll_stat_blksize ?: 1 << inode->i_blkbits;
 
        stat->nlink = inode->i_nlink;
        stat->size = i_size_read(inode);
@@ -4099,9 +4345,9 @@ static int ll_layout_lock_set(struct lustre_handle *lockh, enum ldlm_mode mode,
        lock_res_and_lock(lock);
        lvb_ready = ldlm_is_lvb_ready(lock);
        unlock_res_and_lock(lock);
+
        /* checking lvb_ready is racy but this is okay. The worst case is
         * that multi processes may configure the file on the same time. */
-
        if (lvb_ready)
                GOTO(out, rc = 0);
 
@@ -4126,7 +4372,6 @@ static int ll_layout_lock_set(struct lustre_handle *lockh, enum ldlm_mode mode,
        /* refresh layout failed, need to wait */
        wait_layout = rc == -EBUSY;
        EXIT;
-
 out:
        LDLM_LOCK_PUT(lock);
        ldlm_lock_decref(lockh, mode);
@@ -4151,39 +4396,37 @@ out:
        RETURN(rc);
 }
 
-static int ll_layout_refresh_locked(struct inode *inode)
+/**
+ * Issue layout intent RPC to MDS.
+ * \param inode [in]   file inode
+ * \param intent [in]  layout intent
+ *
+ * \retval 0   on success
+ * \retval < 0 error code
+ */
+static int ll_layout_intent(struct inode *inode, struct layout_intent *intent)
 {
        struct ll_inode_info  *lli = ll_i2info(inode);
        struct ll_sb_info     *sbi = ll_i2sbi(inode);
        struct md_op_data     *op_data;
-       struct lookup_intent    it;
-       struct lustre_handle    lockh;
-       enum ldlm_mode          mode;
+       struct lookup_intent it;
        struct ptlrpc_request *req;
        int rc;
        ENTRY;
 
-again:
-       /* mostly layout lock is caching on the local side, so try to match
-        * it before grabbing layout lock mutex. */
-       mode = ll_take_md_lock(inode, MDS_INODELOCK_LAYOUT, &lockh, 0,
-                              LCK_CR | LCK_CW | LCK_PR | LCK_PW);
-       if (mode != 0) { /* hit cached lock */
-               rc = ll_layout_lock_set(&lockh, mode, inode);
-               if (rc == -EAGAIN)
-                       goto again;
-
-               RETURN(rc);
-       }
-
        op_data = ll_prep_md_op_data(NULL, inode, inode, NULL,
                                     0, 0, LUSTRE_OPC_ANY, NULL);
        if (IS_ERR(op_data))
                RETURN(PTR_ERR(op_data));
 
-       /* have to enqueue one */
+       op_data->op_data = intent;
+       op_data->op_data_size = sizeof(*intent);
+
        memset(&it, 0, sizeof(it));
        it.it_op = IT_LAYOUT;
+       if (intent->li_opc == LAYOUT_INTENT_WRITE ||
+           intent->li_opc == LAYOUT_INTENT_TRUNC)
+               it.it_flags = FMODE_WRITE;
 
        LDLM_DEBUG_NOLOCK("%s: requeue layout lock for file "DFID"(%p)",
                          ll_get_fsname(inode->i_sb, NULL, 0),
@@ -4197,18 +4440,11 @@ again:
 
        ll_finish_md_op_data(op_data);
 
-       mode = it.it_lock_mode;
-       it.it_lock_mode = 0;
-       ll_intent_drop_lock(&it);
-
-       if (rc == 0) {
-               /* set lock data in case this is a new lock */
+       /* set lock data in case this is a new lock */
+       if (!rc)
                ll_set_lock_data(sbi->ll_md_exp, inode, &it, NULL);
-               lockh.cookie = it.it_lock_handle;
-               rc = ll_layout_lock_set(&lockh, mode, inode);
-               if (rc == -EAGAIN)
-                       goto again;
-       }
+
+       ll_intent_drop_lock(&it);
 
        RETURN(rc);
 }
@@ -4230,6 +4466,11 @@ int ll_layout_refresh(struct inode *inode, __u32 *gen)
 {
        struct ll_inode_info    *lli = ll_i2info(inode);
        struct ll_sb_info       *sbi = ll_i2sbi(inode);
+       struct lustre_handle lockh;
+       struct layout_intent intent = {
+               .li_opc = LAYOUT_INTENT_ACCESS,
+       };
+       enum ldlm_mode mode;
        int rc;
        ENTRY;
 
@@ -4244,18 +4485,57 @@ int ll_layout_refresh(struct inode *inode, __u32 *gen)
        /* take layout lock mutex to enqueue layout lock exclusively. */
        mutex_lock(&lli->lli_layout_mutex);
 
-       rc = ll_layout_refresh_locked(inode);
-       if (rc < 0)
-               GOTO(out, rc);
+       while (1) {
+               /* mostly layout lock is caching on the local side, so try to
+                * match it before grabbing layout lock mutex. */
+               mode = ll_take_md_lock(inode, MDS_INODELOCK_LAYOUT, &lockh, 0,
+                                      LCK_CR | LCK_CW | LCK_PR | LCK_PW);
+               if (mode != 0) { /* hit cached lock */
+                       rc = ll_layout_lock_set(&lockh, mode, inode);
+                       if (rc == -EAGAIN)
+                               continue;
+                       break;
+               }
 
-       *gen = ll_layout_version_get(lli);
-out:
+               rc = ll_layout_intent(inode, &intent);
+               if (rc != 0)
+                       break;
+       }
+
+       if (rc == 0)
+               *gen = ll_layout_version_get(lli);
        mutex_unlock(&lli->lli_layout_mutex);
 
        RETURN(rc);
 }
 
 /**
+ * Issue layout intent RPC indicating where in a file an IO is about to write.
+ *
+ * \param[in] inode    file inode.
+ * \param[in] start    start offset of fille in bytes where an IO is about to
+ *                     write.
+ * \param[in] end      exclusive end offset in bytes of the write range.
+ *
+ * \retval 0   on success
+ * \retval < 0 error code
+ */
+int ll_layout_write_intent(struct inode *inode, __u64 start, __u64 end)
+{
+       struct layout_intent intent = {
+               .li_opc = LAYOUT_INTENT_WRITE,
+               .li_start = start,
+               .li_end = end,
+       };
+       int rc;
+       ENTRY;
+
+       rc = ll_layout_intent(inode, &intent);
+
+       RETURN(rc);
+}
+
+/**
  *  This function send a restore request to the MDT
  */
 int ll_layout_restore(struct inode *inode, loff_t offset, __u64 length)