Whamcloud - gitweb
LU-7991 quota: project quota against ZFS backend
[fs/lustre-release.git] / lustre / osd-zfs / osd_quota.c
index 9a425e7..45b68ff 100644 (file)
 #include "osd_internal.h"
 
 /**
- * Helper function to retrieve DMU object id from fid for accounting object
- */
-dnode_t *osd_quota_fid2dmu(const struct osd_device *osd,
-                          const struct lu_fid *fid)
-{
-       LASSERT(fid_is_acct(fid));
-       if (fid_oid(fid) == ACCT_GROUP_OID)
-               return osd->od_groupused_dn;
-       return osd->od_userused_dn;
-}
-
-/**
- * Helper function to estimate the number of inodes in use for a give uid/gid
- * from the block usage
+ * Helper function to estimate the number of inodes in use for the given
+ * uid/gid/projid from the block usage
  */
 static uint64_t osd_objset_user_iused(struct osd_device *osd, uint64_t uidbytes)
 {
@@ -72,7 +60,7 @@ static uint64_t osd_objset_user_iused(struct osd_device *osd, uint64_t uidbytes)
  */
 
 /**
- * Return space usage consumed by a given uid or gid.
+ * Return space usage consumed by a given uid or gid or projid.
  * Block usage is accurrate since it is maintained by DMU itself.
  * However, DMU does not provide inode accounting, so the #inodes in use
  * is estimated from the block usage and statfs information.
@@ -91,23 +79,26 @@ static int osd_acct_index_lookup(const struct lu_env *env,
                                struct dt_rec *dtrec,
                                const struct dt_key *dtkey)
 {
-       struct osd_thread_info  *info = osd_oti_get(env);
-       char                    *buf  = info->oti_buf;
-       size_t                   buflen = sizeof(info->oti_buf);
-       struct lquota_acct_rec  *rec  = (struct lquota_acct_rec *)dtrec;
-       struct osd_object       *obj = osd_dt_obj(dtobj);
-       struct osd_device       *osd = osd_obj2dev(obj);
-       int                      rc;
-       dnode_t *dn;
+       struct osd_thread_info *info = osd_oti_get(env);
+       char *buf = info->oti_buf;
+       struct lquota_acct_rec *rec = (struct lquota_acct_rec *)dtrec;
+       struct osd_object *obj = osd_dt_obj(dtobj);
+       struct osd_device *osd = osd_obj2dev(obj);
+       dnode_t *dn = obj->oo_dn;
+       size_t buflen = sizeof(info->oti_buf);
+       int rc;
        ENTRY;
 
        rec->bspace = rec->ispace = 0;
 
-       /* convert the 64-bit uid/gid into a string */
+       /* convert the 64-bit uid/gid/projid into a string */
        snprintf(buf, buflen, "%llx", *((__u64 *)dtkey));
-       /* fetch DMU object (DMU_USERUSED_OBJECT/DMU_GROUPUSED_OBJECT) to be
-        * used */
-       dn = osd_quota_fid2dmu(osd, lu_object_fid(&dtobj->do_lu));
+       if (unlikely(!dn)) {
+               CDEBUG(D_QUOTA, "%s: miss accounting obj for %s\n",
+                      osd->od_svname, buf);
+
+               RETURN(-ENOENT);
+       }
 
        /* disk usage (in bytes) is maintained by DMU.
         * DMU_USERUSED_OBJECT/DMU_GROUPUSED_OBJECT are special objects which
@@ -115,9 +106,11 @@ static int osd_acct_index_lookup(const struct lu_env *env,
        rc = osd_zap_lookup(osd, dn->dn_object, dn, buf, sizeof(uint64_t), 1,
                            &rec->bspace);
        if (rc == -ENOENT) {
-               /* user/group has not created anything yet */
+               /* user/group/project has not created anything yet */
                CDEBUG(D_QUOTA, "%s: id %s not found in DMU accounting ZAP\n",
                       osd->od_svname, buf);
+               /* -ENOENT is normal case, convert it as 1. */
+               rc = 1;
        } else if (rc) {
                RETURN(rc);
        }
@@ -136,6 +129,8 @@ static int osd_acct_index_lookup(const struct lu_env *env,
                        CDEBUG(D_QUOTA,
                               "%s: id %s not found dnode accounting\n",
                               osd->od_svname, buf);
+                       /* -ENOENT is normal case, convert it as 1. */
+                       rc = 1;
                } else if (rc == 0) {
                        rc = 1;
                }
@@ -154,15 +149,20 @@ static struct dt_it *osd_it_acct_init(const struct lu_env *env,
                                      struct dt_object *dt,
                                      __u32 attr)
 {
-       struct osd_thread_info  *info = osd_oti_get(env);
-       struct osd_it_quota     *it;
-       struct lu_object        *lo   = &dt->do_lu;
-       struct osd_device       *osd  = osd_dev(lo->lo_dev);
-       dnode_t *dn;
+       struct osd_thread_info *info = osd_oti_get(env);
+       struct osd_it_quota *it;
+       struct osd_object *obj = osd_dt_obj(dt);
+       struct osd_device *osd = osd_obj2dev(obj);
+       dnode_t *dn = obj->oo_dn;
        int rc;
        ENTRY;
 
-       LASSERT(lu_object_exists(lo));
+       if (unlikely(!dn)) {
+               CDEBUG(D_QUOTA, "%s: Not found in DMU accounting ZAP\n",
+                      osd->od_svname);
+
+               RETURN(ERR_PTR(-ENOENT));
+       }
 
        if (info == NULL)
                RETURN(ERR_PTR(-ENOMEM));
@@ -172,7 +172,6 @@ static struct dt_it *osd_it_acct_init(const struct lu_env *env,
                RETURN(ERR_PTR(-ENOMEM));
 
        memset(it, 0, sizeof(*it));
-       dn = osd_quota_fid2dmu(osd, lu_object_fid(lo));
        it->oiq_oid = dn->dn_object;
 
        /* initialize zap cursor */
@@ -183,7 +182,7 @@ static struct dt_it *osd_it_acct_init(const struct lu_env *env,
        }
 
        /* take object reference */
-       lu_object_get(lo);
+       lu_object_get(&dt->do_lu);
        it->oiq_obj   = osd_dt_obj(dt);
        it->oiq_reset = 1;
 
@@ -208,6 +207,29 @@ static void osd_it_acct_fini(const struct lu_env *env, struct dt_it *di)
 }
 
 /**
+ * Locate the first entry that is for space accounting.
+ */
+static int osd_zap_locate(struct osd_it_quota *it, zap_attribute_t *za)
+{
+       int rc;
+       ENTRY;
+
+       while (1) {
+               rc = -zap_cursor_retrieve(it->oiq_zc, za);
+               if (rc)
+                       break;
+
+               if (strncmp(za->za_name, OSD_DMU_USEROBJ_PREFIX,
+                           OSD_DMU_USEROBJ_PREFIX_LEN))
+                       break;
+
+               zap_cursor_advance(it->oiq_zc);
+       }
+
+       RETURN(rc);
+}
+
+/**
  * Move on to the next valid entry.
  *
  * \param  di   - osd iterator
@@ -226,10 +248,9 @@ static int osd_it_acct_next(const struct lu_env *env, struct dt_it *di)
        if (it->oiq_reset == 0)
                zap_cursor_advance(it->oiq_zc);
        it->oiq_reset = 0;
-       rc = -zap_cursor_retrieve(it->oiq_zc, za);
-       if (rc == -ENOENT) /* reached the end */
-               rc = 1;
-       RETURN(rc);
+
+       rc = osd_zap_locate(it, za);
+       RETURN(rc == -ENOENT ? 1 : rc);
 }
 
 /**
@@ -246,10 +267,13 @@ static struct dt_key *osd_it_acct_key(const struct lu_env *env,
        ENTRY;
 
        it->oiq_reset = 0;
-       rc = -zap_cursor_retrieve(it->oiq_zc, za);
+       rc = osd_zap_locate(it, za);
        if (rc)
                RETURN(ERR_PTR(rc));
+
        rc = kstrtoull(za->za_name, 16, &it->oiq_id);
+       if (rc)
+               CERROR("couldn't parse name %s\n", za->za_name);
 
        RETURN((struct dt_key *) &it->oiq_id);
 }
@@ -348,15 +372,18 @@ static int osd_it_acct_rec(const struct lu_env *env,
        if (unlikely(rc != 0))
                RETURN(rc);
 
-       /* inode accounting is not maintained by DMU, so we use our own ZAP to
-        * track inode usage */
+       /* inode accounting is maintained by DMU since 0.7.0 */
+       strncpy(info->oti_buf, OSD_DMU_USEROBJ_PREFIX,
+               OSD_DMU_USEROBJ_PREFIX_LEN);
+       strlcpy(info->oti_buf + OSD_DMU_USEROBJ_PREFIX_LEN, za->za_name,
+               sizeof(info->oti_buf) - OSD_DMU_USEROBJ_PREFIX_LEN);
        rc = osd_zap_lookup(osd, it->oiq_obj->oo_dn->dn_object,
-                           it->oiq_obj->oo_dn, za->za_name, sizeof(uint64_t),
+                           it->oiq_obj->oo_dn, info->oti_buf, sizeof(uint64_t),
                            1, &rec->ispace);
        if (rc == -ENOENT)
                /* user/group has not created any file yet */
                CDEBUG(D_QUOTA, "%s: id %s not found in accounting ZAP\n",
-                      osd->od_svname, za->za_name);
+                      osd->od_svname, info->oti_buf);
        else if (rc)
                RETURN(rc);
 
@@ -406,12 +433,11 @@ static int osd_it_acct_load(const struct lu_env *env,
        it->oiq_zc = zc;
        it->oiq_reset = 0;
 
-       rc = -zap_cursor_retrieve(it->oiq_zc, za);
+       rc = osd_zap_locate(it, za);
        if (rc == 0)
                rc = 1;
        else if (rc == -ENOENT)
                rc = 0;
-
        RETURN(rc);
 }
 
@@ -420,7 +446,7 @@ static int osd_it_acct_load(const struct lu_env *env,
  * move to the first valid record.
  *
  * \param  di   - osd iterator
- * \param  key  - uid or gid
+ * \param  key  - uid or gid or projid
  *
  * \retval +ve  - di points to exact matched key
  * \retval 0    - di points to the first valid record
@@ -476,26 +502,27 @@ const struct dt_index_operations osd_acct_index_ops = {
  * \param osd    - is the osd_device
  * \param uid    - user id of the inode
  * \param gid    - group id of the inode
+ * \param projid - project id of the inode
  * \param space  - how many blocks/inodes will be consumed/released
  * \param oh     - osd transaction handle
- * \param is_blk - block quota or inode quota?
  * \param flags  - if the operation is write, return no user quota, no
  *                  group quota, or sync commit flags to the caller
- * \param force  - set to 1 when changes are performed by root user and thus
- *                  can't failed with EDQUOT
+ * \param osd_qid_declare_flags - indicate this is a inode/block accounting
+ *                 and whether changes are performed by root user
  *
  * \retval 0      - success
  * \retval -ve    - failure
  */
 int osd_declare_quota(const struct lu_env *env, struct osd_device *osd,
-                     qid_t uid, qid_t gid, long long space,
-                     struct osd_thandle *oh, bool is_blk, int *flags,
-                     bool force)
+                     qid_t uid, qid_t gid, qid_t projid, long long space,
+                     struct osd_thandle *oh, int *flags,
+                     enum osd_qid_declare_flags osd_qid_declare_flags)
 {
-       struct osd_thread_info  *info = osd_oti_get(env);
-       struct lquota_id_info   *qi = &info->oti_qi;
-       struct qsd_instance     *qsd = osd->od_quota_slave;
-       int                      rcu, rcg; /* user & group rc */
+       struct osd_thread_info *info = osd_oti_get(env);
+       struct lquota_id_info *qi = &info->oti_qi;
+       struct qsd_instance *qsd = osd->od_quota_slave;
+       int rcu, rcg, rcp = 0; /* user & group & project rc */
+       bool force = !!(osd_qid_declare_flags & OSD_QID_FORCE);
        ENTRY;
 
        if (unlikely(qsd == NULL))
@@ -506,9 +533,8 @@ int osd_declare_quota(const struct lu_env *env, struct osd_device *osd,
        qi->lqi_id.qid_uid = uid;
        qi->lqi_type       = USRQUOTA;
        qi->lqi_space      = space;
-       qi->lqi_is_blk     = is_blk;
+       qi->lqi_is_blk     = !!(osd_qid_declare_flags & OSD_QID_BLK);
        rcu = qsd_op_begin(env, qsd, &oh->ot_quota_trans, qi, flags);
-
        if (force && (rcu == -EDQUOT || rcu == -EINPROGRESS))
                /* ignore EDQUOT & EINPROGRESS when changes are done by root */
                rcu = 0;
@@ -524,10 +550,23 @@ int osd_declare_quota(const struct lu_env *env, struct osd_device *osd,
        qi->lqi_id.qid_gid = gid;
        qi->lqi_type       = GRPQUOTA;
        rcg = qsd_op_begin(env, qsd, &oh->ot_quota_trans, qi, flags);
-
        if (force && (rcg == -EDQUOT || rcg == -EINPROGRESS))
                /* as before, ignore EDQUOT & EINPROGRESS for root */
                rcg = 0;
 
-       RETURN(rcu ? rcu : rcg);
+#ifdef ZFS_PROJINHERIT
+       if (rcg && (rcg != -EDQUOT || flags == NULL))
+               RETURN(rcg);
+
+       /* for project quota */
+       if (osd->od_projectused_dn) {
+               qi->lqi_id.qid_projid = projid;
+               qi->lqi_type = PRJQUOTA;
+               rcp = qsd_op_begin(env, qsd, &oh->ot_quota_trans, qi, flags);
+               if (force && (rcp == -EDQUOT || rcp == -EINPROGRESS))
+                       rcp = 0;
+       }
+#endif
+
+       RETURN(rcu ? rcu : (rcg ? rcg : rcp));
 }