lustre/lov/lov_internal.h

   1 /* -*- mode: c; c-basic-offset: 8; indent-tabs-mode: nil; -*-
   2  * vim:expandtab:shiftwidth=8:tabstop=8:
   3  *
   4  * GPL HEADER START
   5  *
   6  * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
   7  *
   8  * This program is free software; you can redistribute it and/or modify
   9  * it under the terms of the GNU General Public License version 2 only,
  10  * as published by the Free Software Foundation.
  11  *
  12  * This program is distributed in the hope that it will be useful, but
  13  * WITHOUT ANY WARRANTY; without even the implied warranty of
  14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  15  * General Public License version 2 for more details (a copy is included
  16  * in the LICENSE file that accompanied this code).
  17  *
  18  * You should have received a copy of the GNU General Public License
  19  * version 2 along with this program; If not, see
  20  * http://www.sun.com/software/products/lustre/docs/GPLv2.pdf
  21  *
  22  * Please contact Sun Microsystems, Inc., 4150 Network Circle, Santa Clara,
  23  * CA 95054 USA or visit www.sun.com if you need additional information or
  24  * have any questions.
  25  *
  26  * GPL HEADER END
  27  */
  28 /*
  29  * Copyright  2008 Sun Microsystems, Inc. All rights reserved
  30  * Use is subject to license terms.
  31  */
  32 /*
  33  * This file is part of Lustre, http://www.lustre.org/
  34  * Lustre is a trademark of Sun Microsystems, Inc.
  35  */
  36
  37 #ifndef LOV_INTERNAL_H
  38 #define LOV_INTERNAL_H
  39
  40 #include <obd_class.h>
  41 #include <lustre/lustre_user.h>
  42
  43 struct lov_lock_handles {
  44         struct portals_handle   llh_handle;
  45         atomic_t                llh_refcount;
  46         int                     llh_stripe_count;
  47         struct lustre_handle    llh_handles[0];
  48 };
  49
  50 struct lov_request {
  51         struct obd_info          rq_oi;
  52         struct lov_request_set  *rq_rqset;
  53
  54         struct list_head         rq_link;
  55
  56         int                      rq_idx;        /* index in lov->tgts array */
  57         int                      rq_stripe;     /* stripe number */
  58         int                      rq_complete;
  59         int                      rq_rc;
  60         int                      rq_buflen;     /* length of sub_md */
  61
  62         obd_count                rq_oabufs;
  63         obd_count                rq_pgaidx;
  64 };
  65
  66 struct lov_request_set {
  67         struct ldlm_enqueue_info*set_ei;
  68         struct obd_info         *set_oi;
  69         atomic_t                 set_refcount;
  70         struct obd_export       *set_exp;
  71         /* XXX: There is @set_exp already, however obd_statfs gets obd_device
  72            only. */
  73         struct obd_device       *set_obd;
  74         int                      set_count;
  75         int                      set_completes;
  76         int                      set_success;
  77         struct llog_cookie      *set_cookies;
  78         int                      set_cookie_sent;
  79         struct obd_trans_info   *set_oti;
  80         obd_count                set_oabufs;
  81         struct brw_page         *set_pga;
  82         struct lov_lock_handles *set_lockh;
  83         struct list_head         set_list;
  84         cfs_waitq_t              set_waitq;
  85         spinlock_t               set_lock;
  86 };
  87
  88
  89 #define LOV_AP_MAGIC 8200
  90
  91 struct lov_async_page {
  92         int                             lap_magic;
  93         int                             lap_stripe;
  94         obd_off                         lap_sub_offset;
  95         obd_id                          lap_loi_id;
  96         void                            *lap_sub_cookie;
  97         struct obd_async_page_ops       *lap_caller_ops;
  98         void                            *lap_caller_data;
  99 };
 100
 101 #define LAP_FROM_COOKIE(c)                                                     \
 102         (LASSERT(((struct lov_async_page *)(c))->lap_magic == LOV_AP_MAGIC),   \
 103          (struct lov_async_page *)(c))
 104
 105 extern cfs_mem_cache_t *lov_oinfo_slab;
 106
 107 static inline void lov_llh_addref(void *llhp)
 108 {
 109         struct lov_lock_handles *llh = llhp;
 110         atomic_inc(&llh->llh_refcount);
 111         CDEBUG(D_INFO, "GETting llh %p : new refcount %d\n", llh,
 112                atomic_read(&llh->llh_refcount));
 113 }
 114
 115 static inline struct lov_lock_handles *lov_llh_new(struct lov_stripe_md *lsm)
 116 {
 117         struct lov_lock_handles *llh;
 118
 119         OBD_ALLOC(llh, sizeof *llh +
 120                   sizeof(*llh->llh_handles) * lsm->lsm_stripe_count);
 121         if (llh == NULL)
 122                 return NULL;
 123         atomic_set(&llh->llh_refcount, 2);
 124         llh->llh_stripe_count = lsm->lsm_stripe_count;
 125         CFS_INIT_LIST_HEAD(&llh->llh_handle.h_link);
 126         class_handle_hash(&llh->llh_handle, lov_llh_addref);
 127         return llh;
 128 }
 129
 130 void lov_finish_set(struct lov_request_set *set);
 131
 132 static inline void lov_get_reqset(struct lov_request_set *set)
 133 {
 134         LASSERT(set != NULL);
 135         LASSERT(atomic_read(&set->set_refcount) > 0);
 136         atomic_inc(&set->set_refcount);
 137 }
 138
 139 static inline void lov_put_reqset(struct lov_request_set *set)
 140 {
 141         if (atomic_dec_and_test(&set->set_refcount))
 142                 lov_finish_set(set);
 143 }
 144
 145 static inline struct lov_lock_handles *
 146 lov_handle2llh(struct lustre_handle *handle)
 147 {
 148         LASSERT(handle != NULL);
 149         return(class_handle2object(handle->cookie));
 150 }
 151
 152 static inline void lov_llh_put(struct lov_lock_handles *llh)
 153 {
 154         CDEBUG(D_INFO, "PUTting llh %p : new refcount %d\n", llh,
 155                atomic_read(&llh->llh_refcount) - 1);
 156         LASSERT(atomic_read(&llh->llh_refcount) > 0 &&
 157                 atomic_read(&llh->llh_refcount) < 0x5a5a);
 158         if (atomic_dec_and_test(&llh->llh_refcount)) {
 159                 class_handle_unhash(&llh->llh_handle);
 160                 /* The structure may be held by other threads because RCU. -jxiong */
 161                 if (atomic_read(&llh->llh_refcount))
 162                         return;
 163
 164                 OBD_FREE_RCU(llh, sizeof *llh +
 165                          sizeof(*llh->llh_handles) * llh->llh_stripe_count, &llh->llh_handle);
 166         }
 167 }
 168
 169 #define lov_uuid2str(lv, index) \
 170         (char *)((lv)->lov_tgts[index]->ltd_uuid.uuid)
 171
 172 /* lov_merge.c */
 173 void lov_merge_attrs(struct obdo *tgt, struct obdo *src, obd_flag valid,
 174                      struct lov_stripe_md *lsm, int stripeno, int *set);
 175 int lov_merge_lvb(struct obd_export *exp, struct lov_stripe_md *lsm,
 176                   struct ost_lvb *lvb, int kms_only);
 177 int lov_adjust_kms(struct obd_export *exp, struct lov_stripe_md *lsm,
 178                    obd_off size, int shrink);
 179 int lov_update_lvb(struct obd_export *exp, struct lov_stripe_md *lsm,
 180                    struct ost_lvb *lvb, obd_flag valid);
 181
 182 /* lov_offset.c */
 183 obd_size lov_stripe_size(struct lov_stripe_md *lsm, obd_size ost_size,
 184                          int stripeno);
 185 int lov_stripe_offset(struct lov_stripe_md *lsm, obd_off lov_off,
 186                       int stripeno, obd_off *obd_off);
 187 obd_off lov_size_to_stripe(struct lov_stripe_md *lsm, obd_off file_size,
 188                            int stripeno);
 189 int lov_stripe_intersects(struct lov_stripe_md *lsm, int stripeno,
 190                           obd_off start, obd_off end,
 191                           obd_off *obd_start, obd_off *obd_end);
 192 int lov_stripe_number(struct lov_stripe_md *lsm, obd_off lov_off);
 193
 194 /* lov_qos.c */
 195 #define LOV_USES_ASSIGNED_STRIPE        0
 196 #define LOV_USES_DEFAULT_STRIPE         1
 197 int qos_add_tgt(struct obd_device *obd, __u32 index);
 198 int qos_del_tgt(struct obd_device *obd, struct lov_tgt_desc *tgt);
 199 void qos_shrink_lsm(struct lov_request_set *set);
 200 int qos_prep_create(struct obd_export *exp, struct lov_request_set *set);
 201 void qos_update(struct lov_obd *lov);
 202 void qos_statfs_done(struct lov_obd *lov);
 203 void qos_statfs_update(struct obd_device *obd, __u64 max_age, int wait);
 204 int qos_remedy_create(struct lov_request_set *set, struct lov_request *req);
 205
 206 /* lov_request.c */
 207 void lov_set_add_req(struct lov_request *req, struct lov_request_set *set);
 208 int lov_finished_set(struct lov_request_set *set);
 209 void lov_update_set(struct lov_request_set *set,
 210                     struct lov_request *req, int rc);
 211 int lov_update_common_set(struct lov_request_set *set,
 212                           struct lov_request *req, int rc);
 213 int lov_prep_create_set(struct obd_export *exp, struct obd_info *oifo,
 214                         struct lov_stripe_md **ea, struct obdo *src_oa,
 215                         struct obd_trans_info *oti,
 216                         struct lov_request_set **reqset);
 217 int cb_create_update(struct obd_info *oinfo, int rc);
 218 int lov_update_create_set(struct lov_request_set *set,
 219                           struct lov_request *req, int rc);
 220 int lov_fini_create_set(struct lov_request_set *set, struct lov_stripe_md **ea);
 221 int lov_prep_brw_set(struct obd_export *exp, struct obd_info *oinfo,
 222                      obd_count oa_bufs, struct brw_page *pga,
 223                      struct obd_trans_info *oti,
 224                      struct lov_request_set **reqset);
 225 int lov_fini_brw_set(struct lov_request_set *set);
 226 int lov_prep_getattr_set(struct obd_export *exp, struct obd_info *oinfo,
 227                          struct lov_request_set **reqset);
 228 int lov_fini_getattr_set(struct lov_request_set *set);
 229 int lov_prep_destroy_set(struct obd_export *exp, struct obd_info *oinfo,
 230                          struct obdo *src_oa, struct lov_stripe_md *lsm,
 231                          struct obd_trans_info *oti,
 232                          struct lov_request_set **reqset);
 233 int lov_update_destroy_set(struct lov_request_set *set,
 234                            struct lov_request *req, int rc);
 235 int lov_fini_destroy_set(struct lov_request_set *set);
 236 int lov_prep_setattr_set(struct obd_export *exp, struct obd_info *oinfo,
 237                          struct obd_trans_info *oti,
 238                          struct lov_request_set **reqset);
 239 int lov_update_setattr_set(struct lov_request_set *set,
 240                            struct lov_request *req, int rc);
 241 int lov_fini_setattr_set(struct lov_request_set *set);
 242 int lov_prep_punch_set(struct obd_export *exp, struct obd_info *oinfo,
 243                        struct obd_trans_info *oti,
 244                        struct lov_request_set **reqset);
 245 int lov_fini_punch_set(struct lov_request_set *set);
 246 int lov_prep_sync_set(struct obd_export *exp, struct obd_info *obd_info,
 247                       obd_off start, obd_off end,
 248                       struct lov_request_set **reqset);
 249 int lov_fini_sync_set(struct lov_request_set *set);
 250 int lov_prep_enqueue_set(struct obd_export *exp, struct obd_info *oinfo,
 251                          struct ldlm_enqueue_info *einfo,
 252                          struct lov_request_set **reqset);
 253 int lov_fini_enqueue_set(struct lov_request_set *set, __u32 mode, int rc,
 254                          struct ptlrpc_request_set *rqset);
 255 int lov_prep_match_set(struct obd_export *exp, struct obd_info *oinfo,
 256                        struct lov_stripe_md *lsm,
 257                        ldlm_policy_data_t *policy, __u32 mode,
 258                        struct lustre_handle *lockh,
 259                        struct lov_request_set **reqset);
 260 int lov_update_match_set(struct lov_request_set *set, struct lov_request *req,
 261                          int rc);
 262 int lov_fini_match_set(struct lov_request_set *set, __u32 mode, int flags);
 263 int lov_prep_cancel_set(struct obd_export *exp, struct obd_info *oinfo,
 264                         struct lov_stripe_md *lsm,
 265                         __u32 mode, struct lustre_handle *lockh,
 266                         struct lov_request_set **reqset);
 267 int lov_fini_cancel_set(struct lov_request_set *set);
 268 int lov_prep_statfs_set(struct obd_device *obd, struct obd_info *oinfo,
 269                         struct lov_request_set **reqset);
 270 void lov_update_statfs(struct obd_statfs *osfs, struct obd_statfs *lov_sfs,
 271                        int success);
 272 int lov_fini_statfs(struct obd_device *obd, struct obd_statfs *osfs,
 273                     int success);
 274 int lov_fini_statfs_set(struct lov_request_set *set);
 275 int lov_statfs_interpret(struct ptlrpc_request_set *rqset, void *data, int rc);
 276
 277 /* lov_obd.c */
 278 void lov_fix_desc(struct lov_desc *desc);
 279 void lov_fix_desc_stripe_size(__u64 *val);
 280 void lov_fix_desc_stripe_count(__u32 *val);
 281 void lov_fix_desc_pattern(__u32 *val);
 282 void lov_fix_desc_qos_maxage(__u32 *val);
 283 int lov_get_stripecnt(struct lov_obd *lov, __u32 stripe_count);
 284
 285 /* lov_log.c */
 286 int lov_llog_init(struct obd_device *obd, struct obd_device *tgt,
 287                   int *index);
 288 int lov_llog_finish(struct obd_device *obd, int count);
 289
 290 /* lov_pack.c */
 291 int lov_packmd(struct obd_export *exp, struct lov_mds_md **lmm,
 292                struct lov_stripe_md *lsm);
 293 int lov_unpackmd(struct obd_export *exp, struct lov_stripe_md **lsmp,
 294                  struct lov_mds_md *lmm, int lmm_bytes);
 295 int lov_setstripe(struct obd_export *exp,
 296                   struct lov_stripe_md **lsmp, struct lov_user_md *lump);
 297 int lov_setea(struct obd_export *exp, struct lov_stripe_md **lsmp,
 298               struct lov_user_md *lump);
 299 int lov_getstripe(struct obd_export *exp,
 300                   struct lov_stripe_md *lsm, struct lov_user_md *lump);
 301 int lov_alloc_memmd(struct lov_stripe_md **lsmp, int stripe_count,
 302                       int pattern, int magic);
 303 void lov_free_memmd(struct lov_stripe_md **lsmp);
 304
 305 void lov_dump_lmm_v1(int level, struct lov_mds_md_v1 *lmm);
 306 void lov_dump_lmm_join(int level, struct lov_mds_md_join *lmmj);
 307 void lov_dump_lmm_v3(int level, struct lov_mds_md_v3 *lmm);
 308 void lov_dump_lmm(int level, void *lmm);
 309
 310 /* lov_ea.c */
 311 int lov_unpackmd_join(struct lov_obd *lov, struct lov_stripe_md *lsm,
 312                       struct lov_mds_md *lmm);
 313 struct lov_stripe_md *lsm_alloc_plain(int stripe_count, int *size);
 314 void lsm_free_plain(struct lov_stripe_md *lsm);
 315
 316 struct lov_extent *lovea_idx2le(struct lov_stripe_md *lsm, int stripe_no);
 317 struct lov_extent *lovea_off2le(struct lov_stripe_md *lsm, obd_off lov_off);
 318 int lovea_destroy_object(struct lov_obd *lov, struct lov_stripe_md *lsm,
 319                          struct obdo *oa, void *data);
 320 /* lproc_lov.c */
 321 extern struct file_operations lov_proc_target_fops;
 322 #ifdef LPROCFS
 323 void lprocfs_lov_init_vars(struct lprocfs_static_vars *lvars);
 324 #else
 325 static inline void lprocfs_lov_init_vars(struct lprocfs_static_vars *lvars)
 326 {
 327         memset(lvars, 0, sizeof(*lvars));
 328 }
 329 #endif
 330
 331 /* pools */
 332 extern lustre_hash_ops_t pool_hash_operations;
 333
 334 /* ost_pool methods */
 335 int lov_ost_pool_init(struct ost_pool *op, unsigned int count);
 336 int lov_ost_pool_extend(struct ost_pool *op, unsigned int min_count);
 337 int lov_ost_pool_add(struct ost_pool *op, __u32 idx, unsigned int min_count);
 338 int lov_ost_pool_remove(struct ost_pool *op, __u32 idx);
 339 int lov_ost_pool_free(struct ost_pool *op);
 340
 341 /* high level pool methods */
 342 int lov_pool_new(struct obd_device *obd, char *poolname);
 343 int lov_pool_del(struct obd_device *obd, char *poolname);
 344 int lov_pool_add(struct obd_device *obd, char *poolname, char *ostname);
 345 int lov_pool_remove(struct obd_device *obd, char *poolname, char *ostname);
 346 void lov_dump_pool(int level, struct pool_desc *pool);
 347 struct pool_desc *lov_find_pool(struct lov_obd *lov, char *poolname);
 348 int lov_check_index_in_pool(__u32 idx, struct pool_desc *pool);
 349 void lov_pool_putref(struct pool_desc *pool);
 350
 351 #if BITS_PER_LONG == 64
 352 # define ll_do_div64(n,base) ({                                 \
 353         uint64_t __base = (base);                               \
 354         uint64_t __rem;                                         \
 355         __rem = ((uint64_t)(n)) % __base;                       \
 356         (n) = ((uint64_t)(n)) / __base;                         \
 357         __rem;                                                  \
 358   })
 359 #elif BITS_PER_LONG == 32
 360 # define ll_do_div64(n,base) ({                                 \
 361         uint64_t __rem;                                         \
 362         if ((sizeof(base) > 4) && (((base)&0xffffffff00000000ULL) != 0)) { \
 363                 int __remainder;                                \
 364                 LASSERTF(!((base) & (LOV_MIN_STRIPE_SIZE - 1)), "64 bit lov "\
 365                           "division %llu / %llu\n", (n), (base)); \
 366                 __remainder = (n) & (LOV_MIN_STRIPE_SIZE - 1);  \
 367                 (n) >>= LOV_MIN_STRIPE_BITS;                    \
 368                 (base) >>= LOV_MIN_STRIPE_BITS;                 \
 369                 __rem = do_div(n, base);                        \
 370                 __rem <<= LOV_MIN_STRIPE_BITS;                  \
 371                 __rem += __remainder;                           \
 372         } else {                                                \
 373                 __rem = do_div(n, base);                        \
 374         }                                                       \
 375         __rem;                                                  \
 376   })
 377 #else
 378 #error Unsupported architecture.
 379 #endif
 380
 381 #endif