lustre/llite/vvp_internal.h

   1 /*
   2  * GPL HEADER START
   3  *
   4  * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
   5  *
   6  * This program is free software; you can redistribute it and/or modify
   7  * it under the terms of the GNU General Public License version 2 only,
   8  * as published by the Free Software Foundation.
   9  *
  10  * This program is distributed in the hope that it will be useful, but
  11  * WITHOUT ANY WARRANTY; without even the implied warranty of
  12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13  * General Public License version 2 for more details (a copy is included
  14  * in the LICENSE file that accompanied this code).
  15  *
  16  * You should have received a copy of the GNU General Public License
  17  * version 2 along with this program; If not, see
  18  * http://www.sun.com/software/products/lustre/docs/GPLv2.pdf
  19  *
  20  * Please contact Sun Microsystems, Inc., 4150 Network Circle, Santa Clara,
  21  * CA 95054 USA or visit www.sun.com if you need additional information or
  22  * have any questions.
  23  *
  24  * GPL HEADER END
  25  */
  26 /*
  27  * Copyright (c) 2002, 2010, Oracle and/or its affiliates. All rights reserved.
  28  * Use is subject to license terms.
  29  *
  30  * Copyright (c) 2013, 2014, Intel Corporation.
  31  */
  32 /*
  33  * This file is part of Lustre, http://www.lustre.org/
  34  * Lustre is a trademark of Sun Microsystems, Inc.
  35  *
  36  * Internal definitions for VVP layer.
  37  *
  38  *   Author: Nikita Danilov <nikita.danilov@sun.com>
  39  */
  40
  41 #ifndef VVP_INTERNAL_H
  42 #define VVP_INTERNAL_H
  43
  44 #include <lustre/lustre_idl.h>
  45 #include <cl_object.h>
  46
  47 enum obd_notify_event;
  48 struct inode;
  49 struct lov_stripe_md;
  50 struct lustre_md;
  51 struct obd_capa;
  52 struct obd_device;
  53 struct obd_export;
  54 struct page;
  55
  56 blkcnt_t dirty_cnt(struct inode *inode);
  57
  58 int cl_glimpse_size0(struct inode *inode, int agl);
  59 int cl_glimpse_lock(const struct lu_env *env, struct cl_io *io,
  60                     struct inode *inode, struct cl_object *clob, int agl);
  61
  62 static inline int cl_glimpse_size(struct inode *inode)
  63 {
  64         return cl_glimpse_size0(inode, 0);
  65 }
  66
  67 static inline int cl_agl(struct inode *inode)
  68 {
  69         return cl_glimpse_size0(inode, 1);
  70 }
  71
  72 /**
  73  * Locking policy for setattr.
  74  */
  75 enum ccc_setattr_lock_type {
  76         /** Locking is done by server */
  77         SETATTR_NOLOCK,
  78         /** Extent lock is enqueued */
  79         SETATTR_EXTENT_LOCK,
  80         /** Existing local extent lock is used */
  81         SETATTR_MATCH_LOCK
  82 };
  83
  84 enum vvp_io_subtype {
  85         /** normal IO */
  86         IO_NORMAL,
  87         /** io started from splice_{read|write} */
  88         IO_SPLICE,
  89 };
  90
  91 /**
  92  * IO state private to VVP layer.
  93  */
  94 struct vvp_io {
  95         /** super class */
  96         struct cl_io_slice     vui_cl;
  97         struct cl_io_lock_link vui_link;
  98         /**
  99          * I/O vector information to or from which read/write is going.
 100          */
 101         struct iovec *vui_iov;
 102         unsigned long vui_nrsegs;
 103         /**
 104          * Total iov count for left IO.
 105          */
 106         unsigned long vui_tot_nrsegs;
 107         /**
 108          * Old length for iov that was truncated partially.
 109          */
 110         size_t vui_iov_olen;
 111         /**
 112          * Total size for the left IO.
 113          */
 114         size_t vui_tot_count;
 115
 116         union {
 117                 struct vvp_fault_io {
 118                         /**
 119                          * Inode modification time that is checked across DLM
 120                          * lock request.
 121                          */
 122                         time_t                   ft_mtime;
 123                         struct vm_area_struct   *ft_vma;
 124                         /**
 125                          *  locked page returned from vvp_io
 126                          */
 127                         struct page             *ft_vmpage;
 128                         /**
 129                          * kernel fault info
 130                          */
 131                         struct vm_fault         *ft_vmf;
 132                         /**
 133                          * fault API used bitflags for return code.
 134                          */
 135                         unsigned int             ft_flags;
 136                         /**
 137                          * check that flags are from filemap_fault
 138                          */
 139                         bool                     ft_flags_valid;
 140                 } fault;
 141                 struct {
 142                         enum ccc_setattr_lock_type vui_local_lock;
 143                 } setattr;
 144                 struct {
 145                         struct pipe_inode_info  *vui_pipe;
 146                         unsigned int             vui_flags;
 147                 } splice;
 148                 struct {
 149                         struct cl_page_list vui_queue;
 150                         unsigned long vui_written;
 151                         int vui_from;
 152                         int vui_to;
 153                 } write;
 154         } u;
 155
 156         enum vvp_io_subtype     vui_io_subtype;
 157
 158         /**
 159          * Layout version when this IO is initialized
 160          */
 161         __u32                   vui_layout_gen;
 162         /**
 163         * File descriptor against which IO is done.
 164         */
 165         struct ll_file_data     *vui_fd;
 166         struct kiocb            *vui_iocb;
 167
 168         /* Readahead state. */
 169         pgoff_t vui_ra_start;
 170         pgoff_t vui_ra_count;
 171         /* Set when vui_ra_{start,count} have been initialized. */
 172         bool            vui_ra_valid;
 173 };
 174
 175 extern struct lu_context_key ccc_key;
 176 extern struct lu_context_key vvp_session_key;
 177
 178 extern struct kmem_cache *vvp_lock_kmem;
 179 extern struct kmem_cache *vvp_object_kmem;
 180 extern struct kmem_cache *vvp_req_kmem;
 181
 182 struct ccc_thread_info {
 183         struct cl_lock          cti_lock;
 184         struct cl_lock_descr    cti_descr;
 185         struct cl_io            cti_io;
 186         struct cl_attr          cti_attr;
 187 };
 188
 189 static inline struct ccc_thread_info *ccc_env_info(const struct lu_env *env)
 190 {
 191         struct ccc_thread_info      *info;
 192
 193         info = lu_context_key_get(&env->le_ctx, &ccc_key);
 194         LASSERT(info != NULL);
 195
 196         return info;
 197 }
 198
 199 static inline struct cl_lock *ccc_env_lock(const struct lu_env *env)
 200 {
 201         struct cl_lock *lock = &ccc_env_info(env)->cti_lock;
 202
 203         memset(lock, 0, sizeof(*lock));
 204
 205         return lock;
 206 }
 207
 208 static inline struct cl_attr *ccc_env_thread_attr(const struct lu_env *env)
 209 {
 210         struct cl_attr *attr = &ccc_env_info(env)->cti_attr;
 211
 212         memset(attr, 0, sizeof(*attr));
 213
 214         return attr;
 215 }
 216
 217 static inline struct cl_io *ccc_env_thread_io(const struct lu_env *env)
 218 {
 219         struct cl_io *io = &ccc_env_info(env)->cti_io;
 220
 221         memset(io, 0, sizeof(*io));
 222
 223         return io;
 224 }
 225
 226 struct vvp_session {
 227         struct vvp_io cs_ios;
 228 };
 229
 230 static inline struct vvp_session *vvp_env_session(const struct lu_env *env)
 231 {
 232         struct vvp_session *ses;
 233
 234         ses = lu_context_key_get(env->le_ses, &vvp_session_key);
 235         LASSERT(ses != NULL);
 236
 237         return ses;
 238 }
 239
 240 static inline struct vvp_io *vvp_env_io(const struct lu_env *env)
 241 {
 242         return &vvp_env_session(env)->cs_ios;
 243 }
 244
 245 /**
 246  * ccc-private object state.
 247  */
 248 struct vvp_object {
 249         struct cl_object_header vob_header;
 250         struct cl_object        vob_cl;
 251         struct inode           *vob_inode;
 252
 253         /**
 254          * A list of dirty pages pending IO in the cache. Used by
 255          * SOM. Protected by ll_inode_info::lli_lock.
 256          *
 257          * \see vvp_page::vpg_pending_linkage
 258          */
 259         struct list_head        vob_pending_list;
 260
 261         /**
 262          * Number of transient pages.  This is no longer protected by i_sem,
 263          * and needs to be atomic.  This is not actually used for anything,
 264          * and can probably be removed.
 265          */
 266         atomic_t                vob_transient_pages;
 267         /**
 268          * Number of outstanding mmaps on this file.
 269          *
 270          * \see ll_vm_open(), ll_vm_close().
 271          */
 272         atomic_t                vob_mmap_cnt;
 273
 274         /**
 275          * various flags
 276          * vob_discard_page_warned
 277          *     if pages belonging to this object are discarded when a client
 278          * is evicted, some debug info will be printed, this flag will be set
 279          * during processing the first discarded page, then avoid flooding
 280          * debug message for lots of discarded pages.
 281          *
 282          * \see ll_dirty_page_discard_warn.
 283          */
 284         unsigned int            vob_discard_page_warned:1;
 285 };
 286
 287 /**
 288  * VVP-private page state.
 289  */
 290 struct vvp_page {
 291         struct cl_page_slice vpg_cl;
 292         unsigned        vpg_defer_uptodate:1,
 293                         vpg_ra_used:1,
 294                         vpg_write_queued:1;
 295         /**
 296          * Non-empty iff this page is already counted in
 297          * vvp_object::vob_pending_list. This list is only used as a flag,
 298          * that is, never iterated through, only checked for list_empty(), but
 299          * having a list is useful for debugging.
 300          */
 301         struct list_head vpg_pending_linkage;
 302         /** VM page */
 303         struct page     *vpg_page;
 304 };
 305
 306 static inline struct vvp_page *cl2vvp_page(const struct cl_page_slice *slice)
 307 {
 308         return container_of(slice, struct vvp_page, vpg_cl);
 309 }
 310
 311 static inline pgoff_t vvp_index(struct vvp_page *vpg)
 312 {
 313         return vpg->vpg_cl.cpl_index;
 314 }
 315
 316 struct vvp_device {
 317         struct cl_device    vdv_cl;
 318         struct super_block *vdv_sb;
 319         struct cl_device   *vdv_next;
 320 };
 321
 322 struct vvp_lock {
 323         struct cl_lock_slice vlk_cl;
 324 };
 325
 326 struct vvp_req {
 327         struct cl_req_slice vrq_cl;
 328 };
 329
 330 void *ccc_key_init(const struct lu_context *ctx, struct lu_context_key *key);
 331 void ccc_key_fini(const struct lu_context *ctx, struct lu_context_key *key,
 332                   void *data);
 333
 334 void ccc_umount(const struct lu_env *env, struct cl_device *dev);
 335 int ccc_global_init(struct lu_device_type *device_type);
 336 void ccc_global_fini(struct lu_device_type *device_type);
 337
 338 static inline struct lu_device *vvp2lu_dev(struct vvp_device *vdv)
 339 {
 340         return &vdv->vdv_cl.cd_lu_dev;
 341 }
 342
 343 static inline struct vvp_device *lu2vvp_dev(const struct lu_device *d)
 344 {
 345         return container_of0(d, struct vvp_device, vdv_cl.cd_lu_dev);
 346 }
 347
 348 static inline struct vvp_device *cl2vvp_dev(const struct cl_device *d)
 349 {
 350         return container_of0(d, struct vvp_device, vdv_cl);
 351 }
 352
 353 static inline struct vvp_object *cl2vvp(const struct cl_object *obj)
 354 {
 355         return container_of0(obj, struct vvp_object, vob_cl);
 356 }
 357
 358 static inline struct vvp_object *lu2vvp(const struct lu_object *obj)
 359 {
 360         return container_of0(obj, struct vvp_object, vob_cl.co_lu);
 361 }
 362
 363 static inline struct inode *vvp_object_inode(const struct cl_object *obj)
 364 {
 365         return cl2vvp(obj)->vob_inode;
 366 }
 367
 368 int vvp_object_invariant(const struct cl_object *obj);
 369 struct vvp_object *cl_inode2vvp(struct inode *inode);
 370
 371 static inline struct page *cl2vm_page(const struct cl_page_slice *slice)
 372 {
 373         return cl2vvp_page(slice)->vpg_page;
 374 }
 375
 376 static inline struct vvp_lock *cl2vvp_lock(const struct cl_lock_slice *slice)
 377 {
 378         return container_of(slice, struct vvp_lock, vlk_cl);
 379 }
 380
 381 int cl_setattr_ost(struct inode *inode, const struct iattr *attr,
 382                    struct obd_capa *capa);
 383
 384 int cl_file_inode_init(struct inode *inode, struct lustre_md *md);
 385 void cl_inode_fini(struct inode *inode);
 386 int cl_local_size(struct inode *inode);
 387
 388 __u16 ll_dirent_type_get(struct lu_dirent *ent);
 389 __u64 cl_fid_build_ino(const struct lu_fid *fid, int api32);
 390 __u32 cl_fid_build_gen(const struct lu_fid *fid);
 391
 392 #ifdef CONFIG_LUSTRE_DEBUG_EXPENSIVE_CHECK
 393 # define CLOBINVRNT(env, clob, expr)                                    \
 394         do {                                                            \
 395                 if (unlikely(!(expr))) {                                \
 396                         LU_OBJECT_DEBUG(D_ERROR, (env), &(clob)->co_lu, \
 397                                         #expr "\n");                    \
 398                         LINVRNT(0);                                     \
 399                 }                                                       \
 400         } while (0)
 401 #else /* !CONFIG_LUSTRE_DEBUG_EXPENSIVE_CHECK */
 402 # define CLOBINVRNT(env, clob, expr)                                    \
 403         ((void)sizeof(env), (void)sizeof(clob), (void)sizeof !!(expr))
 404 #endif /* CONFIG_LUSTRE_DEBUG_EXPENSIVE_CHECK */
 405
 406 int cl_init_ea_size(struct obd_export *md_exp, struct obd_export *dt_exp);
 407 int cl_ocd_update(struct obd_device *host,
 408                   struct obd_device *watched,
 409                   enum obd_notify_event ev, void *owner, void *data);
 410
 411 struct ccc_grouplock {
 412         struct lu_env   *cg_env;
 413         struct cl_io    *cg_io;
 414         struct cl_lock  *cg_lock;
 415         unsigned long    cg_gid;
 416 };
 417
 418 int cl_get_grouplock(struct cl_object *obj, unsigned long gid, int nonblock,
 419                      struct ccc_grouplock *cg);
 420 void cl_put_grouplock(struct ccc_grouplock *cg);
 421
 422 /**
 423  * New interfaces to get and put lov_stripe_md from lov layer. This violates
 424  * layering because lov_stripe_md is supposed to be a private data in lov.
 425  *
 426  * NB: If you find you have to use these interfaces for your new code, please
 427  * think about it again. These interfaces may be removed in the future for
 428  * better layering. */
 429 struct lov_stripe_md *lov_lsm_get(struct cl_object *clobj);
 430 void lov_lsm_put(struct cl_object *clobj, struct lov_stripe_md *lsm);
 431 int lov_read_and_clear_async_rc(struct cl_object *clob);
 432
 433 struct lov_stripe_md *ccc_inode_lsm_get(struct inode *inode);
 434 void ccc_inode_lsm_put(struct inode *inode, struct lov_stripe_md *lsm);
 435
 436 enum {
 437         LUSTRE_OPC_MKDIR        = 0,
 438         LUSTRE_OPC_SYMLINK      = 1,
 439         LUSTRE_OPC_MKNOD        = 2,
 440         LUSTRE_OPC_CREATE       = 3,
 441         LUSTRE_OPC_ANY          = 5,
 442 };
 443
 444 int vvp_io_init(const struct lu_env *env, struct cl_object *obj,
 445                 struct cl_io *io);
 446 int vvp_io_write_commit(const struct lu_env *env, struct cl_io *io);
 447 int vvp_lock_init(const struct lu_env *env, struct cl_object *obj,
 448                   struct cl_lock *lock, const struct cl_io *io);
 449 int vvp_page_init(const struct lu_env *env, struct cl_object *obj,
 450                   struct cl_page *page, pgoff_t index);
 451 int vvp_req_init(const struct lu_env *env, struct cl_device *dev,
 452                  struct cl_req *req);
 453 struct lu_object *vvp_object_alloc(const struct lu_env *env,
 454                                    const struct lu_object_header *hdr,
 455                                    struct lu_device *dev);
 456
 457 extern const struct file_operations vvp_dump_pgcache_file_ops;
 458
 459 #endif /* VVP_INTERNAL_H */