lustre/include/lu_target.h

   1 /*
   2  * GPL HEADER START
   3  *
   4  * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
   5  *
   6  * This program is free software; you can redistribute it and/or modify
   7  * it under the terms of the GNU General Public License version 2 only,
   8  * as published by the Free Software Foundation.
   9  *
  10  * This program is distributed in the hope that it will be useful, but
  11  * WITHOUT ANY WARRANTY; without even the implied warranty of
  12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13  * General Public License version 2 for more details (a copy is included
  14  * in the LICENSE file that accompanied this code).
  15  *
  16  * You should have received a copy of the GNU General Public License
  17  * version 2 along with this program; If not, see
  18  * http://www.gnu.org/licenses/gpl-2.0.html
  19  *
  20  * GPL HEADER END
  21  */
  22 /*
  23  * Copyright (c) 2009, 2010, Oracle and/or its affiliates. All rights reserved.
  24  * Use is subject to license terms.
  25  *
  26  * Copyright (c) 2011, 2017, Intel Corporation.
  27  */
  28 /*
  29  * This file is part of Lustre, http://www.lustre.org/
  30  * Lustre is a trademark of Sun Microsystems, Inc.
  31  */
  32
  33 #ifndef _LUSTRE_LU_TARGET_H
  34 #define _LUSTRE_LU_TARGET_H
  35
  36 #include <dt_object.h>
  37 #include <lustre_export.h>
  38 #include <lustre_update.h>
  39 #include <lustre_disk.h>
  40 #include <lustre_lfsck.h>
  41
  42 /* Each one represents a distribute transaction replay
  43  * operation, and updates on each MDTs are linked to
  44  * dtr_sub_list */
  45 struct distribute_txn_replay_req {
  46         /* update record, may be vmalloc'd */
  47         struct llog_update_record *dtrq_lur;
  48         int                     dtrq_lur_size;
  49
  50         /* linked to the distribute transaction replay
  51          * list (tdtd_replay_list) */
  52         struct list_head        dtrq_list;
  53         __u64                   dtrq_master_transno;
  54         __u64                   dtrq_batchid;
  55         __u64                   dtrq_xid;
  56
  57         /* all of sub updates are linked here */
  58         struct list_head        dtrq_sub_list;
  59         spinlock_t              dtrq_sub_list_lock;
  60
  61         /* If the local update has been executed during replay */
  62         __u32                   dtrq_local_update_executed:1;
  63 };
  64
  65 /* Each one represents a sub replay item under a distribute
  66  * transaction. A distribute transaction will be operated in
  67  * two or more MDTs, and updates on each MDT will be represented
  68  * by this structure */
  69 struct distribute_txn_replay_req_sub {
  70         __u32                   dtrqs_mdt_index;
  71
  72         /* All of cookies for the update will be linked here */
  73         spinlock_t              dtrqs_cookie_list_lock;
  74         struct list_head        dtrqs_cookie_list;
  75         struct list_head        dtrqs_list;
  76 };
  77
  78 struct target_distribute_txn_data;
  79 typedef int (*distribute_txn_replay_handler_t)(struct lu_env *env,
  80                                        struct target_distribute_txn_data *tdtd,
  81                                        struct distribute_txn_replay_req *dtrq);
  82 typedef char *(*target_show_update_logs_retrievers_t)(void *data, int *size,
  83                                                       int *count);
  84 struct target_distribute_txn_data {
  85         /* Distribution ID is used to identify updates log on different
  86          * MDTs for one operation */
  87         spinlock_t              tdtd_batchid_lock;
  88         __u64                   tdtd_batchid;
  89         struct lu_target        *tdtd_lut;
  90         struct dt_object        *tdtd_batchid_obj;
  91         struct dt_device        *tdtd_dt;
  92
  93         /* Committed batchid for distribute transaction */
  94         __u64                   tdtd_committed_batchid;
  95
  96         /* List for distribute transaction */
  97         struct list_head        tdtd_list;
  98
  99         /* Threads to manage distribute transaction */
 100         wait_queue_head_t       tdtd_commit_thread_waitq;
 101         atomic_t                tdtd_refcount;
 102
 103         /* recovery update */
 104         distribute_txn_replay_handler_t tdtd_replay_handler;
 105         struct list_head                tdtd_replay_list;
 106         struct list_head                tdtd_replay_finish_list;
 107         spinlock_t                      tdtd_replay_list_lock;
 108         /* last replay update transno */
 109         __u32                           tdtd_replay_ready:1;
 110
 111         /* Manage the llog recovery threads */
 112         atomic_t                tdtd_recovery_threads_count;
 113         wait_queue_head_t       tdtd_recovery_threads_waitq;
 114         target_show_update_logs_retrievers_t
 115                                 tdtd_show_update_logs_retrievers;
 116         void                    *tdtd_show_retrievers_cbdata;
 117 };
 118
 119 struct tg_grants_data {
 120         /* grants: all values in bytes */
 121         /* grant lock to protect all grant counters */
 122         spinlock_t               tgd_grant_lock;
 123         /* total amount of dirty data reported by clients in incoming obdo */
 124         u64                      tgd_tot_dirty;
 125         /* sum of filesystem space granted to clients for async writes */
 126         u64                      tgd_tot_granted;
 127         /* grant used by I/Os in progress (between prepare and commit) */
 128         u64                      tgd_tot_pending;
 129         /* amount of available space in percentage that is never used for
 130          * grants, used on MDT to always keep space for metadata. */
 131         u64                      tgd_reserved_pcnt;
 132         /* number of clients using grants */
 133         int                      tgd_tot_granted_clients;
 134         /* shall we grant space to clients not
 135          * supporting OBD_CONNECT_GRANT_PARAM? */
 136         int                      tgd_grant_compat_disable;
 137         /* protect all statfs-related counters */
 138         spinlock_t               tgd_osfs_lock;
 139         time64_t                 tgd_osfs_age;
 140         int                      tgd_blockbits;
 141         /* counters used during statfs update, protected by ofd_osfs_lock.
 142          * record when some statfs refresh are in progress */
 143         int                      tgd_statfs_inflight;
 144         /* writes between prep & commit which might be accounted twice in
 145          * ofd_osfs.os_bavail */
 146         u64                      tgd_osfs_unstable;
 147         /* track writes completed while statfs refresh is underway.
 148          * tracking is only effective when ofd_statfs_inflight > 1 */
 149         u64                      tgd_osfs_inflight;
 150         /* statfs optimization: we cache a bit  */
 151         struct obd_statfs        tgd_osfs;
 152 };
 153
 154 struct lu_target {
 155         struct obd_device       *lut_obd;
 156         struct dt_device        *lut_bottom;
 157         struct dt_device_param   lut_dt_conf;
 158
 159         struct target_distribute_txn_data *lut_tdtd;
 160         struct ptlrpc_thread    lut_tdtd_commit_thread;
 161
 162         /* supported opcodes and handlers for this target */
 163         struct tgt_opc_slice    *lut_slice;
 164         __u32                    lut_reply_fail_id;
 165         __u32                    lut_request_fail_id;
 166
 167         /* sptlrpc rules */
 168         rwlock_t                 lut_sptlrpc_lock;
 169         struct sptlrpc_rule_set  lut_sptlrpc_rset;
 170         spinlock_t               lut_flags_lock;
 171         unsigned int             lut_syncjournal:1,
 172                                  lut_sync_lock_cancel:2,
 173                                  /* e.g. OST node */
 174                                  lut_no_reconstruct:1;
 175         /** last_rcvd file */
 176         struct dt_object        *lut_last_rcvd;
 177         /* transaction callbacks */
 178         struct dt_txn_callback   lut_txn_cb;
 179         /** server data in last_rcvd file */
 180         struct lr_server_data    lut_lsd;
 181         /** Server last transaction number */
 182         __u64                    lut_last_transno;
 183         /** Lock protecting last transaction number */
 184         spinlock_t               lut_translock;
 185         /** Lock protecting client bitmap */
 186         spinlock_t               lut_client_bitmap_lock;
 187         /** Bitmap of known clients */
 188         unsigned long           *lut_client_bitmap;
 189         /* Number of clients supporting multiple modify RPCs
 190          * recorded in the bitmap */
 191         atomic_t                 lut_num_clients;
 192         /* Client generation to identify client slot reuse */
 193         atomic_t                 lut_client_generation;
 194         /** reply_data file */
 195         struct dt_object        *lut_reply_data;
 196         /** Bitmap of used slots in the reply data file */
 197         unsigned long           **lut_reply_bitmap;
 198         /** target sync count, used for debug & test */
 199         atomic_t                 lut_sync_count;
 200
 201         /** cross MDT locks which should trigger Sync-on-Lock-Cancel */
 202         spinlock_t               lut_slc_locks_guard;
 203         struct list_head         lut_slc_locks;
 204
 205         /* target grants fields */
 206         struct tg_grants_data    lut_tgd;
 207
 208         /* FMD (file modification data) values */
 209         int                      lut_fmd_max_num;
 210         time64_t                 lut_fmd_max_age;
 211 };
 212
 213 #define LUT_FMD_MAX_NUM_DEFAULT 128
 214 #define LUT_FMD_MAX_AGE_DEFAULT (obd_timeout + 10)
 215
 216 /* number of slots in reply bitmap */
 217 #define LUT_REPLY_SLOTS_PER_CHUNK (1<<20)
 218 #define LUT_REPLY_SLOTS_MAX_CHUNKS 16
 219
 220 /**
 221  * Target reply data
 222  */
 223 struct tg_reply_data {
 224         /** chain of reply data anchored in tg_export_data */
 225         struct list_head        trd_list;
 226         /** copy of on-disk reply data */
 227         struct lsd_reply_data   trd_reply;
 228         /** versions for Version Based Recovery */
 229         __u64                   trd_pre_versions[4];
 230         /** slot index in reply_data file */
 231         int                     trd_index;
 232         /** tag the client used */
 233         __u16                   trd_tag;
 234 };
 235
 236 extern struct lu_context_key tgt_session_key;
 237
 238 struct tgt_session_info {
 239         /*
 240          * The following members will be filled explicitly
 241          * with specific data in tgt_ses_init().
 242          */
 243         struct req_capsule      *tsi_pill;
 244
 245         /*
 246          * Lock request for "habeo clavis" operations.
 247          */
 248         struct ldlm_request     *tsi_dlm_req;
 249
 250         /* although we have export in req, there are cases when it is not
 251          * available, e.g. closing files upon export destroy */
 252         struct obd_export       *tsi_exp;
 253         const struct lu_env     *tsi_env;
 254         struct lu_target        *tsi_tgt;
 255
 256         const struct mdt_body   *tsi_mdt_body;
 257         struct ost_body         *tsi_ost_body;
 258         struct lu_object        *tsi_corpus;
 259
 260         struct lu_fid            tsi_fid;
 261         struct ldlm_res_id       tsi_resid;
 262
 263         /* object affected by VBR, for last_rcvd_update */
 264         struct dt_object        *tsi_vbr_obj;
 265         /* opdata for mdt_reint_open(), has the same value as
 266          * ldlm_reply:lock_policy_res1.  The tgt_update_last_rcvd() stores
 267          * this value onto disk for recovery when tgt_txn_stop_cb() is called.
 268          */
 269         __u64                    tsi_opdata;
 270
 271         /*
 272          * Additional fail id that can be set by handler.
 273          */
 274         int                      tsi_reply_fail_id;
 275         bool                     tsi_preprocessed;
 276         /* request JobID */
 277         char                    *tsi_jobid;
 278
 279         /* update replay */
 280         __u64                   tsi_xid;
 281         __u32                   tsi_result;
 282         __u32                   tsi_client_gen;
 283 };
 284
 285 static inline struct tgt_session_info *tgt_ses_info(const struct lu_env *env)
 286 {
 287         struct tgt_session_info *tsi;
 288
 289         LASSERT(env->le_ses != NULL);
 290         tsi = lu_context_key_get(env->le_ses, &tgt_session_key);
 291         LASSERT(tsi);
 292         return tsi;
 293 }
 294
 295 static inline void tgt_vbr_obj_set(const struct lu_env *env,
 296                                    struct dt_object *obj)
 297 {
 298         struct tgt_session_info *tsi;
 299
 300         if (env->le_ses != NULL) {
 301                 tsi = tgt_ses_info(env);
 302                 tsi->tsi_vbr_obj = obj;
 303         }
 304 }
 305
 306 static inline void tgt_opdata_set(const struct lu_env *env, __u64 flags)
 307 {
 308         struct tgt_session_info *tsi;
 309
 310         if (env->le_ses != NULL) {
 311                 tsi = tgt_ses_info(env);
 312                 tsi->tsi_opdata |= flags;
 313         }
 314 }
 315
 316 static inline void tgt_opdata_clear(const struct lu_env *env, __u64 flags)
 317 {
 318         struct tgt_session_info *tsi;
 319
 320         if (env->le_ses != NULL) {
 321                 tsi = tgt_ses_info(env);
 322                 tsi->tsi_opdata &= ~flags;
 323         }
 324 }
 325
 326 /*
 327  * Generic unified target support.
 328  */
 329 enum tgt_handler_flags {
 330         /*
 331          * struct *_body is passed in the incoming message, and object
 332          * identified by this fid exists on disk.
 333          */
 334         HAS_BODY = (1 << 0),
 335         /*
 336          * struct ldlm_request is passed in the incoming message.
 337          */
 338         HAS_KEY = (1 << 1),
 339         /*
 340          * this request has fixed reply format, so that reply message can be
 341          * packed by generic code.
 342          */
 343         HAS_REPLY = (1 << 2),
 344         /*
 345          * this request will modify something, so check whether the file system
 346          * is readonly or not, then return -EROFS to client asap if necessary.
 347          */
 348         IS_MUTABLE = (1 << 3)
 349 };
 350
 351 struct tgt_handler {
 352         /* The name of this handler. */
 353         const char              *th_name;
 354         /* Fail id, check at the beginning */
 355         int                      th_fail_id;
 356         /* Operation code */
 357         __u32                    th_opc;
 358         /* Flags in enum tgt_handler_flags */
 359         __u32                    th_flags;
 360         /* Request version for this opcode */
 361         enum lustre_msg_version  th_version;
 362         /* Handler function */
 363         int                     (*th_act)(struct tgt_session_info *tsi);
 364         /* Handler function for high priority requests */
 365         void                    (*th_hp)(struct tgt_session_info *tsi);
 366         /* Request format for this request */
 367         const struct req_format *th_fmt;
 368 };
 369
 370 struct tgt_opc_slice {
 371         __u32                    tos_opc_start; /* First op code */
 372         __u32                    tos_opc_end; /* Last op code */
 373         struct tgt_handler      *tos_hs; /* Registered handler */
 374 };
 375
 376 static inline struct ptlrpc_request *tgt_ses_req(struct tgt_session_info *tsi)
 377 {
 378         return tsi->tsi_pill ? tsi->tsi_pill->rc_req : NULL;
 379 }
 380
 381 static inline __u64 tgt_conn_flags(struct tgt_session_info *tsi)
 382 {
 383         LASSERT(tsi->tsi_exp);
 384         return exp_connect_flags(tsi->tsi_exp);
 385 }
 386
 387 static inline int req_is_replay(struct ptlrpc_request *req)
 388 {
 389         LASSERT(req->rq_reqmsg);
 390         return !!(lustre_msg_get_flags(req->rq_reqmsg) & MSG_REPLAY);
 391 }
 392
 393 static inline bool tgt_is_multimodrpcs_client(struct obd_export *exp)
 394 {
 395         return exp_connect_flags(exp) & OBD_CONNECT_MULTIMODRPCS;
 396 }
 397
 398
 399 /* target/tgt_handler.c */
 400 int tgt_request_handle(struct ptlrpc_request *req);
 401 char *tgt_name(struct lu_target *tgt);
 402 void tgt_counter_incr(struct obd_export *exp, int opcode);
 403 int tgt_connect_check_sptlrpc(struct ptlrpc_request *req,
 404                               struct obd_export *exp);
 405 int tgt_adapt_sptlrpc_conf(struct lu_target *tgt);
 406 int tgt_connect(struct tgt_session_info *tsi);
 407 int tgt_disconnect(struct tgt_session_info *uti);
 408 int tgt_obd_ping(struct tgt_session_info *tsi);
 409 int tgt_enqueue(struct tgt_session_info *tsi);
 410 int tgt_convert(struct tgt_session_info *tsi);
 411 int tgt_bl_callback(struct tgt_session_info *tsi);
 412 int tgt_cp_callback(struct tgt_session_info *tsi);
 413 int tgt_llog_open(struct tgt_session_info *tsi);
 414 int tgt_llog_read_header(struct tgt_session_info *tsi);
 415 int tgt_llog_next_block(struct tgt_session_info *tsi);
 416 int tgt_llog_prev_block(struct tgt_session_info *tsi);
 417 int tgt_sec_ctx_init(struct tgt_session_info *tsi);
 418 int tgt_sec_ctx_init_cont(struct tgt_session_info *tsi);
 419 int tgt_sec_ctx_fini(struct tgt_session_info *tsi);
 420 int tgt_sendpage(struct tgt_session_info *tsi, struct lu_rdpg *rdpg, int nob);
 421 int tgt_send_buffer(struct tgt_session_info *tsi, struct lu_rdbuf *rdbuf);
 422 int tgt_validate_obdo(struct tgt_session_info *tsi, struct obdo *oa);
 423 int tgt_sync(const struct lu_env *env, struct lu_target *tgt,
 424              struct dt_object *obj, __u64 start, __u64 end);
 425
 426 int tgt_io_thread_init(struct ptlrpc_thread *thread);
 427 void tgt_io_thread_done(struct ptlrpc_thread *thread);
 428
 429 int tgt_mdt_data_lock(struct ldlm_namespace *ns, struct ldlm_res_id *res_id,
 430                       struct lustre_handle *lh, int mode, __u64 *flags);
 431 void tgt_mdt_data_unlock(struct lustre_handle *lh, enum ldlm_mode mode);
 432 int tgt_extent_lock(const struct lu_env *env, struct ldlm_namespace *ns,
 433                     struct ldlm_res_id *res_id, __u64 start, __u64 end,
 434                     struct lustre_handle *lh, int mode, __u64 *flags);
 435 void tgt_extent_unlock(struct lustre_handle *lh, enum ldlm_mode mode);
 436 int tgt_brw_read(struct tgt_session_info *tsi);
 437 int tgt_brw_write(struct tgt_session_info *tsi);
 438 int tgt_hpreq_handler(struct ptlrpc_request *req);
 439 void tgt_register_lfsck_in_notify_local(int (*notify)(const struct lu_env *,
 440                                                       struct dt_device *,
 441                                                       struct lfsck_req_local *,
 442                                                       struct thandle *));
 443 void tgt_register_lfsck_in_notify(int (*notify)(const struct lu_env *,
 444                                                 struct dt_device *,
 445                                                 struct lfsck_request *));
 446 void tgt_register_lfsck_query(int (*query)(const struct lu_env *,
 447                                            struct dt_device *,
 448                                            struct lfsck_request *,
 449                                            struct lfsck_reply *,
 450                                            struct lfsck_query *));
 451 bool req_can_reconstruct(struct ptlrpc_request *req, struct tg_reply_data *trd);
 452
 453 extern struct tgt_handler tgt_sec_ctx_handlers[];
 454 extern struct tgt_handler tgt_lfsck_handlers[];
 455 extern struct tgt_handler tgt_obd_handlers[];
 456 extern struct tgt_handler tgt_dlm_handlers[];
 457 extern struct tgt_handler tgt_llog_handlers[];
 458 extern struct tgt_handler tgt_out_handlers[];
 459 extern struct tgt_handler fld_handlers[];
 460 extern struct tgt_handler seq_handlers[];
 461
 462 typedef void (*tgt_cb_t)(struct lu_target *lut, __u64 transno,
 463                          void *data, int err);
 464 struct tgt_commit_cb {
 465         tgt_cb_t  tgt_cb_func;
 466         void     *tgt_cb_data;
 467 };
 468
 469 int tgt_hpreq_handler(struct ptlrpc_request *req);
 470
 471 /* target/tgt_main.c */
 472 void tgt_boot_epoch_update(struct lu_target *lut);
 473 void tgt_save_slc_lock(struct lu_target *lut, struct ldlm_lock *lock,
 474                        __u64 transno);
 475 void tgt_discard_slc_lock(struct lu_target *lut, struct ldlm_lock *lock);
 476 int tgt_init(const struct lu_env *env, struct lu_target *lut,
 477              struct obd_device *obd, struct dt_device *dt,
 478              struct tgt_opc_slice *slice,
 479              int request_fail_id, int reply_fail_id);
 480 void tgt_fini(const struct lu_env *env, struct lu_target *lut);
 481 int tgt_client_alloc(struct obd_export *exp);
 482 void tgt_client_free(struct obd_export *exp);
 483 int tgt_client_del(const struct lu_env *env, struct obd_export *exp);
 484 int tgt_client_add(const struct lu_env *env, struct obd_export *exp, int);
 485 int tgt_client_new(const struct lu_env *env, struct obd_export *exp);
 486 int tgt_server_data_update(const struct lu_env *env, struct lu_target *tg,
 487                            int sync);
 488 int tgt_reply_data_init(const struct lu_env *env, struct lu_target *tgt);
 489 bool tgt_lookup_reply(struct ptlrpc_request *req, struct tg_reply_data *trd);
 490 int tgt_add_reply_data(const struct lu_env *env, struct lu_target *tgt,
 491                        struct tg_export_data *ted, struct tg_reply_data *trd,
 492                        struct thandle *th, bool update_lrd_file);
 493 struct tg_reply_data *tgt_lookup_reply_by_xid(struct tg_export_data *ted,
 494                                                __u64 xid);
 495
 496 /* target/tgt_grant.c */
 497 static inline int exp_grant_param_supp(struct obd_export *exp)
 498 {
 499         return !!(exp_connect_flags(exp) & OBD_CONNECT_GRANT_PARAM);
 500 }
 501
 502 /* Blocksize used for client not supporting OBD_CONNECT_GRANT_PARAM.
 503  * That's 4KB=2^12 which is the biggest block size known to work whatever
 504  * the client's page size is. */
 505 #define COMPAT_BSIZE_SHIFT 12
 506
 507 void tgt_grant_sanity_check(struct obd_device *obd, const char *func);
 508 void tgt_grant_connect(const struct lu_env *env, struct obd_export *exp,
 509                        struct obd_connect_data *data, bool new_conn);
 510 void tgt_grant_discard(struct obd_export *exp);
 511 void tgt_grant_prepare_read(const struct lu_env *env, struct obd_export *exp,
 512                             struct obdo *oa);
 513 void tgt_grant_prepare_write(const struct lu_env *env, struct obd_export *exp,
 514                              struct obdo *oa, struct niobuf_remote *rnb,
 515                              int niocount);
 516 void tgt_grant_commit(struct obd_export *exp, unsigned long grant_used, int rc);
 517 int tgt_grant_commit_cb_add(struct thandle *th, struct obd_export *exp,
 518                             unsigned long grant);
 519 long tgt_grant_create(const struct lu_env *env, struct obd_export *exp,
 520                       s64 *nr);
 521 int tgt_statfs_internal(const struct lu_env *env, struct lu_target *lut,
 522                         struct obd_statfs *osfs, time64_t max_age,
 523                         int *from_cache);
 524 int tgt_tot_dirty_seq_show(struct seq_file *m, void *data);
 525 int tgt_tot_granted_seq_show(struct seq_file *m, void *data);
 526 int tgt_tot_pending_seq_show(struct seq_file *m, void *data);
 527 int tgt_grant_compat_disable_seq_show(struct seq_file *m, void *data);
 528 ssize_t tgt_grant_compat_disable_seq_write(struct file *file,
 529                                            const char __user *buffer,
 530                                            size_t count, loff_t *off);
 531
 532 /* FMD */
 533 void tgt_fmd_update(struct obd_export *exp, const struct lu_fid *fid,
 534                     __u64 xid);
 535 bool tgt_fmd_check(struct obd_export *exp, const struct lu_fid *fid,
 536                    __u64 xid);
 537
 538 /* target/update_trans.c */
 539 int distribute_txn_init(const struct lu_env *env,
 540                         struct lu_target *lut,
 541                         struct target_distribute_txn_data *tdtd,
 542                         __u32 index);
 543 void distribute_txn_fini(const struct lu_env *env,
 544                          struct target_distribute_txn_data *tdtd);
 545
 546 /* target/update_recovery.c */
 547 int insert_update_records_to_replay_list(struct target_distribute_txn_data *,
 548                                          struct llog_update_record *,
 549                                          struct llog_cookie *, __u32);
 550 void dtrq_list_dump(struct target_distribute_txn_data *tdtd,
 551                     unsigned int mask);
 552 void dtrq_list_destroy(struct target_distribute_txn_data *tdtd);
 553 int distribute_txn_replay_handle(struct lu_env *env,
 554                            struct target_distribute_txn_data *tdtd,
 555                            struct distribute_txn_replay_req *dtrq);
 556 __u64 distribute_txn_get_next_transno(struct target_distribute_txn_data *tdtd);
 557 struct distribute_txn_replay_req *
 558 distribute_txn_get_next_req(struct target_distribute_txn_data *tdtd);
 559 void dtrq_destroy(struct distribute_txn_replay_req *dtrq);
 560 struct distribute_txn_replay_req_sub *
 561 dtrq_sub_lookup(struct distribute_txn_replay_req *dtrq, __u32 mdt_index);
 562 struct distribute_txn_replay_req *
 563 distribute_txn_lookup_finish_list(struct target_distribute_txn_data *tdtd,
 564                                   __u64 transno);
 565 bool is_req_replayed_by_update(struct ptlrpc_request *req);
 566 enum {
 567         ESERIOUS = 0x0001000
 568 };
 569
 570 static inline int err_serious(int rc)
 571 {
 572         LASSERT(rc < 0);
 573         return -(-rc | ESERIOUS);
 574 }
 575
 576 static inline int clear_serious(int rc)
 577 {
 578         if (rc < 0)
 579                 rc = -(-rc & ~ESERIOUS);
 580         return rc;
 581 }
 582
 583 static inline int is_serious(int rc)
 584 {
 585         return (rc < 0 && -rc & ESERIOUS);
 586 }
 587
 588 /*
 589  * Unified target generic handers macros and generic functions.
 590  */
 591 #define TGT_RPC_HANDLER_HP(base, flags, opc, fn, hp, fmt, version)      \
 592 [opc - base] = {                                                        \
 593         .th_name        = #opc,                                         \
 594         .th_fail_id     = OBD_FAIL_ ## opc ## _NET,                     \
 595         .th_opc         = opc,                                          \
 596         .th_flags       = flags,                                        \
 597         .th_act         = fn,                                           \
 598         .th_fmt         = fmt,                                          \
 599         .th_version     = version,                                      \
 600         .th_hp          = hp,                                           \
 601 }
 602 #define TGT_RPC_HANDLER(base, flags, opc, fn, fmt, version)             \
 603         TGT_RPC_HANDLER_HP(base, flags, opc, fn, NULL, fmt, version)
 604
 605 /* MDT Request with a format known in advance */
 606 #define TGT_MDT_HDL(flags, name, fn)                                    \
 607         TGT_RPC_HANDLER(MDS_FIRST_OPC, flags, name, fn, &RQF_ ## name,  \
 608                         LUSTRE_MDS_VERSION)
 609 /* Request with a format we do not yet know */
 610 #define TGT_MDT_HDL_VAR(flags, name, fn)                                \
 611         TGT_RPC_HANDLER(MDS_FIRST_OPC, flags, name, fn, NULL,           \
 612                         LUSTRE_MDS_VERSION)
 613
 614 /* OST Request with a format known in advance */
 615 #define TGT_OST_HDL(flags, name, fn)                                    \
 616         TGT_RPC_HANDLER(OST_FIRST_OPC, flags, name, fn, &RQF_ ## name,  \
 617                         LUSTRE_OST_VERSION)
 618 #define TGT_OST_HDL_HP(flags, name, fn, hp)                             \
 619         TGT_RPC_HANDLER_HP(OST_FIRST_OPC, flags, name, fn, hp,          \
 620                            &RQF_ ## name, LUSTRE_OST_VERSION)
 621
 622 /* MGS request with a format known in advance */
 623 #define TGT_MGS_HDL(flags, name, fn)                                    \
 624         TGT_RPC_HANDLER(MGS_FIRST_OPC, flags, name, fn, &RQF_ ## name,  \
 625                         LUSTRE_MGS_VERSION)
 626 #define TGT_MGS_HDL_VAR(flags, name, fn)                                \
 627         TGT_RPC_HANDLER(MGS_FIRST_OPC, flags, name, fn, NULL,           \
 628                         LUSTRE_MGS_VERSION)
 629
 630 /*
 631  * OBD handler macros and generic functions.
 632  */
 633 #define TGT_OBD_HDL(flags, name, fn)                                    \
 634         TGT_RPC_HANDLER(OBD_FIRST_OPC, flags, name, fn, &RQF_ ## name,  \
 635                         LUSTRE_OBD_VERSION)
 636 #define TGT_OBD_HDL_VAR(flags, name, fn)                                \
 637         TGT_RPC_HANDLER(OBD_FIRST_OPC, flags, name, fn, NULL,           \
 638                         LUSTRE_OBD_VERSION)
 639
 640 /*
 641  * DLM handler macros and generic functions.
 642  */
 643 #define TGT_DLM_HDL_VAR(flags, name, fn)                                \
 644         TGT_RPC_HANDLER(LDLM_FIRST_OPC, flags, name, fn, NULL,          \
 645                         LUSTRE_DLM_VERSION)
 646 #define TGT_DLM_HDL(flags, name, fn)                                    \
 647         TGT_RPC_HANDLER(LDLM_FIRST_OPC, flags, name, fn, &RQF_ ## name, \
 648                         LUSTRE_DLM_VERSION)
 649
 650 /*
 651  * LLOG handler macros and generic functions.
 652  */
 653 #define TGT_LLOG_HDL_VAR(flags, name, fn)                               \
 654         TGT_RPC_HANDLER(LLOG_FIRST_OPC, flags, name, fn, NULL,          \
 655                         LUSTRE_LOG_VERSION)
 656 #define TGT_LLOG_HDL(flags, name, fn)                                   \
 657         TGT_RPC_HANDLER(LLOG_FIRST_OPC, flags, name, fn, &RQF_ ## name, \
 658                         LUSTRE_LOG_VERSION)
 659
 660 /*
 661  * Sec context handler macros and generic functions.
 662  */
 663 #define TGT_SEC_HDL_VAR(flags, name, fn)                                \
 664         TGT_RPC_HANDLER(SEC_FIRST_OPC, flags, name, fn, NULL,           \
 665                         LUSTRE_OBD_VERSION)
 666
 667 #define TGT_QUOTA_HDL(flags, name, fn)                                  \
 668         TGT_RPC_HANDLER(QUOTA_DQACQ, flags, name, fn, &RQF_ ## name,    \
 669                         LUSTRE_MDS_VERSION)
 670
 671 /* Sequence service handlers */
 672 #define TGT_SEQ_HDL(flags, name, fn)                                    \
 673         TGT_RPC_HANDLER(SEQ_QUERY, flags, name, fn, &RQF_ ## name,      \
 674                         LUSTRE_MDS_VERSION)
 675
 676 /* FID Location Database handlers */
 677 #define TGT_FLD_HDL_VAR(flags, name, fn)                                \
 678         TGT_RPC_HANDLER(FLD_QUERY, flags, name, fn, NULL,               \
 679                         LUSTRE_MDS_VERSION)
 680
 681 /* LFSCK handlers */
 682 #define TGT_LFSCK_HDL(flags, name, fn)                                  \
 683         TGT_RPC_HANDLER(LFSCK_FIRST_OPC, flags, name, fn,               \
 684                         &RQF_ ## name, LUSTRE_OBD_VERSION)
 685
 686 /* Request with a format known in advance */
 687 #define TGT_UPDATE_HDL(flags, name, fn)                                 \
 688         TGT_RPC_HANDLER(OUT_UPDATE, flags, name, fn, &RQF_ ## name,     \
 689                         LUSTRE_MDS_VERSION)
 690
 691 #endif /* __LUSTRE_LU_TARGET_H */