Whamcloud - gitweb
LU-7232 statahead: lock leaks if statahead file recreated
[fs/lustre-release.git] / lustre / target / tgt_main.c
index c34be01..94caf3a 100644 (file)
@@ -21,7 +21,7 @@
  * GPL HEADER END
  */
 /*
- * Copyright (c) 2012, 2013, Intel Corporation.
+ * Copyright (c) 2012, 2014, Intel Corporation.
  */
 /*
  * lustre/target/tgt_main.c
@@ -35,6 +35,7 @@
 
 #include <obd.h>
 #include "tgt_internal.h"
+#include "../ptlrpc/ptlrpc_internal.h"
 
 int tgt_init(const struct lu_env *env, struct lu_target *lut,
             struct obd_device *obd, struct dt_device *dt,
@@ -55,6 +56,10 @@ int tgt_init(const struct lu_env *env, struct lu_target *lut,
        lut->lut_bottom = dt;
        lut->lut_last_rcvd = NULL;
        lut->lut_client_bitmap = NULL;
+       atomic_set(&lut->lut_num_clients, 0);
+       atomic_set(&lut->lut_client_generation, 0);
+       lut->lut_reply_data = NULL;
+       lut->lut_reply_bitmap = NULL;
        obd->u.obt.obt_lut = lut;
        obd->u.obt.obt_magic = OBT_MAGIC;
 
@@ -66,14 +71,16 @@ int tgt_init(const struct lu_env *env, struct lu_target *lut,
        /* sptlrcp variables init */
        rwlock_init(&lut->lut_sptlrpc_lock);
        sptlrpc_rule_set_init(&lut->lut_sptlrpc_rset);
-       lut->lut_mds_capa = 1;
-       lut->lut_oss_capa = 1;
+
+       spin_lock_init(&lut->lut_flags_lock);
+       lut->lut_sync_lock_cancel = NEVER_SYNC_ON_CANCEL;
 
        /* last_rcvd initialization is needed by replayable targets only */
        if (!obd->obd_replayable)
                RETURN(0);
 
        spin_lock_init(&lut->lut_translock);
+       spin_lock_init(&lut->lut_client_bitmap_lock);
 
        OBD_ALLOC(lut->lut_client_bitmap, LR_MAX_CLIENTS >> 3);
        if (lut->lut_client_bitmap == NULL)
@@ -87,30 +94,122 @@ int tgt_init(const struct lu_env *env, struct lu_target *lut,
        lu_local_obj_fid(&fid, LAST_RECV_OID);
 
        o = dt_find_or_create(env, lut->lut_bottom, &fid, &dof, &attr);
-       if (!IS_ERR(o)) {
-               lut->lut_last_rcvd = o;
-       } else {
-               OBD_FREE(lut->lut_client_bitmap, LR_MAX_CLIENTS >> 3);
-               lut->lut_client_bitmap = NULL;
+       if (IS_ERR(o)) {
+               rc = PTR_ERR(o);
+               CERROR("%s: cannot open LAST_RCVD: rc = %d\n", tgt_name(lut),
+                      rc);
+               GOTO(out_put, rc);
+       }
+
+       lut->lut_last_rcvd = o;
+       rc = tgt_server_data_init(env, lut);
+       if (rc < 0)
+               GOTO(out_put, rc);
+
+       /* prepare transactions callbacks */
+       lut->lut_txn_cb.dtc_txn_start = tgt_txn_start_cb;
+       lut->lut_txn_cb.dtc_txn_stop = tgt_txn_stop_cb;
+       lut->lut_txn_cb.dtc_txn_commit = NULL;
+       lut->lut_txn_cb.dtc_cookie = lut;
+       lut->lut_txn_cb.dtc_tag = LCT_DT_THREAD | LCT_MD_THREAD;
+       INIT_LIST_HEAD(&lut->lut_txn_cb.dtc_linkage);
+
+       dt_txn_callback_add(lut->lut_bottom, &lut->lut_txn_cb);
+       lut->lut_bottom->dd_lu_dev.ld_site->ls_tgt = lut;
+
+       /* reply_data is supported by MDT targets only for now */
+       if (strncmp(obd->obd_type->typ_name, LUSTRE_MDT_NAME, 3) != 0)
+               RETURN(0);
+
+       OBD_ALLOC(lut->lut_reply_bitmap,
+                 LUT_REPLY_SLOTS_MAX_CHUNKS * sizeof(unsigned long *));
+       if (lut->lut_reply_bitmap == NULL)
+               GOTO(out, rc);
+
+       memset(&attr, 0, sizeof(attr));
+       attr.la_valid = LA_MODE;
+       attr.la_mode = S_IFREG | S_IRUGO | S_IWUSR;
+       dof.dof_type = dt_mode_to_dft(S_IFREG);
+
+       lu_local_obj_fid(&fid, REPLY_DATA_OID);
+
+       o = dt_find_or_create(env, lut->lut_bottom, &fid, &dof, &attr);
+       if (IS_ERR(o)) {
                rc = PTR_ERR(o);
-               CERROR("cannot open %s: rc = %d\n", LAST_RCVD, rc);
+               CERROR("%s: cannot open REPLY_DATA: rc = %d\n", tgt_name(lut),
+                      rc);
+               GOTO(out, rc);
        }
+       lut->lut_reply_data = o;
+
+       rc = tgt_reply_data_init(env, lut);
+       if (rc < 0)
+               GOTO(out, rc);
+
+       RETURN(0);
 
-       RETURN(rc);
+out:
+       dt_txn_callback_del(lut->lut_bottom, &lut->lut_txn_cb);
+out_put:
+       if (lut->lut_last_rcvd != NULL) {
+               lu_object_put(env, &lut->lut_last_rcvd->do_lu);
+               lut->lut_last_rcvd = NULL;
+       }
+       if (lut->lut_client_bitmap != NULL)
+               OBD_FREE(lut->lut_client_bitmap, LR_MAX_CLIENTS >> 3);
+       lut->lut_client_bitmap = NULL;
+       if (lut->lut_reply_data != NULL)
+               lu_object_put(env, &lut->lut_reply_data->do_lu);
+       lut->lut_reply_data = NULL;
+       if (lut->lut_reply_bitmap != NULL)
+               OBD_FREE(lut->lut_reply_bitmap,
+                        LUT_REPLY_SLOTS_MAX_CHUNKS * sizeof(unsigned long *));
+       lut->lut_reply_bitmap = NULL;
+       return rc;
 }
 EXPORT_SYMBOL(tgt_init);
 
 void tgt_fini(const struct lu_env *env, struct lu_target *lut)
 {
+       int i;
+       int rc;
        ENTRY;
 
+       if (lut->lut_lsd.lsd_feature_incompat & OBD_INCOMPAT_MULTI_RPCS &&
+           atomic_read(&lut->lut_num_clients) == 0) {
+               /* Clear MULTI RPCS incompatibility flag that prevents previous
+                * Lustre versions to mount a target with reply_data file */
+               lut->lut_lsd.lsd_feature_incompat &= ~OBD_INCOMPAT_MULTI_RPCS;
+               rc = tgt_server_data_update(env, lut, 1);
+               if (rc < 0)
+                       CERROR("%s: unable to clear MULTI RPCS "
+                              "incompatibility flag\n",
+                              lut->lut_obd->obd_name);
+       }
+
        sptlrpc_rule_set_free(&lut->lut_sptlrpc_rset);
 
+       if (lut->lut_reply_data != NULL)
+               lu_object_put(env, &lut->lut_reply_data->do_lu);
+       lut->lut_reply_data = NULL;
+       if (lut->lut_reply_bitmap != NULL) {
+               for (i = 0; i < LUT_REPLY_SLOTS_MAX_CHUNKS; i++) {
+                       if (lut->lut_reply_bitmap[i] != NULL)
+                               OBD_FREE(lut->lut_reply_bitmap[i],
+                                   BITS_TO_LONGS(LUT_REPLY_SLOTS_PER_CHUNK) *
+                                   sizeof(long));
+                       lut->lut_reply_bitmap[i] = NULL;
+               }
+               OBD_FREE(lut->lut_reply_bitmap,
+                        LUT_REPLY_SLOTS_MAX_CHUNKS * sizeof(unsigned long *));
+       }
+       lut->lut_reply_bitmap = NULL;
        if (lut->lut_client_bitmap) {
                OBD_FREE(lut->lut_client_bitmap, LR_MAX_CLIENTS >> 3);
                lut->lut_client_bitmap = NULL;
        }
        if (lut->lut_last_rcvd) {
+               dt_txn_callback_del(lut->lut_bottom, &lut->lut_txn_cb);
                lu_object_put(env, &lut->lut_last_rcvd->do_lu);
                lut->lut_last_rcvd = NULL;
        }
@@ -119,11 +218,42 @@ void tgt_fini(const struct lu_env *env, struct lu_target *lut)
 EXPORT_SYMBOL(tgt_fini);
 
 /* context key constructor/destructor: tg_key_init, tg_key_fini */
-LU_KEY_INIT_FINI(tgt, struct tgt_thread_info);
+LU_KEY_INIT(tgt, struct tgt_thread_info);
+
+static void tgt_key_fini(const struct lu_context *ctx,
+                        struct lu_context_key *key, void *data)
+{
+       struct tgt_thread_info          *info = data;
+       struct thandle_exec_args        *args = &info->tti_tea;
+       int                             i;
+
+       for (i = 0; i < args->ta_alloc_args; i++) {
+               if (args->ta_args[i] != NULL)
+                       OBD_FREE_PTR(args->ta_args[i]);
+       }
+
+       if (args->ta_args != NULL)
+               OBD_FREE(args->ta_args, sizeof(args->ta_args[0]) *
+                                       args->ta_alloc_args);
+       OBD_FREE_PTR(info);
+}
+
+static void tgt_key_exit(const struct lu_context *ctx,
+                        struct lu_context_key *key, void *data)
+{
+       struct tgt_thread_info *tti = data;
+
+       tti->tti_has_trans = 0;
+       tti->tti_mult_trans = 0;
+}
 
 /* context key: tg_thread_key */
-LU_CONTEXT_KEY_DEFINE(tgt, LCT_MD_THREAD | LCT_DT_THREAD);
-EXPORT_SYMBOL(tgt_thread_key);
+struct lu_context_key tgt_thread_key = {
+       .lct_tags = LCT_MD_THREAD | LCT_DT_THREAD,
+       .lct_init = tgt_key_init,
+       .lct_fini = tgt_key_fini,
+       .lct_exit = tgt_key_exit,
+};
 
 LU_KEY_INIT_GENERIC(tgt);
 
@@ -140,26 +270,39 @@ EXPORT_SYMBOL(tgt_session_key);
 
 LU_KEY_INIT_GENERIC(tgt_ses);
 
-struct lprocfs_vars lprocfs_srv_module_vars[] = {
-       { 0 },
-};
+/*
+ * this page is allocated statically when module is initializing
+ * it is used to simulate data corruptions, see ost_checksum_bulk()
+ * for details. as the original pages provided by the layers below
+ * can be remain in the internal cache, we do not want to modify
+ * them.
+ */
+struct page *tgt_page_to_corrupt;
 
 int tgt_mod_init(void)
 {
        ENTRY;
 
+       tgt_page_to_corrupt = alloc_page(GFP_IOFS);
+
        tgt_key_init_generic(&tgt_thread_key, NULL);
        lu_context_key_register_many(&tgt_thread_key, NULL);
 
        tgt_ses_key_init_generic(&tgt_session_key, NULL);
        lu_context_key_register_many(&tgt_session_key, NULL);
 
+       update_info_init();
+
        RETURN(0);
 }
 
 void tgt_mod_exit(void)
 {
+       if (tgt_page_to_corrupt != NULL)
+               page_cache_release(tgt_page_to_corrupt);
+
        lu_context_key_degister(&tgt_thread_key);
        lu_context_key_degister(&tgt_session_key);
+       update_info_fini();
 }