lustre/mgs/mgs_fs.c

   1 /*
   2  * GPL HEADER START
   3  *
   4  * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
   5  *
   6  * This program is free software; you can redistribute it and/or modify
   7  * it under the terms of the GNU General Public License version 2 only,
   8  * as published by the Free Software Foundation.
   9  *
  10  * This program is distributed in the hope that it will be useful, but
  11  * WITHOUT ANY WARRANTY; without even the implied warranty of
  12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13  * General Public License version 2 for more details (a copy is included
  14  * in the LICENSE file that accompanied this code).
  15  *
  16  * You should have received a copy of the GNU General Public License
  17  * version 2 along with this program; If not, see
  18  * http://www.gnu.org/licenses/gpl-2.0.html
  19  *
  20  * GPL HEADER END
  21  */
  22 /*
  23  * Copyright (c) 2007, 2010, Oracle and/or its affiliates. All rights reserved.
  24  * Use is subject to license terms.
  25  *
  26  * Copyright (c) 2011, 2017, Intel Corporation.
  27  */
  28 /*
  29  * This file is part of Lustre, http://www.lustre.org/
  30  * Lustre is a trademark of Sun Microsystems, Inc.
  31  *
  32  * lustre/mgs/mgs_fs.c
  33  *
  34  * Lustre Management Server (MGS) filesystem interface code
  35  *
  36  * Author: Nathan Rutman <nathan@clusterfs.com>
  37  * Author: Alex Zhuravlev <bzzz@whamcloud.com>
  38  */
  39
  40 #define DEBUG_SUBSYSTEM S_MGS
  41
  42 #include <lustre_fid.h>
  43 #include "mgs_internal.h"
  44
  45 /**
  46  * Initialize MGS per-export statistics.
  47  *
  48  * This function sets up procfs entries for various MGS export counters. These
  49  * counters are for per-client statistics tracked on the server.
  50  *
  51  * \param[in] obd       OBD device
  52  * \param[in] exp       OBD export
  53  * \param[in] localdata NID of client
  54  *
  55  * \retval              0 if successful
  56  * \retval              negative value on error
  57  */
  58 int mgs_export_stats_init(struct obd_device *obd, struct obd_export *exp,
  59                           void *localdata)
  60 {
  61         lnet_nid_t *client_nid = localdata;
  62         struct nid_stat *stats;
  63         int rc;
  64         ENTRY;
  65
  66         rc = lprocfs_exp_setup(exp, client_nid);
  67         if (rc != 0)
  68                 /* Mask error for already created /proc entries */
  69                 RETURN(rc == -EALREADY ? 0 : rc);
  70
  71         stats = exp->exp_nid_stats;
  72         stats->nid_stats = lprocfs_alloc_stats(NUM_OBD_STATS + LPROC_MGS_LAST,
  73                                                 LPROCFS_STATS_FLAG_NOPERCPU);
  74         if (stats->nid_stats == NULL)
  75                 RETURN(-ENOMEM);
  76
  77         lprocfs_init_ops_stats(LPROC_MGS_LAST, stats->nid_stats);
  78
  79         mgs_stats_counter_init(stats->nid_stats);
  80
  81         rc = lprocfs_register_stats(stats->nid_proc, "stats", stats->nid_stats);
  82         if (rc != 0) {
  83                 lprocfs_free_stats(&stats->nid_stats);
  84                 GOTO(out, rc);
  85         }
  86
  87         rc = lprocfs_nid_ldlm_stats_init(stats);
  88         if (rc != 0)
  89                 GOTO(out, rc);
  90
  91 out:
  92         RETURN(rc);
  93 }
  94
  95 /**
  96  * Add client export data to the MGS.  This data is currently NOT stored on
  97  * disk in the last_rcvd file or anywhere else.  In the event of a MGS
  98  * crash all connections are treated as new connections.
  99  */
 100 int mgs_client_add(struct obd_device *obd, struct obd_export *exp,
 101                           void *localdata)
 102 {
 103         return 0;
 104 }
 105
 106 /* Remove client export data from the MGS */
 107 int mgs_client_free(struct obd_export *exp)
 108 {
 109         return 0;
 110 }
 111
 112 int mgs_fs_setup(const struct lu_env *env, struct mgs_device *mgs)
 113 {
 114         struct lu_fid            fid;
 115         struct dt_object        *o;
 116         struct lu_fid            rfid;
 117         struct dt_object        *root;
 118         struct dt_object        *nm_config_file_obj;
 119         struct nm_config_file   *nm_config_file;
 120         int                      rc;
 121
 122         ENTRY;
 123
 124         OBD_SET_CTXT_MAGIC(&mgs->mgs_obd->obd_lvfs_ctxt);
 125         mgs->mgs_obd->obd_lvfs_ctxt.dt = mgs->mgs_bottom;
 126
 127         /* XXX: fix when support for N:1 layering is implemented */
 128         LASSERT(mgs->mgs_dt_dev.dd_lu_dev.ld_site);
 129         mgs->mgs_dt_dev.dd_lu_dev.ld_site->ls_top_dev =
 130                 &mgs->mgs_dt_dev.dd_lu_dev;
 131
 132         /* Setup the configs dir */
 133         fid.f_seq = FID_SEQ_LOCAL_NAME;
 134         fid.f_oid = 1;
 135         fid.f_ver = 0;
 136         rc = local_oid_storage_init(env, mgs->mgs_bottom, &fid, &mgs->mgs_los);
 137         if (rc)
 138                 GOTO(out, rc);
 139
 140         rc = dt_root_get(env, mgs->mgs_bottom, &rfid);
 141         if (rc)
 142                 GOTO(out_los, rc);
 143
 144         root = dt_locate_at(env, mgs->mgs_bottom, &rfid,
 145                             &mgs->mgs_dt_dev.dd_lu_dev, NULL);
 146         if (unlikely(IS_ERR(root)))
 147                 GOTO(out_los, rc = PTR_ERR(root));
 148
 149         o = local_file_find_or_create(env, mgs->mgs_los, root,
 150                                       MOUNT_CONFIGS_DIR,
 151                                       S_IFDIR | S_IRUGO | S_IWUSR | S_IXUGO);
 152         if (IS_ERR(o))
 153                 GOTO(out_root, rc = PTR_ERR(o));
 154
 155         if (!dt_try_as_dir(env, o)) {
 156                 dt_object_put(env, o);
 157                 GOTO(out_root, rc = -ENOTDIR);
 158         }
 159
 160         mgs->mgs_configs_dir = o;
 161
 162         /* colocated MDT will cache config in target root dir */
 163         nm_config_file_obj = local_index_find_or_create(env, mgs->mgs_los,
 164                                                         mgs->mgs_configs_dir,
 165                                                         LUSTRE_NODEMAP_NAME,
 166                                                         S_IFREG | S_IRUGO |
 167                                                                   S_IWUSR,
 168                                                         &dt_nodemap_features);
 169         if (IS_ERR(nm_config_file_obj))
 170                 GOTO(out_configs, rc = PTR_ERR(nm_config_file_obj));
 171
 172         if (nm_config_file_obj->do_index_ops == NULL) {
 173                 rc = nm_config_file_obj->do_ops->do_index_try(env,
 174                                                         nm_config_file_obj,
 175                                                         &dt_nodemap_features);
 176                 if (rc < 0) {
 177                         dt_object_put(env, nm_config_file_obj);
 178                         GOTO(out_configs, rc);
 179                 }
 180         }
 181         nm_config_file = nm_config_file_register_mgs(env, nm_config_file_obj,
 182                                                      mgs->mgs_los);
 183         dt_object_put(env, nm_config_file_obj);
 184         if (IS_ERR(nm_config_file)) {
 185                 CERROR("%s: error loading nodemap config file, file must be "
 186                        "removed via ldiskfs: rc = %ld\n",
 187                        mgs->mgs_obd->obd_name, PTR_ERR(nm_config_file));
 188                 GOTO(out_configs, rc = PTR_ERR(nm_config_file));
 189         }
 190         mgs->mgs_obd->u.obt.obt_nodemap_config_file = nm_config_file;
 191
 192         /* create directory to store nid table versions */
 193         o = local_file_find_or_create(env, mgs->mgs_los, root, MGS_NIDTBL_DIR,
 194                                       S_IFDIR | S_IRUGO | S_IWUSR | S_IXUGO);
 195         if (IS_ERR(o))
 196                 GOTO(out_nm, rc = PTR_ERR(o));
 197
 198         mgs->mgs_nidtbl_dir = o;
 199
 200 out_nm:
 201         if (rc < 0) {
 202                 nm_config_file_deregister_mgs(env, nm_config_file);
 203                 mgs->mgs_obd->u.obt.obt_nodemap_config_file = NULL;
 204         }
 205 out_configs:
 206         if (rc < 0) {
 207                 dt_object_put(env, mgs->mgs_configs_dir);
 208                 mgs->mgs_configs_dir = NULL;
 209         }
 210 out_root:
 211         dt_object_put(env, root);
 212 out_los:
 213         if (rc) {
 214                 local_oid_storage_fini(env, mgs->mgs_los);
 215                 mgs->mgs_los = NULL;
 216         }
 217 out:
 218         mgs->mgs_dt_dev.dd_lu_dev.ld_site->ls_top_dev = NULL;
 219
 220         return rc;
 221 }
 222
 223 int mgs_fs_cleanup(const struct lu_env *env, struct mgs_device *mgs)
 224 {
 225         if (mgs->mgs_configs_dir) {
 226                 dt_object_put(env, mgs->mgs_configs_dir);
 227                 mgs->mgs_configs_dir = NULL;
 228         }
 229         if (mgs->mgs_nidtbl_dir) {
 230                 dt_object_put(env, mgs->mgs_nidtbl_dir);
 231                 mgs->mgs_nidtbl_dir = NULL;
 232         }
 233         if (mgs->mgs_obd->u.obt.obt_nodemap_config_file != NULL) {
 234                 struct nm_config_file *ncf = mgs->mgs_obd->u.obt.obt_nodemap_config_file;
 235
 236                 nm_config_file_deregister_mgs(env, ncf);
 237                 mgs->mgs_obd->u.obt.obt_nodemap_config_file = NULL;
 238         }
 239
 240         if (mgs->mgs_los) {
 241                 local_oid_storage_fini(env, mgs->mgs_los);
 242                 mgs->mgs_los = NULL;
 243         }
 244
 245         return 0;
 246 }