Whamcloud - gitweb
LU-7101 lnet: per NI map-on-demand value
[fs/lustre-release.git] / lnet / lnet / module.c
1 /*
2  * GPL HEADER START
3  *
4  * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
5  *
6  * This program is free software; you can redistribute it and/or modify
7  * it under the terms of the GNU General Public License version 2 only,
8  * as published by the Free Software Foundation.
9  *
10  * This program is distributed in the hope that it will be useful, but
11  * WITHOUT ANY WARRANTY; without even the implied warranty of
12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13  * General Public License version 2 for more details (a copy is included
14  * in the LICENSE file that accompanied this code).
15  *
16  * You should have received a copy of the GNU General Public License
17  * version 2 along with this program; If not, see
18  * http://www.sun.com/software/products/lustre/docs/GPLv2.pdf
19  *
20  * Please contact Sun Microsystems, Inc., 4150 Network Circle, Santa Clara,
21  * CA 95054 USA or visit www.sun.com if you need additional information or
22  * have any questions.
23  *
24  * GPL HEADER END
25  */
26 /*
27  * Copyright (c) 2004, 2010, Oracle and/or its affiliates. All rights reserved.
28  * Use is subject to license terms.
29  *
30  * Copyright (c) 2012, 2015, Intel Corporation.
31  */
32 /*
33  * This file is part of Lustre, http://www.lustre.org/
34  * Lustre is a trademark of Sun Microsystems, Inc.
35  */
36
37 #define DEBUG_SUBSYSTEM S_LNET
38 #include <lnet/lib-lnet.h>
39 #include <lnet/lib-dlc.h>
40
41 static int config_on_load = 0;
42 CFS_MODULE_PARM(config_on_load, "i", int, 0444,
43                 "configure network at module load");
44
45 static struct mutex lnet_config_mutex;
46
47 static int
48 lnet_configure(void *arg)
49 {
50         /* 'arg' only there so I can be passed to cfs_create_thread() */
51         int    rc = 0;
52
53         LNET_MUTEX_LOCK(&lnet_config_mutex);
54
55         if (!the_lnet.ln_niinit_self) {
56                 rc = try_module_get(THIS_MODULE);
57
58                 if (rc != 1)
59                         goto out;
60
61                 rc = LNetNIInit(LNET_PID_LUSTRE);
62                 if (rc >= 0) {
63                         the_lnet.ln_niinit_self = 1;
64                         rc = 0;
65                 } else {
66                         module_put(THIS_MODULE);
67                 }
68         }
69
70 out:
71         LNET_MUTEX_UNLOCK(&lnet_config_mutex);
72         return rc;
73 }
74
75 static int
76 lnet_unconfigure (void)
77 {
78         int   refcount;
79
80         LNET_MUTEX_LOCK(&lnet_config_mutex);
81
82         if (the_lnet.ln_niinit_self) {
83                 the_lnet.ln_niinit_self = 0;
84                 LNetNIFini();
85                 module_put(THIS_MODULE);
86         }
87
88         LNET_MUTEX_LOCK(&the_lnet.ln_api_mutex);
89         refcount = the_lnet.ln_refcount;
90         LNET_MUTEX_UNLOCK(&the_lnet.ln_api_mutex);
91
92         LNET_MUTEX_UNLOCK(&lnet_config_mutex);
93
94         return (refcount == 0) ? 0 : -EBUSY;
95 }
96
97 static int
98 lnet_dyn_configure(struct libcfs_ioctl_hdr *hdr)
99 {
100         struct lnet_ioctl_config_data *conf =
101           (struct lnet_ioctl_config_data *)hdr;
102         int                           rc;
103
104         LNET_MUTEX_LOCK(&lnet_config_mutex);
105         if (the_lnet.ln_niinit_self)
106                 rc = lnet_dyn_add_ni(LNET_PID_LUSTRE, conf);
107         else
108                 rc = -EINVAL;
109         LNET_MUTEX_UNLOCK(&lnet_config_mutex);
110         return rc;
111 }
112
113 static int
114 lnet_dyn_unconfigure(struct libcfs_ioctl_hdr *hdr)
115 {
116         struct lnet_ioctl_config_data *conf =
117           (struct lnet_ioctl_config_data *) hdr;
118         int                           rc;
119
120         LNET_MUTEX_LOCK(&lnet_config_mutex);
121         if (the_lnet.ln_niinit_self)
122                 rc = lnet_dyn_del_ni(conf->cfg_net);
123         else
124                 rc = -EINVAL;
125         LNET_MUTEX_UNLOCK(&lnet_config_mutex);
126
127         return rc;
128 }
129
130 static int
131 lnet_ioctl(unsigned int cmd, struct libcfs_ioctl_hdr *hdr)
132 {
133         int   rc;
134
135         switch (cmd) {
136         case IOC_LIBCFS_CONFIGURE: {
137                 struct libcfs_ioctl_data *data =
138                   (struct libcfs_ioctl_data *)hdr;
139                 the_lnet.ln_nis_from_mod_params = data->ioc_flags;
140                 return lnet_configure(NULL);
141         }
142
143         case IOC_LIBCFS_UNCONFIGURE:
144                 return lnet_unconfigure();
145
146         case IOC_LIBCFS_ADD_NET:
147                 return lnet_dyn_configure(hdr);
148
149         case IOC_LIBCFS_DEL_NET:
150                 return lnet_dyn_unconfigure(hdr);
151
152         default:
153                 /* Passing LNET_PID_ANY only gives me a ref if the net is up
154                  * already; I'll need it to ensure the net can't go down while
155                  * I'm called into it */
156                 rc = LNetNIInit(LNET_PID_ANY);
157                 if (rc >= 0) {
158                         rc = LNetCtl(cmd, hdr);
159                         LNetNIFini();
160                 }
161                 return rc;
162         }
163 }
164
165 DECLARE_IOCTL_HANDLER(lnet_ioctl_handler, lnet_ioctl);
166
167 static int __init lnet_init(void)
168 {
169         int rc;
170         ENTRY;
171
172         mutex_init(&lnet_config_mutex);
173
174         rc = lnet_lib_init();
175         if (rc != 0) {
176                 CERROR("lnet_lib_init: error %d\n", rc);
177                 RETURN(rc);
178         }
179
180         rc = libcfs_register_ioctl(&lnet_ioctl_handler);
181         LASSERT(rc == 0);
182
183         if (config_on_load) {
184                 /* Have to schedule a separate thread to avoid deadlocking
185                  * in modload */
186                 (void)kthread_run(lnet_configure, NULL, "lnet_initd");
187         }
188
189         RETURN(0);
190 }
191
192 static void __exit lnet_exit(void)
193 {
194         int rc;
195
196         rc = libcfs_deregister_ioctl(&lnet_ioctl_handler);
197         LASSERT(rc == 0);
198
199         lnet_lib_exit();
200 }
201
202 MODULE_AUTHOR("OpenSFS, Inc. <http://www.lustre.org/>");
203 MODULE_DESCRIPTION("Lustre Networking layer");
204 MODULE_VERSION(LNET_VERSION);
205 MODULE_LICENSE("GPL");
206
207 module_init(lnet_init);
208 module_exit(lnet_exit);