Whamcloud - gitweb
port the patch(9414) on HEAD(b1_5)
[fs/lustre-release.git] / lustre / lov / lov_log.c
1  /* -*- mode: c; c-basic-offset: 8; indent-tabs-mode: nil; -*-
2  * vim:expandtab:shiftwidth=8:tabstop=8:
3  *
4  * Copyright (C) 2002, 2003 Cluster File Systems, Inc.
5  * Author: Phil Schwan <phil@clusterfs.com>
6  *         Peter Braam <braam@clusterfs.com>
7  *         Mike Shaver <shaver@clusterfs.com>
8  *
9  *   This file is part of the Lustre file system, http://www.lustre.org
10  *   Lustre is a trademark of Cluster File Systems, Inc.
11  *
12  *   You may have signed or agreed to another license before downloading
13  *   this software.  If so, you are bound by the terms and conditions
14  *   of that agreement, and the following does not apply to you.  See the
15  *   LICENSE file included with this distribution for more information.
16  *
17  *   If you did not agree to a different license, then this copy of Lustre
18  *   is open source software; you can redistribute it and/or modify it
19  *   under the terms of version 2 of the GNU General Public License as
20  *   published by the Free Software Foundation.
21  *
22  *   In either case, Lustre is distributed in the hope that it will be
23  *   useful, but WITHOUT ANY WARRANTY; without even the implied warranty
24  *   of MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
25  *   license text for more details.
26  */
27
28 #ifndef EXPORT_SYMTAB
29 # define EXPORT_SYMTAB
30 #endif
31 #define DEBUG_SUBSYSTEM S_LOV
32 #ifdef __KERNEL__
33 #include <libcfs/libcfs.h>
34 #else
35 #include <liblustre.h>
36 #endif
37
38 #include <obd_support.h>
39 #include <lustre_lib.h>
40 #include <lustre_net.h>
41 #include <lustre/lustre_idl.h>
42 #include <lustre_dlm.h>
43 #include <lustre_mds.h>
44 #include <obd_class.h>
45 #include <obd_lov.h>
46 #include <obd_ost.h>
47 #include <lprocfs_status.h>
48
49 #include "lov_internal.h"
50
51 /* Add log records for each OSC that this object is striped over, and return
52  * cookies for each one.  We _would_ have nice abstraction here, except that
53  * we need to keep cookies in stripe order, even if some are NULL, so that
54  * the right cookies are passed back to the right OSTs at the client side.
55  * Unset cookies should be all-zero (which will never occur naturally). */
56 static int lov_llog_origin_add(struct llog_ctxt *ctxt,
57                         struct llog_rec_hdr *rec, struct lov_stripe_md *lsm,
58                         struct llog_cookie *logcookies, int numcookies)
59 {
60         struct obd_device *obd = ctxt->loc_obd;
61         struct lov_obd *lov = &obd->u.lov;
62         int i, rc = 0;
63         ENTRY;
64
65         LASSERTF(logcookies && numcookies >= lsm->lsm_stripe_count, 
66                  "logcookies %p, numcookies %d lsm->lsm_stripe_count %d \n",
67                  logcookies, numcookies, lsm->lsm_stripe_count);
68
69         for (i = 0; i < lsm->lsm_stripe_count; i++) {
70                 struct lov_oinfo *loi = lsm->lsm_oinfo[i];
71                 struct obd_device *child = 
72                         lov->lov_tgts[loi->loi_ost_idx]->ltd_exp->exp_obd; 
73                 struct llog_ctxt *cctxt = llog_get_context(child, ctxt->loc_idx);
74
75                 /* fill mds unlink/setattr log record */
76                 switch (rec->lrh_type) {
77                 case MDS_UNLINK_REC: {
78                         struct llog_unlink_rec *lur = (struct llog_unlink_rec *)rec;
79                         lur->lur_oid = loi->loi_id;
80                         lur->lur_ogen = loi->loi_gr;
81                         break;
82                 }
83                 case MDS_SETATTR_REC: {
84                         struct llog_setattr_rec *lsr = (struct llog_setattr_rec *)rec;
85                         lsr->lsr_oid = loi->loi_id;
86                         lsr->lsr_ogen = loi->loi_gr;
87                         break;
88                 }
89                 default:
90                         break;
91                 }
92
93                 rc += llog_add(cctxt, rec, NULL, logcookies + rc,
94                                 numcookies - rc);
95         }
96
97         RETURN(rc);
98 }
99
100 static int lov_llog_origin_connect(struct llog_ctxt *ctxt, int count,
101                                    struct llog_logid *logid,
102                                    struct llog_gen *gen,
103                                    struct obd_uuid *uuid)
104 {
105         struct obd_device *obd = ctxt->loc_obd;
106         struct lov_obd *lov = &obd->u.lov;
107         int i, rc = 0, err = 0;
108         ENTRY;
109
110         lov_getref(obd);
111         for (i = 0; i < count; i++) {
112                 struct obd_device *child;
113                 struct llog_ctxt *cctxt;
114                 
115                 if (!lov->lov_tgts[i] || !lov->lov_tgts[i]->ltd_active)
116                         continue;
117                 if (uuid && !obd_uuid_equals(uuid, &lov->lov_tgts[i]->ltd_uuid))
118                         continue;
119                 CDEBUG(D_CONFIG, "connect %d/%d\n", i, count);
120                 child = lov->lov_tgts[i]->ltd_exp->exp_obd;
121                 cctxt = llog_get_context(child, ctxt->loc_idx);
122                 rc = llog_connect(cctxt, 1, logid, gen, uuid);
123                 if (rc) {
124                         CERROR("error osc_llog_connect tgt %d (%d)\n", i, rc);
125                         if (!err) 
126                                 err = rc;
127                 }
128         }
129         lov_putref(obd);
130
131         RETURN(err);
132 }
133
134 /* the replicators commit callback */
135 static int lov_llog_repl_cancel(struct llog_ctxt *ctxt, struct lov_stripe_md *lsm,
136                           int count, struct llog_cookie *cookies, int flags)
137 {
138         struct lov_obd *lov;
139         struct obd_device *obd = ctxt->loc_obd;
140         int rc = 0, i;
141         ENTRY;
142
143         LASSERT(lsm != NULL);
144         LASSERT(count == lsm->lsm_stripe_count);
145
146         lov = &obd->u.lov;
147         lov_getref(obd);
148         for (i = 0; i < count; i++, cookies++) {
149                 struct lov_oinfo *loi = lsm->lsm_oinfo[i];
150                 struct obd_device *child = 
151                         lov->lov_tgts[loi->loi_ost_idx]->ltd_exp->exp_obd;
152                 struct llog_ctxt *cctxt = 
153                         llog_get_context(child, ctxt->loc_idx);
154                 int err;
155
156                 err = llog_cancel(cctxt, NULL, 1, cookies, flags);
157                 if (err && lov->lov_tgts[loi->loi_ost_idx]->ltd_active) {
158                         CERROR("error: objid "LPX64" subobj "LPX64
159                                " on OST idx %d: rc = %d\n", lsm->lsm_object_id,
160                                loi->loi_id, loi->loi_ost_idx, err);
161                         if (!rc)
162                                 rc = err;
163                 }
164         }
165         lov_putref(obd);
166         RETURN(rc);
167 }
168
169 static struct llog_operations lov_mds_ost_orig_logops = {
170         lop_add: lov_llog_origin_add,
171         lop_connect: lov_llog_origin_connect
172 };
173
174 static struct llog_operations lov_size_repl_logops = {
175         lop_cancel: lov_llog_repl_cancel
176 };
177
178 int lov_llog_init(struct obd_device *obd, struct obd_device *tgt,
179                   int count, struct llog_catid *logid, struct obd_uuid *uuid)
180 {
181         struct lov_obd *lov = &obd->u.lov;
182         struct obd_device *child;
183         int i, rc = 0, err = 0;
184         ENTRY;
185
186         rc = llog_setup(obd, LLOG_MDS_OST_ORIG_CTXT, tgt, 0, NULL,
187                         &lov_mds_ost_orig_logops);
188         if (rc)
189                 RETURN(rc);
190
191         rc = llog_setup(obd, LLOG_SIZE_REPL_CTXT, tgt, 0, NULL,
192                         &lov_size_repl_logops);
193         if (rc)
194                 RETURN(rc);
195
196         lov_getref(obd);
197         /* count may not match lov->desc.ld_tgt_count during dynamic ost add */
198         for (i = 0; i < count; i++) {
199                 if (!lov->lov_tgts[i] || !lov->lov_tgts[i]->ltd_active)
200                         continue;
201                 if (uuid && !obd_uuid_equals(uuid, &lov->lov_tgts[i]->ltd_uuid))
202                         continue;
203                 CDEBUG(D_CONFIG, "init %d/%d\n", i, count);
204                 LASSERT(lov->lov_tgts[i]->ltd_exp);
205                 child = lov->lov_tgts[i]->ltd_exp->exp_obd;
206                 rc = obd_llog_init(child, tgt, 1, logid + i, uuid);
207                 if (rc) {
208                         CERROR("error osc_llog_init idx %d osc '%s' tgt '%s' "
209                                "(rc=%d)\n", i, child->obd_name, tgt->obd_name,
210                                rc);
211                         if (!err) 
212                                 err = rc;
213                 }
214         }
215         lov_putref(obd);
216         RETURN(err);
217 }
218
219 int lov_llog_finish(struct obd_device *obd, int count)
220 {
221         struct llog_ctxt *ctxt;
222         int rc = 0, rc2 = 0;
223         ENTRY;
224
225         /* cleanup our llogs only if the ctxts have been setup
226          * (client lov doesn't setup, mds lov does). */
227         ctxt = llog_get_context(obd, LLOG_MDS_OST_ORIG_CTXT);
228         if (ctxt)
229                 rc = llog_cleanup(ctxt);
230
231         ctxt = llog_get_context(obd, LLOG_SIZE_REPL_CTXT);
232         if (ctxt)
233                 rc2 = llog_cleanup(ctxt);
234         if (!rc)
235                 rc = rc2;
236
237         /* lov->tgt llogs are cleaned during osc_cleanup. */
238         RETURN(rc);
239 }