lustre/obdclass/llog_cat.c

   1 /*
   2  * GPL HEADER START
   3  *
   4  * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
   5  *
   6  * This program is free software; you can redistribute it and/or modify
   7  * it under the terms of the GNU General Public License version 2 only,
   8  * as published by the Free Software Foundation.
   9  *
  10  * This program is distributed in the hope that it will be useful, but
  11  * WITHOUT ANY WARRANTY; without even the implied warranty of
  12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13  * General Public License version 2 for more details (a copy is included
  14  * in the LICENSE file that accompanied this code).
  15  *
  16  * You should have received a copy of the GNU General Public License
  17  * version 2 along with this program; If not, see
  18  * http://www.sun.com/software/products/lustre/docs/GPLv2.pdf
  19  *
  20  * Please contact Sun Microsystems, Inc., 4150 Network Circle, Santa Clara,
  21  * CA 95054 USA or visit www.sun.com if you need additional information or
  22  * have any questions.
  23  *
  24  * GPL HEADER END
  25  */
  26 /*
  27  * Copyright (c) 2003, 2010, Oracle and/or its affiliates. All rights reserved.
  28  * Use is subject to license terms.
  29  */
  30 /*
  31  * This file is part of Lustre, http://www.lustre.org/
  32  * Lustre is a trademark of Sun Microsystems, Inc.
  33  *
  34  * lustre/obdclass/llog_cat.c
  35  *
  36  * OST<->MDS recovery logging infrastructure.
  37  *
  38  * Invariants in implementation:
  39  * - we do not share logs among different OST<->MDS connections, so that
  40  *   if an OST or MDS fails it need only look at log(s) relevant to itself
  41  *
  42  * Author: Andreas Dilger <adilger@clusterfs.com>
  43  */
  44
  45 #define DEBUG_SUBSYSTEM S_LOG
  46
  47 #ifndef __KERNEL__
  48 #include <liblustre.h>
  49 #endif
  50
  51 #include <obd_class.h>
  52
  53 #include "llog_internal.h"
  54
  55 /* Create a new log handle and add it to the open list.
  56  * This log handle will be closed when all of the records in it are removed.
  57  *
  58  * Assumes caller has already pushed us into the kernel context and is locking.
  59  */
  60 static struct llog_handle *llog_cat_new_log(const struct lu_env *env,
  61                                             struct llog_handle *cathandle)
  62 {
  63         struct llog_handle *loghandle;
  64         struct llog_log_hdr *llh;
  65         struct llog_logid_rec rec = { { 0 }, };
  66         int rc, index, bitmap_size;
  67         ENTRY;
  68
  69         llh = cathandle->lgh_hdr;
  70         bitmap_size = LLOG_BITMAP_SIZE(llh);
  71
  72         index = (cathandle->lgh_last_idx + 1) % bitmap_size;
  73
  74         /* maximum number of available slots in catlog is bitmap_size - 2 */
  75         if (llh->llh_cat_idx == index) {
  76                 CERROR("no free catalog slots for log...\n");
  77                 RETURN(ERR_PTR(-ENOSPC));
  78         }
  79
  80         if (OBD_FAIL_CHECK(OBD_FAIL_MDS_LLOG_CREATE_FAILED))
  81                 RETURN(ERR_PTR(-ENOSPC));
  82
  83         rc = llog_open_create(env, cathandle->lgh_ctxt, &loghandle, NULL,
  84                               NULL);
  85         if (rc)
  86                 RETURN(ERR_PTR(rc));
  87
  88         rc = llog_init_handle(env, loghandle,
  89                               LLOG_F_IS_PLAIN | LLOG_F_ZAP_WHEN_EMPTY,
  90                               &cathandle->lgh_hdr->llh_tgtuuid);
  91         if (rc)
  92                 GOTO(out_destroy, rc);
  93
  94         if (index == 0)
  95                 index = 1;
  96
  97         cfs_spin_lock(&loghandle->lgh_hdr_lock);
  98         llh->llh_count++;
  99         if (ext2_set_bit(index, llh->llh_bitmap)) {
 100                 CERROR("argh, index %u already set in log bitmap?\n",
 101                        index);
 102                 cfs_spin_unlock(&loghandle->lgh_hdr_lock);
 103                 LBUG(); /* should never happen */
 104         }
 105         cfs_spin_unlock(&loghandle->lgh_hdr_lock);
 106
 107         cathandle->lgh_last_idx = index;
 108         llh->llh_tail.lrt_index = index;
 109
 110         CDEBUG(D_RPCTRACE,"new recovery log "LPX64":%x for index %u of catalog "
 111                LPX64"\n", loghandle->lgh_id.lgl_oid, loghandle->lgh_id.lgl_ogen,
 112                index, cathandle->lgh_id.lgl_oid);
 113         /* build the record for this log in the catalog */
 114         rec.lid_hdr.lrh_len = sizeof(rec);
 115         rec.lid_hdr.lrh_index = index;
 116         rec.lid_hdr.lrh_type = LLOG_LOGID_MAGIC;
 117         rec.lid_id = loghandle->lgh_id;
 118         rec.lid_tail.lrt_len = sizeof(rec);
 119         rec.lid_tail.lrt_index = index;
 120
 121         /* update the catalog: header and record */
 122         rc = llog_write_rec(env, cathandle, &rec.lid_hdr,
 123                             &loghandle->u.phd.phd_cookie, 1, NULL, index);
 124         if (rc < 0) {
 125                 GOTO(out_destroy, rc);
 126         }
 127
 128         loghandle->lgh_hdr->llh_cat_idx = index;
 129         cathandle->u.chd.chd_current_log = loghandle;
 130         LASSERT(cfs_list_empty(&loghandle->u.phd.phd_entry));
 131         cfs_list_add_tail(&loghandle->u.phd.phd_entry,
 132                           &cathandle->u.chd.chd_head);
 133
 134 out_destroy:
 135         if (rc < 0)
 136                 llog_destroy(env, loghandle);
 137
 138         RETURN(loghandle);
 139 }
 140
 141 /* Open an existent log handle and add it to the open list.
 142  * This log handle will be closed when all of the records in it are removed.
 143  *
 144  * Assumes caller has already pushed us into the kernel context and is locking.
 145  * We return a lock on the handle to ensure nobody yanks it from us.
 146  */
 147 int llog_cat_id2handle(const struct lu_env *env, struct llog_handle *cathandle,
 148                        struct llog_handle **res, struct llog_logid *logid)
 149 {
 150         struct llog_handle      *loghandle;
 151         int                      rc = 0;
 152
 153         ENTRY;
 154
 155         if (cathandle == NULL)
 156                 RETURN(-EBADF);
 157
 158         cfs_list_for_each_entry(loghandle, &cathandle->u.chd.chd_head,
 159                                 u.phd.phd_entry) {
 160                 struct llog_logid *cgl = &loghandle->lgh_id;
 161
 162                 if (cgl->lgl_oid == logid->lgl_oid) {
 163                         if (cgl->lgl_ogen != logid->lgl_ogen) {
 164                                 CERROR("%s: log "LPX64" generation %x != %x\n",
 165                                        loghandle->lgh_ctxt->loc_obd->obd_name,
 166                                        logid->lgl_oid, cgl->lgl_ogen,
 167                                        logid->lgl_ogen);
 168                                 continue;
 169                         }
 170                         loghandle->u.phd.phd_cat_handle = cathandle;
 171                         GOTO(out, rc = 0);
 172                 }
 173         }
 174
 175         rc = llog_open(env, cathandle->lgh_ctxt, &loghandle, logid, NULL,
 176                        LLOG_OPEN_EXISTS);
 177         if (rc < 0) {
 178                 CERROR("%s: error opening log id "LPX64":%x: rc = %d\n",
 179                        cathandle->lgh_ctxt->loc_obd->obd_name,
 180                        logid->lgl_oid, logid->lgl_ogen, rc);
 181                 GOTO(out, rc);
 182         }
 183
 184         rc = llog_init_handle(env, loghandle, LLOG_F_IS_PLAIN, NULL);
 185         if (rc < 0) {
 186                 llog_close(env, loghandle);
 187                 GOTO(out, rc);
 188         }
 189
 190         cfs_list_add(&loghandle->u.phd.phd_entry, &cathandle->u.chd.chd_head);
 191
 192         loghandle->u.phd.phd_cat_handle = cathandle;
 193         loghandle->u.phd.phd_cookie.lgc_lgl = cathandle->lgh_id;
 194         loghandle->u.phd.phd_cookie.lgc_index = loghandle->lgh_hdr->llh_cat_idx;
 195         EXIT;
 196 out:
 197         *res = loghandle;
 198         return rc;
 199 }
 200
 201 int llog_cat_close(const struct lu_env *env, struct llog_handle *cathandle)
 202 {
 203         struct llog_handle      *loghandle, *n;
 204         int                      rc;
 205
 206         ENTRY;
 207
 208         cfs_list_for_each_entry_safe(loghandle, n, &cathandle->u.chd.chd_head,
 209                                      u.phd.phd_entry) {
 210                 struct llog_log_hdr     *llh = loghandle->lgh_hdr;
 211                 int                      index;
 212
 213                 /* unlink open-not-created llogs */
 214                 cfs_list_del_init(&loghandle->u.phd.phd_entry);
 215                 llh = loghandle->lgh_hdr;
 216                 if (loghandle->lgh_obj != NULL && llh != NULL &&
 217                     (llh->llh_flags & LLOG_F_ZAP_WHEN_EMPTY) &&
 218                     (llh->llh_count == 1)) {
 219                         rc = llog_destroy(env, loghandle);
 220                         if (rc)
 221                                 CERROR("%s: failure destroying log during "
 222                                        "cleanup: rc = %d\n",
 223                                        loghandle->lgh_ctxt->loc_obd->obd_name,
 224                                        rc);
 225
 226                         index = loghandle->u.phd.phd_cookie.lgc_index;
 227
 228                         LASSERT(index);
 229                         llog_cat_set_first_idx(cathandle, index);
 230                         rc = llog_cancel_rec(env, cathandle, index);
 231                         if (rc == 0)
 232                                 CDEBUG(D_RPCTRACE,
 233                                        "cancel plain log at index %u of "
 234                                        "catalog "LPX64"\n",
 235                                        index, cathandle->lgh_id.lgl_oid);
 236                 }
 237                 llog_close(env, loghandle);
 238         }
 239         /* if handle was stored in ctxt, remove it too */
 240         if (cathandle->lgh_ctxt->loc_handle == cathandle)
 241                 cathandle->lgh_ctxt->loc_handle = NULL;
 242         rc = llog_close(env, cathandle);
 243         RETURN(rc);
 244 }
 245 EXPORT_SYMBOL(llog_cat_close);
 246
 247 /**
 248  * lockdep markers for nested struct llog_handle::lgh_lock locking.
 249  */
 250 enum {
 251         LLOGH_CAT,
 252         LLOGH_LOG
 253 };
 254
 255 /** Return the currently active log handle.  If the current log handle doesn't
 256  * have enough space left for the current record, start a new one.
 257  *
 258  * If reclen is 0, we only want to know what the currently active log is,
 259  * otherwise we get a lock on this log so nobody can steal our space.
 260  *
 261  * Assumes caller has already pushed us into the kernel context and is locking.
 262  *
 263  * NOTE: loghandle is write-locked upon successful return
 264  */
 265 static struct llog_handle *llog_cat_current_log(const struct lu_env *env,
 266                                                 struct llog_handle *cathandle,
 267                                                 int create)
 268 {
 269         struct llog_handle *loghandle = NULL;
 270         ENTRY;
 271
 272         cfs_down_read_nested(&cathandle->lgh_lock, LLOGH_CAT);
 273         loghandle = cathandle->u.chd.chd_current_log;
 274         if (loghandle) {
 275                 struct llog_log_hdr *llh = loghandle->lgh_hdr;
 276
 277                 cfs_down_write_nested(&loghandle->lgh_lock, LLOGH_LOG);
 278                 if (loghandle->lgh_last_idx < LLOG_BITMAP_SIZE(llh) - 1) {
 279                         cfs_up_read(&cathandle->lgh_lock);
 280                         RETURN(loghandle);
 281                 } else {
 282                         cfs_up_write(&loghandle->lgh_lock);
 283                 }
 284         }
 285         if (!create) {
 286                 if (loghandle)
 287                         cfs_down_write(&loghandle->lgh_lock);
 288                 cfs_up_read(&cathandle->lgh_lock);
 289                 RETURN(loghandle);
 290         }
 291         cfs_up_read(&cathandle->lgh_lock);
 292
 293         /* time to create new log */
 294
 295         /* first, we have to make sure the state hasn't changed */
 296         cfs_down_write_nested(&cathandle->lgh_lock, LLOGH_CAT);
 297         loghandle = cathandle->u.chd.chd_current_log;
 298         if (loghandle) {
 299                 struct llog_log_hdr *llh = loghandle->lgh_hdr;
 300
 301                 cfs_down_write_nested(&loghandle->lgh_lock, LLOGH_LOG);
 302                 if (loghandle->lgh_last_idx < LLOG_BITMAP_SIZE(llh) - 1) {
 303                         cfs_up_write(&cathandle->lgh_lock);
 304                         RETURN(loghandle);
 305                 } else {
 306                         cfs_up_write(&loghandle->lgh_lock);
 307                 }
 308         }
 309
 310         CDEBUG(D_INODE, "creating new log\n");
 311         loghandle = llog_cat_new_log(env, cathandle);
 312         if (!IS_ERR(loghandle))
 313                 cfs_down_write_nested(&loghandle->lgh_lock, LLOGH_LOG);
 314         cfs_up_write(&cathandle->lgh_lock);
 315         RETURN(loghandle);
 316 }
 317
 318 /* Add a single record to the recovery log(s) using a catalog
 319  * Returns as llog_write_record
 320  *
 321  * Assumes caller has already pushed us into the kernel context.
 322  */
 323 int llog_cat_add_rec(const struct lu_env *env, struct llog_handle *cathandle,
 324                      struct llog_rec_hdr *rec, struct llog_cookie *reccookie,
 325                      void *buf)
 326 {
 327         struct llog_handle *loghandle;
 328         int rc;
 329         ENTRY;
 330
 331         LASSERT(rec->lrh_len <= LLOG_CHUNK_SIZE);
 332         loghandle = llog_cat_current_log(env, cathandle, 1);
 333         if (IS_ERR(loghandle))
 334                 RETURN(PTR_ERR(loghandle));
 335         /* loghandle is already locked by llog_cat_current_log() for us */
 336         rc = llog_write_rec(env, loghandle, rec, reccookie, 1, buf, -1);
 337         if (rc < 0)
 338                 CERROR("llog_write_rec %d: lh=%p\n", rc, loghandle);
 339         cfs_up_write(&loghandle->lgh_lock);
 340         if (rc == -ENOSPC) {
 341                 /* to create a new plain log */
 342                 loghandle = llog_cat_current_log(env, cathandle, 1);
 343                 if (IS_ERR(loghandle))
 344                         RETURN(PTR_ERR(loghandle));
 345                 rc = llog_write_rec(env, loghandle, rec, reccookie, 1, buf,
 346                                     -1);
 347                 cfs_up_write(&loghandle->lgh_lock);
 348         }
 349
 350         RETURN(rc);
 351 }
 352 EXPORT_SYMBOL(llog_cat_add_rec);
 353
 354 /* For each cookie in the cookie array, we clear the log in-use bit and either:
 355  * - the log is empty, so mark it free in the catalog header and delete it
 356  * - the log is not empty, just write out the log header
 357  *
 358  * The cookies may be in different log files, so we need to get new logs
 359  * each time.
 360  *
 361  * Assumes caller has already pushed us into the kernel context.
 362  */
 363 int llog_cat_cancel_records(const struct lu_env *env,
 364                             struct llog_handle *cathandle, int count,
 365                             struct llog_cookie *cookies)
 366 {
 367         int i, index, rc = 0;
 368
 369         ENTRY;
 370
 371         cfs_down_write_nested(&cathandle->lgh_lock, LLOGH_CAT);
 372         for (i = 0; i < count; i++, cookies++) {
 373                 struct llog_handle      *loghandle;
 374                 struct llog_logid       *lgl = &cookies->lgc_lgl;
 375
 376                 rc = llog_cat_id2handle(env, cathandle, &loghandle, lgl);
 377                 if (rc) {
 378                         CERROR("Cannot find log "LPX64"\n", lgl->lgl_oid);
 379                         break;
 380                 }
 381
 382                 cfs_down_write_nested(&loghandle->lgh_lock, LLOGH_LOG);
 383                 rc = llog_cancel_rec(env, loghandle, cookies->lgc_index);
 384                 cfs_up_write(&loghandle->lgh_lock);
 385
 386                 if (rc == 1) {          /* log has been destroyed */
 387                         index = loghandle->u.phd.phd_cookie.lgc_index;
 388                         if (cathandle->u.chd.chd_current_log == loghandle)
 389                                 cathandle->u.chd.chd_current_log = NULL;
 390                         llog_close(env, loghandle);
 391
 392                         LASSERT(index);
 393                         llog_cat_set_first_idx(cathandle, index);
 394                         rc = llog_cancel_rec(env, cathandle, index);
 395                         if (rc == 0)
 396                                 CDEBUG(D_RPCTRACE,"cancel plain log at index %u"
 397                                        " of catalog "LPX64"\n",
 398                                        index, cathandle->lgh_id.lgl_oid);
 399                 }
 400         }
 401         cfs_up_write(&cathandle->lgh_lock);
 402
 403         RETURN(rc);
 404 }
 405 EXPORT_SYMBOL(llog_cat_cancel_records);
 406
 407 int llog_cat_process_cb(const struct lu_env *env, struct llog_handle *cat_llh,
 408                         struct llog_rec_hdr *rec, void *data)
 409 {
 410         struct llog_process_data *d = data;
 411         struct llog_logid_rec *lir = (struct llog_logid_rec *)rec;
 412         struct llog_handle *llh;
 413         int rc;
 414
 415         ENTRY;
 416         if (rec->lrh_type != LLOG_LOGID_MAGIC) {
 417                 CERROR("invalid record in catalog\n");
 418                 RETURN(-EINVAL);
 419         }
 420         CDEBUG(D_HA, "processing log "LPX64":%x at index %u of catalog "
 421                LPX64"\n", lir->lid_id.lgl_oid, lir->lid_id.lgl_ogen,
 422                rec->lrh_index, cat_llh->lgh_id.lgl_oid);
 423
 424         rc = llog_cat_id2handle(env, cat_llh, &llh, &lir->lid_id);
 425         if (rc) {
 426                 CERROR("Cannot find handle for log "LPX64"\n",
 427                        lir->lid_id.lgl_oid);
 428                 RETURN(rc);
 429         }
 430
 431         if (rec->lrh_index < d->lpd_startcat)
 432                 /* Skip processing of the logs until startcat */
 433                 RETURN(0);
 434
 435         if (d->lpd_startidx > 0) {
 436                 struct llog_process_cat_data cd;
 437
 438                 cd.lpcd_first_idx = d->lpd_startidx;
 439                 cd.lpcd_last_idx = 0;
 440                 rc = llog_process_or_fork(env, llh, d->lpd_cb, d->lpd_data,
 441                                           &cd, false);
 442                 /* Continue processing the next log from idx 0 */
 443                 d->lpd_startidx = 0;
 444         } else {
 445                 rc = llog_process_or_fork(env, llh, d->lpd_cb, d->lpd_data,
 446                                           NULL, false);
 447         }
 448
 449         RETURN(rc);
 450 }
 451
 452 int llog_cat_process_or_fork(const struct lu_env *env,
 453                              struct llog_handle *cat_llh,
 454                              llog_cb_t cb, void *data, int startcat,
 455                              int startidx, bool fork)
 456 {
 457         struct llog_process_data d;
 458         struct llog_log_hdr *llh = cat_llh->lgh_hdr;
 459         int rc;
 460         ENTRY;
 461
 462         LASSERT(llh->llh_flags & LLOG_F_IS_CAT);
 463         d.lpd_data = data;
 464         d.lpd_cb = cb;
 465         d.lpd_startcat = startcat;
 466         d.lpd_startidx = startidx;
 467
 468         if (llh->llh_cat_idx > cat_llh->lgh_last_idx) {
 469                 struct llog_process_cat_data cd;
 470
 471                 CWARN("catlog "LPX64" crosses index zero\n",
 472                       cat_llh->lgh_id.lgl_oid);
 473
 474                 cd.lpcd_first_idx = llh->llh_cat_idx;
 475                 cd.lpcd_last_idx = 0;
 476                 rc = llog_process_or_fork(env, cat_llh, llog_cat_process_cb,
 477                                           &d, &cd, fork);
 478                 if (rc != 0)
 479                         RETURN(rc);
 480
 481                 cd.lpcd_first_idx = 0;
 482                 cd.lpcd_last_idx = cat_llh->lgh_last_idx;
 483                 rc = llog_process_or_fork(env, cat_llh, llog_cat_process_cb,
 484                                           &d, &cd, fork);
 485         } else {
 486                 rc = llog_process_or_fork(env, cat_llh, llog_cat_process_cb,
 487                                           &d, NULL, fork);
 488         }
 489
 490         RETURN(rc);
 491 }
 492 EXPORT_SYMBOL(llog_cat_process_or_fork);
 493
 494 int llog_cat_process(const struct lu_env *env, struct llog_handle *cat_llh,
 495                      llog_cb_t cb, void *data, int startcat, int startidx)
 496 {
 497         return llog_cat_process_or_fork(env, cat_llh, cb, data, startcat,
 498                                         startidx, 0);
 499 }
 500 EXPORT_SYMBOL(llog_cat_process);
 501
 502 #ifdef __KERNEL__
 503 int llog_cat_process_thread(void *data)
 504 {
 505         struct llog_process_cat_args *args = data;
 506         struct llog_ctxt *ctxt = args->lpca_ctxt;
 507         struct llog_handle *llh = NULL;
 508         llog_cb_t cb = args->lpca_cb;
 509         struct llog_thread_info *lgi;
 510         struct lu_env            env;
 511         int rc;
 512         ENTRY;
 513
 514         cfs_daemonize_ctxt("ll_log_process");
 515
 516         rc = lu_env_init(&env, LCT_LOCAL);
 517         if (rc)
 518                 GOTO(out, rc);
 519         lgi = llog_info(&env);
 520         LASSERT(lgi);
 521
 522         lgi->lgi_logid = *(struct llog_logid *)(args->lpca_arg);
 523         rc = llog_open(&env, ctxt, &llh, &lgi->lgi_logid, NULL,
 524                        LLOG_OPEN_EXISTS);
 525         if (rc) {
 526                 CERROR("%s: cannot open llog "LPX64":%x: rc = %d\n",
 527                        ctxt->loc_obd->obd_name, lgi->lgi_logid.lgl_oid,
 528                        lgi->lgi_logid.lgl_ogen, rc);
 529                 GOTO(out_env, rc);
 530         }
 531         rc = llog_init_handle(&env, llh, LLOG_F_IS_CAT, NULL);
 532         if (rc) {
 533                 CERROR("%s: llog_init_handle failed: rc = %d\n",
 534                        llh->lgh_ctxt->loc_obd->obd_name, rc);
 535                 GOTO(release_llh, rc);
 536         }
 537
 538         if (cb) {
 539                 rc = llog_cat_process(&env, llh, cb, NULL, 0, 0);
 540                 if (rc != LLOG_PROC_BREAK && rc != 0)
 541                         CERROR("%s: llog_cat_process() failed: rc = %d\n",
 542                                llh->lgh_ctxt->loc_obd->obd_name, rc);
 543                 cb(&env, llh, NULL, NULL);
 544         } else {
 545                 CWARN("No callback function for recovery\n");
 546         }
 547
 548         /*
 549          * Make sure that all cached data is sent.
 550          */
 551         llog_sync(ctxt, NULL, 0);
 552         GOTO(release_llh, rc);
 553 release_llh:
 554         rc = llog_cat_close(&env, llh);
 555         if (rc)
 556                 CERROR("%s: llog_cat_close() failed: rc = %d\n",
 557                        llh->lgh_ctxt->loc_obd->obd_name, rc);
 558 out_env:
 559         lu_env_fini(&env);
 560 out:
 561         llog_ctxt_put(ctxt);
 562         OBD_FREE_PTR(args);
 563         return rc;
 564 }
 565 EXPORT_SYMBOL(llog_cat_process_thread);
 566 #endif
 567
 568 static int llog_cat_reverse_process_cb(const struct lu_env *env,
 569                                        struct llog_handle *cat_llh,
 570                                        struct llog_rec_hdr *rec, void *data)
 571 {
 572         struct llog_process_data *d = data;
 573         struct llog_logid_rec *lir = (struct llog_logid_rec *)rec;
 574         struct llog_handle *llh;
 575         int rc;
 576
 577         if (le32_to_cpu(rec->lrh_type) != LLOG_LOGID_MAGIC) {
 578                 CERROR("invalid record in catalog\n");
 579                 RETURN(-EINVAL);
 580         }
 581         CDEBUG(D_HA, "processing log "LPX64":%x at index %u of catalog "
 582                LPX64"\n", lir->lid_id.lgl_oid, lir->lid_id.lgl_ogen,
 583                le32_to_cpu(rec->lrh_index), cat_llh->lgh_id.lgl_oid);
 584
 585         rc = llog_cat_id2handle(env, cat_llh, &llh, &lir->lid_id);
 586         if (rc) {
 587                 CERROR("Cannot find handle for log "LPX64"\n",
 588                        lir->lid_id.lgl_oid);
 589                 RETURN(rc);
 590         }
 591
 592         rc = llog_reverse_process(env, llh, d->lpd_cb, d->lpd_data, NULL);
 593         RETURN(rc);
 594 }
 595
 596 int llog_cat_reverse_process(const struct lu_env *env,
 597                              struct llog_handle *cat_llh,
 598                              llog_cb_t cb, void *data)
 599 {
 600         struct llog_process_data d;
 601         struct llog_process_cat_data cd;
 602         struct llog_log_hdr *llh = cat_llh->lgh_hdr;
 603         int rc;
 604         ENTRY;
 605
 606         LASSERT(llh->llh_flags & LLOG_F_IS_CAT);
 607         d.lpd_data = data;
 608         d.lpd_cb = cb;
 609
 610         if (llh->llh_cat_idx > cat_llh->lgh_last_idx) {
 611                 CWARN("catalog "LPX64" crosses index zero\n",
 612                       cat_llh->lgh_id.lgl_oid);
 613
 614                 cd.lpcd_first_idx = 0;
 615                 cd.lpcd_last_idx = cat_llh->lgh_last_idx;
 616                 rc = llog_reverse_process(env, cat_llh,
 617                                           llog_cat_reverse_process_cb,
 618                                           &d, &cd);
 619                 if (rc != 0)
 620                         RETURN(rc);
 621
 622                 cd.lpcd_first_idx = le32_to_cpu(llh->llh_cat_idx);
 623                 cd.lpcd_last_idx = 0;
 624                 rc = llog_reverse_process(env, cat_llh,
 625                                           llog_cat_reverse_process_cb,
 626                                           &d, &cd);
 627         } else {
 628                 rc = llog_reverse_process(env, cat_llh,
 629                                           llog_cat_reverse_process_cb,
 630                                           &d, NULL);
 631         }
 632
 633         RETURN(rc);
 634 }
 635 EXPORT_SYMBOL(llog_cat_reverse_process);
 636
 637 int llog_cat_set_first_idx(struct llog_handle *cathandle, int index)
 638 {
 639         struct llog_log_hdr *llh = cathandle->lgh_hdr;
 640         int i, bitmap_size, idx;
 641         ENTRY;
 642
 643         bitmap_size = LLOG_BITMAP_SIZE(llh);
 644         if (llh->llh_cat_idx == (index - 1)) {
 645                 idx = llh->llh_cat_idx + 1;
 646                 llh->llh_cat_idx = idx;
 647                 if (idx == cathandle->lgh_last_idx)
 648                         goto out;
 649                 for (i = (index + 1) % bitmap_size;
 650                      i != cathandle->lgh_last_idx;
 651                      i = (i + 1) % bitmap_size) {
 652                         if (!ext2_test_bit(i, llh->llh_bitmap)) {
 653                                 idx = llh->llh_cat_idx + 1;
 654                                 llh->llh_cat_idx = idx;
 655                         } else if (i == 0) {
 656                                 llh->llh_cat_idx = 0;
 657                         } else {
 658                                 break;
 659                         }
 660                 }
 661 out:
 662                 CDEBUG(D_RPCTRACE, "set catlog "LPX64" first idx %u\n",
 663                        cathandle->lgh_id.lgl_oid, llh->llh_cat_idx);
 664         }
 665
 666         RETURN(0);
 667 }
 668
 669 /* callback func for llog_process in llog_obd_origin_setup */
 670 int cat_cancel_cb(const struct lu_env *env, struct llog_handle *cathandle,
 671                   struct llog_rec_hdr *rec, void *data)
 672 {
 673         struct llog_logid_rec   *lir = (struct llog_logid_rec *)rec;
 674         struct llog_handle      *loghandle;
 675         struct llog_log_hdr     *llh;
 676         int                      rc, index;
 677
 678         ENTRY;
 679
 680         if (rec->lrh_type != LLOG_LOGID_MAGIC) {
 681                 CERROR("%s: invalid record in catalog\n",
 682                        loghandle->lgh_ctxt->loc_obd->obd_name);
 683                 RETURN(-EINVAL);
 684         }
 685         CDEBUG(D_HA, "processing log "LPX64":%x at index %u of catalog "
 686                LPX64"\n", lir->lid_id.lgl_oid, lir->lid_id.lgl_ogen,
 687                rec->lrh_index, cathandle->lgh_id.lgl_oid);
 688
 689         rc = llog_cat_id2handle(env, cathandle, &loghandle, &lir->lid_id);
 690         if (rc) {
 691                 CERROR("%s: cannot find handle for llog "LPX64"\n",
 692                        loghandle->lgh_ctxt->loc_obd->obd_name,
 693                        lir->lid_id.lgl_oid);
 694                 if (rc == -ENOENT) {
 695                         index = rec->lrh_index;
 696                         goto cat_cleanup;
 697                 }
 698                 RETURN(rc);
 699         }
 700
 701         llh = loghandle->lgh_hdr;
 702         if ((llh->llh_flags & LLOG_F_ZAP_WHEN_EMPTY) &&
 703             (llh->llh_count == 1)) {
 704                 rc = llog_destroy(env, loghandle);
 705                 if (rc)
 706                         CERROR("%s: fail to destroy empty log: rc = %d\n",
 707                                loghandle->lgh_ctxt->loc_obd->obd_name, rc);
 708
 709                 index = loghandle->u.phd.phd_cookie.lgc_index;
 710                 llog_close(env, loghandle);
 711
 712 cat_cleanup:
 713                 LASSERT(index);
 714                 llog_cat_set_first_idx(cathandle, index);
 715                 rc = llog_cancel_rec(env, cathandle, index);
 716                 if (rc == 0)
 717                         CDEBUG(D_HA,
 718                                "cancel log "LPX64":%x at index %u of catalog "
 719                                LPX64"\n", lir->lid_id.lgl_oid,
 720                                lir->lid_id.lgl_ogen, rec->lrh_index,
 721                                cathandle->lgh_id.lgl_oid);
 722         }
 723
 724         RETURN(rc);
 725 }