lustre/utils/obd.c

   1 /*
   2  * GPL HEADER START
   3  *
   4  * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
   5  *
   6  * This program is free software; you can redistribute it and/or modify
   7  * it under the terms of the GNU General Public License version 2 only,
   8  * as published by the Free Software Foundation.
   9  *
  10  * This program is distributed in the hope that it will be useful, but
  11  * WITHOUT ANY WARRANTY; without even the implied warranty of
  12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13  * General Public License version 2 for more details (a copy is included
  14  * in the LICENSE file that accompanied this code).
  15  *
  16  * You should have received a copy of the GNU General Public License
  17  * version 2 along with this program; If not, see
  18  * http://www.gnu.org/licenses/gpl-2.0.html
  19  *
  20  * GPL HEADER END
  21  */
  22 /*
  23  * Copyright (c) 2002, 2010, Oracle and/or its affiliates. All rights reserved.
  24  * Use is subject to license terms.
  25  *
  26  * Copyright (c) 2011, 2017, Intel Corporation.
  27  */
  28 /*
  29  * This file is part of Lustre, http://www.lustre.org/
  30  * Lustre is a trademark of Sun Microsystems, Inc.
  31  *
  32  * lustre/utils/obd.c
  33  *
  34  * Author: Peter J. Braam <braam@clusterfs.com>
  35  * Author: Phil Schwan <phil@clusterfs.com>
  36  * Author: Andreas Dilger <adilger@clusterfs.com>
  37  * Author: Robert Read <rread@clusterfs.com>
  38  */
  39
  40 #include <sys/ioctl.h>
  41 #include <sys/socket.h>
  42 #include <sys/stat.h>
  43 #include <sys/time.h>
  44 #include <sys/types.h>
  45 #include <sys/un.h>
  46 #include <sys/wait.h>
  47
  48 #include <ctype.h>
  49 #include <errno.h>
  50 #include <fcntl.h>
  51 #include <getopt.h>
  52 #include <signal.h>
  53 #include <stdarg.h>
  54 #include <stdbool.h>
  55 #include <stdio.h>
  56 #include <stdlib.h>
  57 #include <string.h>
  58 #include <time.h>
  59 #include <unistd.h>
  60 #include <limits.h>
  61 #include "obdctl.h"
  62 #include "lustreapi_internal.h"
  63 #include <libcfs/util/list.h>
  64 #include <libcfs/util/ioctl.h>
  65 #include <libcfs/util/param.h>
  66 #include <libcfs/util/parser.h>
  67 #include <libcfs/util/string.h>
  68
  69 #include <linux/lnet/nidstr.h>
  70 #include <linux/lnet/lnetctl.h>
  71 #ifdef HAVE_SERVER_SUPPPORT
  72 #include <linux/lustre/lustre_barrier_user.h>
  73 #endif
  74 #include <linux/lustre/lustre_cfg.h>
  75 #include <linux/lustre/lustre_disk.h>
  76 #include <linux/lustre/lustre_ioctl.h>
  77 #include <linux/lustre/lustre_ostid.h>
  78 #include <linux/lustre/lustre_param.h>
  79 #include <linux/lustre/lustre_ver.h>
  80
  81 #include <lustre/lustreapi.h>
  82
  83 #define MAX_STRING_SIZE 128
  84
  85 #if HAVE_LIBPTHREAD
  86 #include <sys/ipc.h>
  87 #include <sys/shm.h>
  88 #include <pthread.h>
  89
  90 #define MAX_THREADS 4096
  91 #define MAX_BASE_ID 0xffffffff
  92 #define NIDSTRING_LENGTH 64
  93 struct shared_data {
  94         pthread_mutex_t mutex;
  95         pthread_cond_t  cond;
  96         int       stopping;
  97         struct {
  98                 __u64 counters[MAX_THREADS];
  99                 __u64 offsets[MAX_THREADS];
 100                 int   thr_running;
 101                 int   start_barrier;
 102                 int   stop_barrier;
 103                 struct timeval start_time;
 104                 struct timeval end_time;
 105         } body;
 106 };
 107
 108 static struct shared_data *shared_data;
 109 static __u64 counter_snapshot[2][MAX_THREADS];
 110 static int prev_valid;
 111 static struct timeval prev_time;
 112 static int thread;
 113 static int nthreads;
 114 #else
 115 const int thread;
 116 const int nthreads = 1;
 117 #endif
 118
 119 static int cur_device = -1;
 120
 121 int lcfg_ioctl(char *func, int dev_id, struct lustre_cfg *lcfg)
 122 {
 123         struct obd_ioctl_data data;
 124         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
 125         int rc;
 126
 127         memset(&data, 0, sizeof(data));
 128         data.ioc_dev = cur_device;
 129         data.ioc_type = LUSTRE_CFG_TYPE;
 130         data.ioc_plen1 = lustre_cfg_len(lcfg->lcfg_bufcount,
 131                                         lcfg->lcfg_buflens);
 132         data.ioc_pbuf1 = (void *)lcfg;
 133         memset(buf, 0, sizeof(rawbuf));
 134         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
 135         if (rc) {
 136                 fprintf(stderr, "error: %s: invalid ioctl\n", jt_cmdname(func));
 137                 return rc;
 138         }
 139
 140         rc =  l_ioctl(dev_id, OBD_IOC_PROCESS_CFG, buf);
 141
 142         return rc;
 143 }
 144
 145 static int do_device(char *func, char *devname);
 146
 147 static int get_mgs_device(void)
 148 {
 149         char mgs[] = "$MGS";
 150         static int mgs_device = -1;
 151
 152         if (mgs_device == -1) {
 153                 int rc;
 154
 155                 do_disconnect(NULL, 1);
 156                 rc = do_device("mgsioc", mgs);
 157                 if (rc) {
 158                         fprintf(stderr,
 159                                 "This command must be run on the MGS.\n");
 160                         errno = ENODEV;
 161                         return -1;
 162                 }
 163                 mgs_device = cur_device;
 164         }
 165         return mgs_device;
 166 }
 167
 168 /* Returns -1 on error with errno set */
 169 int lcfg_mgs_ioctl(char *func, int dev_id, struct lustre_cfg *lcfg)
 170 {
 171         struct obd_ioctl_data data;
 172         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
 173         int rc;
 174
 175         memset(&data, 0, sizeof(data));
 176         rc = data.ioc_dev = get_mgs_device();
 177         if (rc < 0)
 178                 goto out;
 179         data.ioc_type = LUSTRE_CFG_TYPE;
 180         data.ioc_plen1 = lustre_cfg_len(lcfg->lcfg_bufcount,
 181                                         lcfg->lcfg_buflens);
 182         data.ioc_pbuf1 = (void *)lcfg;
 183         memset(buf, 0, sizeof(rawbuf));
 184         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
 185         if (rc) {
 186                 fprintf(stderr, "error: %s: invalid ioctl\n", jt_cmdname(func));
 187                 return rc;
 188         }
 189
 190         rc = l_ioctl(dev_id, OBD_IOC_PARAM, buf);
 191 out:
 192         if (rc && errno == ENOSYS)
 193                 fprintf(stderr, "Make sure cfg_device is set first.\n");
 194
 195         return rc;
 196 }
 197
 198 char *obdo_print(struct obdo *obd)
 199 {
 200         char buf[1024];
 201
 202         snprintf(buf, sizeof(buf), "id: %#jx\ngrp: %#jx\natime: %ju\n"
 203                  "mtime: %ju\nctime: %ju\nsize: %ju\nblocks: %ju"
 204                  "\nblksize: %u\nmode: %o\nuid: %d\ngid: %d\nflags: %x\n"
 205                  "misc: %x\nnlink: %d,\nvalid %#jx\n",
 206                  (uintmax_t)ostid_id(&obd->o_oi),
 207                  (uintmax_t)ostid_seq(&obd->o_oi),
 208                  (uintmax_t)obd->o_atime, (uintmax_t)obd->o_mtime,
 209                  (uintmax_t)obd->o_ctime, (uintmax_t)obd->o_size,
 210                  (uintmax_t)obd->o_blocks, obd->o_blksize, obd->o_mode,
 211                  obd->o_uid, obd->o_gid, obd->o_flags, obd->o_misc,
 212                  obd->o_nlink, (uintmax_t)obd->o_valid);
 213         return strdup(buf);
 214 }
 215
 216 #define BAD_VERBOSE (-999999999)
 217
 218 #define N2D_OFF 0x100      /* So we can tell between error codes and devices */
 219
 220 static int do_name2dev(char *func, char *name)
 221 {
 222         struct obd_ioctl_data data;
 223         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
 224         int rc;
 225
 226         memset(&data, 0, sizeof(data));
 227         data.ioc_dev = cur_device;
 228         data.ioc_inllen1 = strlen(name) + 1;
 229         data.ioc_inlbuf1 = name;
 230
 231         memset(buf, 0, sizeof(rawbuf));
 232         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
 233         if (rc < 0) {
 234                 fprintf(stderr, "error: %s: invalid ioctl\n", jt_cmdname(func));
 235                 return -rc;
 236         }
 237         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_NAME2DEV, buf);
 238         if (rc < 0)
 239                 return errno;
 240         rc = llapi_ioctl_unpack(&data, buf, sizeof(rawbuf));
 241         if (rc) {
 242                 fprintf(stderr, "error: %s: invalid reply\n", jt_cmdname(func));
 243                 return rc;
 244         }
 245
 246         return data.ioc_dev + N2D_OFF;
 247 }
 248
 249 /*
 250  * resolve a device name to a device number.
 251  * supports a number, $name or %uuid.
 252  */
 253 int parse_devname(char *func, char *name)
 254 {
 255         int rc;
 256         int ret = -1;
 257         int try_digit;
 258
 259         if (!name)
 260                 return ret;
 261
 262         try_digit = isdigit(name[0]);
 263
 264         if (name[0] == '$' || name[0] == '%')
 265                 name++;
 266
 267         rc = do_name2dev(func, name);
 268         if (rc >= N2D_OFF)
 269                 return rc - N2D_OFF;
 270
 271         if (try_digit)
 272                 ret = strtoul(name, NULL, 0);
 273         else
 274                 fprintf(stderr, "No device found for name %s: %s\n",
 275                         name, strerror(rc));
 276         return ret;
 277 }
 278
 279 char *jt_cmdname(char *func)
 280 {
 281         static char buf[512];
 282
 283         if (thread) {
 284                 sprintf(buf, "%s-%d", func, thread);
 285                 return buf;
 286         }
 287
 288         return func;
 289 }
 290
 291 #define difftime(a, b)                                  \
 292         ((a)->tv_sec - (b)->tv_sec +                    \
 293          ((a)->tv_usec - (b)->tv_usec) / 1000000.0)
 294
 295 static int be_verbose(int verbose, struct timeval *next_time,
 296                       __u64 num, __u64 *next_num, int num_total)
 297 {
 298         struct timeval now;
 299
 300         if (!verbose)
 301                 return 0;
 302
 303         if (next_time)
 304                 gettimeofday(&now, NULL);
 305
 306         /* A positive verbosity means to print every X iterations */
 307         if (verbose > 0 && (num >= *next_num || num >= num_total)) {
 308                 *next_num += verbose;
 309                 if (next_time) {
 310                         next_time->tv_sec = now.tv_sec - verbose;
 311                         next_time->tv_usec = now.tv_usec;
 312                 }
 313                 return 1;
 314         }
 315
 316         /* A negative verbosity means to print at most each X seconds */
 317         if (verbose < 0 && next_time && difftime(&now, next_time) >= 0.0) {
 318                 next_time->tv_sec = now.tv_sec - verbose;
 319                 next_time->tv_usec = now.tv_usec;
 320                 *next_num = num;
 321                 return 1;
 322         }
 323
 324         return 0;
 325 }
 326
 327 static int get_verbose(char *func, const char *arg)
 328 {
 329         int verbose;
 330         char *end;
 331
 332         if (!arg || arg[0] == 'v') {
 333                 verbose = 1;
 334         } else if (arg[0] == 's' || arg[0] == 'q') {
 335                 verbose = 0;
 336         } else {
 337                 verbose = (int)strtoul(arg, &end, 0);
 338                 if (*end) {
 339                         fprintf(stderr, "error: %s: bad verbose option '%s'\n",
 340                                 jt_cmdname(func), arg);
 341                         return BAD_VERBOSE;
 342                 }
 343         }
 344
 345         if (verbose < 0)
 346                 printf("Print status every %d seconds\n", -verbose);
 347         else if (verbose == 1)
 348                 printf("Print status every operation\n");
 349         else if (verbose > 1)
 350                 printf("Print status every %d operations\n", verbose);
 351
 352         return verbose;
 353 }
 354
 355 int do_disconnect(char *func, int verbose)
 356 {
 357         lcfg_set_devname(NULL);
 358         cur_device = -1;
 359         return 0;
 360 }
 361
 362 #ifdef MAX_THREADS
 363 static int shmem_setup(void)
 364 {
 365         pthread_mutexattr_t mattr;
 366         pthread_condattr_t  cattr;
 367         int rc;
 368         int shmid;
 369
 370         /* Create new segment */
 371         shmid = shmget(IPC_PRIVATE, sizeof(*shared_data), 0600);
 372         if (shmid == -1) {
 373                 fprintf(stderr, "Can't create shared data: %s\n",
 374                         strerror(errno));
 375                 return errno;
 376         }
 377
 378         /* Attatch to new segment */
 379         shared_data = (struct shared_data *)shmat(shmid, NULL, 0);
 380
 381         if (shared_data == (struct shared_data *)(-1)) {
 382                 fprintf(stderr, "Can't attach shared data: %s\n",
 383                         strerror(errno));
 384                 shared_data = NULL;
 385                 return errno;
 386         }
 387
 388         /*
 389          * Mark segment as destroyed, so it will disappear when we exit.
 390          * Forks will inherit attached segments, so we should be OK.
 391          */
 392         if (shmctl(shmid, IPC_RMID, NULL) == -1) {
 393                 fprintf(stderr, "Can't destroy shared data: %s\n",
 394                         strerror(errno));
 395                 return errno;
 396         }
 397
 398         pthread_mutexattr_init(&mattr);
 399         pthread_condattr_init(&cattr);
 400
 401         rc = pthread_mutexattr_setpshared(&mattr, PTHREAD_PROCESS_SHARED);
 402         if (rc != 0) {
 403                 fprintf(stderr, "Can't set shared mutex attr\n");
 404                 goto out;
 405         }
 406
 407         rc = pthread_condattr_setpshared(&cattr, PTHREAD_PROCESS_SHARED);
 408         if (rc != 0) {
 409                 fprintf(stderr, "Can't set shared cond attr\n");
 410                 goto out;
 411         }
 412
 413         pthread_mutex_init(&shared_data->mutex, &mattr);
 414         pthread_cond_init(&shared_data->cond, &cattr);
 415 out:
 416         pthread_mutexattr_destroy(&mattr);
 417         pthread_condattr_destroy(&cattr);
 418
 419         return rc;
 420 }
 421
 422 static inline void shmem_lock(void)
 423 {
 424         pthread_mutex_lock(&shared_data->mutex);
 425 }
 426
 427 static inline void shmem_unlock(void)
 428 {
 429         pthread_mutex_unlock(&shared_data->mutex);
 430 }
 431
 432 static inline void shmem_wait(void)
 433 {
 434         pthread_cond_wait(&shared_data->cond, &shared_data->mutex);
 435 }
 436
 437 static inline void shmem_wakeup_all(void)
 438 {
 439         pthread_cond_broadcast(&shared_data->cond);
 440 }
 441
 442 static inline void shmem_reset(int total_threads)
 443 {
 444         if (!shared_data)
 445                 return;
 446
 447         memset(&shared_data->body, 0, sizeof(shared_data->body));
 448         memset(counter_snapshot, 0, sizeof(counter_snapshot));
 449         prev_valid = 0;
 450         shared_data->stopping = 0;
 451         shared_data->body.start_barrier = total_threads;
 452         shared_data->body.stop_barrier = total_threads;
 453 }
 454
 455 static inline void shmem_bump(__u32 counter)
 456 {
 457         static bool running_not_bumped = true;
 458
 459         if (!shared_data || thread <= 0 || thread > MAX_THREADS)
 460                 return;
 461
 462         shmem_lock();
 463         shared_data->body.counters[thread - 1] += counter;
 464         if (running_not_bumped) {
 465                 shared_data->body.thr_running++;
 466                 running_not_bumped = false;
 467         }
 468         shmem_unlock();
 469 }
 470
 471 static void shmem_total(int total_threads)
 472 {
 473         __u64 total = 0;
 474         double secs;
 475         int i;
 476
 477         if (!shared_data || total_threads > MAX_THREADS)
 478                 return;
 479
 480         shmem_lock();
 481         for (i = 0; i < total_threads; i++)
 482                 total += shared_data->body.counters[i];
 483
 484         secs = difftime(&shared_data->body.end_time,
 485                         &shared_data->body.start_time);
 486         shmem_unlock();
 487
 488         printf("Total: total %ju threads %d sec %f %f/second\n",
 489                (uintmax_t)total, total_threads, secs, total / secs);
 490 }
 491
 492 static void shmem_snap(int total_threads, int live_threads)
 493 {
 494         struct timeval this_time;
 495         int non_zero = 0;
 496         __u64 total = 0;
 497         double secs;
 498         int running;
 499         int i;
 500
 501         if (!shared_data || total_threads > MAX_THREADS)
 502                 return;
 503
 504         shmem_lock();
 505         memcpy(counter_snapshot[0], shared_data->body.counters,
 506                total_threads * sizeof(counter_snapshot[0][0]));
 507         running = shared_data->body.thr_running;
 508         shmem_unlock();
 509
 510         gettimeofday(&this_time, NULL);
 511
 512         for (i = 0; i < total_threads; i++) {
 513                 long long this_count =
 514                         counter_snapshot[0][i] - counter_snapshot[1][i];
 515
 516                 if (this_count != 0) {
 517                         non_zero++;
 518                         total += this_count;
 519                 }
 520         }
 521
 522         secs = difftime(&this_time, &prev_time);
 523         if (prev_valid && secs > 1.0) {   /* someone screwed with the time? */
 524                 printf("%d/%d Total: %f/second\n", non_zero, total_threads,
 525                        total / secs);
 526
 527                 memcpy(counter_snapshot[1], counter_snapshot[0],
 528                        total_threads * sizeof(counter_snapshot[0][0]));
 529                 prev_time = this_time;
 530         }
 531         if (!prev_valid && running == total_threads) {
 532                 prev_valid = 1;
 533                 /* drop counters when all threads were started */
 534                 memcpy(counter_snapshot[1], counter_snapshot[0],
 535                        total_threads * sizeof(counter_snapshot[0][0]));
 536                 prev_time = this_time;
 537         }
 538 }
 539
 540 static void shmem_stop(void)
 541 {
 542         if (!shared_data)
 543                 return;
 544
 545         shared_data->stopping = 1;
 546 }
 547
 548 static void shmem_cleanup(void)
 549 {
 550         if (!shared_data)
 551                 return;
 552
 553         shmem_stop();
 554
 555         pthread_mutex_destroy(&shared_data->mutex);
 556         pthread_cond_destroy(&shared_data->cond);
 557 }
 558
 559 static int shmem_running(void)
 560 {
 561         return (!shared_data || !shared_data->stopping);
 562 }
 563
 564 static void shmem_end_time_locked(void)
 565 {
 566         shared_data->body.stop_barrier--;
 567         if (shared_data->body.stop_barrier == 0)
 568                 gettimeofday(&shared_data->body.end_time, NULL);
 569 }
 570
 571 static void shmem_start_time_locked(void)
 572 {
 573         shared_data->body.start_barrier--;
 574         if (shared_data->body.start_barrier == 0) {
 575                 shmem_wakeup_all();
 576                 gettimeofday(&shared_data->body.start_time, NULL);
 577         } else {
 578                 shmem_wait();
 579         }
 580 }
 581
 582 #else
 583 static int shmem_setup(void)
 584 {
 585         return 0;
 586 }
 587
 588 static inline void shmem_reset(int total_threads)
 589 {
 590 }
 591
 592 static inline void shmem_bump(__u32 counters)
 593 {
 594 }
 595
 596 static void shmem_lock(void)
 597 {
 598 }
 599
 600 static void shmem_unlock(void)
 601 {
 602 }
 603
 604 static void shmem_cleanup(void)
 605 {
 606 }
 607
 608 static int shmem_running(void)
 609 {
 610         return 1;
 611 }
 612 #endif
 613
 614 extern command_t cmdlist[];
 615
 616 static int do_device(char *func, char *devname)
 617 {
 618         int dev;
 619
 620         dev = parse_devname(func, devname);
 621         if (dev < 0)
 622                 return -1;
 623
 624         lcfg_set_devname(devname);
 625         cur_device = dev;
 626         return 0;
 627 }
 628
 629 int jt_obd_get_device(void)
 630 {
 631         return cur_device;
 632 }
 633
 634 int jt_obd_device(int argc, char **argv)
 635 {
 636         int rc;
 637
 638         if (argc > 2)
 639                 return CMD_HELP;
 640
 641         if (argc == 1) {
 642                 printf("current device is %d - %s\n",
 643                        cur_device, lcfg_get_devname() ? : "not set");
 644                 return 0;
 645         }
 646         rc = do_device("device", argv[1]);
 647         return rc;
 648 }
 649
 650 int jt_opt_device(int argc, char **argv)
 651 {
 652         int ret;
 653         int rc;
 654
 655         if (argc < 3)
 656                 return CMD_HELP;
 657
 658         rc = do_device("device", argv[1]);
 659
 660         if (!rc)
 661                 rc = Parser_execarg(argc - 2, argv + 2, cmdlist);
 662
 663         ret = do_disconnect(argv[0], 0);
 664         if (!rc)
 665                 rc = ret;
 666
 667         return rc;
 668 }
 669
 670 #ifdef MAX_THREADS
 671 static void parent_sighandler(int sig)
 672 {
 673 }
 674
 675 int jt_opt_threads(int argc, char **argv)
 676 {
 677         static char      cmdstr[129];
 678         sigset_t         saveset;
 679         sigset_t         sigset;
 680         struct sigaction sigact;
 681         struct sigaction saveact1;
 682         struct sigaction saveact2;
 683         unsigned long    threads;
 684         __u64            next_thread;
 685         int verbose;
 686         int rc = 0;
 687         int report_count = -1;
 688         char *end;
 689         int i;
 690
 691         if (argc < 5)
 692                 return CMD_HELP;
 693
 694         threads = strtoul(argv[1], &end, 0);
 695
 696         if (*end == '.')
 697                 report_count = strtoul(end + 1, &end, 0);
 698
 699         if (*end || threads > MAX_THREADS) {
 700                 fprintf(stderr, "error: %s: invalid thread count '%s'\n",
 701                         jt_cmdname(argv[0]), argv[1]);
 702                 return CMD_HELP;
 703         }
 704
 705         verbose = get_verbose(argv[0], argv[2]);
 706         if (verbose == BAD_VERBOSE)
 707                 return CMD_HELP;
 708
 709         if (verbose != 0) {
 710                 snprintf(cmdstr, sizeof(cmdstr), "%s", argv[4]);
 711                 for (i = 5; i < argc; i++)
 712                         snprintf(cmdstr + strlen(cmdstr),
 713                                  sizeof(cmdstr) - strlen(cmdstr),
 714                                  " %s", argv[i]);
 715
 716                 printf("%s: starting %ld threads on device %s running %s\n",
 717                        argv[0], threads, argv[3], cmdstr);
 718         }
 719
 720         shmem_reset(threads);
 721
 722         sigemptyset(&sigset);
 723         sigaddset(&sigset, SIGALRM);
 724         sigaddset(&sigset, SIGCHLD);
 725         sigprocmask(SIG_BLOCK, &sigset, &saveset);
 726
 727         nthreads = threads;
 728
 729         for (i = 1, next_thread = verbose; i <= threads; i++) {
 730                 rc = fork();
 731                 if (rc < 0) {
 732                         fprintf(stderr, "error: %s: #%d - %s\n", argv[0], i,
 733                                 strerror(rc = errno));
 734                         break;
 735                 } else if (rc == 0) {
 736                         sigprocmask(SIG_SETMASK, &saveset, NULL);
 737
 738                         thread = i;
 739                         argv[2] = "--device";
 740                         exit(jt_opt_device(argc - 2, argv + 2));
 741                 } else if (be_verbose(verbose, NULL, i, &next_thread, threads))
 742                         printf("%s: thread #%d (PID %d) started\n",
 743                                argv[0], i, rc);
 744                 rc = 0;
 745         }
 746
 747         if (!thread) {          /* parent process */
 748                 int live_threads = threads;
 749
 750                 sigemptyset(&sigset);
 751                 sigemptyset(&sigact.sa_mask);
 752                 sigact.sa_handler = parent_sighandler;
 753                 sigact.sa_flags = 0;
 754
 755                 sigaction(SIGALRM, &sigact, &saveact1);
 756                 sigaction(SIGCHLD, &sigact, &saveact2);
 757
 758                 while (live_threads > 0) {
 759                         int status;
 760                         pid_t ret;
 761
 762                         if (verbose < 0)        /* periodic stats */
 763                                 alarm(-verbose);
 764
 765                         sigsuspend(&sigset);
 766                         alarm(0);
 767
 768                         while (live_threads > 0) {
 769                                 ret = waitpid(0, &status, WNOHANG);
 770                                 if (ret == 0)
 771                                         break;
 772
 773                                 if (ret < 0) {
 774                                         fprintf(stderr,
 775                                                 "error: %s: wait - %s\n",
 776                                                 argv[0], strerror(errno));
 777                                         if (!rc)
 778                                                 rc = errno;
 779                                         continue;
 780                                 } else {
 781                                         /*
 782                                          * This is a hack.  We _should_ be able
 783                                          * to use WIFEXITED(status) to see if
 784                                          * there was an error, but it appears
 785                                          * to be broken and it always returns 1
 786                                          * (OK).  See wait(2).
 787                                          */
 788                                         int err = WEXITSTATUS(status);
 789
 790                                         if (err || WIFSIGNALED(status))
 791                                                 fprintf(stderr,
 792                                                         "%s: PID %d had rc=%d\n",
 793                                                         argv[0], ret, err);
 794                                         if (!rc)
 795                                                 rc = err;
 796
 797                                         live_threads--;
 798                                 }
 799                         }
 800
 801                         /* Show stats while all threads running */
 802                         if (verbose < 0) {
 803                                 shmem_snap(threads, live_threads);
 804                                 if (report_count > 0 && --report_count == 0)
 805                                         shmem_stop();
 806                         }
 807                 }
 808                 sigaction(SIGCHLD, &saveact2, NULL);
 809                 sigaction(SIGALRM, &saveact1, NULL);
 810         }
 811
 812         shmem_total(threads);
 813         sigprocmask(SIG_SETMASK, &saveset, NULL);
 814
 815         return rc;
 816 }
 817 #else
 818 int jt_opt_threads(int argc, char **argv)
 819 {
 820         fprintf(stderr, "%s not-supported in a single-threaded runtime\n",
 821                 jt_cmdname(argv[0]));
 822         return CMD_HELP;
 823 }
 824 #endif
 825
 826 int jt_opt_net(int argc, char **argv)
 827 {
 828         char *arg2[3];
 829         int rc;
 830
 831         if (argc < 3)
 832                 return CMD_HELP;
 833
 834         arg2[0] = argv[0];
 835         arg2[1] = argv[1];
 836         arg2[2] = NULL;
 837         rc = jt_ptl_network(2, arg2);
 838
 839         if (!rc)
 840                 rc = Parser_execarg(argc - 2, argv + 2, cmdlist);
 841
 842         return rc;
 843 }
 844
 845 #ifdef HAVE_SERVER_SUPPORT
 846 /*
 847  * Place this here so we can build tools that work with
 848  * older Lustre versions
 849  */
 850 #ifndef OBD_IOC_NO_TRANSNO
 851 #define OBD_IOC_NO_TRANSNO      _IOW('f', 140, OBD_IOC_DATA_TYPE)
 852 #endif
 853
 854 int jt_obd_no_transno(int argc, char **argv)
 855 {
 856         struct obd_ioctl_data data;
 857         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
 858         glob_t path;
 859         int count;
 860         int fd;
 861         int rc;
 862
 863         if (argc != 1)
 864                 return CMD_HELP;
 865
 866         memset(buf, 0, sizeof(rawbuf));
 867
 868         rc = cfs_get_param_paths(&path, "no_transno");
 869         if (rc != 0)
 870                 goto old_ioctl;
 871
 872         fd = open(path.gl_pathv[0], O_WRONLY);
 873         if (fd < 0) {
 874                 cfs_free_param_data(&path);
 875                 goto old_ioctl;
 876         }
 877
 878         snprintf(rawbuf, sizeof(rawbuf), "%d", cur_device);
 879
 880         count = write(fd, rawbuf, strlen(rawbuf));
 881         if (count < 0)
 882                 rc = errno;
 883
 884         cfs_free_param_data(&path);
 885         close(fd);
 886         if (rc)
 887                 goto old_ioctl;
 888
 889         return 0;
 890
 891 old_ioctl:
 892 #if LUSTRE_VERSION_CODE < OBD_OCD_VERSION(3, 0, 53, 0)
 893         memset(&data, 0, sizeof(data));
 894         data.ioc_dev = cur_device;
 895
 896         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
 897         if (rc) {
 898                 fprintf(stderr, "error: %s: invalid ioctl\n",
 899                         jt_cmdname(argv[0]));
 900                 return rc;
 901         }
 902         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_NO_TRANSNO, buf);
 903         if (rc < 0)
 904                 fprintf(stderr, "error: %s: %s\n", jt_cmdname(argv[0]),
 905                         strerror(rc = errno));
 906 #endif
 907         return rc;
 908 }
 909 #endif /* HAVE_SERVER_SUPPORT */
 910
 911 int jt_obd_set_readonly(int argc, char **argv)
 912 {
 913         struct obd_ioctl_data data;
 914         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
 915         int rc;
 916
 917         memset(&data, 0, sizeof(data));
 918         data.ioc_dev = cur_device;
 919
 920         if (argc != 1)
 921                 return CMD_HELP;
 922
 923         memset(buf, 0, sizeof(rawbuf));
 924         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
 925         if (rc) {
 926                 fprintf(stderr, "error: %s: invalid ioctl\n",
 927                         jt_cmdname(argv[0]));
 928                 return rc;
 929         }
 930         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_SET_READONLY, buf);
 931         if (rc < 0)
 932                 fprintf(stderr, "error: %s: %s\n", jt_cmdname(argv[0]),
 933                         strerror(rc = errno));
 934
 935         return rc;
 936 }
 937
 938 static int obd_abort_recovery(char *cmd, enum obd_abort_recovery_flags flags)
 939 {
 940         struct obd_ioctl_data data = {
 941                 .ioc_dev = cur_device,
 942                 .ioc_type = flags,
 943         };
 944         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
 945         int rc;
 946
 947         memset(buf, 0, sizeof(rawbuf));
 948         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
 949         if (rc) {
 950                 fprintf(stderr, "error: %s: invalid ioctl\n",
 951                         jt_cmdname(cmd));
 952                 return rc;
 953         }
 954         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_ABORT_RECOVERY, buf);
 955         if (rc < 0)
 956                 fprintf(stderr, "error: %s: %s\n", jt_cmdname(cmd),
 957                         strerror(rc = errno));
 958
 959         return rc;
 960 }
 961
 962 int jt_obd_abort_recovery(int argc, char **argv)
 963 {
 964         if (argc != 1)
 965                 return CMD_HELP;
 966
 967         return obd_abort_recovery(argv[0], OBD_FLG_ABORT_RECOV_OST);
 968 }
 969
 970 int jt_obd_abort_recovery_mdt(int argc, char **argv)
 971 {
 972         if (argc != 1)
 973                 return CMD_HELP;
 974
 975         return obd_abort_recovery(argv[0], OBD_FLG_ABORT_RECOV_MDT);
 976 }
 977
 978 int jt_get_version(int argc, char **argv)
 979 {
 980         char version[128];
 981         int rc;
 982
 983         if (argc != 1)
 984                 return CMD_HELP;
 985
 986         rc = llapi_get_version_string(version, sizeof(version));
 987         if (rc)
 988                 printf("Lustre version: %s\n", LUSTRE_VERSION_STRING);
 989         else
 990                 printf("Lustre version: %s\n", version);
 991
 992         return 0;
 993 }
 994
 995 static void print_obd_line(char *s)
 996 {
 997         const char *param = "osc/%s/ost_conn_uuid";
 998         char buf[MAX_STRING_SIZE];
 999         char obd_name[MAX_OBD_NAME];
1000         FILE *fp = NULL;
1001         glob_t path;
1002         char *ptr;
1003 retry:
1004         /* obd device type is the first 3 characters of param name */
1005         snprintf(buf, sizeof(buf), " %%*d %%*s %.3s %%%zus %%*s %%*d ",
1006                  param, sizeof(obd_name) - 1);
1007         if (sscanf(s, buf, obd_name) == 0)
1008                 goto try_mdc;
1009         if (cfs_get_param_paths(&path, param, obd_name) != 0)
1010                 goto try_mdc;
1011         fp = fopen(path.gl_pathv[0], "r");
1012         if (!fp) {
1013                 /* need to free path data before retry */
1014                 cfs_free_param_data(&path);
1015 try_mdc:
1016                 if (param[0] == 'o') { /* failed with osc, try mdc */
1017                         param = "mdc/%s/mds_conn_uuid";
1018                         goto retry;
1019                 }
1020                 buf[0] = '\0';
1021                 goto fail_print;
1022         }
1023
1024         /* should not ignore fgets(3)'s return value */
1025         if (!fgets(buf, sizeof(buf), fp)) {
1026                 fprintf(stderr, "reading from %s: %s", buf, strerror(errno));
1027                 goto fail_close;
1028         }
1029
1030 fail_close:
1031         fclose(fp);
1032         cfs_free_param_data(&path);
1033
1034         /* trim trailing newlines */
1035         ptr = strrchr(buf, '\n');
1036         if (ptr)
1037                 *ptr = '\0';
1038 fail_print:
1039         ptr = strrchr(s, '\n');
1040         if (ptr)
1041                 *ptr = '\0';
1042         printf("%s%s%s\n", s, buf[0] ? " " : "", buf);
1043 }
1044
1045 /* get device list by ioctl */
1046 int jt_obd_list_ioctl(int argc, char **argv)
1047 {
1048         int rc, index;
1049         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
1050         struct obd_ioctl_data *data = (struct obd_ioctl_data *)buf;
1051
1052         if (argc > 2)
1053                 return CMD_HELP;
1054         /* Just ignore a -t option.  Only supported with /proc. */
1055         else if (argc == 2 && strcmp(argv[1], "-t") != 0)
1056                 return CMD_HELP;
1057
1058         for (index = 0;; index++) {
1059                 memset(buf, 0, sizeof(rawbuf));
1060                 data->ioc_version = OBD_IOCTL_VERSION;
1061                 data->ioc_inllen1 =
1062                         sizeof(rawbuf) - __ALIGN_KERNEL(sizeof(*data), 8);
1063                 data->ioc_inlbuf1 = buf + __ALIGN_KERNEL(sizeof(*data), 8);
1064                 data->ioc_len = obd_ioctl_packlen(data);
1065                 data->ioc_count = index;
1066
1067                 rc = l_ioctl(OBD_DEV_ID, OBD_IOC_GETDEVICE, buf);
1068                 if (rc != 0)
1069                         break;
1070                 printf("%s\n", (char *)data->ioc_bulk);
1071         }
1072         if (rc != 0) {
1073                 if (errno == ENOENT)
1074                         /* no device or the last device */
1075                         rc = 0;
1076                 else
1077                         fprintf(stderr,
1078                                 "Error getting device list: %s: check dmesg\n",
1079                                 strerror(errno));
1080         }
1081         return rc;
1082 }
1083
1084 int jt_obd_list(int argc, char **argv)
1085 {
1086         char buf[MAX_STRING_SIZE];
1087         int print_obd = 0;
1088         glob_t path;
1089         FILE *fp;
1090
1091         if (argc > 2)
1092                 return CMD_HELP;
1093
1094         if (argc == 2) {
1095                 if (strcmp(argv[1], "-t") == 0)
1096                         print_obd = 1;
1097                 else
1098                         return CMD_HELP;
1099         }
1100
1101         if (cfs_get_param_paths(&path, "devices") ||
1102             !(fp = fopen(path.gl_pathv[0], "r"))) {
1103                 cfs_free_param_data(&path);
1104
1105                 return jt_obd_list_ioctl(argc, argv);
1106         }
1107
1108         while (fgets(buf, sizeof(buf), fp) != NULL)
1109                 if (print_obd)
1110                         print_obd_line(buf);
1111                 else
1112                         printf("%s", buf);
1113
1114         cfs_free_param_data(&path);
1115         fclose(fp);
1116         return 0;
1117 }
1118
1119 struct jt_fid_space {
1120         __u64   jt_seq;
1121         __u64   jt_id;
1122         int     jt_width;
1123 };
1124
1125 int jt_obd_alloc_fids(struct jt_fid_space *space, struct lu_fid *fid,
1126                       __u64 *count)
1127 {
1128         int rc;
1129
1130         if (space->jt_seq == 0 || space->jt_id == space->jt_width) {
1131                 struct obd_ioctl_data  data;
1132                 char rawbuf[MAX_IOC_BUFLEN];
1133                 char *buf = rawbuf;
1134                 __u64 seqnr;
1135                 int max_count;
1136
1137                 memset(&data, 0, sizeof(data));
1138                 data.ioc_dev = cur_device;
1139
1140                 data.ioc_pbuf1 = (char *)&seqnr;
1141                 data.ioc_plen1 = sizeof(seqnr);
1142
1143                 data.ioc_pbuf2 = (char *)&max_count;
1144                 data.ioc_plen2 = sizeof(max_count);
1145
1146                 memset(buf, 0, sizeof(rawbuf));
1147                 rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
1148                 if (rc) {
1149                         fprintf(stderr, "error: invalid ioctl rc = %d\n", rc);
1150                         return rc;
1151                 }
1152
1153                 rc = l_ioctl(OBD_DEV_ID, OBD_IOC_ECHO_ALLOC_SEQ, buf);
1154                 if (rc) {
1155                         fprintf(stderr, "ioctl error: rc = %d\n", rc);
1156                         return rc;
1157                 }
1158
1159                 space->jt_seq = *(__u64 *)data.ioc_pbuf1;
1160                 space->jt_width = *(int *)data.ioc_pbuf2;
1161                 space->jt_id = 1;
1162         }
1163         fid->f_seq = space->jt_seq;
1164         fid->f_oid = space->jt_id;
1165         fid->f_ver = 0;
1166
1167         space->jt_id = space->jt_id + *count;
1168         if (space->jt_id > space->jt_width)
1169                 space->jt_id = space->jt_width;
1170
1171         *count = space->jt_id - fid->f_oid;
1172         return 0;
1173 }
1174
1175 #define MD_STEP_COUNT 1000
1176 int jt_obd_md_common(int argc, char **argv, int cmd)
1177 {
1178         struct obd_ioctl_data  data;
1179         struct timeval         start;
1180         struct timeval         end_time;
1181         char rawbuf[MAX_IOC_BUFLEN];
1182         char *buf = rawbuf;
1183         int mode = 0000644;
1184         int create_mode;
1185         int rc = 0;
1186         char *parent_basedir = NULL;
1187         char dirname[4096];
1188         int parent_base_id = 0;
1189         int parent_count = 1;
1190         __u64 child_base_id = -1;
1191         int stripe_count = 0;
1192         int stripe_index = -1;
1193         int count = 0;
1194         char *end;
1195         __u64 seconds = 0;
1196         double diff;
1197         int c;
1198         __u64 total_count = 0;
1199         char *name = NULL;
1200         struct jt_fid_space fid_space = {0};
1201         int version = 0;
1202         struct option long_opts[] = {
1203         { .val = 'b',   .name = "child_base_id",
1204                                                 .has_arg = required_argument },
1205         { .val = 'c',   .name = "stripe_count",
1206                                                 .has_arg = required_argument },
1207         { .val = 'd',   .name = "parent_basedir",
1208                                                 .has_arg = required_argument },
1209         { .val = 'D',   .name = "parent_dircount",
1210                                                 .has_arg = required_argument },
1211         { .val = 'i',   .name = "stripe_index", .has_arg = required_argument },
1212         { .val = 'm',   .name = "mode",         .has_arg = required_argument },
1213         { .val = 'n',   .name = "count",        .has_arg = required_argument },
1214         { .val = 't',   .name = "time",         .has_arg = required_argument },
1215         { .val = 'v',   .name = "version",      .has_arg = no_argument },
1216         { .name = NULL } };
1217
1218         while ((c = getopt_long(argc, argv, "b:c:d:D:m:n:t:v",
1219                                 long_opts, NULL)) >= 0) {
1220                 switch (c) {
1221                 case 'b':
1222                         child_base_id = strtoull(optarg, &end, 0);
1223                         if (*end) {
1224                                 fprintf(stderr,
1225                                         "error: %s: bad child_base_id '%s'\n",
1226                                         jt_cmdname(argv[0]), optarg);
1227                                 return CMD_HELP;
1228                         }
1229                         break;
1230                 case 'c':
1231                         stripe_count = strtoul(optarg, &end, 0);
1232                         if (*end) {
1233                                 fprintf(stderr,
1234                                         "error: %s: bad stripe count '%s'\n",
1235                                         jt_cmdname(argv[0]), optarg);
1236                                 return CMD_HELP;
1237                         }
1238                         break;
1239                 case 'd':
1240                         parent_basedir = optarg;
1241                         break;
1242                 case 'D':
1243                         parent_count = strtoul(optarg, &end, 0);
1244                         if (*end) {
1245                                 fprintf(stderr,
1246                                         "error: %s: bad parent count '%s'\n",
1247                                         jt_cmdname(argv[0]), optarg);
1248                                 return CMD_HELP;
1249                         }
1250                         break;
1251                 case 'i':
1252                         stripe_index = strtoul(optarg, &end, 0);
1253                         if (*end) {
1254                                 fprintf(stderr,
1255                                         "error: %s: bad stripe index '%s'\n",
1256                                         jt_cmdname(argv[0]), optarg);
1257                                 return CMD_HELP;
1258                         }
1259                         break;
1260                 case 'm':
1261                         mode = strtoul(optarg, &end, 0);
1262                         if (*end) {
1263                                 fprintf(stderr, "error: %s: bad mode '%s'\n",
1264                                         jt_cmdname(argv[0]), optarg);
1265                                 return CMD_HELP;
1266                         }
1267                         break;
1268                 case 'n':
1269                         total_count = strtoul(optarg, &end, 0);
1270                         if (*end || total_count == 0) {
1271                                 fprintf(stderr, "%s: bad child count '%s'\n",
1272                                         jt_cmdname(argv[0]), optarg);
1273                                 return CMD_HELP;
1274                         }
1275                         break;
1276                 case 't':
1277                         seconds = strtoull(optarg, &end, 0);
1278                         if (*end) {
1279                                 fprintf(stderr, "error: %s: seconds '%s'\n",
1280                                         jt_cmdname(argv[0]), optarg);
1281                                 return CMD_HELP;
1282                         }
1283                         break;
1284                 case 'v':
1285                         version = 1;
1286                         break;
1287                 default:
1288                         fprintf(stderr,
1289                                 "error: %s: option '%s' unrecognized\n",
1290                                 argv[0], argv[optind - 1]);
1291                         return CMD_HELP;
1292                 }
1293         }
1294
1295         memset(&data, 0, sizeof(data));
1296         data.ioc_dev = cur_device;
1297         if (child_base_id == -1) {
1298                 if (optind >= argc)
1299                         return CMD_HELP;
1300                 name = argv[optind];
1301                 total_count = 1;
1302         } else {
1303                 if (optind < argc) {
1304                         fprintf(stderr,
1305                                 "child_base_id and name can not specified at the same time\n");
1306                         return CMD_HELP;
1307                 }
1308         }
1309
1310         if (stripe_count == 0 && stripe_index != -1) {
1311                 fprintf(stderr,
1312                         "If stripe_count is 0, stripe_index can not be specified\n");
1313                 return CMD_HELP;
1314         }
1315
1316         if (total_count == 0 && seconds == 0) {
1317                 fprintf(stderr, "count or seconds needs to be indicated\n");
1318                 return CMD_HELP;
1319         }
1320
1321         if (parent_count <= 0) {
1322                 fprintf(stderr, "parent count must < 0\n");
1323                 return CMD_HELP;
1324         }
1325
1326 #ifdef MAX_THREADS
1327         if (thread) {
1328                 shmem_lock();
1329                 /* threads interleave */
1330                 if (parent_base_id != -1)
1331                         parent_base_id += (thread - 1) % parent_count;
1332
1333                 if (child_base_id != -1)
1334                         child_base_id +=  (thread - 1) *
1335                                 (MAX_BASE_ID / nthreads);
1336
1337                 shmem_start_time_locked();
1338                 shmem_unlock();
1339         }
1340 #endif
1341         /*
1342          * If parent directory is not specified, try to get the directory
1343          * from name
1344          */
1345         if (!parent_basedir) {
1346                 char *last_lash;
1347
1348                 if (!name) {
1349                         fprintf(stderr,
1350                                 "parent_basedir or name must be indicated!\n");
1351                         return CMD_HELP;
1352                 }
1353                 /*Get directory and name from name*/
1354                 last_lash = strrchr(name, '/');
1355                 if (!last_lash || name[0] != '/') {
1356                         fprintf(stderr, "Can not locate %s\n", name);
1357                         return CMD_HELP;
1358                 }
1359
1360                 if (last_lash == name) {
1361                         sprintf(dirname, "%s", "/");
1362                         name++;
1363                 } else {
1364                         int namelen = (unsigned long)last_lash -
1365                                       (unsigned long)name + 1;
1366                         snprintf(dirname, namelen, "%s", name);
1367                         name = last_lash + 1;
1368                 }
1369
1370                 data.ioc_pbuf1 = dirname;
1371                 data.ioc_plen1 = strlen(dirname);
1372
1373                 data.ioc_pbuf2 = name;
1374                 data.ioc_plen2 = strlen(name);
1375         } else {
1376                 if (name) {
1377                         data.ioc_pbuf2 = name;
1378                         data.ioc_plen2 = strlen(name);
1379                 }
1380                 if (parent_base_id > 0)
1381                         sprintf(dirname, "%s%d", parent_basedir,
1382                                 parent_base_id);
1383                 else
1384                         sprintf(dirname, "%s", parent_basedir);
1385                 data.ioc_pbuf1 = dirname;
1386                 data.ioc_plen1 = strlen(dirname);
1387         }
1388
1389         if (cmd == ECHO_MD_MKDIR || cmd == ECHO_MD_RMDIR)
1390                 create_mode = S_IFDIR;
1391         else
1392                 create_mode = S_IFREG;
1393
1394         data.ioc_obdo1.o_mode = mode | S_IFDIR;
1395         data.ioc_obdo1.o_valid = OBD_MD_FLID | OBD_MD_FLTYPE | OBD_MD_FLMODE |
1396                                  OBD_MD_FLFLAGS | OBD_MD_FLGROUP;
1397         data.ioc_command = cmd;
1398
1399         gettimeofday(&start, NULL);
1400         while (shmem_running()) {
1401                 struct lu_fid fid = { 0 };
1402
1403                 if (child_base_id != -1)
1404                         data.ioc_obdo2.o_oi.oi.oi_id = child_base_id;
1405                 data.ioc_obdo2.o_mode = mode | create_mode;
1406                 data.ioc_obdo2.o_valid = OBD_MD_FLID | OBD_MD_FLTYPE |
1407                                          OBD_MD_FLMODE | OBD_MD_FLFLAGS |
1408                                          OBD_MD_FLGROUP;
1409                 data.ioc_obdo2.o_misc = stripe_count;
1410                 data.ioc_obdo2.o_stripe_idx = stripe_index;
1411
1412                 if (total_count > 0) {
1413                         if ((total_count - count) > MD_STEP_COUNT)
1414                                 data.ioc_count = MD_STEP_COUNT;
1415                         else
1416                                 data.ioc_count = total_count - count;
1417                 } else {
1418                         data.ioc_count = MD_STEP_COUNT;
1419                 }
1420
1421                 if (cmd == ECHO_MD_CREATE || cmd == ECHO_MD_MKDIR) {
1422                         /*Allocate fids for the create */
1423                         rc = jt_obd_alloc_fids(&fid_space, &fid,
1424                                                &data.ioc_count);
1425                         if (rc) {
1426                                 fprintf(stderr, "Allocate fids error %d.\n",
1427                                         rc);
1428                                 return rc;
1429                         }
1430                         data.ioc_obdo1.o_oi.oi_fid = fid;
1431                 }
1432
1433                 child_base_id += data.ioc_count;
1434                 count += data.ioc_count;
1435
1436                 memset(buf, 0, sizeof(rawbuf));
1437                 rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
1438                 if (rc) {
1439                         fprintf(stderr, "error: %s: invalid ioctl %d\n",
1440                                 jt_cmdname(argv[0]), rc);
1441                         return rc;
1442                 }
1443
1444                 rc = l_ioctl(OBD_DEV_ID, OBD_IOC_ECHO_MD, buf);
1445                 if (rc) {
1446                         fprintf(stderr, "error: %s: %s\n",
1447                                 jt_cmdname(argv[0]), strerror(rc = errno));
1448                         return rc;
1449                 }
1450                 shmem_bump(data.ioc_count);
1451
1452                 gettimeofday(&end_time, NULL);
1453                 diff = difftime(&end_time, &start);
1454                 if (seconds > 0 && (__u64)diff > seconds)
1455                         break;
1456
1457                 if (count >= total_count && total_count > 0)
1458                         break;
1459         }
1460
1461         if (count > 0 && version) {
1462                 gettimeofday(&end_time, NULL);
1463                 diff = difftime(&end_time, &start);
1464                 printf("%s: %d in %.3fs (%.3f /s): %s",
1465                        jt_cmdname(argv[0]), count, diff,
1466                        (double)count / diff, ctime(&end_time.tv_sec));
1467         }
1468
1469 #ifdef MAX_THREADS
1470         if (thread) {
1471                 shmem_lock();
1472                 shmem_end_time_locked();
1473                 shmem_unlock();
1474         }
1475 #endif
1476         return rc;
1477 }
1478
1479 int jt_obd_test_create(int argc, char **argv)
1480 {
1481         return jt_obd_md_common(argc, argv, ECHO_MD_CREATE);
1482 }
1483
1484 int jt_obd_test_mkdir(int argc, char **argv)
1485 {
1486         return jt_obd_md_common(argc, argv, ECHO_MD_MKDIR);
1487 }
1488
1489 int jt_obd_test_destroy(int argc, char **argv)
1490 {
1491         return jt_obd_md_common(argc, argv, ECHO_MD_DESTROY);
1492 }
1493
1494 int jt_obd_test_rmdir(int argc, char **argv)
1495 {
1496         return jt_obd_md_common(argc, argv, ECHO_MD_RMDIR);
1497 }
1498
1499 int jt_obd_test_lookup(int argc, char **argv)
1500 {
1501         return jt_obd_md_common(argc, argv, ECHO_MD_LOOKUP);
1502 }
1503
1504 int jt_obd_test_setxattr(int argc, char **argv)
1505 {
1506         return jt_obd_md_common(argc, argv, ECHO_MD_SETATTR);
1507 }
1508
1509 int jt_obd_test_md_getattr(int argc, char **argv)
1510 {
1511         return jt_obd_md_common(argc, argv, ECHO_MD_GETATTR);
1512 }
1513
1514 int jt_obd_create(int argc, char **argv)
1515 {
1516         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
1517         struct obd_ioctl_data data;
1518         struct timeval next_time;
1519         __u64 count = 1, next_count, base_id = 1;
1520         int verbose = 1, mode = 0100644, rc = 0, i;
1521         char *end;
1522
1523         memset(&data, 0, sizeof(data));
1524         data.ioc_dev = cur_device;
1525         if (argc < 2 || argc > 4)
1526                 return CMD_HELP;
1527
1528         count = strtoull(argv[1], &end, 0);
1529         if (*end) {
1530                 fprintf(stderr, "error: %s: invalid iteration count '%s'\n",
1531                         jt_cmdname(argv[0]), argv[1]);
1532                 return CMD_HELP;
1533         }
1534
1535         if (argc > 2) {
1536                 mode = strtoul(argv[2], &end, 0);
1537                 if (*end) {
1538                         fprintf(stderr, "error: %s: invalid mode '%s'\n",
1539                                 jt_cmdname(argv[0]), argv[2]);
1540                         return CMD_HELP;
1541                 }
1542                 if (!(mode & S_IFMT))
1543                         mode |= S_IFREG;
1544         }
1545
1546         if (argc > 3) {
1547                 verbose = get_verbose(argv[0], argv[3]);
1548                 if (verbose == BAD_VERBOSE)
1549                         return CMD_HELP;
1550         }
1551
1552         printf("%s: %jd objects\n", jt_cmdname(argv[0]), (uintmax_t)count);
1553         gettimeofday(&next_time, NULL);
1554         next_time.tv_sec -= verbose;
1555
1556         ostid_set_seq_echo(&data.ioc_obdo1.o_oi);
1557         for (i = 1, next_count = verbose; i <= count && shmem_running(); i++) {
1558                 /*
1559                  * base_id is 1 so we don't need to worry about it being
1560                  * greater than OBIF_MAX_OID
1561                  */
1562                 data.ioc_obdo1.o_oi.oi_fid.f_oid = base_id;
1563                 data.ioc_obdo1.o_mode = mode;
1564                 data.ioc_obdo1.o_uid = 0;
1565                 data.ioc_obdo1.o_gid = 0;
1566                 data.ioc_obdo1.o_projid = 0;
1567                 data.ioc_obdo1.o_valid = OBD_MD_FLTYPE | OBD_MD_FLMODE |
1568                                          OBD_MD_FLID | OBD_MD_FLUID |
1569                                          OBD_MD_FLGID | OBD_MD_FLGROUP |
1570                                          OBD_MD_FLPROJID;
1571
1572                 memset(buf, 0, sizeof(rawbuf));
1573                 rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
1574                 if (rc) {
1575                         fprintf(stderr, "error: %s: invalid ioctl\n",
1576                                 jt_cmdname(argv[0]));
1577                         return rc;
1578                 }
1579                 rc = l_ioctl(OBD_DEV_ID, OBD_IOC_CREATE, buf);
1580                 llapi_ioctl_unpack(&data, buf, sizeof(rawbuf));
1581                 shmem_bump(1);
1582                 if (rc < 0) {
1583                         fprintf(stderr, "error: %s: #%d - %s\n",
1584                                 jt_cmdname(argv[0]), i, strerror(rc = errno));
1585                         break;
1586                 }
1587                 if (!(data.ioc_obdo1.o_valid & OBD_MD_FLID)) {
1588                         fprintf(stderr, "error: %s: oid not valid #%d:%#jx\n",
1589                                 jt_cmdname(argv[0]), i,
1590                                 (uintmax_t)data.ioc_obdo1.o_valid);
1591                         rc = EINVAL;
1592                         break;
1593                 }
1594
1595                 if (be_verbose(verbose, &next_time, i, &next_count, count))
1596                         printf("%s: #%d is object id %#jx\n",
1597                                jt_cmdname(argv[0]), i,
1598                                (uintmax_t)ostid_id(&data.ioc_obdo1.o_oi));
1599         }
1600
1601         return rc;
1602 }
1603
1604 int jt_obd_setattr(int argc, char **argv)
1605 {
1606         struct obd_ioctl_data data;
1607         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
1608         __u64 objid;
1609         char *end;
1610         int mode;
1611         int rc;
1612
1613         memset(&data, 0, sizeof(data));
1614         data.ioc_dev = cur_device;
1615         if (argc != 2)
1616                 return CMD_HELP;
1617
1618         objid = strtoull(argv[1], &end, 0);
1619         if (*end) {
1620                 fprintf(stderr, "error: %s: objid '%s' is not a number\n",
1621                         jt_cmdname(argv[0]), argv[1]);
1622                 return CMD_HELP;
1623         }
1624
1625         if (objid >= OBIF_MAX_OID) {
1626                 fprintf(stderr, "error: %s: invalid objid '%s'\n",
1627                         jt_cmdname(argv[0]), argv[1]);
1628                 return CMD_HELP;
1629         }
1630
1631         mode = strtoul(argv[2], &end, 0);
1632         if (*end) {
1633                 fprintf(stderr, "error: %s: invalid mode '%s'\n",
1634                         jt_cmdname(argv[0]), argv[2]);
1635                 return CMD_HELP;
1636         }
1637
1638         ostid_set_seq_echo(&data.ioc_obdo1.o_oi);
1639         data.ioc_obdo1.o_mode = S_IFREG | mode;
1640         data.ioc_obdo1.o_oi.oi_fid.f_oid = objid;
1641         data.ioc_obdo1.o_valid = OBD_MD_FLID | OBD_MD_FLTYPE | OBD_MD_FLMODE;
1642
1643         memset(buf, 0, sizeof(rawbuf));
1644         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
1645         if (rc) {
1646                 fprintf(stderr, "error: %s: invalid ioctl\n",
1647                         jt_cmdname(argv[0]));
1648                 return rc;
1649         }
1650         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_SETATTR, buf);
1651         if (rc < 0)
1652                 fprintf(stderr, "error: %s: %s\n", jt_cmdname(argv[0]),
1653                         strerror(rc = errno));
1654
1655         return rc;
1656 }
1657
1658 int jt_obd_test_setattr(int argc, char **argv)
1659 {
1660         struct obd_ioctl_data data;
1661         struct timeval start, next_time;
1662         __u64 i, count, next_count;
1663         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
1664         int verbose = 1;
1665         __u64 objid = 3;
1666         char *end;
1667         int rc = 0;
1668
1669         if (argc < 2 || argc > 4)
1670                 return CMD_HELP;
1671
1672         memset(&data, 0, sizeof(data));
1673         data.ioc_dev = cur_device;
1674         count = strtoull(argv[1], &end, 0);
1675         if (*end) {
1676                 fprintf(stderr, "error: %s: invalid iteration count '%s'\n",
1677                         jt_cmdname(argv[0]), argv[1]);
1678                 return CMD_HELP;
1679         }
1680
1681         if (argc >= 3) {
1682                 verbose = get_verbose(argv[0], argv[2]);
1683                 if (verbose == BAD_VERBOSE)
1684                         return CMD_HELP;
1685         }
1686
1687         if (argc >= 4) {
1688                 if (argv[3][0] == 't') {
1689                         objid = strtoull(argv[3] + 1, &end, 0);
1690                         if (thread)
1691                                 objid += thread - 1;
1692                 } else {
1693                         objid = strtoull(argv[3], &end, 0);
1694                 }
1695                 if (*end) {
1696                         fprintf(stderr, "error: %s: invalid objid '%s'\n",
1697                                 jt_cmdname(argv[0]), argv[3]);
1698                         return CMD_HELP;
1699                 }
1700         }
1701
1702         gettimeofday(&start, NULL);
1703         next_time.tv_sec = start.tv_sec - verbose;
1704         next_time.tv_usec = start.tv_usec;
1705         if (verbose != 0)
1706                 printf("%s: setting %jd attrs (objid %#jx): %s",
1707                        jt_cmdname(argv[0]), (uintmax_t)count,
1708                        (uintmax_t)objid, ctime(&start.tv_sec));
1709
1710         ostid_set_seq_echo(&data.ioc_obdo1.o_oi);
1711         for (i = 1, next_count = verbose; i <= count && shmem_running(); i++) {
1712                 if (objid >= OBIF_MAX_OID) {
1713                         fprintf(stderr, "errr: %s: invalid objid '%llu'\n",
1714                                 jt_cmdname(argv[0]), (unsigned long long)objid);
1715                         return -E2BIG;
1716                 }
1717
1718                 data.ioc_obdo1.o_oi.oi_fid.f_oid = objid;
1719                 data.ioc_obdo1.o_mode = S_IFREG;
1720                 data.ioc_obdo1.o_valid = OBD_MD_FLID | OBD_MD_FLTYPE |
1721                                          OBD_MD_FLMODE;
1722                 memset(buf, 0, sizeof(rawbuf));
1723                 rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
1724                 if (rc) {
1725                         fprintf(stderr, "error: %s: invalid ioctl\n",
1726                                 jt_cmdname(argv[0]));
1727                         return rc;
1728                 }
1729                 rc = l_ioctl(OBD_DEV_ID, OBD_IOC_SETATTR, &data);
1730                 shmem_bump(1);
1731                 if (rc < 0) {
1732                         fprintf(stderr, "error: %s: #%jd - %d:%s\n",
1733                                 jt_cmdname(argv[0]), (uintmax_t)i,
1734                                 errno, strerror(rc = errno));
1735                         break;
1736                 }
1737                 if (be_verbose(verbose, &next_time, i, &next_count, count))
1738                         printf("%s: set attr #%jd\n",
1739                                jt_cmdname(argv[0]), (uintmax_t)i);
1740         }
1741
1742         if (!rc) {
1743                 struct timeval end;
1744                 double diff;
1745
1746                 gettimeofday(&end, NULL);
1747
1748                 diff = difftime(&end, &start);
1749
1750                 --i;
1751                 if (verbose != 0)
1752                         printf("%s: %jd attrs in %.3fs (%.3f attr/s): %s",
1753                                jt_cmdname(argv[0]), (uintmax_t)i, diff,
1754                                i / diff, ctime(&end.tv_sec));
1755         }
1756         return rc;
1757 }
1758
1759 int jt_obd_destroy(int argc, char **argv)
1760 {
1761         struct obd_ioctl_data data;
1762         struct timeval next_time;
1763         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
1764         __u64 count = 1, next_count;
1765         int verbose = 1;
1766         __u64 id;
1767         char *end;
1768         int rc = 0, i;
1769
1770         memset(&data, 0, sizeof(data));
1771         data.ioc_dev = cur_device;
1772         if (argc < 2 || argc > 4)
1773                 return CMD_HELP;
1774
1775         errno = 0;
1776         id = strtoull(argv[1], &end, 0);
1777         if (*end || id == 0 || errno != 0) {
1778                 fprintf(stderr, "error: %s: invalid objid '%s'\n",
1779                         jt_cmdname(argv[0]), argv[1]);
1780                 return CMD_HELP;
1781         }
1782         if (argc > 2) {
1783                 count = strtoull(argv[2], &end, 0);
1784                 if (*end) {
1785                         fprintf(stderr,
1786                                 "error: %s: invalid iteration count '%s'\n",
1787                                 jt_cmdname(argv[0]), argv[2]);
1788                         return CMD_HELP;
1789                 }
1790         }
1791
1792         if (argc > 3) {
1793                 verbose = get_verbose(argv[0], argv[3]);
1794                 if (verbose == BAD_VERBOSE)
1795                         return CMD_HELP;
1796         }
1797
1798         printf("%s: %jd objects\n", jt_cmdname(argv[0]), (uintmax_t)count);
1799         gettimeofday(&next_time, NULL);
1800         next_time.tv_sec -= verbose;
1801
1802         ostid_set_seq_echo(&data.ioc_obdo1.o_oi);
1803         for (i = 1, next_count = verbose; i <= count && shmem_running();
1804              i++, id++) {
1805                 if (id >= OBIF_MAX_OID) {
1806                         fprintf(stderr, "errr: %s: invalid objid '%llu'\n",
1807                                 jt_cmdname(argv[0]), (unsigned long long)id);
1808                         return -E2BIG;
1809                 }
1810
1811                 data.ioc_obdo1.o_oi.oi_fid.f_oid = id;
1812                 data.ioc_obdo1.o_mode = S_IFREG | 0644;
1813                 data.ioc_obdo1.o_valid = OBD_MD_FLID | OBD_MD_FLMODE;
1814
1815                 memset(buf, 0, sizeof(rawbuf));
1816                 rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
1817                 if (rc) {
1818                         fprintf(stderr, "error: %s: invalid ioctl\n",
1819                                 jt_cmdname(argv[0]));
1820                         return rc;
1821                 }
1822                 rc = l_ioctl(OBD_DEV_ID, OBD_IOC_DESTROY, buf);
1823                 llapi_ioctl_unpack(&data, buf, sizeof(rawbuf));
1824                 shmem_bump(1);
1825                 if (rc < 0) {
1826                         fprintf(stderr, "error: %s: objid %#jx: %s\n",
1827                                 jt_cmdname(argv[0]), (uintmax_t)id,
1828                                 strerror(rc = errno));
1829                         break;
1830                 }
1831
1832                 if (be_verbose(verbose, &next_time, i, &next_count, count))
1833                         printf("%s: #%d is object id %#jx\n",
1834                                jt_cmdname(argv[0]), i, (uintmax_t)id);
1835         }
1836
1837         return rc;
1838 }
1839
1840 int jt_obd_getattr(int argc, char **argv)
1841 {
1842         struct obd_ioctl_data data;
1843         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
1844         __u64 objid;
1845         char *end;
1846         int rc;
1847
1848         if (argc != 2)
1849                 return CMD_HELP;
1850
1851         objid = strtoull(argv[1], &end, 0);
1852         if (*end) {
1853                 fprintf(stderr, "error: %s: objid '%s' is not a number\n",
1854                         jt_cmdname(argv[0]), argv[1]);
1855                 return CMD_HELP;
1856         }
1857
1858         if (objid >= OBIF_MAX_OID) {
1859                 fprintf(stderr, "error: %s: invalid objid '%s'\n",
1860                         jt_cmdname(argv[0]), argv[1]);
1861                 return CMD_HELP;
1862         }
1863
1864         memset(&data, 0, sizeof(data));
1865         data.ioc_dev = cur_device;
1866         ostid_set_seq_echo(&data.ioc_obdo1.o_oi);
1867         data.ioc_obdo1.o_oi.oi_fid.f_oid = objid;
1868         /* to help obd filter */
1869         data.ioc_obdo1.o_mode = 0100644;
1870         data.ioc_obdo1.o_valid = 0xffffffff;
1871         printf("%s: object id %#jx\n", jt_cmdname(argv[0]),
1872                (uintmax_t)ostid_id(&data.ioc_obdo1.o_oi));
1873
1874         memset(buf, 0, sizeof(rawbuf));
1875         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
1876         if (rc) {
1877                 fprintf(stderr, "error: %s: invalid ioctl\n",
1878                         jt_cmdname(argv[0]));
1879                 return rc;
1880         }
1881         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_GETATTR, buf);
1882         llapi_ioctl_unpack(&data, buf, sizeof(rawbuf));
1883         if (rc) {
1884                 fprintf(stderr, "error: %s: %s\n", jt_cmdname(argv[0]),
1885                         strerror(rc = errno));
1886         } else {
1887                 printf("%s: object id %ju, mode %o\n", jt_cmdname(argv[0]),
1888                        (uintmax_t)ostid_id(&data.ioc_obdo1.o_oi),
1889                        data.ioc_obdo1.o_mode);
1890         }
1891         return rc;
1892 }
1893
1894 int jt_obd_test_getattr(int argc, char **argv)
1895 {
1896         struct obd_ioctl_data data;
1897         struct timeval start, next_time;
1898         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
1899         __u64 i, count, next_count;
1900         int verbose = 1;
1901         __u64 objid = 3;
1902         char *end;
1903         int rc = 0;
1904
1905         if (argc < 2 || argc > 4)
1906                 return CMD_HELP;
1907
1908         memset(&data, 0, sizeof(data));
1909         data.ioc_dev = cur_device;
1910         count = strtoull(argv[1], &end, 0);
1911         if (*end) {
1912                 fprintf(stderr, "error: %s: invalid iteration count '%s'\n",
1913                         jt_cmdname(argv[0]), argv[1]);
1914                 return CMD_HELP;
1915         }
1916
1917         if (argc >= 3) {
1918                 verbose = get_verbose(argv[0], argv[2]);
1919                 if (verbose == BAD_VERBOSE)
1920                         return CMD_HELP;
1921         }
1922
1923         if (argc >= 4) {
1924                 if (argv[3][0] == 't') {
1925                         objid = strtoull(argv[3] + 1, &end, 0);
1926                         if (thread)
1927                                 objid += thread - 1;
1928                 } else {
1929                         objid = strtoull(argv[3], &end, 0);
1930                 }
1931                 if (*end) {
1932                         fprintf(stderr, "error: %s: invalid objid '%s'\n",
1933                                 jt_cmdname(argv[0]), argv[3]);
1934                         return CMD_HELP;
1935                 }
1936         }
1937
1938         gettimeofday(&start, NULL);
1939         next_time.tv_sec = start.tv_sec - verbose;
1940         next_time.tv_usec = start.tv_usec;
1941         if (verbose != 0)
1942                 printf("%s: getting %jd attrs (objid %#jx): %s",
1943                        jt_cmdname(argv[0]), (uintmax_t)count,
1944                        (uintmax_t)objid, ctime(&start.tv_sec));
1945
1946         ostid_set_seq_echo(&data.ioc_obdo1.o_oi);
1947         for (i = 1, next_count = verbose; i <= count && shmem_running(); i++) {
1948                 if (objid >= OBIF_MAX_OID) {
1949                         fprintf(stderr, "errr: %s: invalid objid '%llu'\n",
1950                                 jt_cmdname(argv[0]), (unsigned long long)objid);
1951                         return -E2BIG;
1952                 }
1953
1954                 data.ioc_obdo1.o_oi.oi_fid.f_oid = objid;
1955                 data.ioc_obdo1.o_mode = S_IFREG;
1956                 data.ioc_obdo1.o_valid = 0xffffffff;
1957                 memset(buf, 0, sizeof(rawbuf));
1958                 rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
1959                 if (rc) {
1960                         fprintf(stderr, "error: %s: invalid ioctl\n",
1961                                 jt_cmdname(argv[0]));
1962                         return rc;
1963                 }
1964                 rc = l_ioctl(OBD_DEV_ID, OBD_IOC_GETATTR, &data);
1965                 shmem_bump(1);
1966                 if (rc < 0) {
1967                         fprintf(stderr, "error: %s: #%jd - %d:%s\n",
1968                                 jt_cmdname(argv[0]), (uintmax_t)i,
1969                                 errno, strerror(rc = errno));
1970                         break;
1971                 }
1972                 if (be_verbose(verbose, &next_time, i, &next_count, count))
1973                         printf("%s: got attr #%jd\n",
1974                                jt_cmdname(argv[0]), (uintmax_t)i);
1975         }
1976
1977         if (!rc) {
1978                 struct timeval end;
1979                 double diff;
1980
1981                 gettimeofday(&end, NULL);
1982
1983                 diff = difftime(&end, &start);
1984
1985                 --i;
1986                 if (verbose != 0)
1987                         printf("%s: %jd attrs in %.3fs (%.3f attr/s): %s",
1988                                jt_cmdname(argv[0]), (uintmax_t)i, diff,
1989                                i / diff, ctime(&end.tv_sec));
1990         }
1991
1992         return rc;
1993 }
1994
1995 /*
1996  * test_brw <cnt>                                               count
1997  *      <r|w[r(repeat)x(noverify)]>                             mode
1998  *      <q|v|#(print interval)>                                 verbosity
1999  *      <npages[+offset]>                                       blocksize
2000  *      <[[<interleave_threads>]t(inc obj by thread#)]obj>      object
2001  *      [p|g<args>]                                             batch
2002  */
2003 int jt_obd_test_brw(int argc, char **argv)
2004 {
2005         struct obd_ioctl_data data;
2006         struct timeval start, next_time;
2007         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
2008         __u64 count, next_count, len, stride, thr_offset = 0, objid = 3;
2009         int write = 0, verbose = 1, cmd, i, rc = 0, pages = 1;
2010         int offset_pages = 0;
2011         long n;
2012         int repeat_offset = 0;
2013         unsigned long long ull;
2014         int  nthr_per_obj = 0;
2015         int  verify = 1;
2016         int  obj_idx = 0;
2017         char *end;
2018
2019         if (argc < 2 || argc > 7) {
2020                 fprintf(stderr, "error: %s: bad number of arguments: %d\n",
2021                         jt_cmdname(argv[0]), argc);
2022                 return CMD_HELP;
2023         }
2024
2025         count = strtoull(argv[1], &end, 0);
2026         if (*end) {
2027                 fprintf(stderr, "error: %s: bad iteration count '%s'\n",
2028                         jt_cmdname(argv[0]), argv[1]);
2029                 return CMD_HELP;
2030         }
2031
2032         if (argc >= 3) {
2033                 if (argv[2][0] == 'w' || argv[2][0] == '1')
2034                         write = 1;
2035                 /* else it's a read */
2036
2037                 if (argv[2][0] != 0)
2038                         for (i = 1; argv[2][i] != 0; i++)
2039                                 switch (argv[2][i]) {
2040                                 case 'r':
2041                                         repeat_offset = 1;
2042                                         break;
2043
2044                                 case 'x':
2045                                         verify = 0;
2046                                         break;
2047
2048                                 default:
2049                                         fprintf(stderr,
2050                                                 "Can't parse cmd '%s'\n",
2051                                                 argv[2]);
2052                                         return CMD_HELP;
2053                                 }
2054         }
2055
2056         if (argc >= 4) {
2057                 verbose = get_verbose(argv[0], argv[3]);
2058                 if (verbose == BAD_VERBOSE)
2059                         return CMD_HELP;
2060         }
2061
2062         if (argc >= 5) {
2063                 pages = strtoul(argv[4], &end, 0);
2064
2065                 if (*end == '+')
2066                         offset_pages = strtoul(end + 1, &end, 0);
2067
2068                 if (*end != 0 || offset_pages < 0 || offset_pages >= pages) {
2069                         fprintf(stderr, "error: %s: bad npages[+offset] parameter '%s'\n",
2070                                 jt_cmdname(argv[0]), argv[4]);
2071                         return CMD_HELP;
2072                 }
2073         }
2074
2075         if (argc >= 6) {
2076                 if (thread && (n = strtol(argv[5], &end, 0)) > 0 &&
2077                     *end == 't' && (ull = strtoull(end + 1, &end, 0)) > 0 &&
2078                     *end == 0) {
2079                         nthr_per_obj = n;
2080                         objid = ull;
2081                 } else if (thread && argv[5][0] == 't') {
2082                         nthr_per_obj = 1;
2083                         objid = strtoull(argv[5] + 1, &end, 0);
2084                 } else {
2085                         nthr_per_obj = 0;
2086                         objid = strtoull(argv[5], &end, 0);
2087                 }
2088                 if (*end) {
2089                         fprintf(stderr, "error: %s: bad objid '%s'\n",
2090                                 jt_cmdname(argv[0]), argv[5]);
2091                         return CMD_HELP;
2092                 }
2093         }
2094
2095         memset(&data, 0, sizeof(data));
2096         data.ioc_dev = cur_device;
2097
2098         /*
2099          * communicate the 'type' of brw test and batching to echo_client.
2100          * don't start.  we'd love to refactor this lctl->echo_client
2101          * interface
2102          */
2103         data.ioc_pbuf1 = (void *)1;
2104         data.ioc_plen1 = 1;
2105
2106         if (argc >= 7) {
2107                 switch (argv[6][0]) {
2108                 case 'g': /* plug and unplug */
2109                         data.ioc_pbuf1 = (void *)2;
2110                         data.ioc_plen1 = strtoull(argv[6] + 1, &end, 0);
2111                         break;
2112                 case 'p': /* prep and commit */
2113                         data.ioc_pbuf1 = (void *)3;
2114                         data.ioc_plen1 = strtoull(argv[6] + 1, &end, 0);
2115                         break;
2116                 default:
2117                         fprintf(stderr,
2118                                 "error: %s: batching '%s' needs to specify 'p' or 'g'\n",
2119                                 jt_cmdname(argv[0]), argv[6]);
2120                         return CMD_HELP;
2121                 }
2122
2123                 if (*end) {
2124                         fprintf(stderr, "error: %s: bad batching '%s'\n",
2125                                 jt_cmdname(argv[0]), argv[6]);
2126                         return CMD_HELP;
2127                 }
2128                 data.ioc_plen1 *= getpagesize();
2129         }
2130
2131         len = pages * getpagesize();
2132         thr_offset = offset_pages * getpagesize();
2133         stride = len;
2134
2135 #ifdef MAX_THREADS
2136         if (thread) {
2137                 shmem_lock();
2138                 if (nthr_per_obj != 0) {
2139                         /* threads interleave */
2140                         obj_idx = (thread - 1) / nthr_per_obj;
2141                         objid += obj_idx;
2142                         stride *= nthr_per_obj;
2143                         if ((thread - 1) % nthr_per_obj == 0) {
2144                                 shared_data->body.offsets[obj_idx] =
2145                                         stride + thr_offset;
2146                         }
2147                         thr_offset += ((thread - 1) % nthr_per_obj) * len;
2148                 } else {
2149                         /* threads disjoint */
2150                         thr_offset += (thread - 1) * len;
2151                 }
2152
2153                 shmem_start_time_locked();
2154                 shmem_unlock();
2155         }
2156 #endif
2157
2158         ostid_set_seq_echo(&data.ioc_obdo1.o_oi);
2159         if (objid >= OBIF_MAX_OID) {
2160                 fprintf(stderr, "errr: %s: invalid objid '%llu'\n",
2161                         jt_cmdname(argv[0]), (unsigned long long)objid);
2162                 return -E2BIG;
2163         }
2164
2165         data.ioc_obdo1.o_oi.oi_fid.f_oid = objid;
2166         data.ioc_obdo1.o_mode = S_IFREG;
2167         data.ioc_obdo1.o_valid = OBD_MD_FLID | OBD_MD_FLTYPE | OBD_MD_FLMODE |
2168                                  OBD_MD_FLFLAGS | OBD_MD_FLGROUP;
2169         data.ioc_obdo1.o_flags = (verify ? OBD_FL_DEBUG_CHECK : 0);
2170         data.ioc_count = len;
2171         data.ioc_offset = (repeat_offset ? 0 : thr_offset);
2172
2173         gettimeofday(&start, NULL);
2174         next_time.tv_sec = start.tv_sec - verbose;
2175         next_time.tv_usec = start.tv_usec;
2176
2177         if (verbose != 0)
2178                 printf("%s: %s %jux%d pages (obj %#jx, off %ju): %s",
2179                        jt_cmdname(argv[0]), write ? "writing" : "reading",
2180                        (uintmax_t)count, pages, (uintmax_t)objid,
2181                        (uintmax_t)data.ioc_offset, ctime(&start.tv_sec));
2182
2183         cmd = write ? OBD_IOC_BRW_WRITE : OBD_IOC_BRW_READ;
2184         for (i = 1, next_count = verbose; i <= count && shmem_running(); i++) {
2185                 data.ioc_obdo1.o_valid &= ~(OBD_MD_FLBLOCKS | OBD_MD_FLGRANT);
2186                 memset(buf, 0, sizeof(rawbuf));
2187                 rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
2188                 if (rc) {
2189                         fprintf(stderr, "error: %s: invalid ioctl\n",
2190                                 jt_cmdname(argv[0]));
2191                         return rc;
2192                 }
2193                 rc = l_ioctl(OBD_DEV_ID, cmd, buf);
2194                 shmem_bump(1);
2195                 if (rc) {
2196                         fprintf(stderr, "error: %s: #%d - %s on %s\n",
2197                                 jt_cmdname(argv[0]), i, strerror(rc = errno),
2198                                 write ? "write" : "read");
2199                         break;
2200                 } else if (be_verbose(verbose, &next_time, i,
2201                                       &next_count, count)) {
2202                         shmem_lock();
2203                         printf("%s: %s number %d @ %jd:%ju for %d\n",
2204                                jt_cmdname(argv[0]), write ? "write" : "read", i,
2205                                (uintmax_t)ostid_id(&data.ioc_obdo1.o_oi),
2206                                (uintmax_t)data.ioc_offset,
2207                                (int)(pages * getpagesize()));
2208                         shmem_unlock();
2209                 }
2210
2211                 if (!repeat_offset) {
2212 #ifdef MAX_THREADS
2213                         if (stride == len) {
2214                                 data.ioc_offset += stride;
2215                         } else if (i < count) {
2216                                 shmem_lock();
2217                                 data.ioc_offset =
2218                                         shared_data->body.offsets[obj_idx];
2219                                 shared_data->body.offsets[obj_idx] += len;
2220                                 shmem_unlock();
2221                         }
2222 #else
2223                         data.ioc_offset += len;
2224                         obj_idx = 0; /* avoids an unused var warning */
2225 #endif
2226                 }
2227         }
2228
2229         if (!rc) {
2230                 struct timeval end;
2231                 double diff;
2232
2233                 gettimeofday(&end, NULL);
2234
2235                 diff = difftime(&end, &start);
2236
2237                 --i;
2238                 if (verbose != 0)
2239                         printf("%s: %s %dx%d pages in %.3fs (%.3f MB/s): %s",
2240                                jt_cmdname(argv[0]), write ? "wrote" : "read",
2241                                i, pages, diff,
2242                                ((double)i * pages * getpagesize()) /
2243                                (diff * 1048576.0), ctime(&end.tv_sec));
2244         }
2245
2246 #ifdef MAX_THREADS
2247         if (thread) {
2248                 shmem_lock();
2249                 shmem_end_time_locked();
2250                 shmem_unlock();
2251         }
2252 #endif
2253         return rc;
2254 }
2255
2256 static int do_activate(int argc, char **argv, int flag)
2257 {
2258         struct obd_ioctl_data data;
2259         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
2260         int rc;
2261
2262         memset(&data, 0, sizeof(data));
2263         data.ioc_dev = cur_device;
2264         if (argc != 1)
2265                 return CMD_HELP;
2266
2267         /* reuse offset for 'active' */
2268         data.ioc_offset = flag;
2269
2270         memset(buf, 0, sizeof(rawbuf));
2271         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
2272         if (rc) {
2273                 fprintf(stderr, "error: %s: invalid ioctl\n",
2274                         jt_cmdname(argv[0]));
2275                 return rc;
2276         }
2277         rc = l_ioctl(OBD_DEV_ID, IOC_OSC_SET_ACTIVE, buf);
2278         if (rc)
2279                 fprintf(stderr, "error: %s: failed: %s\n",
2280                         jt_cmdname(argv[0]), strerror(rc = errno));
2281
2282         return rc;
2283 }
2284
2285 /**
2286  * Replace nids for given device.
2287  * lctl replace_nids <devicename> <nid1>[,nid2,nid3]
2288  * Command should be started on MGS server.
2289  * Only MGS server should be started (command execution
2290  * returns error in another cases). Command mount
2291  * -t lustre <MDT partition> -o nosvc <mount point>
2292  * can be used for that.
2293  *
2294  * llogs for MDTs and clients are processed. All
2295  * records copied as is except add_uuid and setup. This records
2296  * are skipped and recorded with new nids and uuid.
2297  *
2298  * \see mgs_replace_nids
2299  * \see mgs_replace_log
2300  * \see mgs_replace_nids_handler
2301  */
2302 int jt_replace_nids(int argc, char **argv)
2303 {
2304         int rc;
2305         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
2306         struct obd_ioctl_data data;
2307
2308         memset(&data, 0, sizeof(data));
2309         data.ioc_dev = get_mgs_device();
2310         if (argc != 3)
2311                 return CMD_HELP;
2312
2313         data.ioc_inllen1 = strlen(argv[1]) + 1;
2314         data.ioc_inlbuf1 = argv[1];
2315
2316         data.ioc_inllen2 = strlen(argv[2]) + 1;
2317         data.ioc_inlbuf2 = argv[2];
2318         memset(buf, 0, sizeof(rawbuf));
2319         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
2320         if (rc) {
2321                 fprintf(stderr, "error: %s: invalid ioctl\n",
2322                         jt_cmdname(argv[0]));
2323                 return rc;
2324         }
2325
2326         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_REPLACE_NIDS, buf);
2327         if (rc < 0) {
2328                 fprintf(stderr, "error: %s: %s\n", jt_cmdname(argv[0]),
2329                         strerror(rc = errno));
2330         }
2331
2332         return rc;
2333 }
2334
2335 /**
2336  * Clear config logs for given device or filesystem.
2337  * lctl clear_conf <devicename|fsname>
2338  * Command has to be run on MGS node having MGS device mounted with -o
2339  * nosvc.
2340  *
2341  * Configuration logs for filesystem or one particular log is
2342  * processed. New log is created, original log is read, its records
2343  * marked SKIP do not get copied to new log. Others are copied as-is.
2344  * Original file is renamed to log.${time}.bak.
2345  *
2346  * \see mgs_clear_configs
2347  * \see mgs_replace_log
2348  * \see mgs_clear_config_handler
2349  **/
2350 int jt_lcfg_clear(int argc, char **argv)
2351 {
2352         int rc;
2353         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
2354         struct obd_ioctl_data data;
2355
2356         memset(&data, 0, sizeof(data));
2357         data.ioc_dev = get_mgs_device();
2358         if (argc != 2)
2359                 return CMD_HELP;
2360
2361         data.ioc_inllen1 = strlen(argv[1]) + 1;
2362         data.ioc_inlbuf1 = argv[1];
2363
2364         memset(buf, 0, sizeof(rawbuf));
2365         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
2366         if (rc) {
2367                 fprintf(stderr, "error: %s: invalid ioctl\n",
2368                         jt_cmdname(argv[0]));
2369                 return rc;
2370         }
2371
2372         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_CLEAR_CONFIGS, buf);
2373         if (rc < 0) {
2374                 fprintf(stderr, "error: %s: %s\n", jt_cmdname(argv[0]),
2375                         strerror(rc = errno));
2376         }
2377
2378         return rc;
2379 }
2380
2381 int jt_obd_deactivate(int argc, char **argv)
2382 {
2383         return do_activate(argc, argv, 0);
2384 }
2385
2386 int jt_obd_activate(int argc, char **argv)
2387 {
2388         return do_activate(argc, argv, 1);
2389 }
2390
2391 int jt_obd_recover(int argc, char **argv)
2392 {
2393         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
2394         struct obd_ioctl_data data;
2395         int rc;
2396
2397         memset(&data, 0, sizeof(data));
2398         data.ioc_dev = cur_device;
2399         if (argc > 2)
2400                 return CMD_HELP;
2401
2402         if (argc == 2) {
2403                 data.ioc_inllen1 = strlen(argv[1]) + 1;
2404                 data.ioc_inlbuf1 = argv[1];
2405         }
2406
2407         memset(buf, 0, sizeof(rawbuf));
2408         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
2409         if (rc) {
2410                 fprintf(stderr, "error: %s: invalid ioctl\n",
2411                         jt_cmdname(argv[0]));
2412                 return rc;
2413         }
2414         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_CLIENT_RECOVER, buf);
2415         if (rc < 0) {
2416                 fprintf(stderr, "error: %s: %s\n", jt_cmdname(argv[0]),
2417                         strerror(rc = errno));
2418         }
2419
2420         return rc;
2421 }
2422
2423 int jt_obd_mdc_lookup(int argc, char **argv)
2424 {
2425         struct obd_ioctl_data data;
2426         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
2427         char *parent, *child;
2428         int rc, fd, verbose = 1;
2429
2430         if (argc < 3 || argc > 4)
2431                 return CMD_HELP;
2432
2433         parent = argv[1];
2434         child = argv[2];
2435         if (argc == 4)
2436                 verbose = get_verbose(argv[0], argv[3]);
2437
2438         memset(&data, 0, sizeof(data));
2439         data.ioc_dev = cur_device;
2440
2441         data.ioc_inllen1 = strlen(child) + 1;
2442         data.ioc_inlbuf1 = child;
2443
2444         memset(buf, 0, sizeof(rawbuf));
2445         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
2446         if (rc) {
2447                 fprintf(stderr, "error: %s: invalid ioctl\n",
2448                         jt_cmdname(argv[0]));
2449                 return rc;
2450         }
2451
2452         fd = open(parent, O_RDONLY);
2453         if (fd < 0) {
2454                 fprintf(stderr, "open \"%s\" failed: %s\n", parent,
2455                         strerror(errno));
2456                 return -1;
2457         }
2458
2459         rc = ioctl(fd, IOC_MDC_LOOKUP, buf);
2460         if (rc < 0) {
2461                 fprintf(stderr, "error: %s: ioctl error: %s\n",
2462                         jt_cmdname(argv[0]), strerror(rc = errno));
2463         }
2464         close(fd);
2465
2466         if (verbose) {
2467                 rc = llapi_ioctl_unpack(&data, buf, sizeof(rawbuf));
2468                 if (rc) {
2469                         fprintf(stderr, "error: %s: invalid reply\n",
2470                                 jt_cmdname(argv[0]));
2471                         return rc;
2472                 }
2473                 printf("%s: mode %o uid %d gid %d\n",
2474                        child, data.ioc_obdo1.o_mode, data.ioc_obdo1.o_uid,
2475                        data.ioc_obdo1.o_gid);
2476         }
2477
2478         return rc;
2479 }
2480
2481 int jt_lcfg_fork(int argc, char **argv)
2482 {
2483         struct obd_ioctl_data data;
2484         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
2485         int rc;
2486
2487         if (argc != 3)
2488                 return CMD_HELP;
2489
2490         memset(&data, 0, sizeof(data));
2491         data.ioc_dev = get_mgs_device();
2492         data.ioc_inllen1 = strlen(argv[1]) + 1;
2493         data.ioc_inlbuf1 = argv[1];
2494         data.ioc_inllen2 = strlen(argv[2]) + 1;
2495         data.ioc_inlbuf2 = argv[2];
2496
2497         memset(buf, 0, sizeof(rawbuf));
2498         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
2499         if (rc) {
2500                 fprintf(stderr, "error: %s: invalid ioctl\n",
2501                         jt_cmdname(argv[0]));
2502                 return rc;
2503         }
2504
2505         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_LCFG_FORK, buf);
2506         if (rc < 0)
2507                 fprintf(stderr, "error: %s: OBD_IOC_LCFG_FORK failed: %s\n",
2508                         jt_cmdname(argv[0]), strerror(errno));
2509
2510         return rc;
2511 }
2512
2513 int jt_lcfg_erase(int argc, char **argv)
2514 {
2515         struct obd_ioctl_data data;
2516         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
2517         int rc;
2518
2519         if (argc == 3) {
2520                 if (strncmp(argv[2], "-q", strlen("-q")) != 0 &&
2521                     strncmp(argv[2], "--quiet", strlen("--quiet")) != 0)
2522                         return CMD_HELP;
2523         } else if (argc != 2) {
2524                 return CMD_HELP;
2525         }
2526
2527         memset(&data, 0, sizeof(data));
2528         data.ioc_dev = get_mgs_device();
2529         data.ioc_inllen1 = strlen(argv[1]) + 1;
2530         data.ioc_inlbuf1 = argv[1];
2531
2532         memset(buf, 0, sizeof(rawbuf));
2533         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
2534         if (rc) {
2535                 fprintf(stderr, "error: %s: invalid ioctl\n",
2536                         jt_cmdname(argv[0]));
2537                 return rc;
2538         }
2539
2540         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_LCFG_ERASE, buf);
2541         if (rc < 0)
2542                 fprintf(stderr, "error: %s: OBD_IOC_LCFG_ERASE failed: %s\n",
2543                         jt_cmdname(argv[0]), strerror(errno));
2544
2545         return rc;
2546 }
2547
2548 enum llog_default_dev_op {
2549         LLOG_DFLT_MGS_SET = 0,
2550         LLOG_DFLT_DEV_RESET
2551 };
2552
2553 static int llog_default_device(enum llog_default_dev_op op)
2554 {
2555         int rc = 0;
2556         static int dflt_dev = -1;
2557
2558         if (op == LLOG_DFLT_MGS_SET && (cur_device == -1)) {
2559                 char mgs[] = "$MGS";
2560
2561                 rc = do_device("llog_default_device", mgs);
2562                 dflt_dev = cur_device;
2563
2564         } else if (op == LLOG_DFLT_DEV_RESET && (dflt_dev != -1)) {
2565                 do_disconnect(NULL, 1);
2566                 dflt_dev = -1;
2567         }
2568
2569         return rc;
2570 }
2571
2572 int jt_llog_catlist(int argc, char **argv)
2573 {
2574         struct obd_ioctl_data data;
2575         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
2576         char *tmp = NULL;
2577         int start = 0;
2578         int rc;
2579
2580         if (argc != 1)
2581                 return CMD_HELP;
2582
2583         if (llog_default_device(LLOG_DFLT_MGS_SET))
2584                 return CMD_INCOMPLETE;
2585
2586         do {
2587                 memset(&data, 0, sizeof(data));
2588                 data.ioc_dev = cur_device;
2589                 data.ioc_inllen1 = sizeof(rawbuf) -
2590                                    __ALIGN_KERNEL(sizeof(data), 8);
2591                 data.ioc_count = start;
2592                 memset(buf, 0, sizeof(rawbuf));
2593                 rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
2594                 if (rc) {
2595                         fprintf(stderr, "error: %s: invalid ioctl\n",
2596                                 jt_cmdname(argv[0]));
2597                         goto err;
2598                 }
2599                 rc = l_ioctl(OBD_DEV_ID, OBD_IOC_CATLOGLIST, buf);
2600                 if (rc < 0)
2601                         break;
2602                 tmp = ((struct obd_ioctl_data *)buf)->ioc_bulk;
2603                 if (strlen(tmp) > 0)
2604                         fprintf(stdout, "%s", tmp);
2605                 else
2606                         break;
2607                 start = ((struct obd_ioctl_data *)buf)->ioc_count;
2608         } while (start);
2609
2610         if (rc < 0)
2611                 fprintf(stderr, "OBD_IOC_CATLOGLIST failed: %s\n",
2612                         strerror(errno));
2613
2614 err:
2615         llog_default_device(LLOG_DFLT_DEV_RESET);
2616
2617         return rc;
2618 }
2619
2620 int jt_llog_info(int argc, char **argv)
2621 {
2622         const struct option long_opts[] = {
2623         /* Allow optional "--catalog" for compatibility with llog commands. */
2624         { .val = 'c',   .name = "catalog",      .has_arg = required_argument },
2625         { .val = 'h',   .name = "help",         .has_arg = no_argument },
2626         { .name = NULL } };
2627         struct obd_ioctl_data data = { 0 };
2628         char rawbuf[MAX_IOC_BUFLEN] = "", *buf = rawbuf;
2629         char *cmd = argv[0];
2630         char *catalog = NULL;
2631         int rc, c;
2632
2633         while ((c = getopt_long(argc, argv, "c:h", long_opts, NULL)) != -1) {
2634                 switch (c) {
2635                 case 'c':
2636                         catalog = optarg;
2637                         break;
2638                 case 'h':
2639                 default:
2640                         return CMD_HELP;
2641                 }
2642         }
2643         argc -= optind;
2644         argv += optind;
2645         /* support "logname" positional parameter */
2646         if (argc == 1) {
2647                 if (catalog) {
2648                         fprintf(stderr,
2649                                 "%s: catalog is set, unknown argument '%s'\n",
2650                                 cmd, optarg);
2651                         return CMD_HELP;
2652                 }
2653                 catalog = argv[0];
2654         } else if (!catalog || argc > 1) {
2655                 return CMD_HELP;
2656         }
2657
2658         /* Manage default device */
2659         if (llog_default_device(LLOG_DFLT_MGS_SET))
2660                 return CMD_INCOMPLETE;
2661
2662         data.ioc_dev = cur_device;
2663         data.ioc_inllen1 = strlen(catalog) + 1;
2664         data.ioc_inlbuf1 = catalog;
2665         data.ioc_inllen2 = sizeof(rawbuf) - __ALIGN_KERNEL(sizeof(data), 8) -
2666                            __ALIGN_KERNEL(data.ioc_inllen1, 8);
2667         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
2668         if (rc) {
2669                 fprintf(stderr, "%s: ioctl_pack failed for catalog '%s': %s\n",
2670                         jt_cmdname(cmd), catalog, strerror(-rc));
2671                 goto err;
2672         }
2673
2674         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_LLOG_INFO, buf);
2675         if (rc == 0)
2676                 fprintf(stdout, "%s", ((struct obd_ioctl_data *)buf)->ioc_bulk);
2677         else
2678                 fprintf(stderr, "%s: OBD_IOC_LLOG_INFO failed: %s\n",
2679                         jt_cmdname(cmd), strerror(errno));
2680
2681 err:
2682         llog_default_device(LLOG_DFLT_DEV_RESET);
2683
2684         return rc;
2685 }
2686
2687 int jt_llog_print_cb(const char *record, void *private)
2688 {
2689         printf("%s\n", record);
2690
2691         return 0;
2692 }
2693
2694 static int
2695 llog_process_records(int (record_cb)(const char *record, void *private),
2696                      const char *record, void *private, bool reverse)
2697 {
2698         char *ptr = NULL;
2699         char *tmp = NULL;
2700         int rc = 0;
2701
2702         if (!reverse) {
2703                 do {
2704                         ptr = strchr(record, '\n');
2705                         if (ptr)
2706                                 *ptr = '\0';
2707                         rc = record_cb(record, private);
2708                         if (rc)
2709                                 goto out;
2710                         if (ptr)
2711                                 record = ptr + 1;
2712                 } while (ptr && *(ptr + 1));
2713         } else {
2714                 tmp = (char *)record;
2715
2716                 ptr = strrchr(record, '\n');
2717                 if (ptr)
2718                         *ptr = '\0';
2719                 else
2720                         goto out;
2721                 while ((ptr = strrchr(record, '\n'))) {
2722                         tmp = ptr + 1;
2723                         *ptr = '\0';
2724                         rc = record_cb(tmp, private);
2725                         if (rc)
2726                                 goto out;
2727                 };
2728                 rc = record_cb(record, private);
2729                 if (rc)
2730                         goto out;
2731         }
2732 out:
2733         return rc;
2734 }
2735
2736 /**
2737  * Iterate over llog records, typically YAML-formatted configuration logs
2738  *
2739  * \param logname[in]   name of llog file or FID
2740  * \param start[in]     first record to process
2741  * \param end[in]       last record to process (inclusive)
2742  * \param cb[in]        callback for records. Return -ve error, or +ve abort.
2743  * \param private[in,out] private data passed to the \a record_cb function
2744  * \param reverse[in]   print the llog records from the beginning or the end
2745  *
2746  * \retval              0 on success
2747  *                      others handled by the caller
2748  */
2749 int jt_llog_print_iter(char *logname, long start, long end,
2750                        int (record_cb)(const char *record, void *private),
2751                        void *private, bool reverse)
2752 {
2753         struct obd_ioctl_data data = { 0 };
2754         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
2755         char startbuf[16], endbuf[16];
2756         static long inc = sizeof(rawbuf) / 128;
2757         long rec;
2758         int rc = 0;
2759
2760         if (end == -1)
2761                 end = 0x7fffffff;
2762
2763         data.ioc_dev = cur_device;
2764         data.ioc_inlbuf1 = logname;
2765         data.ioc_inllen1 = strlen(logname) + 1;
2766
2767         /*
2768          * Estimate about 128 characters per configuration record.  Not all
2769          * records will be printed in any case, so they should easily fit.  If
2770          * not, the kernel will return -EOVERFLOW and ask for fewer records.
2771          *
2772          * We don't want to request records from the kernel one-at-a-time, as
2773          * it restarts the config llog iteration from the beginning, so we
2774          * fetch multiple records from the kernel per call and split locally.
2775          */
2776         for (rec = start; rec < end; rec += inc) {
2777                 char *record = ((struct obd_ioctl_data *)buf)->ioc_bulk;
2778
2779 retry:
2780                 snprintf(startbuf, sizeof(startbuf), "%lu", rec);
2781                 snprintf(endbuf, sizeof(endbuf), "%lu",
2782                          end < rec + inc - 1 ? end : rec + inc - 1);
2783
2784                 /* start and end record numbers are passed as ASCII digits */
2785                 data.ioc_inlbuf2 = startbuf;
2786                 data.ioc_inllen2 = strlen(startbuf) + 1;
2787                 data.ioc_inlbuf3 = endbuf;
2788                 data.ioc_inllen3 = strlen(endbuf) + 1;
2789
2790                 data.ioc_inllen4 = sizeof(rawbuf) -
2791                         __ALIGN_KERNEL(sizeof(data), 8) -
2792                         __ALIGN_KERNEL(data.ioc_inllen1, 8) -
2793                         __ALIGN_KERNEL(data.ioc_inllen2, 8) -
2794                         __ALIGN_KERNEL(data.ioc_inllen3, 8);
2795                 memset(buf, 0, sizeof(rawbuf));
2796                 rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
2797                 if (rc) {
2798                         fprintf(stderr, "%s: invalid ioctl data\n", logname);
2799                         goto out;
2800                 }
2801
2802                 rc = l_ioctl(OBD_DEV_ID, OBD_IOC_LLOG_PRINT, buf);
2803                 if (rc == -EOVERFLOW && inc > 2) {
2804                         inc /= 2;
2805                         goto retry;
2806                 }
2807                 if (rc) {
2808                         fprintf(stderr, "%s: OBD_IOC_LLOG_PRINT failed: %s\n",
2809                                 logname, strerror(errno));
2810                         rc = -errno;
2811                         goto out;
2812                 }
2813
2814                 /* There is no "end of list" marker, record was not modified */
2815                 if (strcmp(record, logname) == 0)
2816                         break;
2817
2818                 rc = llog_process_records(record_cb, record, private, reverse);
2819                 if (rc)
2820                         goto out;
2821         }
2822
2823 out:
2824         return rc;
2825 }
2826
2827 static int llog_parse_catalog_start_end(int *argc, char **argv[],
2828                                         char **catalog, long *start, long *end)
2829 {
2830         const struct option long_opts[] = {
2831         /* the --catalog option is not required, just for consistency */
2832         { .val = 'c',   .name = "catalog",      .has_arg = required_argument },
2833         { .val = 'e',   .name = "end",          .has_arg = required_argument },
2834         { .val = 'h',   .name = "help",         .has_arg = no_argument },
2835         { .val = 's',   .name = "start",        .has_arg = required_argument },
2836         { .name = NULL } };
2837         char *cmd = (*argv)[0];
2838         char *endp;
2839         int c;
2840
2841         if (!catalog || !start || !end)
2842                 return -EINVAL;
2843
2844         /* now process command line arguments*/
2845         while ((c = getopt_long(*argc, *argv, "c:e:hs:",
2846                                 long_opts, NULL)) != -1) {
2847                 switch (c) {
2848                 case 'c':
2849                         *catalog = optarg;
2850                         break;
2851                 case 'e':
2852                         *end = strtol(optarg, &endp, 0);
2853                         if (*endp != '\0') {
2854                                 fprintf(stderr, "%s: bad end value '%s'\n",
2855                                         cmd, optarg);
2856                                 return CMD_HELP;
2857                         }
2858                         break;
2859                 case 's':
2860                         *start = strtol(optarg, &endp, 0);
2861                         if (*endp != '\0') {
2862                                 fprintf(stderr, "%s: bad start value '%s'\n",
2863                                         cmd, optarg);
2864                                 return CMD_HELP;
2865                         }
2866                         break;
2867                 case 'h':
2868                 default:
2869                         return CMD_HELP;
2870                 }
2871         }
2872         *argc -= optind;
2873         *argv += optind;
2874
2875         /*
2876          * support old optional positional parameters only if they were
2877          * not already specified with named arguments: logname [start [end]]
2878          */
2879         if (*argc >= 1) {
2880                 if (*catalog) {
2881                         fprintf(stderr,
2882                                 "%s: logname is set, unknown argument '%s'\n",
2883                                 cmd, (*argv)[0]);
2884                         return CMD_HELP;
2885                 }
2886                 *catalog = (*argv)[0];
2887                 (*argc)--;
2888                 (*argv)++;
2889         }
2890
2891         if (*catalog == NULL) {
2892                 fprintf(stderr, "%s: no logname specified\n", cmd);
2893                 return CMD_HELP;
2894         }
2895
2896         if (*argc >= 1) {
2897                 if (*start != 1) {
2898                         fprintf(stderr,
2899                                 "%s: --start is set, unknown argument '%s'\n",
2900                                 cmd, (*argv)[0]);
2901                         return CMD_HELP;
2902                 }
2903
2904                 *start = strtol((*argv)[0], &endp, 0);
2905                 if (*endp != '\0') {
2906                         fprintf(stderr, "%s: bad start value '%s'\n",
2907                                 cmd, (*argv)[0]);
2908                         return CMD_HELP;
2909                 }
2910                 (*argc)--;
2911                 (*argv)++;
2912         }
2913         if (*argc >= 1) {
2914                 if (*end != -1) {
2915                         fprintf(stderr,
2916                                 "%s: --end is set, unknown argument '%s'\n",
2917                                 cmd, (*argv)[0]);
2918                         return CMD_HELP;
2919                 }
2920
2921                 *end = strtol((*argv)[0], &endp, 0);
2922                 if (*endp != '\0') {
2923                         fprintf(stderr, "%s: bad end value '%s'\n",
2924                                 cmd, (*argv)[0]);
2925                         return CMD_HELP;
2926                 }
2927                 (*argc)--;
2928                 (*argv)++;
2929         }
2930         if (*argc > 1) {
2931                 fprintf(stderr, "%s: unknown argument '%s'\n", cmd, (*argv)[0]);
2932                 return CMD_HELP;
2933         }
2934
2935         if (*end != -1 && *end < *start) {
2936                 fprintf(stderr, "%s: end '%lu' less than than start '%lu'\n",
2937                         cmd, *end, *start);
2938                 return CMD_HELP;
2939         }
2940
2941         return 0;
2942 }
2943
2944 int jt_llog_print(int argc, char **argv)
2945 {
2946         char *catalog = NULL;
2947         long start = 1, end = -1;
2948         int rc;
2949
2950         rc = llog_parse_catalog_start_end(&argc, &argv, &catalog, &start, &end);
2951         if (rc)
2952                 return rc;
2953
2954         if (llog_default_device(LLOG_DFLT_MGS_SET))
2955                 return CMD_INCOMPLETE;
2956
2957         rc = jt_llog_print_iter(catalog, start, end, jt_llog_print_cb,
2958                                 NULL, false);
2959
2960         llog_default_device(LLOG_DFLT_DEV_RESET);
2961
2962         return rc;
2963 }
2964
2965 /*
2966  * Parse catalog, log ID, and optionally a log index with either optional
2967  * arguments or positional arguments.  Only the initial catalog argument
2968  * may be positional with other optional arguments.
2969  *
2970  * The positional arguments option should eventually be phased out.
2971  */
2972 static int llog_parse_catalog_log_idx(int *argc, char ***argv, const char *opts,
2973                                       int max_args, struct obd_ioctl_data *data)
2974 {
2975         const struct option long_opts[] = {
2976         /* the --catalog option is not required, just for consistency */
2977         { .val = 'c',   .name = "catalog",      .has_arg = required_argument },
2978         { .val = 'h',   .name = "help",         .has_arg = no_argument },
2979         { .val = 'i',   .name = "log_idx",      .has_arg = required_argument },
2980         { .val = 'l',   .name = "log_id",       .has_arg = required_argument },
2981         { .name = NULL } };
2982         int c;
2983
2984         /* sanity check */
2985         if (!data || *argc <= 1)
2986                 return -1;
2987
2988         data->ioc_dev = cur_device;
2989
2990         /* now process command line arguments*/
2991         while ((c = getopt_long(*argc, *argv, opts, long_opts, NULL)) != -1) {
2992                 switch (c) {
2993                 case 'c':
2994                         data->ioc_inllen1 = strlen(optarg) + 1;
2995                         data->ioc_inlbuf1 = optarg;
2996                         break;
2997                 case 'i':
2998                         data->ioc_inllen3 = strlen(optarg) + 1;
2999                         data->ioc_inlbuf3 = optarg;
3000                         break;
3001                 case 'l': /* The log_id option isn't currently needed for
3002                            * cancel as mdt_iocontrol() handles IOC_LLOG_CANCEL,
3003                            * but we may as well keep it for now.
3004                            */
3005                         data->ioc_inllen2 = strlen(optarg) + 1;
3006                         data->ioc_inlbuf2 = optarg;
3007                         break;
3008                 case 'h':
3009                 default:
3010                         return CMD_HELP;
3011                 }
3012         }
3013
3014         *argc -= optind;
3015         *argv += optind;
3016
3017         /* Allow catalog to be specified as first option without --catalog */
3018         if (!data->ioc_inlbuf1 && *argc > 0) {
3019                 data->ioc_inlbuf1 = (*argv)[0];
3020                 data->ioc_inllen1 = strlen((*argv)[0]) + 1;
3021                 (*argc)--;
3022                 (*argv)++;
3023         }
3024
3025         return 0;
3026 }
3027
3028 int jt_llog_cancel(int argc, char **argv)
3029 {
3030         struct obd_ioctl_data data = { 0 };
3031         char rawbuf[MAX_IOC_BUFLEN] = "", *buf = rawbuf;
3032         char *cmd = argv[0];
3033         int rc;
3034
3035         /* Manage default device */
3036         if (llog_default_device(LLOG_DFLT_MGS_SET))
3037                 return CMD_INCOMPLETE;
3038
3039         /* Parse catalog file (in inlbuf1) and named parameters */
3040         rc = llog_parse_catalog_log_idx(&argc, &argv, "c:hi:l:", 3, &data);
3041
3042         /*
3043          * Handle old positional parameters if not using named parameters,
3044          * either "<catalog> <log_idx>" or "<catalog> <log_id> <log_idx>".
3045          * It was "inlbuf3 = log_idx", and "inlbuf2 = log_id" (ignored by
3046          * config log cancel), and shows why I hate positional parameters.
3047          */
3048         if (argc == 1) {
3049                 data.ioc_inllen3 = strlen(argv[0]) + 1;
3050                 data.ioc_inlbuf3 = argv[0];
3051         } else if (argc == 2) {
3052                 data.ioc_inllen2 = strlen(argv[0]) + 1;
3053                 data.ioc_inlbuf2 = argv[0];
3054                 data.ioc_inllen3 = strlen(argv[1]) + 1;
3055                 data.ioc_inlbuf3 = argv[1];
3056         }
3057
3058         if (!data.ioc_inlbuf1 || !data.ioc_inlbuf3) {
3059                 /* missing mandatory parameters */
3060                 rc = CMD_HELP;
3061                 goto err;
3062         }
3063
3064         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
3065         if (rc) {
3066                 fprintf(stderr, "%s: ioctl_pack for catalog '%s' failed: %s\n",
3067                         jt_cmdname(cmd), data.ioc_inlbuf1, strerror(-rc));
3068                 goto err;
3069         }
3070
3071         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_LLOG_CANCEL, buf);
3072         if (rc)
3073                 fprintf(stderr, "%s: cancel catalog '%s:%s' failed: %s\n",
3074                         jt_cmdname(cmd), data.ioc_inlbuf1, data.ioc_inlbuf3,
3075                         strerror(errno));
3076
3077 err:
3078         llog_default_device(LLOG_DFLT_DEV_RESET);
3079         return rc;
3080 }
3081
3082 int jt_llog_check(int argc, char **argv)
3083 {
3084         struct obd_ioctl_data data = { 0 };
3085         char rawbuf[MAX_IOC_BUFLEN] = "", *buf = rawbuf;
3086         char *catalog = NULL;
3087         char startbuf[16], endbuf[16];
3088         long start = 1, end = -1;
3089         char *cmd = argv[0];
3090         int rc;
3091
3092         rc = llog_parse_catalog_start_end(&argc, &argv, &catalog, &start, &end);
3093         if (rc)
3094                 return rc;
3095
3096         if (llog_default_device(LLOG_DFLT_MGS_SET))
3097                 return CMD_INCOMPLETE;
3098
3099         if (end == -1)
3100                 end = 0x7fffffff;
3101
3102         data.ioc_dev = cur_device;
3103         data.ioc_inllen1 = strlen(catalog) + 1;
3104         data.ioc_inlbuf1 = catalog;
3105
3106         snprintf(startbuf, sizeof(startbuf), "%lu", start);
3107         snprintf(endbuf, sizeof(endbuf), "%lu", end);
3108         /* start and end record numbers are passed as ASCII digits */
3109         data.ioc_inllen2 = strlen(startbuf) + 1;
3110         data.ioc_inlbuf2 = startbuf;
3111         data.ioc_inllen3 = strlen(endbuf) + 1;
3112         data.ioc_inlbuf3 = endbuf;
3113
3114         data.ioc_inllen4 = sizeof(rawbuf) - __ALIGN_KERNEL(sizeof(data), 8) -
3115                            __ALIGN_KERNEL(data.ioc_inllen1, 8) -
3116                            __ALIGN_KERNEL(data.ioc_inllen2, 8) -
3117                            __ALIGN_KERNEL(data.ioc_inllen3, 8);
3118         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
3119         if (rc) {
3120                 fprintf(stderr, "%s: ioctl_pack failed for catalog '%s': %s\n",
3121                         jt_cmdname(cmd), data.ioc_inlbuf1, strerror(-rc));
3122                 goto err;
3123         }
3124
3125         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_LLOG_CHECK, buf);
3126         if (rc == 0)
3127                 fprintf(stdout, "%s", ((struct obd_ioctl_data *)buf)->ioc_bulk);
3128         else
3129                 fprintf(stderr, "%s: OBD_IOC_LLOG_CHECK failed: %s\n",
3130                         jt_cmdname(cmd), strerror(errno));
3131 err:
3132         llog_default_device(LLOG_DFLT_DEV_RESET);
3133         return rc;
3134 }
3135
3136 int jt_llog_remove(int argc, char **argv)
3137 {
3138         struct obd_ioctl_data data = { 0 };
3139         char rawbuf[MAX_IOC_BUFLEN] = "", *buf = rawbuf;
3140         char *cmd = argv[0];
3141         int rc;
3142
3143         if (llog_default_device(LLOG_DFLT_MGS_SET))
3144                 return CMD_INCOMPLETE;
3145
3146         rc = llog_parse_catalog_log_idx(&argc, &argv, "c:hl:", 2, &data);
3147         if (rc)
3148                 goto err;
3149
3150         if (argc == 1) {
3151                 if (data.ioc_inlbuf2) {
3152                         fprintf(stderr,
3153                                 "%s: --log_id is set, unknown argument '%s'\n",
3154                                 jt_cmdname(cmd), argv[0]);
3155                         rc = CMD_HELP;
3156                         goto err;
3157                 }
3158
3159                 data.ioc_inllen2 = strlen(argv[0]) + 1;
3160                 data.ioc_inlbuf2 = argv[0];
3161         }
3162
3163         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
3164         if (rc) {
3165                 fprintf(stderr, "%s: ioctl_pack for catalog '%s' failed: %s\n",
3166                         jt_cmdname(cmd), data.ioc_inlbuf1, strerror(-rc));
3167                 goto err;
3168         }
3169
3170         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_LLOG_REMOVE, buf);
3171         if (rc)
3172                 fprintf(stderr, "%s: cancel catalog '%s:%s' failed: %s\n",
3173                         jt_cmdname(cmd), data.ioc_inlbuf1, data.ioc_inlbuf2,
3174                         strerror(-rc));
3175
3176 err:
3177         llog_default_device(LLOG_DFLT_DEV_RESET);
3178         return rc;
3179 }
3180
3181 static void signal_server(int sig)
3182 {
3183         if (sig == SIGINT) {
3184                 do_disconnect("sigint", 1);
3185                 exit(1);
3186         } else {
3187                 fprintf(stderr, "%s: got signal %d\n", jt_cmdname("sigint"),
3188                         sig);
3189         }
3190 }
3191
3192 int obd_initialize(int argc, char **argv)
3193 {
3194         if (shmem_setup() != 0)
3195                 return -1;
3196
3197         register_ioc_dev(OBD_DEV_ID, OBD_DEV_PATH);
3198
3199         return 0;
3200 }
3201
3202 void obd_finalize(int argc, char **argv)
3203 {
3204         struct sigaction sigact;
3205
3206         /* sigact initialization */
3207         sigact.sa_handler = signal_server;
3208         sigfillset(&sigact.sa_mask);
3209         sigact.sa_flags = SA_RESTART;
3210         /* coverity[uninit_use_in_call] */
3211         sigaction(SIGINT, &sigact, NULL);
3212
3213         shmem_cleanup();
3214         do_disconnect(argv[0], 1);
3215 }
3216
3217 /**
3218  * Get the index of the last llog record
3219  *
3220  * logid:            [0x3:0xa:0x0]:0
3221  * flags:            4 (plain)
3222  * records_count:    57
3223  * last_index:       57
3224  *
3225  * \param logname[in]   pointer to config log name
3226  *
3227  * \retval              > 0 on success
3228  *                      <= 0 on error
3229  */
3230 static long llog_last_index(char *logname)
3231 {
3232         struct obd_ioctl_data data = { 0 };
3233         char rawbuf[MAX_IOC_BUFLEN] = "", *buf = rawbuf;
3234         char *last_index;
3235         long rc;
3236
3237         data.ioc_dev = cur_device;
3238         data.ioc_inllen1 = strlen(logname) + 1;
3239         data.ioc_inlbuf1 = logname;
3240         data.ioc_inllen2 = sizeof(rawbuf) - __ALIGN_KERNEL(sizeof(data), 8) -
3241                            __ALIGN_KERNEL(data.ioc_inllen1, 8);
3242         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
3243         if (rc) {
3244                 fprintf(stderr, "%s: ioctl_pack failed for catalog '%s': %s\n",
3245                         __func__, logname, strerror(-rc));
3246                 return rc;
3247         }
3248
3249         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_LLOG_INFO, buf);
3250         if (rc == 0) {
3251                 last_index = strstr(((struct obd_ioctl_data *)buf)->ioc_bulk,
3252                                     "last_index:");
3253                 return strtol(last_index + 11, NULL, 10);
3254         }
3255
3256         rc = -errno;
3257
3258         return rc;
3259 }
3260
3261 static char *get_llog_event_name(__u32 cmd)
3262 {
3263         struct lcfg_type_data *data;
3264
3265         data = lcfg_cmd2data(cmd);
3266         if (data)
3267                 return data->ltd_name;
3268         return NULL;
3269 }
3270
3271 static char *get_event_filter(__u32 cmd)
3272 {
3273         char *event_name;
3274         char *filter = NULL;
3275         int len;
3276
3277         event_name = get_llog_event_name(cmd);
3278         if (event_name) {
3279                 /* 9 bytes for "event: , " */
3280                 len = 9 + strlen(event_name);
3281                 filter = malloc(len + 1);
3282                 if (!filter)
3283                         return NULL;
3284                 memset(filter, 0, len + 1);
3285                 snprintf(filter, len, "event: %s, ", event_name);
3286                 return filter;
3287         }
3288
3289         return NULL;
3290 }
3291
3292 /**
3293  * Callback to search ostname in llog
3294  * - { index: 23, event: attach, device: lustre-OST0000-osc, type: osc,
3295  *     UUID: lustre-clilov_UUID }
3296  * - { index: 24, event: setup, device: lustre-OST0000-osc,
3297  *     UUID: lustre-OST0000_UUID, node: 192.168.0.120@tcp }
3298  * - { index: 25, event: add_osc, device: lustre-clilov,
3299  *     ost: lustre-OST0000_UUID, index: 0, gen: 1 }
3300  *
3301  * \param record[in]    pointer to llog record
3302  * \param data[in]      pointer to ostname
3303  *
3304  * \retval              1 if ostname is found
3305  *                      0 if ostname is not found
3306  *                      -ENOENT if ostname is deleted
3307  */
3308 static int llog_search_ost_cb(const char *record, void *data)
3309 {
3310         char *ostname = data;
3311         char ost_filter[MAX_STRING_SIZE] = {'\0'};
3312         char *add_osc, *del_osc, *setup, *cleanup;
3313
3314         add_osc = get_event_filter(LCFG_LOV_ADD_OBD);
3315         del_osc = get_event_filter(LCFG_LOV_DEL_OBD);
3316         setup = get_event_filter(LCFG_SETUP);
3317         cleanup = get_event_filter(LCFG_CLEANUP);
3318         if (!add_osc || !del_osc || !setup || !cleanup)
3319                 return -ENOMEM;
3320
3321         if (ostname && ostname[0])
3322                 snprintf(ost_filter, sizeof(ost_filter), " %s,", ostname);
3323
3324         if (strstr(record, ost_filter)) {
3325                 if (strstr(record, add_osc) || strstr(record, setup))
3326                         return 1;
3327                 if (strstr(record, del_osc) || strstr(record, cleanup))
3328                         return -ENOENT;
3329         }
3330
3331         free(add_osc);
3332         free(del_osc);
3333         free(setup);
3334         free(cleanup);
3335
3336         return 0;
3337 }
3338
3339 /**
3340  * Search ost in llog
3341  *
3342  * \param logname[in]           pointer to config log name
3343  * \param last_index[in]        the index of the last llog record
3344  * \param ostname[in]           pointer to ost name
3345  *
3346  * \retval                      1 if ostname is found
3347  *                              0 if ostname is not found
3348  */
3349 static int llog_search_ost(char *logname, long last_index, char *ostname)
3350 {
3351         long start, end, inc = MAX_IOC_BUFLEN / 128;
3352         int rc = 0;
3353
3354         for (end = last_index; end > 1; end -= inc) {
3355                 start = end - inc > 0 ? end - inc : 1;
3356                 rc = jt_llog_print_iter(logname, start, end, llog_search_ost_cb,
3357                                         ostname, true);
3358                 if (rc)
3359                         break;
3360         }
3361
3362         return (rc == 1 ? 1 : 0);
3363 }
3364
3365 struct llog_pool_data {
3366         char lpd_fsname[LUSTRE_MAXFSNAME + 1];
3367         char lpd_poolname[LOV_MAXPOOLNAME + 1];
3368         char lpd_ostname[MAX_OBD_NAME + 1];
3369         enum lcfg_command_type lpd_cmd_type;
3370         bool lpd_pool_exists;
3371         int lpd_ost_num;
3372 };
3373
3374 /**
3375  * Called for each formatted line in the config log (within range).
3376  *
3377  * - { index: 74, event: new_pool, device: tfs-clilov, fsname: tfs, pool: tmp }
3378  * - { index: 77, event: add_pool, device: tfs-clilov, fsname: tfs, pool: tmp,
3379  *     ost: tfs-OST0000_UUID }
3380  * - { index: 224, event: remove_pool, device: tfs-clilov, fsname: tfs,
3381  *     pool: tmp, ost: tfs-OST0003_UUID }
3382  * - { index: 227, event: del_pool, device: tfs-clilov, fsname: tfs, pool: tmp }
3383  *
3384  * \param record[in]    pointer to llog record
3385  * \param data[in]      pointer to llog_pool_data
3386  *
3387  * \retval              1 if pool or OST is found
3388  *                      0 if pool or OST is not found
3389  *                      -ENOENT if pool or OST is removed
3390  */
3391 static int llog_search_pool_cb(const char *record, void *data)
3392 {
3393         struct llog_pool_data *lpd = data;
3394         char pool_filter[MAX_STRING_SIZE] = "";
3395         char *new_pool, *del_pool, *add_pool, *rem_pool;
3396         char *found = NULL;
3397         int fs_pool_len = 0, rc = 0;
3398
3399         new_pool = get_event_filter(LCFG_POOL_NEW);
3400         del_pool = get_event_filter(LCFG_POOL_DEL);
3401         add_pool = get_event_filter(LCFG_POOL_ADD);
3402         rem_pool = get_event_filter(LCFG_POOL_REM);
3403         if (!new_pool || !del_pool || !add_pool || !rem_pool) {
3404                 rc = -ENOMEM;
3405                 goto out;
3406         }
3407
3408         fs_pool_len = 16 + strlen(lpd->lpd_fsname) + strlen(lpd->lpd_poolname);
3409         snprintf(pool_filter, fs_pool_len + 1, "fsname: %s, pool: %s",
3410                  lpd->lpd_fsname, lpd->lpd_poolname);
3411
3412         /* search poolname */
3413         found = strstr(record, pool_filter);
3414         if (found &&
3415             (found[fs_pool_len] == ' ' || found[fs_pool_len] == ',')) {
3416                 if (strstr(record, new_pool)) {
3417                         lpd->lpd_pool_exists = true;
3418                         rc = 1;
3419                         goto out;
3420                 }
3421                 if (strstr(record, del_pool)) {
3422                         lpd->lpd_pool_exists = false;
3423                         rc = -ENOENT;
3424                         goto out;
3425                 }
3426
3427                 if (lpd->lpd_cmd_type == LCFG_POOL_NEW ||
3428                     lpd->lpd_cmd_type == LCFG_POOL_DEL) {
3429                         if (strstr(record, add_pool))
3430                                 lpd->lpd_ost_num++;
3431                         if (strstr(record, rem_pool))
3432                                 lpd->lpd_ost_num--;
3433                 } else if (lpd->lpd_ostname && lpd->lpd_ostname[0]) {
3434                         if (strstr(record, lpd->lpd_ostname)) {
3435                                 lpd->lpd_pool_exists = true;
3436                                 if (strstr(record, add_pool)) {
3437                                         lpd->lpd_ost_num = 1;
3438                                         rc = 1;
3439                                         goto out;
3440                                 }
3441                                 if (strstr(record, rem_pool)) {
3442                                         lpd->lpd_ost_num = 0;
3443                                         rc = -ENOENT;
3444                                         goto out;
3445                                 }
3446                         }
3447                 }
3448         }
3449 out:
3450         if (new_pool)
3451                 free(new_pool);
3452         if (del_pool)
3453                 free(del_pool);
3454         if (add_pool)
3455                 free(add_pool);
3456         if (rem_pool)
3457                 free(rem_pool);
3458
3459         return rc;
3460 }
3461
3462 /* Search pool and its ost in llog
3463  *
3464  * \param logname[in]           pointer to config log name
3465  * \param last_index[in]        the index of the last llog record
3466  * \param fsname[in]            pointer to filesystem name
3467  * \param poolname[in]          pointer pool name
3468  * \param ostname[in]           pointer to OST name(OSTnnnn-UUID)
3469  * \param cmd[in]               pool command type
3470  *
3471  * \retval                      < 0 on error
3472  *                              0 if pool is empty or OST is not found
3473  *                              1 if pool is not empty or OST is found
3474  */
3475 static int llog_search_pool(char *logname, long last_index, char *fsname,
3476                             char *poolname, char *ostname,
3477                             enum lcfg_command_type cmd)
3478 {
3479         struct llog_pool_data lpd;
3480         long start, end, inc = MAX_IOC_BUFLEN / 128;
3481         int rc = 0;
3482
3483         memset(&lpd, 0, sizeof(lpd));
3484         lpd.lpd_cmd_type = cmd;
3485         lpd.lpd_pool_exists = false;
3486         lpd.lpd_ost_num = 0;
3487         strncpy(lpd.lpd_fsname, fsname, sizeof(lpd.lpd_fsname) - 1);
3488         if (poolname && poolname[0])
3489                 strncpy(lpd.lpd_poolname, poolname,
3490                         sizeof(lpd.lpd_poolname) - 1);
3491         if (ostname && ostname[0])
3492                 strncpy(lpd.lpd_ostname, ostname, sizeof(lpd.lpd_ostname) - 1);
3493
3494         for (end = last_index; end > 1; end -= inc) {
3495                 start = end - inc > 0 ? end - inc : 1;
3496                 rc = jt_llog_print_iter(logname, start, end,
3497                                         llog_search_pool_cb, &lpd, true);
3498                 if (rc) {
3499                         if (rc == 1 && lpd.lpd_pool_exists)
3500                                 rc = lpd.lpd_ost_num ? 1 : 0;
3501                         else if (rc == -ENOENT && lpd.lpd_pool_exists &&
3502                                  !lpd.lpd_ost_num)
3503                                 rc = 0;
3504                         goto out;
3505                 }
3506         }
3507
3508         rc = -ENOENT;
3509 out:
3510         return rc;
3511 }
3512
3513 static bool combined_mgs_mds(char *fsname)
3514 {
3515         glob_t path;
3516         int rc;
3517
3518         rc = cfs_get_param_paths(&path, "mdt/%s-MDT0000", fsname);
3519         if (!rc)
3520                 cfs_free_param_data(&path);
3521
3522         if (get_mgs_device() > 0 && !rc)
3523                 return true;
3524
3525         return false;
3526 }
3527
3528 /*
3529  * if pool is NULL, search ostname in target_obd
3530  * if pool is not NULL:
3531  *  - if pool not found returns errno < 0
3532  *  - if ostname is NULL, returns 1 if pool is not empty and 0 if pool empty
3533  *  - if ostname is not NULL, returns 1 if OST is in pool and 0 if not
3534  */
3535 int lctl_search_ost(char *fsname, char *poolname, char *ostname,
3536                     enum lcfg_command_type cmd)
3537 {
3538         char logname[MAX_OBD_NAME] = {'\0'};
3539         long last_index;
3540
3541         if (fsname && fsname[0] == '\0')
3542                 fsname = NULL;
3543         if (!fsname)
3544                 return -EINVAL;
3545
3546         if (combined_mgs_mds(fsname))
3547                 return llapi_search_ost(fsname, poolname, ostname);
3548
3549         /* fetch the last_index of llog record */
3550         snprintf(logname, sizeof(logname), "%s-client", fsname);
3551         last_index = llog_last_index(logname);
3552         if (last_index < 0)
3553                 return last_index;
3554
3555         /* if pool is NULL, search ostname in target_obd */
3556         if (!poolname && ostname)
3557                 return llog_search_ost(logname, last_index, ostname);
3558
3559         return llog_search_pool(logname, last_index, fsname, poolname,
3560                                 ostname, cmd);
3561 }
3562
3563 static int check_pool_cmd(enum lcfg_command_type cmd, char *fsname,
3564                           char *poolname, char *ostname)
3565 {
3566         int rc;
3567
3568         rc = lctl_search_ost(fsname, poolname, ostname, cmd);
3569         if (rc < 0 && (cmd != LCFG_POOL_NEW)) {
3570                 fprintf(stderr, "Pool %s.%s not found\n",
3571                         fsname, poolname);
3572                 return rc;
3573         }
3574
3575         switch (cmd) {
3576         case LCFG_POOL_NEW: {
3577                 if (ostname)
3578                         return -EINVAL;
3579
3580                 if (rc >= 0) {
3581                         fprintf(stderr, "Pool %s.%s already exists\n",
3582                                 fsname, poolname);
3583                         return -EEXIST;
3584                 }
3585                 return 0;
3586         }
3587         case LCFG_POOL_DEL: {
3588                 if (ostname)
3589                         return -EINVAL;
3590
3591                 if (rc == 1) {
3592                         fprintf(stderr,
3593                                 "Pool %s.%s not empty, please remove all members\n",
3594                                 fsname, poolname);
3595                         return -ENOTEMPTY;
3596                 }
3597                 return 0;
3598         }
3599         case LCFG_POOL_ADD: {
3600                 if (rc == 1) {
3601                         fprintf(stderr, "OST %s is already in pool %s.%s\n",
3602                                 ostname, fsname, poolname);
3603                         return -EEXIST;
3604                 }
3605                 rc = lctl_search_ost(fsname, NULL, ostname, cmd);
3606                 if (rc == 0) {
3607                         fprintf(stderr, "OST %s is not part of the '%s' fs.\n",
3608                                 ostname, fsname);
3609                         return -ENOENT;
3610                 }
3611                 return 0;
3612         }
3613         case LCFG_POOL_REM: {
3614                 if (rc == 0) {
3615                         fprintf(stderr, "OST %s not found in pool %s.%s\n",
3616                                 ostname, fsname, poolname);
3617                         return -ENOENT;
3618                 }
3619                 return 0;
3620         }
3621         default:
3622                 break;
3623         } /* switch */
3624         return -EINVAL;
3625 }
3626
3627 /*
3628  * This check only verifies that the changes have been "pushed out" to
3629  * the client successfully.  This involves waiting for a config update,
3630  * and so may fail because of problems in that code or post-command
3631  * network loss. So reporting a warning is appropriate, but not a failure.
3632  */
3633 static int check_pool_cmd_result(enum lcfg_command_type cmd, char *fsname,
3634                                  char *poolname, char *ostname)
3635 {
3636         int cpt = 10;
3637         int rc = 0;
3638
3639         switch (cmd) {
3640         case LCFG_POOL_NEW: {
3641                 do {
3642                         rc = lctl_search_ost(fsname, poolname, NULL, cmd);
3643                         if (rc == -ENODEV)
3644                                 return rc;
3645                         if (rc < 0)
3646                                 sleep(2);
3647                         cpt--;
3648                 } while ((rc < 0) && (cpt > 0));
3649                 if (rc >= 0) {
3650                         fprintf(stderr, "Pool %s.%s created\n",
3651                                 fsname, poolname);
3652                         return 0;
3653                 }
3654
3655                 fprintf(stderr, "Warning, pool %s.%s not found\n", fsname,
3656                         poolname);
3657                 return -ENOENT;
3658         }
3659         case LCFG_POOL_DEL: {
3660                 do {
3661                         rc = lctl_search_ost(fsname, poolname, NULL, cmd);
3662                         if (rc == -ENODEV)
3663                                 return rc;
3664                         if (rc >= 0)
3665                                 sleep(2);
3666                         cpt--;
3667                 } while ((rc >= 0) && (cpt > 0));
3668                 if (rc < 0) {
3669                         fprintf(stderr, "Pool %s.%s destroyed\n",
3670                                 fsname, poolname);
3671                         return 0;
3672                 }
3673
3674                 fprintf(stderr, "Warning, pool %s.%s still found\n", fsname,
3675                         poolname);
3676                 return -EEXIST;
3677         }
3678         case LCFG_POOL_ADD: {
3679                 do {
3680                         rc = lctl_search_ost(fsname, poolname, ostname, cmd);
3681                         if (rc == -ENODEV)
3682                                 return rc;
3683                         if (rc != 1)
3684                                 sleep(2);
3685                         cpt--;
3686                 } while ((rc != 1) && (cpt > 0));
3687                 if (rc == 1) {
3688                         fprintf(stderr, "OST %s added to pool %s.%s\n",
3689                                 ostname, fsname, poolname);
3690                         return 0;
3691                 }
3692                 fprintf(stderr, "Warning, OST %s not found in pool %s.%s\n",
3693                         ostname, fsname, poolname);
3694                 return -ENOENT;
3695         }
3696         case LCFG_POOL_REM: {
3697                 do {
3698                         rc = lctl_search_ost(fsname, poolname, ostname, cmd);
3699                         if (rc == -ENODEV)
3700                                 return rc;
3701                         if (rc == 1)
3702                                 sleep(2);
3703                         cpt--;
3704                 } while ((rc == 1) && (cpt > 0));
3705                 if (rc != 1) {
3706                         fprintf(stderr, "OST %s removed from pool %s.%s\n",
3707                                 ostname, fsname, poolname);
3708                         return 0;
3709                 }
3710                 fprintf(stderr, "Warning, OST %s still found in pool %s.%s\n",
3711                         ostname, fsname, poolname);
3712                 return -EEXIST;
3713         }
3714         default:
3715                 break;
3716         }
3717         return -EINVAL;
3718 }
3719
3720 static int check_and_complete_ostname(char *fsname, char *ostname)
3721 {
3722         char *ptr;
3723         char real_ostname[MAX_OBD_NAME + 1];
3724         char i;
3725
3726         /* if OST name does not start with fsname, we add it */
3727         /* if not check if the fsname is the right one */
3728         ptr = strchr(ostname, '-');
3729         if (!ptr) {
3730                 sprintf(real_ostname, "%s-%s", fsname, ostname);
3731         } else if (strncmp(ostname, fsname, strlen(fsname)) != 0) {
3732                 fprintf(stderr, "%s does not start with fsname %s\n",
3733                         ostname, fsname);
3734                 return -EINVAL;
3735         } else {
3736                 if (strlen(ostname) > sizeof(real_ostname) - 1)
3737                         return -E2BIG;
3738
3739                 strncpy(real_ostname, ostname, sizeof(real_ostname));
3740         }
3741
3742         /* real_ostname is fsname-????? */
3743         ptr = real_ostname + strlen(fsname) + 1;
3744         if (strncmp(ptr, "OST", 3) != 0) {
3745                 fprintf(stderr, "%s does not start by %s-OST nor OST\n",
3746                         ostname, fsname);
3747                 return -EINVAL;
3748         }
3749         /* real_ostname is fsname-OST????? */
3750         ptr += 3;
3751         for (i = 0; i < 4; i++) {
3752                 if (!isxdigit(*ptr)) {
3753                         fprintf(stderr,
3754                                 "ost's index in %s is not an hexa number\n",
3755                                 ostname);
3756                         return -EINVAL;
3757                 }
3758                 ptr++;
3759         }
3760         /* real_ostname is fsname-OSTXXXX????? */
3761         /* if OST name does not end with _UUID, we add it */
3762         if (*ptr == '\0') {
3763                 strcat(real_ostname, "_UUID");
3764         } else if (strcmp(ptr, "_UUID") != 0) {
3765                 fprintf(stderr,
3766                         "ostname %s does not end with _UUID\n", ostname);
3767                 return -EINVAL;
3768         }
3769         /* real_ostname is fsname-OSTXXXX_UUID */
3770         strcpy(ostname, real_ostname);
3771         return 0;
3772 }
3773
3774 /* returns 0 or -errno */
3775 static int pool_cmd(enum lcfg_command_type cmd, char *cmdname,
3776                     char *fullpoolname, char *fsname, char *poolname,
3777                     char *ostname)
3778 {
3779         int rc = 0;
3780         struct obd_ioctl_data data;
3781         struct lustre_cfg_bufs bufs;
3782         struct lustre_cfg *lcfg;
3783         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
3784
3785         rc = check_pool_cmd(cmd, fsname, poolname, ostname);
3786         if (rc == -ENODEV)
3787                 fprintf(stderr,
3788                         "Can't verify pool command since there is no local MDT or client, proceeding anyhow...\n");
3789         else if (rc)
3790                 return rc;
3791
3792         lustre_cfg_bufs_reset(&bufs, NULL);
3793         lustre_cfg_bufs_set_string(&bufs, 0, cmdname);
3794         lustre_cfg_bufs_set_string(&bufs, 1, fullpoolname);
3795         if (ostname)
3796                 lustre_cfg_bufs_set_string(&bufs, 2, ostname);
3797
3798         lcfg = malloc(lustre_cfg_len(bufs.lcfg_bufcount, bufs.lcfg_buflen));
3799         if (!lcfg)
3800                 return -ENOMEM;
3801         lustre_cfg_init(lcfg, cmd, &bufs);
3802
3803         memset(&data, 0, sizeof(data));
3804         rc = data.ioc_dev = get_mgs_device();
3805         if (rc < 0)
3806                 goto out;
3807
3808         data.ioc_type = LUSTRE_CFG_TYPE;
3809         data.ioc_plen1 = lustre_cfg_len(lcfg->lcfg_bufcount,
3810                                         lcfg->lcfg_buflens);
3811         data.ioc_pbuf1 = (void *)lcfg;
3812
3813         memset(buf, 0, sizeof(rawbuf));
3814         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
3815         if (rc) {
3816                 fprintf(stderr, "error: %s: invalid ioctl\n",
3817                         jt_cmdname(cmdname));
3818                 free(lcfg);
3819                 return rc;
3820         }
3821         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_POOL, buf);
3822 out:
3823         if (rc)
3824                 rc = -errno;
3825         switch (rc) {
3826         case -ENAMETOOLONG:
3827                 fprintf(stderr,
3828                         "error: %s: either the pool or file system name is too long (max pool name len is %d and file system name is %d)\n",
3829                         jt_cmdname(cmdname), LOV_MAXPOOLNAME, LUSTRE_MAXFSNAME);
3830                 break;
3831         case -EINVAL:
3832                 fprintf(stderr,
3833                         "error: %s can contain only alphanumeric characters, underscores, and dashes besides the required '.'\n",
3834                         jt_cmdname(cmdname));
3835         default:
3836                 break;
3837         }
3838         free(lcfg);
3839         return rc;
3840 }
3841
3842 /**
3843  * Format and send the ioctl to the MGS.
3844  *
3845  * \param       cmd             IOCTL to send
3846  * \param       ret_data        void pointer to return anything from
3847  *                              ioctl
3848  * \param       num_args        number of arguments to pack into the
3849  *                              ioctl buffer
3850  * \param       argv[]          variable number of string arguments
3851  *
3852  * \retval                      0 on success
3853  */
3854 static int nodemap_cmd(enum lcfg_command_type cmd, void *ret_data,
3855                        unsigned int ret_size, ...)
3856 {
3857         va_list                 ap;
3858         char                    *arg;
3859         int                     i = 0;
3860         struct lustre_cfg_bufs  bufs;
3861         struct obd_ioctl_data   data;
3862         struct lustre_cfg       *lcfg;
3863         char                    rawbuf[MAX_IOC_BUFLEN];
3864         char                    *buf = rawbuf;
3865         int                     rc = 0;
3866
3867         lustre_cfg_bufs_reset(&bufs, NULL);
3868
3869         va_start(ap, ret_size);
3870         arg = va_arg(ap, char *);
3871         while (arg) {
3872                 lustre_cfg_bufs_set_string(&bufs, i, arg);
3873                 i++;
3874                 arg = va_arg(ap, char *);
3875         }
3876         va_end(ap);
3877
3878         lcfg = malloc(lustre_cfg_len(bufs.lcfg_bufcount, bufs.lcfg_buflen));
3879         if (!lcfg)
3880                 return -ENOMEM;
3881         lustre_cfg_init(lcfg, cmd, &bufs);
3882
3883         memset(&data, 0, sizeof(data));
3884         rc = data.ioc_dev = get_mgs_device();
3885         if (rc < 0)
3886                 goto out;
3887
3888         data.ioc_type = LUSTRE_CFG_TYPE;
3889         data.ioc_plen1 = lustre_cfg_len(lcfg->lcfg_bufcount,
3890                                         lcfg->lcfg_buflens);
3891         data.ioc_pbuf1 = (void *)lcfg;
3892
3893         memset(buf, 0, sizeof(rawbuf));
3894         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
3895         if (rc != 0) {
3896                 fprintf(stderr,
3897                         "error: invalid ioctl: %08x errno: %d with rc=%d\n",
3898                         cmd, errno, rc);
3899                 goto out;
3900         }
3901
3902         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_NODEMAP, buf);
3903         if (rc != 0) {
3904                 fprintf(stderr,
3905                         "error: invalid ioctl: %08x errno: %d with rc=%d\n",
3906                         cmd, errno, rc);
3907                 goto out;
3908         }
3909
3910         if (ret_data) {
3911                 rc = llapi_ioctl_unpack(&data, buf, sizeof(rawbuf));
3912                 if (rc != 0)
3913                         goto out;
3914
3915                 if (ret_size > data.ioc_plen1)
3916                         ret_size = data.ioc_plen1;
3917
3918                 memcpy(ret_data, data.ioc_pbuf1, ret_size);
3919         }
3920 out:
3921         free(lcfg);
3922
3923         return rc;
3924 }
3925
3926 /**
3927  * activate nodemap functions
3928  *
3929  * \param       argc            number of args
3930  * \param       argv[]          variable string arguments
3931  *
3932  * argv[0]                      1 for activate or 0 for deactivate
3933  *
3934  * \retval                      0 on success
3935  */
3936 int jt_nodemap_activate(int argc, char **argv)
3937 {
3938         int rc;
3939
3940         rc = nodemap_cmd(LCFG_NODEMAP_ACTIVATE, NULL, 0, argv[0], argv[1],
3941                          NULL);
3942
3943         if (rc != 0) {
3944                 errno = -rc;
3945                 perror(argv[0]);
3946         }
3947
3948         return rc;
3949 }
3950
3951 /**
3952  * add a nodemap
3953  *
3954  * \param       argc            number of args
3955  * \param       argv[]          variable string arguments
3956  *
3957  * argv[0]                      nodemap name
3958  *
3959  * \retval                      0 on success
3960  */
3961 int jt_nodemap_add(int argc, char **argv)
3962 {
3963         int rc;
3964
3965         rc = llapi_nodemap_exists(argv[1]);
3966         if (rc == 0) {
3967                 fprintf(stderr, "error: %s existing nodemap name\n", argv[1]);
3968                 return 1;
3969         }
3970
3971         rc = nodemap_cmd(LCFG_NODEMAP_ADD, NULL, 0, argv[0], argv[1], NULL);
3972
3973         if (rc != 0) {
3974                 errno = -rc;
3975                 perror(argv[0]);
3976         }
3977
3978         return rc;
3979 }
3980
3981 /**
3982  * delete a nodemap
3983  *
3984  * \param       argc            number of args
3985  * \param       argv[]          variable string arguments
3986  *
3987  * argv[0]                      nodemap name
3988  *
3989  * \retval                      0 on success
3990  */
3991 int jt_nodemap_del(int argc, char **argv)
3992 {
3993         int rc;
3994
3995         rc = llapi_nodemap_exists(argv[1]);
3996         if (rc != 0) {
3997                 fprintf(stderr, "error: %s not existing nodemap name\n",
3998                         argv[1]);
3999                 return rc;
4000         }
4001         rc = nodemap_cmd(LCFG_NODEMAP_DEL, NULL, 0, argv[0], argv[1], NULL);
4002
4003         if (rc != 0) {
4004                 errno = -rc;
4005                 perror(argv[0]);
4006         }
4007
4008         return rc;
4009 }
4010
4011 /**
4012  * test a nid for nodemap membership
4013  *
4014  * \param       argc            number of args
4015  * \param       argv[]          variable string arguments
4016  *
4017  * argv[0]                      properly formatted nid
4018  *
4019  * \retval                      0 on success
4020  */
4021 int jt_nodemap_test_nid(int argc, char **argv)
4022 {
4023         char    rawbuf[MAX_IOC_BUFLEN];
4024         int     rc;
4025
4026         rc = nodemap_cmd(LCFG_NODEMAP_TEST_NID, &rawbuf, sizeof(rawbuf),
4027                          argv[0], argv[1], NULL);
4028         if (rc == 0)
4029                 printf("%s\n", (char *)rawbuf);
4030
4031         return rc;
4032 }
4033
4034 /**
4035  * test a nodemap id pair for mapping
4036  *
4037  * \param       argc            number of args
4038  * \param       argv[[]         variable string arguments
4039  *
4040  * \retval                      0 on success
4041  *
4042  * The argv array should contain the nodemap name, the id
4043  * to checking the mapping on, and the id type (UID or GID)
4044  *
4045  */
4046 int jt_nodemap_test_id(int argc, char **argv)
4047 {
4048         char    rawbuf[MAX_IOC_BUFLEN];
4049         char    *nidstr = NULL;
4050         char    *idstr = NULL;
4051         char    *typestr = NULL;
4052         int     rc = 0;
4053         int     c;
4054
4055         static struct option long_opts[] = {
4056                 { .val = 'i',   .name = "id",   .has_arg = required_argument },
4057                 { .val = 'n',   .name = "nid",  .has_arg = required_argument },
4058                 { .val = 't',   .name = "idtype",
4059                                                 .has_arg = required_argument },
4060                 { .name = NULL } };
4061
4062         while ((c = getopt_long(argc, argv, "n:t:i:",
4063                                 long_opts, NULL)) != -1) {
4064                 switch (c) {
4065                 case 'n':
4066                         nidstr = optarg;
4067                         break;
4068                 case 't':
4069                         typestr = optarg;
4070                         break;
4071                 case 'i':
4072                         idstr = optarg;
4073                         break;
4074                 }
4075         }
4076
4077         if (!nidstr || !typestr || !idstr) {
4078                 fprintf(stderr,
4079                         "usage: nodemap_test_id --nid <nid> --idtype [uid|gid] --id <id>\n");
4080                 return -1;
4081         }
4082
4083         rc = nodemap_cmd(LCFG_NODEMAP_TEST_ID, &rawbuf, sizeof(rawbuf),
4084                          argv[0], nidstr, typestr, idstr);
4085         if (rc == 0)
4086                 printf("%s\n", (char *)rawbuf);
4087
4088         return rc;
4089 }
4090
4091 /**
4092  * parse nid range
4093  *
4094  * \param       nodemap_range   --range string
4095  * \param       nid_range       nid range string, min_nid:max_nid
4096  *
4097  * \retval                      0 on success
4098  */
4099 static int parse_nid_range(char *nodemap_range, char *nid_range, int range_len)
4100 {
4101         char                    min_nid[LNET_NIDSTR_SIZE + 1];
4102         char                    max_nid[LNET_NIDSTR_SIZE + 1];
4103         struct list_head        nidlist;
4104         int                     rc = 0;
4105
4106         INIT_LIST_HEAD(&nidlist);
4107
4108         if (cfs_parse_nidlist(nodemap_range, strlen(nodemap_range),
4109                               &nidlist) <= 0) {
4110                 fprintf(stderr,
4111                         "error: nodemap_xxx_range: can't parse nid range: %s\n",
4112                         nodemap_range);
4113                 return -1;
4114         }
4115
4116         rc = cfs_nidrange_find_min_max(&nidlist, &min_nid[0], &max_nid[0],
4117                                        LNET_NIDSTR_SIZE);
4118         if (rc < 0) {
4119                 if (rc == -EINVAL)
4120                         fprintf(stderr,
4121                                 "error: nodemap_xxx_range: nid range uses currently unsupported features\n");
4122                 else if (rc == -ERANGE)
4123                         fprintf(stderr,
4124                                 "error: nodemap_xxx_range: nodemap ranges must be contiguous\n");
4125
4126                 return rc;
4127         }
4128
4129         snprintf(nid_range, range_len, "%s:%s", min_nid, max_nid);
4130
4131         return rc;
4132 }
4133
4134 /**
4135  * add an nid range to a nodemap
4136  *
4137  * \param       argc            number of args
4138  * \param       argv[]          variable string arguments
4139  *
4140  * --name                       nodemap name
4141  * --range                      properly formatted nid range
4142  *
4143  * \retval                      0 on success
4144  */
4145 int jt_nodemap_add_range(int argc, char **argv)
4146 {
4147         char                    *nodemap_name = NULL;
4148         char                    *nodemap_range = NULL;
4149         char                    nid_range[2 * LNET_NIDSTR_SIZE + 2];
4150         int                     rc = 0;
4151         int                     c;
4152
4153         static struct option long_opts[] = {
4154         { .val = 'n',   .name = "name",         .has_arg = required_argument },
4155         { .val = 'r',   .name = "range",        .has_arg = required_argument },
4156         { .name = NULL } };
4157
4158         while ((c = getopt_long(argc, argv, "n:r:",
4159                                 long_opts, NULL)) != -1) {
4160                 switch (c) {
4161                 case 'n':
4162                         nodemap_name = optarg;
4163                         break;
4164                 case 'r':
4165                         nodemap_range = optarg;
4166                         break;
4167                 }
4168         }
4169
4170         if (!nodemap_name || !nodemap_range) {
4171                 fprintf(stderr,
4172                         "usage: nodemap_add_range --name <name> --range <range>\n");
4173                 return -1;
4174         }
4175
4176         rc = parse_nid_range(nodemap_range, nid_range, sizeof(nid_range));
4177         if (rc) {
4178                 errno = -rc;
4179                 return rc;
4180         }
4181         rc = nodemap_cmd(LCFG_NODEMAP_ADD_RANGE, NULL, 0, argv[0],
4182                          nodemap_name, nid_range, NULL);
4183         if (rc != 0) {
4184                 errno = -rc;
4185                 fprintf(stderr,
4186                         "error: %s: cannot add range '%s' to nodemap '%s': rc = %d\n",
4187                         jt_cmdname(argv[0]), nodemap_range, nodemap_name, rc);
4188         }
4189
4190         return rc;
4191 }
4192
4193 /**
4194  * delete an nid range to a nodemap
4195  *
4196  * \param       argc            number of args
4197  * \param       argv[]          variable string arguments
4198  *
4199  * --name                       nodemap name
4200  * --range                      properly formatted nid range
4201  *
4202  * \retval                      0 on success
4203  */
4204 int jt_nodemap_del_range(int argc, char **argv)
4205 {
4206         char                    *nodemap_name = NULL;
4207         char                    *nodemap_range = NULL;
4208         char                    nid_range[2 * LNET_NIDSTR_SIZE + 2];
4209         int                     rc = 0;
4210         int                     c;
4211
4212         static struct option long_opts[] = {
4213         { .val = 'n',   .name = "name",         .has_arg = required_argument },
4214         { .val = 'r',   .name = "range",        .has_arg = required_argument },
4215         { .name = NULL } };
4216
4217         while ((c = getopt_long(argc, argv, "n:r:",
4218                                 long_opts, NULL)) != -1) {
4219                 switch (c) {
4220                 case 'n':
4221                         nodemap_name = optarg;
4222                         break;
4223                 case 'r':
4224                         nodemap_range = optarg;
4225                         break;
4226                 }
4227         }
4228
4229         if (!nodemap_name || !nodemap_range) {
4230                 fprintf(stderr,
4231                         "usage: nodemap_del_range --name <name> --range <range>\n");
4232                 return -1;
4233         }
4234
4235         rc = parse_nid_range(nodemap_range, nid_range, sizeof(nid_range));
4236         if (rc) {
4237                 errno = -rc;
4238                 return rc;
4239         }
4240         rc = nodemap_cmd(LCFG_NODEMAP_DEL_RANGE, NULL, 0, argv[0],
4241                          nodemap_name, nid_range, NULL);
4242         if (rc != 0) {
4243                 errno = -rc;
4244                 fprintf(stderr,
4245                         "error: %s: cannot delete range '%s' to nodemap '%s': rc = %d\n",
4246                         jt_cmdname(argv[0]), nodemap_range, nodemap_name, rc);
4247         }
4248
4249         return rc;
4250 }
4251
4252 /**
4253  * set a fileset on a nodemap
4254  *
4255  * \param       argc            number of args
4256  * \param       argv[]          variable string arguments
4257  *
4258  * --name                       nodemap name
4259  * --fileset                    fileset name
4260  *
4261  * \retval                      0 on success
4262  */
4263 int jt_nodemap_set_fileset(int argc, char **argv)
4264 {
4265         char *nodemap_name = NULL;
4266         char *fileset_name = NULL;
4267         int   rc = 0;
4268         int   c;
4269
4270         static struct option long_opts[] = {
4271         { .val = 'f',   .name = "fileset",      .has_arg = required_argument },
4272         { .val = 'n',   .name = "name",         .has_arg = required_argument },
4273         { .name = NULL } };
4274
4275         while ((c = getopt_long(argc, argv, "n:f:",
4276                                 long_opts, NULL)) != -1) {
4277                 switch (c) {
4278                 case 'n':
4279                         nodemap_name = optarg;
4280                         break;
4281                 case 'f':
4282                         fileset_name = optarg;
4283                         break;
4284                 }
4285         }
4286
4287         if (!nodemap_name || !fileset_name) {
4288                 fprintf(stderr,
4289                         "usage: nodemap_set_fileset --name <name> --fileset <fileset>\n");
4290                 return -1;
4291         }
4292
4293         rc = nodemap_cmd(LCFG_NODEMAP_SET_FILESET, NULL, 0, argv[0],
4294                          nodemap_name, fileset_name, NULL);
4295         if (rc != 0) {
4296                 errno = -rc;
4297                 fprintf(stderr,
4298                         "error: %s: cannot set fileset '%s' on nodemap '%s': rc = %d\n",
4299                         jt_cmdname(argv[0]), fileset_name, nodemap_name, rc);
4300         }
4301
4302         return rc;
4303 }
4304
4305 /**
4306  * set SELinux policy info on a nodemap
4307  *
4308  * \param       argc            number of args
4309  * \param       argv[]          variable string arguments
4310  *
4311  * --name                       nodemap name
4312  * --sepol                      SELinux policy info
4313  *
4314  * \retval                      0 on success
4315  */
4316 int jt_nodemap_set_sepol(int argc, char **argv)
4317 {
4318         char *nodemap_name = NULL;
4319         char *sepol = NULL;
4320         int   rc = 0;
4321         int   c;
4322
4323         static struct option long_options[] = {
4324                 {
4325                         .name           = "name",
4326                         .has_arg        = required_argument,
4327                         .val            = 'n',
4328                 },
4329                 {
4330                         .name           = "sepol",
4331                         .has_arg        = required_argument,
4332                         .val            = 's',
4333                 },
4334                 {
4335                         .name = NULL,
4336                 }
4337         };
4338
4339         while ((c = getopt_long(argc, argv, "n:s:",
4340                                 long_options, NULL)) != -1) {
4341                 switch (c) {
4342                 case 'n':
4343                         nodemap_name = optarg;
4344                         break;
4345                 case 's':
4346                         sepol = optarg;
4347                         break;
4348                 }
4349         }
4350
4351         if (!nodemap_name || !sepol) {
4352                 fprintf(stderr,
4353                         "usage: nodemap_set_sepol --name <name> --sepol <sepol>\n");
4354                 return -1;
4355         }
4356
4357         rc = nodemap_cmd(LCFG_NODEMAP_SET_SEPOL, NULL, 0, argv[0],
4358                          nodemap_name, sepol, NULL);
4359         if (rc != 0) {
4360                 errno = -rc;
4361                 fprintf(stderr,
4362                         "error: %s: cannot set sepol '%s' on nodemap '%s': rc = %d\n",
4363                         jt_cmdname(argv[0]), sepol, nodemap_name, rc);
4364         }
4365
4366         return rc;
4367 }
4368
4369 /**
4370  * modify a nodemap's behavior
4371  *
4372  * \param       argc            number of args
4373  * \param       argv[]          variable string arguments
4374  *
4375  * --name                       nodemap name
4376  * --property                   nodemap property to change
4377  *                              admin, trusted, squash_uid, squash_gid)
4378  * --value                      value to set property
4379  *
4380  * \retval                      0 on success
4381  */
4382 int jt_nodemap_modify(int argc, char **argv)
4383 {
4384         int                     c;
4385         int                     rc = 0;
4386         enum lcfg_command_type  cmd = 0;
4387         char                    *nodemap_name = NULL;
4388         char                    *param = NULL;
4389         char                    *value = NULL;
4390
4391         static struct option long_opts[] = {
4392         { .val = 'n',   .name = "name",         .has_arg = required_argument },
4393         { .val = 'p',   .name = "property",     .has_arg = required_argument },
4394         { .val = 'v',   .name = "value",        .has_arg = required_argument },
4395         { .name = NULL } };
4396
4397         while ((c = getopt_long(argc, argv, "n:p:v:",
4398                                 long_opts, NULL)) != -1) {
4399                 switch (c) {
4400                 case 'n':
4401                         nodemap_name = optarg;
4402                         break;
4403                 case 'p':
4404                         param = optarg;
4405                         break;
4406                 case 'v':
4407                         value = optarg;
4408                         break;
4409                 }
4410         }
4411
4412         if (!nodemap_name || !param || !value) {
4413                 fprintf(stderr,
4414                         "usage: nodemap_modify --name <nodemap_name> --property <property_name> --value <value>\n");
4415                 fprintf(stderr,
4416                         "valid properties: admin trusted map_mode squash_uid squash_gid deny_unknown audit_mode forbid_encryption\n");
4417                 return -1;
4418         }
4419
4420         if (strcmp("admin", param) == 0) {
4421                 cmd = LCFG_NODEMAP_ADMIN;
4422         } else if (strcmp("trusted", param) == 0) {
4423                 cmd = LCFG_NODEMAP_TRUSTED;
4424         } else if (strcmp("deny_unknown", param) == 0) {
4425                 cmd = LCFG_NODEMAP_DENY_UNKNOWN;
4426         } else if (strcmp("squash_uid", param) == 0) {
4427                 cmd = LCFG_NODEMAP_SQUASH_UID;
4428         } else if (strcmp("squash_gid", param) == 0) {
4429                 cmd = LCFG_NODEMAP_SQUASH_GID;
4430         } else if (strcmp("map_mode", param) == 0) {
4431                 cmd = LCFG_NODEMAP_MAP_MODE;
4432         } else if (strcmp("audit_mode", param) == 0) {
4433                 cmd = LCFG_NODEMAP_AUDIT_MODE;
4434         } else if (strcmp("forbid_encryption", param) == 0) {
4435                 cmd = LCFG_NODEMAP_FORBID_ENCRYPT;
4436         } else {
4437                 fprintf(stderr,
4438                         "error: %s: nodemap_modify invalid subcommand: %s\n",
4439                         jt_cmdname(argv[0]), param);
4440                 return -1;
4441         }
4442
4443         rc = nodemap_cmd(cmd, NULL, 0, argv[0], nodemap_name, param,
4444                          value, NULL);
4445         if (rc != 0) {
4446                 errno = -rc;
4447                 fprintf(stderr,
4448                         "error: %s: cannot modify nodemap '%s' to param '%s': value '%s': rc = %d\n",
4449                         jt_cmdname(argv[0]), nodemap_name, param, value, rc);
4450         }
4451
4452         return rc;
4453 }
4454
4455 int jt_nodemap_add_idmap(int argc, char **argv)
4456 {
4457         int                     c;
4458         enum                    lcfg_command_type cmd = 0;
4459         char                    *nodemap_name = NULL;
4460         char                    *idmap = NULL;
4461         char                    *idtype = NULL;
4462         int                     rc = 0;
4463
4464         static struct option long_opts[] = {
4465         { .val = 'i',   .name = "idtype",       .has_arg = required_argument },
4466         { .val = 'm',   .name = "idmap",        .has_arg = required_argument },
4467         { .val = 'n',   .name = "name",         .has_arg = required_argument },
4468         { .name = NULL } };
4469
4470         while ((c = getopt_long(argc, argv, "n:m:i:",
4471                                 long_opts, NULL)) != -1) {
4472                 switch (c) {
4473                 case 'n':
4474                         nodemap_name = optarg;
4475                         break;
4476                 case 'm':
4477                         idmap = optarg;
4478                         break;
4479                 case 'i':
4480                         idtype = optarg;
4481                         break;
4482                 }
4483         }
4484
4485         if (!nodemap_name || !idmap || !idtype) {
4486                 fprintf(stderr,
4487                         "usage: %s --name <name> --idtype [uid | gid] --idmap <client id>:<filesystem id>\n",
4488                         argv[0]);
4489                 return -1;
4490         }
4491
4492         if (strcmp("uid", idtype) == 0) {
4493                 cmd = LCFG_NODEMAP_ADD_UIDMAP;
4494         } else if (strcmp("gid", idtype) == 0) {
4495                 cmd = LCFG_NODEMAP_ADD_GIDMAP;
4496         } else {
4497                 fprintf(stderr,
4498                         "usage: %s --name <name> --idtype [uid | gid] --idmap <client id>:<filesystem id>\n",
4499                         argv[0]);
4500                 return -1;
4501         }
4502
4503         rc = nodemap_cmd(cmd, NULL, 0, argv[0], nodemap_name, idmap, NULL);
4504         if (rc != 0) {
4505                 errno = -rc;
4506                 fprintf(stderr,
4507                         "cannot add %smap '%s' to nodemap '%s': rc = %d\n",
4508                         idtype, idmap, nodemap_name, rc);
4509         }
4510
4511         return rc;
4512 }
4513
4514 int jt_nodemap_del_idmap(int argc, char **argv)
4515 {
4516         int                     c;
4517         enum                    lcfg_command_type cmd = 0;
4518         char                    *nodemap_name = NULL;
4519         char                    *idmap = NULL;
4520         char                    *idtype = NULL;
4521         int                     rc = 0;
4522
4523         static struct option long_opts[] = {
4524         { .val = 'i',   .name = "idtype",       .has_arg = required_argument },
4525         { .val = 'm',   .name = "idmap",        .has_arg = required_argument },
4526         { .val = 'n',   .name = "name",         .has_arg = required_argument },
4527         { .name = NULL } };
4528
4529         while ((c = getopt_long(argc, argv, "n:m:i:",
4530                                 long_opts, NULL)) != -1) {
4531                 switch (c) {
4532                 case 'n':
4533                         nodemap_name = optarg;
4534                         break;
4535                 case 'm':
4536                         idmap = optarg;
4537                         break;
4538                 case 'i':
4539                         idtype = optarg;
4540                         break;
4541                 }
4542         }
4543
4544         if (!nodemap_name || !idmap || !idtype) {
4545                 fprintf(stderr,
4546                         "usage: %s --name <name> --idtype [uid | gid] --idmap <client id>:<filesystem id>\n",
4547                         argv[0]);
4548                 return -1;
4549         }
4550
4551         if (strcmp("uid", idtype) == 0)
4552                 cmd = LCFG_NODEMAP_DEL_UIDMAP;
4553         else
4554                 cmd = LCFG_NODEMAP_DEL_GIDMAP;
4555
4556         rc = nodemap_cmd(cmd, NULL, 0, argv[0], nodemap_name, idmap, NULL);
4557         if (rc != 0) {
4558                 errno = -rc;
4559                 fprintf(stderr,
4560                         "cannot delete %smap '%s' from nodemap '%s': rc = %d\n",
4561                         idtype, idmap, nodemap_name, rc);
4562         }
4563
4564         return rc;
4565 }
4566
4567 /*
4568  * this function tranforms a rule [start-end/step] into an array
4569  * of matching numbers
4570  * supported forms are:
4571  * [start]                : just this number
4572  * [start-end]            : all numbers from start to end
4573  * [start-end/step]       : numbers from start to end with increment of step
4574  * on return, format contains a printf format string which can be used
4575  * to generate all the strings
4576  */
4577 static int get_array_idx(char *rule, char *format, int **array)
4578 {
4579         char *start, *end, *ptr;
4580         unsigned int lo, hi, step;
4581         int array_sz = 0;
4582         int i, array_idx;
4583         int rc;
4584
4585         start = strchr(rule, '[');
4586         end = strchr(rule, ']');
4587         if ((!start) || (!end)) {
4588                 *array = malloc(sizeof(int));
4589                 if (!*array)
4590                         return 0;
4591                 strcpy(format, rule);
4592                 array_sz = 1;
4593                 return array_sz;
4594         }
4595         *start = '\0';
4596         *end = '\0';
4597         end++;
4598         start++;
4599         /* put in format the printf format (the rule without the range) */
4600         sprintf(format, "%s%%.4x%s", rule, end);
4601
4602         array_idx = 0;
4603         array_sz = 0;
4604         *array = NULL;
4605         /* loop on , separator */
4606         do {
4607                 /* extract the 3 fields */
4608                 rc = sscanf(start, "%x-%x/%u", &lo, &hi, &step);
4609                 switch (rc) {
4610                 case 0:
4611                         goto err;
4612                 case 1: {
4613                         void *tmp;
4614
4615                         array_sz++;
4616                         tmp = realloc(*array, array_sz * sizeof(int));
4617                         if (!tmp)
4618                                 goto err;
4619                         *array = tmp;
4620                         (*array)[array_idx] = lo;
4621                         array_idx++;
4622                         break;
4623                 }
4624                 case 2: {
4625                         step = 1;
4626                         /* do not break to share code with case 3: */
4627                 }
4628                 case 3: {
4629                         void *tmp;
4630
4631                         if ((hi < lo) || (step == 0))
4632                                 goto err;
4633                         array_sz += (hi - lo) / step + 1;
4634                         tmp = realloc(*array, array_sz * sizeof(int));
4635                         if (!tmp)
4636                                 goto err;
4637                         *array = tmp;
4638                         for (i = lo; i <= hi; i += step, array_idx++)
4639                                 (*array)[array_idx] = i;
4640                         break;
4641                 }
4642                 }
4643                 ptr = strchr(start, ',');
4644                 if (ptr)
4645                         start = ptr + 1;
4646
4647         } while (ptr);
4648         return array_sz;
4649 err:
4650         if (*array) {
4651                 free(*array);
4652                 *array = NULL;
4653         }
4654         return 0;
4655 }
4656
4657 struct llog_pool_name {
4658         char lpn_name[UUID_MAX];
4659         struct list_head lpn_list;
4660 };
4661
4662 struct llog_pool_list_data {
4663         char lpld_fsname[LUSTRE_MAXFSNAME + 1];
4664         char lpld_poolname[LOV_MAXPOOLNAME + 1];
4665         bool lpld_exists;
4666         struct list_head lpld_list_head;
4667 };
4668
4669 /**
4670  * Callback to list pool information in llog
4671  * - { index: 74, event: new_pool, device: tfs-clilov, fsname: tfs, pool: tmp }
4672  * - { index: 77, event: add_pool, device: tfs-clilov, fsname: tfs, pool: tmp,
4673  *     ost: tfs-OST0000_UUID }
4674  * - { index: 224, event: remove_pool, device: tfs-clilov, fsname: tfs,
4675  *     pool: tmp, ost: tfs-OST0003_UUID }
4676  * - { index: 227, event: del_pool, device: tfs-clilov, fsname: tfs, pool: tmp }
4677  *
4678  * \param record[in]    pointer to llog record
4679  * \param data[in]      pointer to struct llog_pool_list_data
4680  *
4681  * \retval              0 on success
4682  *                      <0 on error
4683  */
4684 static int llog_poollist_cb(const char *record, void *data)
4685 {
4686         struct llog_pool_list_data *lpld = data;
4687         char pool_filter[MAX_STRING_SIZE] = "";
4688         char *new_record, *del_record, *del_pool, *found;
4689         char type[10] = "";
4690         int filter_len, rc = 0;
4691
4692         filter_len = snprintf(pool_filter, sizeof(pool_filter), " fsname: %s,",
4693                               lpld->lpld_fsname);
4694         if (lpld->lpld_poolname[0] == '\0') {
4695                 new_record = get_event_filter(LCFG_POOL_NEW);
4696                 del_record = get_event_filter(LCFG_POOL_DEL);
4697                 strncpy(type, " pool: ", sizeof(type));
4698         } else {
4699                 filter_len += snprintf(pool_filter + filter_len,
4700                                        sizeof(pool_filter) - filter_len,
4701                                        " pool: %s", lpld->lpld_poolname);
4702                 new_record = get_event_filter(LCFG_POOL_ADD);
4703                 del_record = get_event_filter(LCFG_POOL_REM);
4704                 strncpy(type, " ost: ", sizeof(type));
4705         }
4706         del_pool = get_event_filter(LCFG_POOL_DEL);
4707
4708         if (!new_record || !del_record || !del_pool) {
4709                 rc = -ENOMEM;
4710                 goto out;
4711         }
4712
4713         found = strstr(record, pool_filter);
4714         if (found &&
4715             (found[filter_len] == ' ' || found[filter_len] == ',')) {
4716                 struct llog_pool_name *tmp = NULL;
4717                 struct list_head *head = &lpld->lpld_list_head;
4718                 char *name;
4719                 int name_len, type_len = strlen(type);
4720
4721                 lpld->lpld_exists = true;
4722                 if (strstr(record, new_record)) {
4723                         name = strstr(record, type);
4724                         /* 2 bytes for " }" */
4725                         name_len = strlen(name) - type_len - 2;
4726                         if (name_len <= 0 || name_len > sizeof(tmp->lpn_name))
4727                                 return -EINVAL;
4728                         tmp = malloc(sizeof(struct llog_pool_name));
4729                         if (!tmp) {
4730                                 rc = -ENOMEM;
4731                                 goto out;
4732                         }
4733                         memset(tmp, 0, sizeof(struct llog_pool_name));
4734                         strncpy(tmp->lpn_name, name + type_len, name_len);
4735                         list_add_tail(&tmp->lpn_list, &lpld->lpld_list_head);
4736                 } else if (strstr(record, del_record)) {
4737                         name = strstr(record, type);
4738                         name_len = strlen(name) - type_len - 2;
4739                         list_for_each_entry(tmp, head, lpn_list) {
4740                                 if (strncmp(tmp->lpn_name, name + type_len,
4741                                             name_len) == 0 &&
4742                                             tmp->lpn_name[name_len] == '\0') {
4743                                         list_del(&tmp->lpn_list);
4744                                         free(tmp);
4745                                         break;
4746                                 }
4747                         }
4748                 }
4749                 /* verify if the specified pool still exists */
4750                 if (lpld->lpld_poolname[0] && strstr(record, del_pool))
4751                         lpld->lpld_exists = false;
4752         }
4753 out:
4754         if (new_record)
4755                 free(new_record);
4756         if (del_record)
4757                 free(del_record);
4758         if (del_pool)
4759                 free(del_pool);
4760
4761         return rc;
4762 }
4763
4764 /**
4765  * List pool information by config log
4766  *
4767  * \param fsname[in]    pointer to filesystem name
4768  * \param poolname[in]  pointer to pool name
4769  *
4770  * \retval              0 on success
4771  *                      < 0 on error
4772  */
4773 int llog_poollist(char *fsname, char *poolname)
4774 {
4775         char logname[MAX_OBD_NAME] = {'\0'};
4776         struct llog_pool_list_data lpld;
4777         struct llog_pool_name *tmp;
4778         struct list_head *head;
4779         int rc = 0;
4780
4781         if (fsname && fsname[0] == '\0')
4782                 fsname = NULL;
4783         if (!fsname)
4784                 return -EINVAL;
4785
4786         memset(&lpld, 0, sizeof(lpld));
4787         INIT_LIST_HEAD(&lpld.lpld_list_head);
4788         lpld.lpld_exists = false;
4789         strncpy(lpld.lpld_fsname, fsname, sizeof(lpld.lpld_fsname) - 1);
4790         if (poolname && poolname[0])
4791                 strncpy(lpld.lpld_poolname, poolname,
4792                         sizeof(lpld.lpld_poolname) - 1);
4793         snprintf(logname, sizeof(logname), "%s-client", fsname);
4794         rc = jt_llog_print_iter(logname, 0, -1, llog_poollist_cb, &lpld, false);
4795
4796         if (poolname && poolname[0])
4797                 printf("Pool: %s.%s\n", fsname, poolname);
4798         else
4799                 printf("Pools from %s:\n", fsname);
4800
4801         head = &lpld.lpld_list_head;
4802         if (poolname && poolname[0] && !lpld.lpld_exists && list_empty(head))
4803                 return -ENOENT;
4804
4805         list_for_each_entry(tmp, head, lpn_list) {
4806                 if (poolname && poolname[0])
4807                         printf("%s\n", tmp->lpn_name);
4808                 else
4809                         printf("%s.%s\n", fsname, tmp->lpn_name);
4810                 list_del(&tmp->lpn_list);
4811                 free(tmp);
4812         }
4813
4814         return rc;
4815 }
4816
4817 static bool get_pools_path(char *fsname)
4818 {
4819         glob_t path;
4820         int rc;
4821
4822         rc = cfs_get_param_paths(&path, "lov/%s-*/pools", fsname);
4823         if (!rc)
4824                 cfs_free_param_data(&path);
4825
4826         return (rc == 0);
4827 }
4828
4829 static int extract_fsname_poolname(char **argv, char *fsname,
4830                                    char *poolname)
4831 {
4832         char *cmd = argv[0], *param = argv[1];
4833         char *ptr;
4834         int rc;
4835
4836         snprintf(fsname, PATH_MAX + 1, "%s", param);
4837         ptr = strchr(fsname, '.');
4838         if (!ptr) {
4839                 if (strcmp(cmd, "pool_list") == 0) {
4840                         poolname = NULL;
4841                         goto out;
4842                 }
4843                 fprintf(stderr, ". is missing in %s\n", fsname);
4844                 rc = -EINVAL;
4845                 goto err;
4846         }
4847
4848         if ((ptr - fsname) == 0) {
4849                 fprintf(stderr, "fsname is empty\n");
4850                 rc = -EINVAL;
4851                 goto err;
4852         }
4853
4854         *ptr = '\0';
4855         ++ptr;
4856
4857         if (strlen(ptr) == 0) {
4858                 fprintf(stderr, "poolname is empty\n");
4859                 rc = -EINVAL;
4860                 goto err;
4861         }
4862
4863         strncpy(poolname, ptr, LOV_MAXPOOLNAME);
4864         poolname[LOV_MAXPOOLNAME] = '\0';
4865
4866         if (strncmp(poolname, "none", LOV_MAXPOOLNAME) == 0) {
4867                 fprintf(stderr, "poolname cannot be 'none'\n");
4868                 return -EINVAL;
4869         }
4870 out:
4871         return 0;
4872
4873 err:
4874         fprintf(stderr, "argument %s must be <fsname>.<poolname>\n", param);
4875         return rc;
4876 }
4877
4878 int jt_pool_cmd(int argc, char **argv)
4879 {
4880         enum lcfg_command_type cmd;
4881         char fsname[PATH_MAX + 1];
4882         char poolname[LOV_MAXPOOLNAME + 1];
4883         char *ostnames_buf = NULL;
4884         int i, rc;
4885         int *array = NULL, array_sz;
4886         struct {
4887                 int     rc;
4888                 char   *ostname;
4889         } *cmds = NULL;
4890
4891         switch (argc) {
4892         case 0:
4893         case 1: return CMD_HELP;
4894         case 2: {
4895                 rc = extract_fsname_poolname(argv, fsname, poolname);
4896                 if (rc)
4897                         break;
4898
4899                 if (strcmp("pool_new", argv[0]) == 0) {
4900                         cmd = LCFG_POOL_NEW;
4901                 } else if (strcmp("pool_destroy", argv[0]) == 0) {
4902                         cmd = LCFG_POOL_DEL;
4903                 } else if (strcmp("pool_list", argv[0]) == 0) {
4904                         if (get_pools_path(fsname))
4905                                 return llapi_poollist(argv[1]);
4906                         if (get_mgs_device() > 0)
4907                                 return llog_poollist(fsname, poolname);
4908                         fprintf(stderr,
4909                                 "Cannot run pool_list command since there is no local MGS/MDT or client\n");
4910                         return CMD_HELP;
4911                 } else {
4912                         return CMD_HELP;
4913                 }
4914
4915                 rc = pool_cmd(cmd, argv[0], argv[1], fsname, poolname, NULL);
4916                 if (rc)
4917                         break;
4918
4919                 check_pool_cmd_result(cmd, fsname, poolname, NULL);
4920                 break;
4921         }
4922         default: {
4923                 char format[2 * MAX_OBD_NAME];
4924
4925                 if (strcmp("pool_remove", argv[0]) == 0)
4926                         cmd = LCFG_POOL_REM;
4927                 else if (strcmp("pool_add", argv[0]) == 0)
4928                         cmd = LCFG_POOL_ADD;
4929                 else
4930                         return CMD_HELP;
4931
4932                 rc = extract_fsname_poolname(argv, fsname, poolname);
4933                 if (rc)
4934                         break;
4935
4936                 for (i = 2; i < argc; i++) {
4937                         int j;
4938
4939                         array_sz = get_array_idx(argv[i], format, &array);
4940                         if (array_sz == 0)
4941                                 return CMD_HELP;
4942
4943                         cmds = malloc(array_sz * sizeof(cmds[0]));
4944                         if (cmds) {
4945                                 ostnames_buf = malloc(array_sz *
4946                                                       (MAX_OBD_NAME + 1));
4947                         } else {
4948                                 free(array);
4949                                 rc = -ENOMEM;
4950                                 goto out;
4951                         }
4952
4953                         for (j = 0; j < array_sz; j++) {
4954                                 char ostname[MAX_OBD_NAME + 1];
4955                                 int rc2;
4956
4957                                 snprintf(ostname, MAX_OBD_NAME, format,
4958                                          array[j]);
4959                                 ostname[MAX_OBD_NAME] = '\0';
4960
4961                                 rc2 = check_and_complete_ostname(fsname,
4962                                                                 ostname);
4963                                 if (rc2) {
4964                                         free(array);
4965                                         free(cmds);
4966                                         if (ostnames_buf)
4967                                                 free(ostnames_buf);
4968                                         rc = rc ? rc : rc2;
4969                                         goto out;
4970                                 }
4971                                 if (ostnames_buf) {
4972                                         cmds[j].ostname =
4973                                         &ostnames_buf[(MAX_OBD_NAME + 1) * j];
4974                                         strcpy(cmds[j].ostname, ostname);
4975                                 } else {
4976                                         cmds[j].ostname = NULL;
4977                                 }
4978                                 cmds[j].rc = pool_cmd(cmd, argv[0], argv[1],
4979                                                       fsname, poolname,
4980                                                       ostname);
4981                                 /* Return an err if any of the add/dels fail */
4982                                 if (!rc)
4983                                         rc = cmds[j].rc;
4984                         }
4985                         for (j = 0; j < array_sz; j++) {
4986                                 if (!cmds[j].rc) {
4987                                         char ostname[MAX_OBD_NAME + 1];
4988
4989                                         if (!cmds[j].ostname) {
4990                                                 snprintf(ostname, MAX_OBD_NAME,
4991                                                          format, array[j]);
4992                                                 ostname[MAX_OBD_NAME] = '\0';
4993                                                 check_and_complete_ostname(
4994                                                         fsname, ostname);
4995                                         } else {
4996                                                 strcpy(ostname,
4997                                                        cmds[j].ostname);
4998                                         }
4999                                         check_pool_cmd_result(cmd, fsname,
5000                                                               poolname,
5001                                                               ostname);
5002                                 }
5003                         }
5004                         if (array_sz > 0)
5005                                 free(array);
5006                         if (cmds)
5007                                 free(cmds);
5008                         if (ostnames_buf)
5009                                 free(ostnames_buf);
5010                 }
5011                 /* fall through */
5012         }
5013         } /* switch */
5014
5015 out:
5016         if (rc != 0) {
5017                 errno = -rc;
5018                 perror(argv[0]);
5019         }
5020
5021         return rc;
5022 }
5023
5024 #ifdef HAVE_SERVER_SUPPORT
5025 static const char *barrier_status2name(enum barrier_status status)
5026 {
5027         switch (status) {
5028         case BS_INIT:
5029                 return "init";
5030         case BS_FREEZING_P1:
5031                 return "freezing_p1";
5032         case BS_FREEZING_P2:
5033                 return "freezing_p2";
5034         case BS_FROZEN:
5035                 return "frozen";
5036         case BS_THAWING:
5037                 return "thawing";
5038         case BS_THAWED:
5039                 return "thawed";
5040         case BS_FAILED:
5041                 return "failed";
5042         case BS_EXPIRED:
5043                 return "expired";
5044         case BS_RESCAN:
5045                 return "rescan";
5046         default:
5047                 return "unknown";
5048         }
5049 }
5050
5051 int jt_barrier_freeze(int argc, char **argv)
5052 {
5053         struct obd_ioctl_data data;
5054         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
5055         struct barrier_ctl bc;
5056         int rc;
5057
5058         if (argc < 2 || argc > 3)
5059                 return CMD_HELP;
5060
5061         memset(&data, 0, sizeof(data));
5062         rc = data.ioc_dev = get_mgs_device();
5063         if (rc < 0)
5064                 return rc;
5065
5066         memset(&bc, 0, sizeof(bc));
5067         bc.bc_version = BARRIER_VERSION_V1;
5068         bc.bc_cmd = BC_FREEZE;
5069         if (argc == 3)
5070                 bc.bc_timeout = atoi(argv[2]);
5071         if (bc.bc_timeout == 0)
5072                 bc.bc_timeout = BARRIER_TIMEOUT_DEFAULT;
5073
5074         if (strlen(argv[1]) > 8) {
5075                 fprintf(stderr,
5076                         "%s: fsname name %s is too long. It should not exceed 8.\n",
5077                         argv[0], argv[1]);
5078                 return -EINVAL;
5079         }
5080
5081         strncpy(bc.bc_name, argv[1], sizeof(bc.bc_name));
5082         data.ioc_inlbuf1 = (char *)&bc;
5083         data.ioc_inllen1 = sizeof(bc);
5084         memset(buf, 0, sizeof(rawbuf));
5085         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
5086         if (rc) {
5087                 fprintf(stderr, "Fail to pack ioctl data: rc = %d.\n", rc);
5088                 return rc;
5089         }
5090
5091         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_BARRIER, buf);
5092         if (rc < 0)
5093                 fprintf(stderr, "Fail to freeze barrier for %s: %s\n",
5094                         argv[1], strerror(errno));
5095
5096         return rc;
5097 }
5098
5099 int jt_barrier_thaw(int argc, char **argv)
5100 {
5101         struct obd_ioctl_data data;
5102         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
5103         struct barrier_ctl bc;
5104         int rc;
5105
5106         if (argc != 2)
5107                 return CMD_HELP;
5108
5109         memset(&data, 0, sizeof(data));
5110         rc = data.ioc_dev = get_mgs_device();
5111         if (rc < 0)
5112                 return rc;
5113
5114         memset(&bc, 0, sizeof(bc));
5115         bc.bc_version = BARRIER_VERSION_V1;
5116         bc.bc_cmd = BC_THAW;
5117
5118         if (strlen(argv[1]) > 8) {
5119                 fprintf(stderr,
5120                         "fsname name %s is too long. It should not exceed 8.\n",
5121                         argv[1]);
5122                 return -EINVAL;
5123         }
5124
5125         strncpy(bc.bc_name, argv[1], sizeof(bc.bc_name));
5126         data.ioc_inlbuf1 = (char *)&bc;
5127         data.ioc_inllen1 = sizeof(bc);
5128         memset(buf, 0, sizeof(rawbuf));
5129         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
5130         if (rc) {
5131                 fprintf(stderr, "Fail to pack ioctl data: rc = %d.\n", rc);
5132                 return rc;
5133         }
5134
5135         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_BARRIER, buf);
5136         if (rc < 0)
5137                 fprintf(stderr, "Fail to thaw barrier for %s: %s\n",
5138                         argv[1], strerror(errno));
5139
5140         return rc;
5141 }
5142
5143 int __jt_barrier_stat(const char *fsname, struct barrier_ctl *bc)
5144 {
5145         struct obd_ioctl_data data;
5146         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
5147         int rc;
5148
5149         memset(&data, 0, sizeof(data));
5150         rc = data.ioc_dev = get_mgs_device();
5151         if (rc < 0)
5152                 return rc;
5153
5154         memset(bc, 0, sizeof(*bc));
5155         bc->bc_version = BARRIER_VERSION_V1;
5156         bc->bc_cmd = BC_STAT;
5157         strncpy(bc->bc_name, fsname, sizeof(bc->bc_name) - 1);
5158         data.ioc_inlbuf1 = (char *)bc;
5159         data.ioc_inllen1 = sizeof(*bc);
5160         memset(buf, 0, sizeof(rawbuf));
5161         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
5162         if (rc) {
5163                 fprintf(stderr, "Fail to pack ioctl data: rc = %d.\n", rc);
5164                 return rc;
5165         }
5166
5167         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_BARRIER, buf);
5168         if (rc < 0)
5169                 fprintf(stderr, "Fail to query barrier for %s: %s\n",
5170                         fsname, strerror(errno));
5171         else
5172                 llapi_ioctl_unpack(&data, buf, sizeof(rawbuf));
5173
5174         return rc;
5175 }
5176
5177 int jt_barrier_stat(int argc, char **argv)
5178 {
5179         struct barrier_ctl bc;
5180         static struct option long_opt_barrier_stat[] = {
5181                 {
5182                         .val            = 's',
5183                         .name           = "state",
5184                         .has_arg        = no_argument,
5185                 },
5186                 {       .val            = 't',
5187                         .name           = "timeout",
5188                         .has_arg        = no_argument,
5189                 },
5190                 {
5191                         NULL
5192                 }
5193         };
5194         const char *name;
5195         int index;
5196         int opt;
5197         int rc;
5198         bool state = false;
5199         bool timeout = false;
5200
5201         while ((opt = getopt_long(argc, argv, "st", long_opt_barrier_stat,
5202                                   &index)) != EOF) {
5203                 switch (opt) {
5204                 case 's':
5205                         state = true;
5206                         break;
5207                 case 't':
5208                         timeout = true;
5209                         break;
5210                 default:
5211                         return CMD_HELP;
5212                 }
5213         }
5214
5215         if (optind >= argc)
5216                 return CMD_HELP;
5217
5218         name = argv[optind];
5219         if (strlen(name) > 8) {
5220                 fprintf(stderr,
5221                         "fsname name %s is too long. It should not exceed 8.\n",
5222                         name);
5223                 return -EINVAL;
5224         }
5225
5226         rc = __jt_barrier_stat(name, &bc);
5227         if (!rc) {
5228                 if (state && !timeout)
5229                         printf("%s\n", barrier_status2name(bc.bc_status));
5230                 else if (timeout && !state)
5231                         printf("%d\n",
5232                                (bc.bc_status == BS_FREEZING_P1 ||
5233                                 bc.bc_status == BS_FREEZING_P2 ||
5234                                 bc.bc_status == BS_FROZEN) ?
5235                                bc.bc_timeout : 0);
5236                 else
5237                         printf("state: %s\ntimeout: %d seconds\n",
5238                                barrier_status2name(bc.bc_status),
5239                                (bc.bc_status == BS_FREEZING_P1 ||
5240                                 bc.bc_status == BS_FREEZING_P2 ||
5241                                 bc.bc_status == BS_FROZEN) ?
5242                                bc.bc_timeout : 0);
5243         }
5244
5245         return rc;
5246 }
5247
5248 int jt_barrier_rescan(int argc, char **argv)
5249 {
5250         struct obd_ioctl_data data;
5251         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf;
5252         struct barrier_ctl bc;
5253         int rc;
5254
5255         if (argc < 2 || argc > 3)
5256                 return CMD_HELP;
5257
5258         memset(&data, 0, sizeof(data));
5259         rc = data.ioc_dev = get_mgs_device();
5260         if (rc < 0)
5261                 return rc;
5262
5263         memset(&bc, 0, sizeof(bc));
5264         bc.bc_version = BARRIER_VERSION_V1;
5265         bc.bc_cmd = BC_RESCAN;
5266         if (argc == 3)
5267                 bc.bc_timeout = atoi(argv[2]);
5268         if (bc.bc_timeout == 0)
5269                 bc.bc_timeout = BARRIER_TIMEOUT_DEFAULT;
5270
5271         if (strlen(argv[1]) > 8) {
5272                 fprintf(stderr,
5273                         "fsname name %s is too long. It should not exceed 8.\n",
5274                         argv[1]);
5275                 return -EINVAL;
5276         }
5277
5278         strncpy(bc.bc_name, argv[1], sizeof(bc.bc_name));
5279         data.ioc_inlbuf1 = (char *)&bc;
5280         data.ioc_inllen1 = sizeof(bc);
5281         memset(buf, 0, sizeof(rawbuf));
5282         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
5283         if (rc) {
5284                 fprintf(stderr, "Fail to pack ioctl data: rc = %d.\n", rc);
5285                 return rc;
5286         }
5287
5288         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_BARRIER, buf);
5289         if (rc < 0) {
5290                 fprintf(stderr, "Fail to rescan barrier bitmap for %s: %s\n",
5291                         argv[1], strerror(errno));
5292         } else {
5293                 llapi_ioctl_unpack(&data, buf, sizeof(rawbuf));
5294                 printf("%u of %u MDT(s) in the filesystem %s are inactive\n",
5295                        bc.bc_absence, bc.bc_total, argv[1]);
5296         }
5297
5298         return rc;
5299 }
5300 #endif /* HAVE_SERVER_SUPPORT */
5301
5302 int jt_get_obj_version(int argc, char **argv)
5303 {
5304         struct lu_fid fid;
5305         struct obd_ioctl_data data;
5306         __u64 version, id = ULLONG_MAX, group = ULLONG_MAX;
5307         char rawbuf[MAX_IOC_BUFLEN], *buf = rawbuf, *fidstr;
5308         int rc, c;
5309
5310         while ((c = getopt(argc, argv, "i:g:")) != -1) {
5311                 switch (c) {
5312                 case 'i':
5313                         id = strtoull(optarg, NULL, 0);
5314                         break;
5315                 case 'g':
5316                         group = strtoull(optarg, NULL, 0);
5317                         break;
5318                 default:
5319                         return CMD_HELP;
5320                 }
5321         }
5322
5323         argc -= optind;
5324         fidstr = *(argv + optind);
5325
5326         if (!(id != ULLONG_MAX && group != ULLONG_MAX && argc == 0) &&
5327             !(id == ULLONG_MAX && group == ULLONG_MAX && argc == 1))
5328                 return CMD_HELP;
5329
5330         memset(&data, 0, sizeof(data));
5331         data.ioc_dev = cur_device;
5332         if (argc == 1) {
5333                 rc = llapi_fid_parse(fidstr, &fid, NULL);
5334                 if (rc) {
5335                         fprintf(stderr, "%s: error parsing FID '%s': %s\n",
5336                                 jt_cmdname(argv[0]), fidstr, strerror(-rc));
5337                         return rc;
5338                 }
5339
5340                 data.ioc_inlbuf1 = (char *)&fid;
5341                 data.ioc_inllen1 = sizeof(fid);
5342         } else {
5343                 data.ioc_inlbuf3 = (char *)&id;
5344                 data.ioc_inllen3 = sizeof(id);
5345                 data.ioc_inlbuf4 = (char *)&group;
5346                 data.ioc_inllen4 = sizeof(group);
5347         }
5348         data.ioc_inlbuf2 = (char *)&version;
5349         data.ioc_inllen2 = sizeof(version);
5350
5351         memset(buf, 0, sizeof(*buf));
5352         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
5353         if (rc) {
5354                 fprintf(stderr, "error: %s: packing ioctl arguments: %s\n",
5355                         jt_cmdname(argv[0]), strerror(-rc));
5356                 return rc;
5357         }
5358
5359         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_GET_OBJ_VERSION, buf);
5360         if (rc == -1) {
5361                 fprintf(stderr, "error: %s: ioctl: %s\n",
5362                         jt_cmdname(argv[0]), strerror(errno));
5363                 return -errno;
5364         }
5365
5366         llapi_ioctl_unpack(&data, buf, sizeof(rawbuf));
5367         printf("%#jx\n", (uintmax_t)version);
5368
5369         return 0;
5370 }
5371
5372 int jt_changelog_register(int argc, char **argv)
5373 {
5374         struct obd_ioctl_data    data = { 0 };
5375         char                     rawbuf[MAX_IOC_BUFLEN] = "";
5376         char                    *buf = rawbuf;
5377         char                    *device = lcfg_get_devname();
5378         bool                     print_name_only = false;
5379         int                      c;
5380         int                      rc;
5381
5382         if (argc > 2)
5383                 return CMD_HELP;
5384
5385         while ((c = getopt(argc, argv, "hn")) >= 0) {
5386                 switch (c) {
5387                 case 'n':
5388                         print_name_only = true;
5389                         break;
5390                 case 'h':
5391                 default:
5392                         return CMD_HELP;
5393                 }
5394         }
5395
5396         if (cur_device < 0 || !device)
5397                 return CMD_HELP;
5398
5399         data.ioc_dev = cur_device;
5400
5401         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
5402         if (rc < 0) {
5403                 fprintf(stderr, "error: %s: cannot pack ioctl: %s\n",
5404                         jt_cmdname(argv[0]), strerror(-rc));
5405                 return rc;
5406         }
5407
5408         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_CHANGELOG_REG, buf);
5409         if (rc < 0) {
5410                 rc = -errno;
5411                 fprintf(stderr, "error: %s: %s\n", jt_cmdname(argv[0]),
5412                         strerror(-rc));
5413                 return rc;
5414         }
5415
5416         llapi_ioctl_unpack(&data, buf, sizeof(rawbuf));
5417
5418         if (data.ioc_u32_1 == 0) {
5419                 fprintf(stderr, "received invalid userid!\n");
5420                 return -EPROTO;
5421         }
5422
5423         if (print_name_only)
5424                 printf("%s%u\n", CHANGELOG_USER_PREFIX, data.ioc_u32_1);
5425         else
5426                 printf("%s: Registered changelog userid '%s%u'\n",
5427                        device, CHANGELOG_USER_PREFIX, data.ioc_u32_1);
5428
5429         return 0;
5430 }
5431
5432 int jt_changelog_deregister(int argc, char **argv)
5433 {
5434         struct obd_ioctl_data    data = { 0 };
5435         char                     rawbuf[MAX_IOC_BUFLEN] = "";
5436         char                    *buf = rawbuf;
5437         char                    *device = lcfg_get_devname();
5438         int                      id;
5439         int                      rc;
5440
5441         if (argc != 2 || cur_device < 0 || !device)
5442                 return CMD_HELP;
5443
5444         rc = sscanf(argv[1], CHANGELOG_USER_PREFIX"%d", &id);
5445         if (rc != 1 || id <= 0) {
5446                 fprintf(stderr,
5447                         "error: %s: expected id of the form %s<num> got '%s'\n",
5448                         jt_cmdname(argv[0]), CHANGELOG_USER_PREFIX, argv[1]);
5449                 return CMD_HELP;
5450         }
5451
5452         data.ioc_dev = cur_device;
5453         data.ioc_u32_1 = id;
5454
5455         rc = llapi_ioctl_pack(&data, &buf, sizeof(rawbuf));
5456         if (rc < 0) {
5457                 fprintf(stderr, "error: %s: invalid ioctl\n",
5458                         jt_cmdname(argv[0]));
5459                 return rc;
5460         }
5461
5462         rc = l_ioctl(OBD_DEV_ID, OBD_IOC_CHANGELOG_DEREG, buf);
5463         if (rc < 0) {
5464                 fprintf(stderr, "error: %s: %s\n", jt_cmdname(argv[0]),
5465                         strerror(rc = errno));
5466                 return rc;
5467         }
5468
5469         llapi_ioctl_unpack(&data, buf, sizeof(rawbuf));
5470         printf("%s: Deregistered changelog user '%s%u'\n",
5471                device, CHANGELOG_USER_PREFIX, data.ioc_u32_1);
5472
5473         return 0;
5474 }
5475
5476 int jt_pcc_add(int argc, char **argv)
5477 {
5478         struct option long_opts[] = {
5479                 { .val = 'p', .name = "param", .has_arg = required_argument },
5480                 { .name = NULL } };
5481         const char *mntpath;
5482         const char *pccpath;
5483         char *param = NULL;
5484         char cmd[PATH_MAX];
5485         int rc;
5486
5487         optind = 1;
5488         while ((rc = getopt_long(argc, argv, "p:", long_opts, NULL)) != -1) {
5489                 switch (rc) {
5490                 case 'p':
5491                         param = optarg;
5492                         break;
5493                 default:
5494                         return CMD_HELP;
5495                 }
5496         }
5497
5498         if (!param) {
5499                 fprintf(stderr, "%s: must specify the config param for PCC\n",
5500                         jt_cmdname(argv[0]));
5501                 return CMD_HELP;
5502         }
5503
5504         if (optind + 2 != argc) {
5505                 fprintf(stderr,
5506                         "%s: must specify mount path and PCC path %d:%d\n",
5507                         jt_cmdname(argv[0]), optind, argc);
5508                 return CMD_HELP;
5509         }
5510
5511         mntpath = argv[optind++];
5512         pccpath = argv[optind];
5513
5514         snprintf(cmd, PATH_MAX, "add %s %s", pccpath, param);
5515         rc = llapi_pccdev_set(mntpath, cmd);
5516         if (rc < 0)
5517                 fprintf(stderr, "%s: failed to run '%s' on %s\n",
5518                         jt_cmdname(argv[0]), cmd, mntpath);
5519
5520         return rc;
5521 }
5522
5523 int jt_pcc_del(int argc, char **argv)
5524 {
5525         const char *mntpath;
5526         const char *pccpath;
5527         char cmd[PATH_MAX];
5528         int rc;
5529
5530         optind = 1;
5531         if (argc != 3) {
5532                 fprintf(stderr, "%s: require 3 arguments\n",
5533                         jt_cmdname(argv[0]));
5534                 return CMD_HELP;
5535         }
5536
5537         mntpath = argv[optind++];
5538         pccpath = argv[optind++];
5539
5540         snprintf(cmd, PATH_MAX, "del %s", pccpath);
5541         rc = llapi_pccdev_set(mntpath, cmd);
5542         if (rc < 0)
5543                 fprintf(stderr, "%s: failed to run '%s' on %s\n",
5544                         jt_cmdname(argv[0]), cmd, mntpath);
5545
5546         return rc;
5547 }
5548
5549 int jt_pcc_clear(int argc, char **argv)
5550 {
5551         const char *mntpath;
5552         int rc;
5553
5554         optind = 1;
5555         if (argc != 2) {
5556                 fprintf(stderr, "%s: require 2 arguments\n",
5557                         jt_cmdname(argv[0]));
5558                 return CMD_HELP;
5559         }
5560
5561         mntpath = argv[optind];
5562         rc = llapi_pccdev_set(mntpath, "clear");
5563         if (rc < 0)
5564                 fprintf(stderr, "%s: failed to run 'clear' on %s\n",
5565                         jt_cmdname(argv[0]), mntpath);
5566
5567         return rc;
5568 }
5569
5570 int jt_pcc_list(int argc, char **argv)
5571 {
5572         const char *mntpath;
5573         int rc;
5574
5575         optind = 1;
5576         if (argc != 2) {
5577                 fprintf(stderr, "%s: require 2 arguments\n",
5578                         jt_cmdname(argv[0]));
5579                 return CMD_HELP;
5580         }
5581
5582         mntpath = argv[optind];
5583         rc = llapi_pccdev_get(mntpath);
5584         if (rc < 0)
5585                 fprintf(stderr, "%s: failed to run 'pcc list' on %s\n",
5586                         jt_cmdname(argv[0]), mntpath);
5587
5588         return rc;
5589 }