lustre/utils/mount_utils_ldiskfs.c

   1 /*
   2  * GPL HEADER START
   3  *
   4  * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
   5  *
   6  * This program is free software; you can redistribute it and/or modify
   7  * it under the terms of the GNU General Public License version 2 only,
   8  * as published by the Free Software Foundation.
   9  *
  10  * This program is distributed in the hope that it will be useful, but
  11  * WITHOUT ANY WARRANTY; without even the implied warranty of
  12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13  * General Public License version 2 for more details (a copy is included
  14  * in the LICENSE file that accompanied this code).
  15  *
  16  * You should have received a copy of the GNU General Public License
  17  * version 2 along with this program; If not, see
  18  * http://www.gnu.org/licenses/gpl-2.0.html
  19  *
  20  * GPL HEADER END
  21  */
  22 /*
  23  * Copyright (c) 2007, 2010, Oracle and/or its affiliates. All rights reserved.
  24  * Use is subject to license terms.
  25  *
  26  * Copyright (c) 2012, 2016, Intel Corporation.
  27  */
  28 /*
  29  * This file is part of Lustre, http://www.lustre.org/
  30  * Lustre is a trademark of Sun Microsystems, Inc.
  31  *
  32  * lustre/utils/mount_utils_ldiskfs.c
  33  *
  34  * Author: Nathan Rutman <nathan@clusterfs.com>
  35 */
  36
  37 /* This source file is compiled into both mkfs.lustre and tunefs.lustre */
  38
  39 #if HAVE_CONFIG_H
  40 #  include "config.h"
  41 #endif /* HAVE_CONFIG_H */
  42
  43 #ifndef _GNU_SOURCE
  44 #define _GNU_SOURCE
  45 #endif
  46 #include <stdarg.h>
  47 #include <stdio.h>
  48 #include <stdlib.h>
  49 #include <string.h>
  50 #include <inttypes.h>
  51 #include <unistd.h>
  52 #include <fcntl.h>
  53 #include <mntent.h>
  54 #include <glob.h>
  55
  56 #include <sys/types.h>
  57 #include <sys/stat.h>
  58 #include <sys/mount.h>
  59 #include <sys/utsname.h>
  60
  61 #include <string.h>
  62 #include <getopt.h>
  63 #include <limits.h>
  64 #include <ctype.h>
  65
  66 #ifndef BLKGETSIZE64
  67 #include <linux/fs.h> /* for BLKGETSIZE64 */
  68 #endif
  69 #include <linux/version.h>
  70 #include <lustre_disk.h>
  71 #include <lustre_param.h>
  72 #include <lnet/lnetctl.h>
  73 #include <lustre_ver.h>
  74
  75 #ifdef HAVE_SELINUX
  76 #include <selinux/selinux.h>
  77 #endif
  78
  79 #include "mount_utils.h"
  80
  81 #define MAX_HW_SECTORS_KB_PATH  "queue/max_hw_sectors_kb"
  82 #define MAX_SECTORS_KB_PATH     "queue/max_sectors_kb"
  83 #define SCHEDULER_PATH          "queue/scheduler"
  84 #define STRIPE_CACHE_SIZE       "md/stripe_cache_size"
  85
  86 #define DEFAULT_SCHEDULER       "deadline"
  87
  88 extern char *progname;
  89
  90 #define L_BLOCK_SIZE 4096
  91 /* keep it less than LL_FID_NAMELEN */
  92 #define DUMMY_FILE_NAME_LEN             25
  93 #define EXT3_DIRENT_SIZE                DUMMY_FILE_NAME_LEN
  94
  95 static void append_unique(char *buf, char *prefix, char *key, char *val,
  96                           size_t maxbuflen);
  97
  98 /*
  99  * Concatenate context of the temporary mount point if selinux is enabled
 100  */
 101 #ifdef HAVE_SELINUX
 102 static void append_context_for_mount(char *mntpt, struct mkfs_opts *mop)
 103 {
 104         security_context_t fcontext;
 105
 106         if (getfilecon(mntpt, &fcontext) < 0) {
 107                 /* Continuing with default behaviour */
 108                 fprintf(stderr, "%s: Get file context failed : %s\n",
 109                         progname, strerror(errno));
 110                 return;
 111         }
 112
 113         if (fcontext != NULL) {
 114                 append_unique(mop->mo_ldd.ldd_mount_opts,
 115                               ",", "context", fcontext,
 116                               sizeof(mop->mo_ldd.ldd_mount_opts));
 117                 freecon(fcontext);
 118         }
 119 }
 120 #endif
 121
 122 /* return canonicalized absolute pathname, even if the target file does not
 123  * exist, unlike realpath */
 124 static char *absolute_path(char *devname)
 125 {
 126         char  buf[PATH_MAX + 1] = "";
 127         char *path;
 128         char *ptr;
 129         int len;
 130
 131         path = malloc(sizeof(buf));
 132         if (path == NULL)
 133                 return NULL;
 134
 135         if (devname[0] != '/') {
 136                 if (getcwd(buf, sizeof(buf) - 1) == NULL) {
 137                         free(path);
 138                         return NULL;
 139                 }
 140                 len = snprintf(path, sizeof(buf), "%s/%s", buf, devname);
 141                 if (len >= sizeof(buf)) {
 142                         free(path);
 143                         return NULL;
 144                 }
 145         } else {
 146                 len = snprintf(path, sizeof(buf), "%s", devname);
 147                 if (len >= sizeof(buf)) {
 148                         free(path);
 149                         return NULL;
 150                 }
 151         }
 152
 153         /* truncate filename before calling realpath */
 154         ptr = strrchr(path, '/');
 155         if (ptr == NULL) {
 156                 free(path);
 157                 return NULL;
 158         }
 159         *ptr = '\0';
 160         if (buf != realpath(path, buf)) {
 161                 free(path);
 162                 return NULL;
 163         }
 164         /* add the filename back */
 165         len = snprintf(path, PATH_MAX, "%s/%s", buf, ptr+1);
 166         if (len >= PATH_MAX) {
 167                 free(path);
 168                 return NULL;
 169         }
 170         return path;
 171 }
 172
 173 /* Determine if a device is a block device (as opposed to a file) */
 174 static int is_block(char *devname)
 175 {
 176         struct stat st;
 177         int     ret = 0;
 178         char    *devpath;
 179
 180         devpath = absolute_path(devname);
 181         if (devpath == NULL) {
 182                 fprintf(stderr, "%s: failed to resolve path to %s\n",
 183                         progname, devname);
 184                 return -1;
 185         }
 186
 187         ret = access(devname, F_OK);
 188         if (ret != 0) {
 189                 if (strncmp(devpath, "/dev/", 5) == 0) {
 190                         /* nobody sane wants to create a loopback file under
 191                          * /dev. Let's just report the device doesn't exist */
 192                         fprintf(stderr, "%s: %s apparently does not exist\n",
 193                                 progname, devpath);
 194                         ret = -1;
 195                         goto out;
 196                 }
 197                 ret = 0;
 198                 goto out;
 199         }
 200         ret = stat(devpath, &st);
 201         if (ret != 0) {
 202                 fprintf(stderr, "%s: cannot stat %s\n", progname, devpath);
 203                 goto out;
 204         }
 205         ret = S_ISBLK(st.st_mode);
 206 out:
 207         free(devpath);
 208         return ret;
 209 }
 210
 211 static int is_feature_enabled(const char *feature, const char *devpath)
 212 {
 213         char cmd[PATH_MAX];
 214         FILE *fp;
 215         char enabled_features[4096] = "";
 216         int ret = 1;
 217
 218         snprintf(cmd, sizeof(cmd), "%s -R features %s 2>&1",
 219                  DEBUGFS, devpath);
 220
 221         /* Using popen() instead of run_command() since debugfs does
 222          * not return proper error code if command is not supported */
 223         fp = popen(cmd, "r");
 224         if (!fp) {
 225                 fprintf(stderr, "%s: %s\n", progname, strerror(errno));
 226                 return 0;
 227         }
 228
 229         ret = fread(enabled_features, 1, sizeof(enabled_features) - 1, fp);
 230         enabled_features[ret] = '\0';
 231         pclose(fp);
 232
 233         if (strstr(enabled_features, feature))
 234                 return 1;
 235         return 0;
 236 }
 237
 238 /* Write the server config files */
 239 int ldiskfs_write_ldd(struct mkfs_opts *mop)
 240 {
 241         char mntpt[] = "/tmp/mntXXXXXX";
 242         char filepnm[128];
 243         char *dev;
 244         FILE *filep;
 245         int ret = 0;
 246         size_t num;
 247
 248         /* Mount this device temporarily in order to write these files */
 249         if (!mkdtemp(mntpt)) {
 250                 fprintf(stderr, "%s: Can't create temp mount point %s: %s\n",
 251                         progname, mntpt, strerror(errno));
 252                 return errno;
 253         }
 254
 255         /*
 256          * Append file context to mount options if SE Linux is enabled
 257          */
 258         #ifdef HAVE_SELINUX
 259         if (is_selinux_enabled() > 0)
 260                 append_context_for_mount(mntpt, mop);
 261         #endif
 262
 263         dev = mop->mo_device;
 264         if (mop->mo_flags & MO_IS_LOOP)
 265                 dev = mop->mo_loopdev;
 266
 267         ret = mount(dev, mntpt, MT_STR(&mop->mo_ldd), 0,
 268                 (mop->mo_mountopts == NULL) ?
 269                 "errors=remount-ro" : mop->mo_mountopts);
 270         if (ret) {
 271                 fprintf(stderr, "%s: Unable to mount %s: %s\n",
 272                         progname, dev, strerror(errno));
 273                 ret = errno;
 274                 if (errno == ENODEV) {
 275                         fprintf(stderr, "Is the %s module available?\n",
 276                                 MT_STR(&mop->mo_ldd));
 277                 }
 278                 goto out_rmdir;
 279         }
 280
 281         /* Set up initial directories */
 282         sprintf(filepnm, "%s/%s", mntpt, MOUNT_CONFIGS_DIR);
 283         ret = mkdir(filepnm, 0777);
 284         if ((ret != 0) && (errno != EEXIST)) {
 285                 fprintf(stderr, "%s: Can't make configs dir %s (%s)\n",
 286                         progname, filepnm, strerror(errno));
 287                 goto out_umnt;
 288         } else if (errno == EEXIST) {
 289                 ret = 0;
 290         }
 291
 292         /* Save the persistent mount data into a file. Lustre must pre-read
 293            this file to get the real mount options. */
 294         vprint("Writing %s\n", MOUNT_DATA_FILE);
 295         sprintf(filepnm, "%s/%s", mntpt, MOUNT_DATA_FILE);
 296         filep = fopen(filepnm, "w");
 297         if (!filep) {
 298                 fprintf(stderr, "%s: Unable to create %s file: %s\n",
 299                         progname, filepnm, strerror(errno));
 300                 goto out_umnt;
 301         }
 302         num = fwrite(&mop->mo_ldd, sizeof(mop->mo_ldd), 1, filep);
 303         if (num < 1 && ferror(filep)) {
 304                 fprintf(stderr, "%s: Unable to write to file (%s): %s\n",
 305                         progname, filepnm, strerror(errno));
 306                 fclose(filep);
 307                 goto out_umnt;
 308         }
 309         fclose(filep);
 310
 311 out_umnt:
 312         umount(mntpt);
 313 out_rmdir:
 314         rmdir(mntpt);
 315         return ret;
 316 }
 317
 318 static int readcmd(char *cmd, char *buf, int len)
 319 {
 320         FILE *fp;
 321         int red;
 322
 323         fp = popen(cmd, "r");
 324         if (!fp)
 325                 return errno;
 326
 327         red = fread(buf, 1, len, fp);
 328         pclose(fp);
 329
 330         /* strip trailing newline */
 331         if (buf[red - 1] == '\n')
 332                 buf[red - 1] = '\0';
 333
 334         return (red == 0) ? -ENOENT : 0;
 335 }
 336
 337 int ldiskfs_read_ldd(char *dev, struct lustre_disk_data *mo_ldd)
 338 {
 339         char tmpdir[] = "/tmp/dirXXXXXX";
 340         char cmd[PATH_MAX];
 341         char filepnm[128];
 342         FILE *filep;
 343         int ret = 0;
 344         int cmdsz = sizeof(cmd);
 345
 346         /* Make a temporary directory to hold Lustre data files. */
 347         if (!mkdtemp(tmpdir)) {
 348                 fprintf(stderr, "%s: Can't create temporary directory %s: %s\n",
 349                         progname, tmpdir, strerror(errno));
 350                 return errno;
 351         }
 352
 353         /* TODO: it's worth observing the get_mountdata() function that is
 354            in mount_utils.c for getting the mountdata out of the
 355            filesystem */
 356
 357         /* Construct debugfs command line. */
 358         snprintf(cmd, cmdsz, "%s -c -R 'dump /%s %s/mountdata' '%s'",
 359                  DEBUGFS, MOUNT_DATA_FILE, tmpdir, dev);
 360
 361         ret = run_command(cmd, cmdsz);
 362         if (ret)
 363                 verrprint("%s: Unable to dump %s dir (%d)\n",
 364                           progname, MOUNT_CONFIGS_DIR, ret);
 365
 366         sprintf(filepnm, "%s/mountdata", tmpdir);
 367         filep = fopen(filepnm, "r");
 368         if (filep) {
 369                 size_t num_read;
 370                 vprint("Reading %s\n", MOUNT_DATA_FILE);
 371                 num_read = fread(mo_ldd, sizeof(*mo_ldd), 1, filep);
 372                 if (num_read < 1 && ferror(filep)) {
 373                         fprintf(stderr, "%s: Unable to read from file %s: %s\n",
 374                                 progname, filepnm, strerror(errno));
 375                 }
 376                 fclose(filep);
 377         }
 378
 379         snprintf(cmd, cmdsz, "rm -rf %s", tmpdir);
 380         run_command(cmd, cmdsz);
 381         if (ret)
 382                 verrprint("Failed to read old data (%d)\n", ret);
 383
 384         /* As long as we at least have the label, we're good to go */
 385         snprintf(cmd, sizeof(cmd), E2LABEL" %s", dev);
 386         ret = readcmd(cmd, mo_ldd->ldd_svname, sizeof(mo_ldd->ldd_svname) - 1);
 387
 388         return ret;
 389 }
 390
 391
 392 /* Display the need for the latest e2fsprogs to be installed. make_backfs
 393  * indicates if the caller is make_lustre_backfs() or not. */
 394 static void disp_old_e2fsprogs_msg(const char *feature, int make_backfs)
 395 {
 396         static int msg_displayed;
 397
 398         if (msg_displayed) {
 399                 fprintf(stderr, "WARNING: %s does not support %s "
 400                         "feature.\n\n", E2FSPROGS, feature);
 401                 return;
 402         }
 403
 404         msg_displayed++;
 405
 406         fprintf(stderr, "WARNING: The %s package currently installed on "
 407                 "your system does not support \"%s\" feature.\n",
 408                 E2FSPROGS, feature);
 409 #if !(HAVE_LDISKFSPROGS)
 410         fprintf(stderr, "Please install the latest version of e2fsprogs from\n"
 411                 "https://downloads.hpdd.intel.com/public/e2fsprogs/latest/\n"
 412                 "to enable this feature.\n");
 413 #endif
 414         if (make_backfs)
 415                 fprintf(stderr, "Feature will not be enabled until %s"
 416                         "is updated and '%s -O %s %%{device}' "
 417                         "is run.\n\n", E2FSPROGS, TUNE2FS, feature);
 418 }
 419
 420 /* Check whether the file exists in the device */
 421 static int file_in_dev(char *file_name, char *dev_name)
 422 {
 423         FILE *fp;
 424         char debugfs_cmd[256];
 425         unsigned int inode_num;
 426         int i;
 427
 428         /* Construct debugfs command line. */
 429         snprintf(debugfs_cmd, sizeof(debugfs_cmd),
 430                  "%s -c -R 'stat %s' '%s' 2>&1 | egrep '(Inode|unsupported)'",
 431                  DEBUGFS, file_name, dev_name);
 432
 433         fp = popen(debugfs_cmd, "r");
 434         if (!fp) {
 435                 fprintf(stderr, "%s: %s\n", progname, strerror(errno));
 436                 return 0;
 437         }
 438
 439         if (fscanf(fp, "Inode: %u", &inode_num) == 1) { /* exist */
 440                 pclose(fp);
 441                 return 1;
 442         }
 443         i = fread(debugfs_cmd, 1, sizeof(debugfs_cmd) - 1, fp);
 444         if (i) {
 445                 debugfs_cmd[i] = 0;
 446                 fprintf(stderr, "%s", debugfs_cmd);
 447                 if (strstr(debugfs_cmd, "unsupported feature")) {
 448                         disp_old_e2fsprogs_msg("an unknown", 0);
 449                 }
 450                 pclose(fp);
 451                 return -1;
 452         }
 453         pclose(fp);
 454         return 0;
 455 }
 456
 457 /* Check whether the device has already been used with lustre */
 458 int ldiskfs_is_lustre(char *dev, unsigned *mount_type)
 459 {
 460         int ret;
 461
 462         ret = file_in_dev(MOUNT_DATA_FILE, dev);
 463         if (ret) {
 464                 /* in the -1 case, 'extents' means IS a lustre target */
 465                 *mount_type = LDD_MT_LDISKFS;
 466                 return 1;
 467         }
 468
 469         ret = file_in_dev(LAST_RCVD, dev);
 470         if (ret) {
 471                 *mount_type = LDD_MT_LDISKFS;
 472                 return 1;
 473         }
 474
 475         return 0;
 476 }
 477
 478 /* Check if a certain feature is supported by e2fsprogs.
 479  * Firstly we try to use "debugfs supported_features" command to check if
 480  * the feature is supported. If this fails we try to set this feature with
 481  * mke2fs to check for its support. */
 482 static int is_e2fsprogs_feature_supp(const char *feature)
 483 {
 484         static char supp_features[4096] = "";
 485         FILE *fp;
 486         char cmd[PATH_MAX];
 487         char imgname[] = "/tmp/test-img-XXXXXX";
 488         int fd = -1;
 489         int ret = 1;
 490
 491         if (supp_features[0] == '\0') {
 492                 snprintf(cmd, sizeof(cmd), "%s -c -R supported_features 2>&1",
 493                          DEBUGFS);
 494
 495                 /* Using popen() instead of run_command() since debugfs does
 496                  * not return proper error code if command is not supported */
 497                 fp = popen(cmd, "r");
 498                 if (!fp) {
 499                         fprintf(stderr, "%s: %s\n", progname, strerror(errno));
 500                         return 0;
 501                 }
 502                 ret = fread(supp_features, 1, sizeof(supp_features) - 1, fp);
 503                 supp_features[ret] = '\0';
 504                 pclose(fp);
 505         }
 506         if (ret > 0 && strstr(supp_features,
 507                               strncmp(feature, "-O ", 3) ? feature : feature+3))
 508                 return 0;
 509
 510         if ((fd = mkstemp(imgname)) < 0)
 511                 return -1;
 512         else
 513                 close(fd);
 514
 515         snprintf(cmd, sizeof(cmd), "%s -F %s %s 100 >/dev/null 2>&1",
 516                  MKE2FS, feature, imgname);
 517         /* run_command() displays the output of mke2fs when it fails for
 518          * some feature, so use system() directly */
 519         ret = system(cmd);
 520         unlink(imgname);
 521
 522         return ret;
 523 }
 524
 525
 526 /**
 527  * append_unique: append @key or @key=@val pair to @buf only if @key does not
 528  *                exists
 529  *      @buf: buffer to hold @key or @key=@val
 530  *      @prefix: prefix string before @key
 531  *      @key: key string
 532  *      @val: value string if it's a @key=@val pair
 533  */
 534 static void append_unique(char *buf, char *prefix, char *key, char *val,
 535                           size_t maxbuflen)
 536 {
 537         char *anchor, *end;
 538         int  len;
 539
 540         if (key == NULL)
 541                 return;
 542
 543         anchor = end = strstr(buf, key);
 544         /* try to find exact match string in @buf */
 545         while (end && *end != '\0' && *end != ',' && *end != ' ' && *end != '=')
 546                 ++end;
 547         len = end - anchor;
 548         if (anchor == NULL || strlen(key) != len ||
 549                         strncmp(anchor, key, len) != 0) {
 550                 if (prefix != NULL)
 551                         strscat(buf, prefix, maxbuflen);
 552
 553                 strscat(buf, key, maxbuflen);
 554                 if (val != NULL) {
 555                         strscat(buf, "=\"", maxbuflen);
 556                         strscat(buf, val, maxbuflen);
 557                         strscat(buf, "\"", maxbuflen);
 558                 }
 559         }
 560 }
 561
 562 static int enable_default_ext4_features(struct mkfs_opts *mop, char *anchor,
 563                                         size_t maxbuflen, int user_spec)
 564 {
 565         if (IS_OST(&mop->mo_ldd)) {
 566                 append_unique(anchor, user_spec ? "," : " -O ",
 567                               "extents", NULL, maxbuflen);
 568                 append_unique(anchor, ",", "uninit_bg", NULL, maxbuflen);
 569         } else if (IS_MDT(&mop->mo_ldd)) {
 570                 append_unique(anchor, user_spec ? "," : " -O ",
 571                               "dirdata", NULL, maxbuflen);
 572                 append_unique(anchor, ",", "uninit_bg", NULL, maxbuflen);
 573                 append_unique(anchor, ",", "^extents", NULL, maxbuflen);
 574         } else {
 575                 append_unique(anchor, user_spec ? "," : " -O ",
 576                               "uninit_bg", NULL, maxbuflen);
 577         }
 578
 579         /* Multiple mount protection enabled only if failover node specified */
 580         if (mop->mo_flags & MO_FAILOVER) {
 581                 if (is_e2fsprogs_feature_supp("-O mmp") == 0)
 582                         append_unique(anchor, ",", "mmp", NULL, maxbuflen);
 583                 else
 584                         disp_old_e2fsprogs_msg("mmp", 1);
 585         }
 586
 587         /* Allow more than 65000 subdirectories */
 588         if (is_e2fsprogs_feature_supp("-O dir_nlink") == 0)
 589                 append_unique(anchor, ",", "dir_nlink", NULL, maxbuflen);
 590
 591         /* The following options are only valid for ext4-based ldiskfs.
 592          * If --backfstype=ext3 is specified, do not enable them. */
 593         if (mop->mo_ldd.ldd_mount_type == LDD_MT_EXT3)
 594                 return 0;
 595
 596         /* Enable quota by default */
 597         if (is_e2fsprogs_feature_supp("-O quota") == 0) {
 598                 append_unique(anchor, ",", "quota", NULL, maxbuflen);
 599         } else {
 600                 fatal();
 601                 fprintf(stderr, "\"-O quota\" must be supported by "
 602                         "e2fsprogs, please upgrade your e2fsprogs.\n");
 603                 return EINVAL;
 604         }
 605
 606         /* Allow files larger than 2TB.  Also needs LU-16, but not harmful. */
 607         if (is_e2fsprogs_feature_supp("-O huge_file") == 0)
 608                 append_unique(anchor, ",", "huge_file", NULL, maxbuflen);
 609
 610         /* Enable large block addresses if the LUN is over 2^32 blocks. */
 611         if (mop->mo_device_kb / (L_BLOCK_SIZE >> 10) >= 0x100002000ULL &&
 612             is_e2fsprogs_feature_supp("-O 64bit") == 0)
 613                 append_unique(anchor, ",", "64bit", NULL, maxbuflen);
 614
 615         /* Cluster inode/block bitmaps and inode table for more efficient IO.
 616          * Align the flex groups on a 1MB boundary for better performance. */
 617         /* This -O feature needs to go last, since it adds the "-G" option. */
 618         if (is_e2fsprogs_feature_supp("-O flex_bg") == 0) {
 619                 char tmp_buf[64];
 620
 621                 append_unique(anchor, ",", "flex_bg", NULL, maxbuflen);
 622
 623                 if (IS_OST(&mop->mo_ldd) &&
 624                     strstr(mop->mo_mkfsopts, "-G") == NULL) {
 625                         snprintf(tmp_buf, sizeof(tmp_buf), " -G %u",
 626                                  (1 << 20) / L_BLOCK_SIZE);
 627                         strscat(anchor, tmp_buf, maxbuflen);
 628                 }
 629         }
 630         /* Don't add any more "-O" options here, see last comment above */
 631         return 0;
 632 }
 633
 634 /**
 635  * moveopts_to_end: find the option string, move remaining strings to
 636  *                  where option string starts, and append the option
 637  *                  string at the end
 638  *      @start: where the option string starts before the move
 639  *      RETURN: where the option string starts after the move
 640  */
 641 static char *moveopts_to_end(char *start)
 642 {
 643         size_t len;
 644         char save[512];
 645         char *end, *idx;
 646
 647         /* skip whitespace before options */
 648         end = start + 2;
 649         while (*end == ' ')
 650                 ++end;
 651
 652         /* find end of option characters */
 653         while (*end != ' ' && *end != '\0')
 654                 ++end;
 655
 656         len = end - start;
 657         if (len >= sizeof(save))
 658                 len = sizeof(save) - 1;
 659
 660         /* save options */
 661         strncpy(save, start, len);
 662         save[len] = '\0';
 663
 664         /* move remaining options up front */
 665         if (*end)
 666                 memmove(start, end, strlen(end));
 667         *(start + strlen(end)) = '\0';
 668
 669         /* append the specified options */
 670         if (*(start + strlen(start) - 1) != ' ')
 671                 strcat(start, " ");
 672         idx = start + strlen(start);
 673         strcat(start, save);
 674
 675         return idx;
 676 }
 677
 678 /* Build fs according to type */
 679 int ldiskfs_make_lustre(struct mkfs_opts *mop)
 680 {
 681         __u64 device_kb = mop->mo_device_kb, block_count = 0;
 682         char mkfs_cmd[PATH_MAX];
 683         char buf[64];
 684         char *start;
 685         char *dev;
 686         int ret = 0, ext_opts = 0;
 687         size_t maxbuflen;
 688
 689         if (!(mop->mo_flags & MO_IS_LOOP)) {
 690                 mop->mo_device_kb = get_device_size(mop->mo_device);
 691
 692                 if (mop->mo_device_kb == 0)
 693                         return ENODEV;
 694
 695                 /* Compare to real size */
 696                 if (device_kb == 0 || device_kb > mop->mo_device_kb)
 697                         device_kb = mop->mo_device_kb;
 698                 else
 699                         mop->mo_device_kb = device_kb;
 700         }
 701
 702         if (mop->mo_device_kb != 0) {
 703                 if (mop->mo_device_kb < 32384) {
 704                         fprintf(stderr, "%s: size of filesystem must be larger "
 705                                 "than 32MB, but is set to %lldKB\n",
 706                                 progname, (long long)mop->mo_device_kb);
 707                         return EINVAL;
 708                 }
 709                 block_count = mop->mo_device_kb / (L_BLOCK_SIZE >> 10);
 710                 /* If the LUN size is just over 2^32 blocks, limit the
 711                  * filesystem size to 2^32-1 blocks to avoid problems with
 712                  * ldiskfs/mkfs not handling this size.  Bug 22906 */
 713                 if (block_count > 0xffffffffULL && block_count < 0x100002000ULL)
 714                         block_count = 0xffffffffULL;
 715         }
 716
 717         if ((mop->mo_ldd.ldd_mount_type == LDD_MT_EXT3) ||
 718             (mop->mo_ldd.ldd_mount_type == LDD_MT_LDISKFS) ||
 719             (mop->mo_ldd.ldd_mount_type == LDD_MT_LDISKFS2)) {
 720                 long inode_size = 0;
 721
 722                 /* Journal size in MB */
 723                 if (strstr(mop->mo_mkfsopts, "-J") == NULL &&
 724                     device_kb > 1024 * 1024) {
 725                         /* Choose our own default journal size */
 726                         long journal_mb = 0, max_mb;
 727
 728                         /* cap journal size at 4GB for MDT,
 729                          * leave it at 400MB for OSTs. */
 730                         if (IS_MDT(&mop->mo_ldd))
 731                                 max_mb = 4096;
 732                         else if (IS_OST(&mop->mo_ldd))
 733                                 max_mb = 400;
 734                         else /* Use mke2fs default size for MGS */
 735                                 max_mb = 0;
 736
 737                         /* Use at most 4% of device for journal */
 738                         journal_mb = device_kb * 4 / (1024 * 100);
 739                         if (journal_mb > max_mb)
 740                                 journal_mb = max_mb;
 741
 742                         if (journal_mb) {
 743                                 sprintf(buf, " -J size=%ld", journal_mb);
 744                                 strscat(mop->mo_mkfsopts, buf,
 745                                         sizeof(mop->mo_mkfsopts));
 746                         }
 747                 }
 748
 749                 /* Inode size includes:
 750                  *   ldiskfs inode size: 156
 751                  *   extended attributes size, including:
 752                  *      ext4_xattr_header: 32
 753                  *      LOV EA size: 32(lov_mds_md) +
 754                  *                   stripes * 24(lov_ost_data) +
 755                  *                   16(xattr_entry) + 3(lov)
 756                  *      LMA EA size: 24(lustre_mdt_attrs) +
 757                  *                   16(xattr_entry) + 3(lma)
 758                  *      link EA size: 24(link_ea_header) + 18(link_ea_entry) +
 759                  *                    (filename) + 16(xattr_entry) + 4(link)
 760                  *   and some margin for 4-byte alignment, ACLs and other EAs.
 761                  *
 762                  * If we say the average filename length is about 32 bytes,
 763                  * the calculation looks like:
 764                  * 156 + 32 + (32+24*N+19) + (24+19) + (24+18+~32+20) + other <=
 765                  * 512*2^m, {m=0,1,2,3}
 766                  */
 767                 if (strstr(mop->mo_mkfsopts, "-I") == NULL) {
 768                         if (IS_MDT(&mop->mo_ldd)) {
 769                                 if (mop->mo_stripe_count > 69)
 770                                         inode_size = 512; /* bz 7241 */
 771                                 /* see also "-i" below for EA blocks */
 772                                 else if (mop->mo_stripe_count > 26)
 773                                         inode_size = 2048;
 774                                 else if (mop->mo_stripe_count > 5)
 775                                         inode_size = 1024;
 776                                 else
 777                                         inode_size = 512;
 778                         } else if (IS_OST(&mop->mo_ldd)) {
 779                                 /* We store MDS FID and OST objid in EA on OST
 780                                  * we need to make inode bigger as well. */
 781                                 inode_size = 256;
 782                         }
 783
 784                         if (inode_size > 0) {
 785                                 sprintf(buf, " -I %ld", inode_size);
 786                                 strscat(mop->mo_mkfsopts, buf,
 787                                         sizeof(mop->mo_mkfsopts));
 788                         }
 789                 }
 790
 791                 /* Bytes_per_inode: disk size / num inodes */
 792                 if (strstr(mop->mo_mkfsopts, "-i") == NULL &&
 793                     strstr(mop->mo_mkfsopts, "-N") == NULL) {
 794                         long bytes_per_inode = 0;
 795
 796                         /* Allocate more inodes on MDT devices.  There is
 797                          * no data stored on the MDT, and very little extra
 798                          * metadata beyond the inode.  It could go down as
 799                          * low as 1024 bytes, but this is conservative.
 800                          * Account for external EA blocks for wide striping. */
 801                         if (IS_MDT(&mop->mo_ldd)) {
 802                                 bytes_per_inode = inode_size + 1536;
 803
 804                                 if (mop->mo_stripe_count > 69) {
 805                                         int extra = mop->mo_stripe_count * 24;
 806                                         extra = ((extra - 1) | 4095) + 1;
 807                                         bytes_per_inode += extra;
 808                                 }
 809                         }
 810
 811                         /* Allocate fewer inodes on large OST devices.  Most
 812                          * filesystems can be much more aggressive than even
 813                          * this, but it is impossible to know in advance. */
 814                         if (IS_OST(&mop->mo_ldd)) {
 815                                 /* OST > 16TB assume average file size 1MB */
 816                                 if (device_kb > (16ULL << 30))
 817                                         bytes_per_inode = 1024 * 1024;
 818                                 /* OST > 4TB assume average file size 512kB */
 819                                 else if (device_kb > (4ULL << 30))
 820                                         bytes_per_inode = 512 * 1024;
 821                                 /* OST > 1TB assume average file size 256kB */
 822                                 else if (device_kb > (1ULL << 30))
 823                                         bytes_per_inode = 256 * 1024;
 824                                 /* OST > 10GB assume average file size 64kB,
 825                                  * plus a bit so that inodes will fit into a
 826                                  * 256x flex_bg without overflowing */
 827                                 else if (device_kb > (10ULL << 20))
 828                                         bytes_per_inode = 69905;
 829                         }
 830
 831                         if (bytes_per_inode > 0) {
 832                                 sprintf(buf, " -i %ld", bytes_per_inode);
 833                                 strscat(mop->mo_mkfsopts, buf,
 834                                         sizeof(mop->mo_mkfsopts));
 835                         }
 836                 }
 837
 838                 if (verbose < 2) {
 839                         strscat(mop->mo_mkfsopts, " -q",
 840                                 sizeof(mop->mo_mkfsopts));
 841                 }
 842
 843                 /* start handle -O mkfs options */
 844                 if ((start = strstr(mop->mo_mkfsopts, "-O")) != NULL) {
 845                         if (strstr(start + 2, "-O") != NULL) {
 846                                 fprintf(stderr,
 847                                         "%s: don't specify multiple -O options\n",
 848                                         progname);
 849                                 return EINVAL;
 850                         }
 851                         start = moveopts_to_end(start);
 852                         maxbuflen = sizeof(mop->mo_mkfsopts) -
 853                                 (start - mop->mo_mkfsopts) - strlen(start);
 854                         ret = enable_default_ext4_features(mop, start, maxbuflen, 1);
 855                 } else {
 856                         start = mop->mo_mkfsopts + strlen(mop->mo_mkfsopts),
 857                               maxbuflen = sizeof(mop->mo_mkfsopts) -
 858                                       strlen(mop->mo_mkfsopts);
 859                         ret = enable_default_ext4_features(mop, start, maxbuflen, 0);
 860                 }
 861                 if (ret)
 862                         return ret;
 863                 /* end handle -O mkfs options */
 864
 865                 /* start handle -E mkfs options */
 866                 if ((start = strstr(mop->mo_mkfsopts, "-E")) != NULL) {
 867                         if (strstr(start + 2, "-E") != NULL) {
 868                                 fprintf(stderr,
 869                                         "%s: don't specify multiple -E options\n",
 870                                         progname);
 871                                 return EINVAL;
 872                         }
 873                         start = moveopts_to_end(start);
 874                         maxbuflen = sizeof(mop->mo_mkfsopts) -
 875                                 (start - mop->mo_mkfsopts) - strlen(start);
 876                         ext_opts = 1;
 877                 } else {
 878                         start = mop->mo_mkfsopts + strlen(mop->mo_mkfsopts);
 879                         maxbuflen = sizeof(mop->mo_mkfsopts) -
 880                                 strlen(mop->mo_mkfsopts);
 881                 }
 882
 883                 /* In order to align the filesystem metadata on 1MB boundaries,
 884                  * give a resize value that will reserve a power-of-two group
 885                  * descriptor blocks, but leave one block for the superblock.
 886                  * Only useful for filesystems with < 2^32 blocks due to resize
 887                  * limitations. */
 888                 if (strstr(mop->mo_mkfsopts, "meta_bg") == NULL &&
 889                     IS_OST(&mop->mo_ldd) && mop->mo_device_kb > 100 * 1024 &&
 890                     mop->mo_device_kb * 1024 / L_BLOCK_SIZE <= 0xffffffffULL) {
 891                         unsigned group_blocks = L_BLOCK_SIZE * 8;
 892                         unsigned desc_per_block = L_BLOCK_SIZE / 32;
 893                         unsigned resize_blks;
 894
 895                         resize_blks = (1ULL<<32) - desc_per_block*group_blocks;
 896                         snprintf(buf, sizeof(buf), "%u", resize_blks);
 897                         append_unique(start, ext_opts ? "," : " -E ",
 898                                       "resize", buf, maxbuflen);
 899                         ext_opts = 1;
 900                 }
 901
 902                 /* Avoid zeroing out the full journal - speeds up mkfs */
 903                 if (is_e2fsprogs_feature_supp("-E lazy_journal_init") == 0)
 904                         append_unique(start, ext_opts ? "," : " -E ",
 905                                       "lazy_journal_init", NULL, maxbuflen);
 906                 /* end handle -E mkfs options */
 907
 908                 /* Allow reformat of full devices (as opposed to
 909                    partitions.)  We already checked for mounted dev. */
 910                 strscat(mop->mo_mkfsopts, " -F", sizeof(mop->mo_mkfsopts));
 911
 912                 snprintf(mkfs_cmd, sizeof(mkfs_cmd),
 913                          "%s -j -b %d -L %s ", MKE2FS, L_BLOCK_SIZE,
 914                          mop->mo_ldd.ldd_svname);
 915         } else {
 916                 fprintf(stderr,"%s: unsupported fs type: %d (%s)\n",
 917                         progname, mop->mo_ldd.ldd_mount_type,
 918                         MT_STR(&mop->mo_ldd));
 919                 return EINVAL;
 920         }
 921
 922         /* For loop device format the dev, not the filename */
 923         dev = mop->mo_device;
 924         if (mop->mo_flags & MO_IS_LOOP)
 925                 dev = mop->mo_loopdev;
 926
 927         vprint("formatting backing filesystem %s on %s\n",
 928                MT_STR(&mop->mo_ldd), dev);
 929         vprint("\ttarget name   %s\n", mop->mo_ldd.ldd_svname);
 930         vprint("\t4k blocks     %ju\n", (uintmax_t)block_count);
 931         vprint("\toptions       %s\n", mop->mo_mkfsopts);
 932
 933         /* mkfs_cmd's trailing space is important! */
 934         strscat(mkfs_cmd, mop->mo_mkfsopts, sizeof(mkfs_cmd));
 935         strscat(mkfs_cmd, " ", sizeof(mkfs_cmd));
 936         strscat(mkfs_cmd, dev, sizeof(mkfs_cmd));
 937         if (block_count != 0) {
 938                 snprintf(buf, sizeof(buf), " %ju",
 939                          (uintmax_t)block_count);
 940                 strscat(mkfs_cmd, buf, sizeof(mkfs_cmd));
 941         }
 942
 943         vprint("mkfs_cmd = %s\n", mkfs_cmd);
 944         ret = run_command(mkfs_cmd, sizeof(mkfs_cmd));
 945         if (ret) {
 946                 fatal();
 947                 fprintf(stderr, "Unable to build fs %s (%d)\n", dev, ret);
 948         }
 949         return ret;
 950 }
 951
 952 int ldiskfs_prepare_lustre(struct mkfs_opts *mop,
 953                            char *wanted_mountopts, size_t len)
 954 {
 955         struct lustre_disk_data *ldd = &mop->mo_ldd;
 956         int ret;
 957
 958         /* Set MO_IS_LOOP to indicate a loopback device is needed */
 959         ret = is_block(mop->mo_device);
 960         if (ret < 0) {
 961                 return errno;
 962         } else if (ret == 0) {
 963                 mop->mo_flags |= MO_IS_LOOP;
 964         }
 965
 966         if (IS_MDT(ldd) || IS_MGS(ldd))
 967                 strscat(wanted_mountopts, ",user_xattr", len);
 968
 969         return 0;
 970 }
 971
 972 int ldiskfs_fix_mountopts(struct mkfs_opts *mop, char *mountopts, size_t len)
 973 {
 974         if (strstr(mountopts, "errors=") == NULL)
 975                 strscat(mountopts, ",errors=remount-ro", len);
 976
 977         return 0;
 978 }
 979
 980 static int read_file(const char *path, char *buf, int size)
 981 {
 982         FILE *fd;
 983
 984         fd = fopen(path, "r");
 985         if (fd == NULL)
 986                 return errno;
 987
 988         if (fgets(buf, size, fd) == NULL) {
 989                 fprintf(stderr, "reading from %s: %s", path, strerror(errno));
 990                 fclose(fd);
 991                 return 1;
 992         }
 993         fclose(fd);
 994
 995         /* strip trailing newline */
 996         size = strlen(buf);
 997         if (buf[size - 1] == '\n')
 998                 buf[size - 1] = '\0';
 999
1000         return 0;
1001 }
1002
1003 static int write_file(const char *path, const char *buf)
1004 {
1005         int fd, rc;
1006
1007         fd = open(path, O_WRONLY);
1008         if (fd < 0)
1009                 return errno;
1010
1011         rc = write(fd, buf, strlen(buf));
1012         close(fd);
1013
1014         return rc < 0 ? errno : 0;
1015 }
1016
1017 static int set_blockdev_scheduler(const char *path, const char *scheduler)
1018 {
1019         char buf[PATH_MAX], *s, *e, orig_sched[50];
1020         int rc;
1021
1022         /* Before setting the scheduler, we need to check to see if it's
1023          * already set to "noop". If it is, we don't want to override
1024          * that setting. If it's set to anything other than "noop", set
1025          * the scheduler to what has been passed in. */
1026
1027         rc = read_file(path, buf, sizeof(buf));
1028         if (rc) {
1029                 if (verbose)
1030                         fprintf(stderr, "%s: cannot open '%s': %s\n",
1031                                 progname, path, strerror(errno));
1032                 return rc;
1033         }
1034
1035         /* The expected format of buf: noop anticipatory deadline [cfq] */
1036         s = strchr(buf, '[');
1037         e = strchr(buf, ']');
1038
1039         /* If the format is not what we expect. Play it safe and error out. */
1040         if (s == NULL || e == NULL) {
1041                 if (verbose)
1042                         fprintf(stderr, "%s: cannot parse scheduler "
1043                                         "options for '%s'\n", progname, path);
1044                 return -EINVAL;
1045         }
1046
1047         snprintf(orig_sched, e - s, "%s", s + 1);
1048
1049         if (strcmp(orig_sched, "noop") == 0 ||
1050             strcmp(orig_sched, scheduler) == 0)
1051                 return 0;
1052
1053         rc = write_file(path, scheduler);
1054         if (rc) {
1055                 if (verbose)
1056                         fprintf(stderr, "%s: cannot set scheduler on "
1057                                         "'%s': %s\n", progname, path,
1058                                         strerror(errno));
1059                 return rc;
1060         } else {
1061                 fprintf(stderr, "%s: change scheduler of %s from %s to %s\n",
1062                         progname, path, orig_sched, scheduler);
1063         }
1064
1065         return rc;
1066 }
1067
1068 /* This is to tune the kernel for good SCSI performance.
1069  * For that we set the value of /sys/block/{dev}/queue/max_sectors_kb
1070  * to the value of /sys/block/{dev}/queue/max_hw_sectors_kb */
1071 static int set_blockdev_tunables(char *source, struct mount_opts *mop)
1072 {
1073         glob_t glob_info = { 0 };
1074         struct stat stat_buf;
1075         char *chk_major, *chk_minor;
1076         char *savept = NULL, *dev;
1077         char *ret_path;
1078         char buf[PATH_MAX] = {'\0'}, path[PATH_MAX] = {'\0'};
1079         char real_path[PATH_MAX] = {'\0'};
1080         int i, rc = 0;
1081         int major, minor;
1082         char *slave = NULL;
1083
1084         if (!source)
1085                 return -EINVAL;
1086
1087         ret_path = realpath(source, real_path);
1088         if (ret_path == NULL) {
1089                 if (verbose)
1090                         fprintf(stderr, "warning: %s: cannot resolve: %s\n",
1091                                 source, strerror(errno));
1092                 return -EINVAL;
1093         }
1094
1095         if (strncmp(real_path, "/dev/loop", 9) == 0)
1096                 return 0;
1097
1098         if ((real_path[0] != '/') && (strpbrk(real_path, ",:") != NULL))
1099                 return 0;
1100
1101         snprintf(path, sizeof(path), "/sys/block%s", real_path + 4);
1102         if (access(path, X_OK) == 0)
1103                 goto set_params;
1104
1105         /* The name of the device say 'X' specified in /dev/X may not
1106          * match any entry under /sys/block/. In that case we need to
1107          * match the major/minor number to find the entry under
1108          * sys/block corresponding to /dev/X */
1109
1110         /* Don't chop tail digit on /dev/mapper/xxx, LU-478 */
1111         if (strncmp(real_path, "/dev/mapper", 11) != 0) {
1112                 dev = real_path + strlen(real_path);
1113                 while (--dev > real_path && isdigit(*dev))
1114                         *dev = 0;
1115
1116                 if (strncmp(real_path, "/dev/md_", 8) == 0)
1117                         *dev = 0;
1118         }
1119
1120         rc = stat(real_path, &stat_buf);
1121         if (rc) {
1122                 if (verbose)
1123                         fprintf(stderr, "warning: %s, device %s stat failed\n",
1124                                 strerror(errno), real_path);
1125                 return rc;
1126         }
1127
1128         major = major(stat_buf.st_rdev);
1129         minor = minor(stat_buf.st_rdev);
1130         rc = glob("/sys/block/*", GLOB_NOSORT, NULL, &glob_info);
1131         if (rc) {
1132                 if (verbose)
1133                         fprintf(stderr, "warning: failed to read entries under "
1134                                 "/sys/block\n");
1135                 globfree(&glob_info);
1136                 return rc;
1137         }
1138
1139         for (i = 0; i < glob_info.gl_pathc; i++){
1140                 snprintf(path, sizeof(path), "%s/dev", glob_info.gl_pathv[i]);
1141
1142                 rc = read_file(path, buf, sizeof(buf));
1143                 if (rc)
1144                         continue;
1145
1146                 if (buf[strlen(buf) - 1] == '\n')
1147                         buf[strlen(buf) - 1] = '\0';
1148
1149                 chk_major = strtok_r(buf, ":", &savept);
1150                 chk_minor = savept;
1151                 if (chk_major != NULL && major == atoi(chk_major) &&
1152                     chk_minor != NULL && minor == atoi(chk_minor))
1153                         break;
1154         }
1155
1156         if (i == glob_info.gl_pathc) {
1157                 if (verbose)
1158                         fprintf(stderr,"warning: device %s does not match any "
1159                                 "entry under /sys/block\n", real_path);
1160                 globfree(&glob_info);
1161                 return -EINVAL;
1162         }
1163
1164         /* Chop off "/dev" from path we found */
1165         path[strlen(glob_info.gl_pathv[i])] = '\0';
1166         globfree(&glob_info);
1167
1168 set_params:
1169         if (strncmp(real_path, "/dev/md", 7) == 0) {
1170                 snprintf(real_path, sizeof(real_path), "%s/%s", path,
1171                          STRIPE_CACHE_SIZE);
1172
1173                 rc = read_file(real_path, buf, sizeof(buf));
1174                 if (rc) {
1175                         if (verbose)
1176                                 fprintf(stderr, "warning: opening %s: %s\n",
1177                                         real_path, strerror(errno));
1178                         return 0;
1179                 }
1180
1181                 if (atoi(buf) >= mop->mo_md_stripe_cache_size)
1182                         return 0;
1183
1184                 if (strlen(buf) - 1 > 0) {
1185                         snprintf(buf, sizeof(buf), "%d",
1186                                  mop->mo_md_stripe_cache_size);
1187                         rc = write_file(real_path, buf);
1188                         if (rc != 0 && verbose)
1189                                 fprintf(stderr, "warning: opening %s: %s\n",
1190                                         real_path, strerror(errno));
1191                 }
1192                 /* Return since raid and disk tunables are different */
1193                 return rc;
1194         }
1195
1196         snprintf(real_path, sizeof(real_path), "%s/%s", path,
1197                  MAX_HW_SECTORS_KB_PATH);
1198         rc = read_file(real_path, buf, sizeof(buf));
1199         if (rc) {
1200                 if (verbose)
1201                         fprintf(stderr, "warning: opening %s: %s\n",
1202                                 real_path, strerror(errno));
1203                 /* No MAX_HW_SECTORS_KB_PATH isn't necessary an
1204                  * error for some device. */
1205                 goto subdevs;
1206         }
1207
1208         if (strlen(buf) - 1 > 0) {
1209                 char oldbuf[32] = "", *end = NULL;
1210                 unsigned long long oldval, newval;
1211
1212                 snprintf(real_path, sizeof(real_path), "%s/%s", path,
1213                          MAX_SECTORS_KB_PATH);
1214                 rc = read_file(real_path, oldbuf, sizeof(oldbuf));
1215                 /* Only set new parameter if different from the old one. */
1216                 if (rc != 0 || strcmp(oldbuf, buf) == 0) {
1217                         /* No MAX_SECTORS_KB_PATH isn't necessary an
1218                          * error for some device. */
1219                         goto subdevs;
1220                 }
1221
1222                 newval = strtoull(buf, &end, 0);
1223                 if (newval == 0 || newval == ULLONG_MAX || end == buf)
1224                         goto subdevs;
1225
1226                 /* Don't increase IO request size limit past 16MB.  It is about
1227                  * PTLRPC_MAX_BRW_SIZE, but that isn't in a public header.
1228                  * Note that even though the block layer allows larger values,
1229                  * setting max_sectors_kb = 32768 causes crashes (LU-6974). */
1230                 if (newval > 16 * 1024) {
1231                         newval = 16 * 1024;
1232                         snprintf(buf, sizeof(buf), "%llu", newval);
1233                 }
1234
1235                 oldval = strtoull(oldbuf, &end, 0);
1236                 /* Don't shrink the current limit. */
1237                 if (oldval != ULLONG_MAX && newval <= oldval)
1238                         goto subdevs;
1239
1240                 rc = write_file(real_path, buf);
1241                 if (rc != 0) {
1242                         if (verbose)
1243                                 fprintf(stderr, "warning: writing to %s: %s\n",
1244                                         real_path, strerror(errno));
1245                         /* No MAX_SECTORS_KB_PATH isn't necessary an
1246                          * error for some device. */
1247                         goto subdevs;
1248                 }
1249                 fprintf(stderr, "%s: increased %s from %s to %s\n",
1250                         progname, real_path, oldbuf, buf);
1251         }
1252
1253 subdevs:
1254         /* Purposely ignore errors reported from set_blockdev_scheduler.
1255          * The worst that will happen is a block device with an "incorrect"
1256          * scheduler. */
1257         snprintf(real_path, sizeof(real_path), "%s/%s", path, SCHEDULER_PATH);
1258         set_blockdev_scheduler(real_path, DEFAULT_SCHEDULER);
1259
1260         /* if device is multipath device, tune its slave devices */
1261         glob_info.gl_pathc = 0;
1262         glob_info.gl_offs = 0;
1263         snprintf(real_path, sizeof(real_path), "%s/slaves/*", path);
1264         rc = glob(real_path, GLOB_NOSORT, NULL, &glob_info);
1265
1266         for (i = 0; rc == 0 && i < glob_info.gl_pathc; i++) {
1267                 slave = basename(glob_info.gl_pathv[i]);
1268                 snprintf(real_path, sizeof(real_path), "/dev/%s", slave);
1269                 rc = set_blockdev_tunables(real_path, mop);
1270         }
1271
1272         if (rc == GLOB_NOMATCH) {
1273                 /* no slave device is not an error */
1274                 rc = 0;
1275         } else if (rc && verbose) {
1276                 if (slave == NULL) {
1277                         fprintf(stderr, "warning: %s, failed to read"
1278                                 " entries under %s/slaves\n",
1279                                 strerror(errno), path);
1280                 } else {
1281                         fprintf(stderr, "unable to set tunables for"
1282                                 " slave device %s (slave would be"
1283                                 " unable to handle IO request from"
1284                                 " master %s)\n",
1285                                 real_path, source);
1286                 }
1287         }
1288         globfree(&glob_info);
1289
1290         return rc;
1291 }
1292
1293 int ldiskfs_tune_lustre(char *dev, struct mount_opts *mop)
1294 {
1295         return set_blockdev_tunables(dev, mop);
1296 }
1297
1298 int ldiskfs_label_lustre(struct mount_opts *mop)
1299 {
1300         char label_cmd[PATH_MAX];
1301         int rc;
1302
1303         snprintf(label_cmd, sizeof(label_cmd),
1304                  TUNE2FS" -f -L '%s' '%s' >/dev/null 2>&1",
1305                  mop->mo_ldd.ldd_svname, mop->mo_source);
1306         rc = run_command(label_cmd, sizeof(label_cmd));
1307
1308         return rc;
1309 }
1310
1311 /* Enable quota accounting */
1312 int ldiskfs_enable_quota(struct mkfs_opts *mop)
1313 {
1314         char *dev;
1315         char cmd[512];
1316         int cmdsz = sizeof(cmd), ret;
1317
1318         if (is_e2fsprogs_feature_supp("-O quota") != 0) {
1319                 fprintf(stderr, "%s: \"-O quota\" is is not supported by "
1320                         "current e2fsprogs\n", progname);
1321                 return EINVAL;
1322         }
1323
1324         dev = mop->mo_device;
1325         if (mop->mo_flags & MO_IS_LOOP)
1326                 dev = mop->mo_loopdev;
1327
1328         /* Quota feature is already enabled? */
1329         if (is_feature_enabled("quota", dev)) {
1330                 vprint("Quota feature is already enabled.\n");
1331                 return 0;
1332         }
1333
1334         /* Turn on quota feature by "tune2fs -O quota" */
1335         snprintf(cmd, cmdsz, "%s -O quota %s", TUNE2FS, dev);
1336         ret = run_command(cmd, cmdsz);
1337         if (ret)
1338                 fprintf(stderr, "command:%s (%d)", cmd, ret);
1339
1340         return ret;
1341 }
1342
1343 int ldiskfs_init(void)
1344 {
1345         /* Required because full path to DEBUGFS is not specified */
1346         setenv("PATH", "/bin:/sbin:/usr/bin:/usr/sbin:/usr/local/bin", 0);
1347
1348         return 0;
1349 }
1350
1351 void ldiskfs_fini(void)
1352 {
1353         return;
1354 }
1355