lustre/utils/portals.c

   1 /*
   2  * Copyright (c) 2003, 2010, Oracle and/or its affiliates. All rights reserved.
   3  *
   4  * Copyright (c) 2013, 2017, Intel Corporation.
   5  *
   6  *   This file is part of Lustre, https://wiki.hpdd.intel.com/
   7  *
   8  *   Portals is free software; you can redistribute it and/or
   9  *   modify it under the terms of version 2 of the GNU General Public
  10  *   License as published by the Free Software Foundation.
  11  *
  12  *   Portals is distributed in the hope that it will be useful,
  13  *   but WITHOUT ANY WARRANTY; without even the implied warranty of
  14  *   MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  15  *   GNU General Public License for more details.
  16  *
  17  *   You should have received a copy of the GNU General Public License
  18  *   along with Portals; if not, write to the Free Software
  19  *   Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
  20  *
  21  */
  22 #include <errno.h>
  23 #include <getopt.h>
  24 #include <inttypes.h>
  25 #include <limits.h>
  26 #ifdef HAVE_NETDB_H
  27 # include <netdb.h>
  28 #endif
  29 #include <stdarg.h>
  30 #include <stdio.h>
  31 #include <stdlib.h>
  32 #include <string.h>
  33 #include <sys/ioctl.h>
  34 #include <sys/time.h>
  35 #include <time.h>
  36 #include <linux/types.h>
  37
  38 #include <libcfs/util/string.h>
  39 #include <libcfs/util/ioctl.h>
  40 #include <linux/lnet/libcfs_debug.h>
  41 #include <linux/lnet/lnet-dlc.h>
  42 #include <linux/lnet/lnetctl.h>
  43 #include <linux/lnet/nidstr.h>
  44 #include <linux/lnet/socklnd.h>
  45
  46 unsigned int libcfs_debug;
  47 unsigned int libcfs_printk = D_CANTMASK;
  48
  49 static bool  g_net_interactive;
  50 static bool  g_net_set;
  51 static __u32 g_net;
  52
  53 #define IOC_BUF_SIZE    8192
  54 static char local_buf[IOC_BUF_SIZE];
  55 static char *ioc_buf = local_buf;
  56
  57 /* Convert a string boolean to an int; "enable" -> 1 */
  58 int
  59 lnet_parse_bool (int *b, char *str)
  60 {
  61         if (!strcasecmp (str, "no") ||
  62             !strcasecmp (str, "n") ||
  63             !strcasecmp (str, "off") ||
  64             !strcasecmp (str, "down") ||
  65             !strcasecmp (str, "disable"))
  66         {
  67                 *b = 0;
  68                 return (0);
  69         }
  70
  71         if (!strcasecmp (str, "yes") ||
  72             !strcasecmp (str, "y") ||
  73             !strcasecmp (str, "on") ||
  74             !strcasecmp (str, "up") ||
  75             !strcasecmp (str, "enable"))
  76         {
  77                 *b = 1;
  78                 return (0);
  79         }
  80
  81         return (-1);
  82 }
  83
  84 int
  85 lnet_parse_port (int *port, char *str)
  86 {
  87         char      *end;
  88
  89         *port = strtol (str, &end, 0);
  90
  91         if (*end == 0 &&                        /* parsed whole string */
  92             *port > 0 && *port < 65536)         /* minimal sanity check */
  93                 return (0);
  94
  95         return (-1);
  96 }
  97
  98 #ifdef HAVE_GETHOSTBYNAME
  99 static struct hostent *
 100 ptl_gethostbyname(char * hname) {
 101         struct hostent *he;
 102         he = gethostbyname(hname);
 103         if (!he) {
 104                 switch(h_errno) {
 105                 case HOST_NOT_FOUND:
 106                 case NO_ADDRESS:
 107                         fprintf(stderr, "Unable to resolve hostname: %s\n",
 108                                 hname);
 109                         break;
 110                 default:
 111                         fprintf(stderr, "gethostbyname error for %s: %s\n",
 112                                 hname, strerror(h_errno));
 113                         break;
 114                 }
 115                 return NULL;
 116         }
 117         return he;
 118 }
 119 #endif
 120
 121 int
 122 lnet_parse_ipquad (__u32 *ipaddrp, char *str)
 123 {
 124         int             a;
 125         int             b;
 126         int             c;
 127         int             d;
 128
 129         if (sscanf (str, "%d.%d.%d.%d", &a, &b, &c, &d) == 4 &&
 130             (a & ~0xff) == 0 && (b & ~0xff) == 0 &&
 131             (c & ~0xff) == 0 && (d & ~0xff) == 0)
 132         {
 133                 *ipaddrp = (a<<24)|(b<<16)|(c<<8)|d;
 134                 return (0);
 135         }
 136
 137         return (-1);
 138 }
 139
 140 int
 141 lnet_parse_ipaddr (__u32 *ipaddrp, char *str)
 142 {
 143 #ifdef HAVE_GETHOSTBYNAME
 144         struct hostent *he;
 145 #endif
 146
 147         if (!strcmp (str, "_all_")) {
 148                 *ipaddrp = 0;
 149                 return (0);
 150         }
 151
 152         if (lnet_parse_ipquad(ipaddrp, str) == 0)
 153                 return (0);
 154
 155 #ifdef HAVE_GETHOSTBYNAME
 156         if ((('a' <= str[0] && str[0] <= 'z') ||
 157              ('A' <= str[0] && str[0] <= 'Z')) &&
 158              (he = ptl_gethostbyname (str)) != NULL) {
 159                 __u32 addr = *(__u32 *)he->h_addr;
 160
 161                 *ipaddrp = ntohl(addr);         /* HOST byte order */
 162                 return (0);
 163         }
 164 #endif
 165
 166         return (-1);
 167 }
 168
 169 char *
 170 ptl_ipaddr_2_str(__u32 ipaddr, char *str, size_t strsize, int lookup)
 171 {
 172 #ifdef HAVE_GETHOSTBYNAME
 173         __u32           net_ip;
 174         struct hostent *he;
 175
 176         if (lookup) {
 177                 net_ip = htonl (ipaddr);
 178                 he = gethostbyaddr (&net_ip, sizeof (net_ip), AF_INET);
 179                 if (he != NULL) {
 180                         strlcpy(str, he->h_name, strsize);
 181                         return (str);
 182                 }
 183         }
 184 #endif
 185
 186         sprintf (str, "%d.%d.%d.%d",
 187                  (ipaddr >> 24) & 0xff, (ipaddr >> 16) & 0xff,
 188                  (ipaddr >> 8) & 0xff, ipaddr & 0xff);
 189         return (str);
 190 }
 191
 192 int
 193 lnet_parse_time (time_t *t, char *str)
 194 {
 195         char          *end;
 196         int            n;
 197         struct tm      tm;
 198
 199         *t = strtol (str, &end, 0);
 200         if (*end == 0) /* parsed whole string */
 201                 return (0);
 202
 203         memset (&tm, 0, sizeof (tm));
 204         n = sscanf (str, "%d-%d-%d-%d:%d:%d",
 205                     &tm.tm_year, &tm.tm_mon, &tm.tm_mday,
 206                     &tm.tm_hour, &tm.tm_min, &tm.tm_sec);
 207         if (n != 6)
 208                 return (-1);
 209
 210         tm.tm_mon--;                    /* convert to 0 == Jan */
 211         tm.tm_year -= 1900;             /* y2k quirk */
 212         tm.tm_isdst = -1;               /* dunno if it's daylight savings... */
 213
 214         *t = mktime (&tm);
 215         if (*t == (time_t)-1)
 216                 return (-1);
 217
 218         return (0);
 219 }
 220
 221 int
 222 lnet_parse_nid(char *nid_str, struct lnet_process_id *id_ptr)
 223 {
 224         id_ptr->pid = LNET_PID_ANY;
 225         id_ptr->nid = libcfs_str2nid(nid_str);
 226         if (id_ptr->nid == LNET_NID_ANY) {
 227                 fprintf (stderr, "Can't parse nid \"%s\"\n", nid_str);
 228                 return -1;
 229         }
 230
 231         return 0;
 232 }
 233
 234 static int g_net_is_set(char *cmd)
 235 {
 236         if (g_net_set)
 237                 return 1;
 238
 239         if (cmd != NULL) {
 240                 char *net;
 241
 242                 if (g_net_interactive)
 243                         net = "network";
 244                 else
 245                         net = "--net";
 246
 247                 fprintf(stderr,
 248                         "You must run '%s <network>' command before '%s'\n",
 249                         cmd, net);
 250                 return 0;
 251         }
 252
 253         return 0;
 254 }
 255
 256 static int g_net_is_compatible(char *cmd, ...)
 257 {
 258         va_list ap;
 259         int nal;
 260
 261         if (!g_net_is_set(cmd))
 262                 return 0;
 263
 264         va_start(ap, cmd);
 265
 266         do {
 267                 nal = va_arg(ap, int);
 268                 if (nal == LNET_NETTYP(g_net)) {
 269                         va_end (ap);
 270                         return 1;
 271                 }
 272         } while (nal != 0);
 273
 274         va_end (ap);
 275
 276         if (cmd != NULL)
 277                 fprintf (stderr,
 278                          "Command %s not compatible with %s NAL\n",
 279                          cmd,
 280                          libcfs_lnd2str(LNET_NETTYP(g_net)));
 281
 282         return 0;
 283 }
 284
 285 int ptl_initialize(int argc, char **argv)
 286 {
 287         if (argc > 1)
 288                 g_net_interactive = true;
 289
 290         register_ioc_dev(LNET_DEV_ID, LNET_DEV_PATH);
 291
 292         return 0;
 293 }
 294
 295
 296 int jt_ptl_network(int argc, char **argv)
 297 {
 298         struct libcfs_ioctl_data data;
 299         __u32 net = LNET_NIDNET(LNET_NID_ANY);
 300         int rc;
 301
 302         fprintf(stderr, "This command has been deprecated. Plesae use 'lnetctl net add'\n");
 303
 304         if (argc != 2) {
 305                 fprintf(stderr, "usage: %s <net>|up|down\n", argv[0]);
 306                 return -1;
 307         }
 308
 309         if (!strcmp(argv[1], "unconfigure") || !strcmp(argv[1], "down")) {
 310                 LIBCFS_IOC_INIT(data);
 311                 rc = l_ioctl(LNET_DEV_ID, IOC_LIBCFS_UNCONFIGURE, &data);
 312
 313                 if (rc == 0) {
 314                         printf("LNET ready to unload\n");
 315                         return 0;
 316                 }
 317
 318                 if (errno == ENODEV) {
 319                         printf("LNET is currently not loaded.");
 320                         return 0;
 321                 }
 322
 323                 if (errno == EBUSY)
 324                         fprintf(stderr, "LNET busy\n");
 325                 else
 326                         fprintf(stderr, "LNET unconfigure error %d: %s\n",
 327                                 errno, strerror(errno));
 328                 return -1;
 329         } else if (!strcmp(argv[1], "configure") || !strcmp(argv[1], "up")) {
 330                 LIBCFS_IOC_INIT(data);
 331                 rc = l_ioctl(LNET_DEV_ID, IOC_LIBCFS_CONFIGURE, &data);
 332
 333                 if (rc == 0) {
 334                         printf("LNET configured\n");
 335                         return 0;
 336                 }
 337
 338                 fprintf(stderr, "LNET configure error %d: %s\n",
 339                         errno, strerror(errno));
 340                 return -1;
 341         }
 342
 343         net = libcfs_str2net(argv[1]);
 344         if (net == LNET_NIDNET(LNET_NID_ANY)) {
 345                 fprintf(stderr, "Can't parse net %s\n", argv[1]);
 346                 return -1;
 347         }
 348
 349         g_net_set = true;
 350         g_net = net;
 351         return 0;
 352 }
 353
 354 int
 355 jt_ptl_list_nids(int argc, char **argv)
 356 {
 357         struct libcfs_ioctl_data data;
 358         int                      all = 0, return_nid = 0;
 359         int                      count;
 360         int                      rc;
 361
 362         fprintf(stderr, "This command has been deprecated. Plesae use 'lnetctl net show'\n");
 363
 364         all = (argc == 2) && (strcmp(argv[1], "all") == 0);
 365         /* Hack to pass back value */
 366         return_nid = (argc == 2) && (argv[1][0] == 1);
 367
 368         if ((argc > 2) && !(all || return_nid)) {
 369                 fprintf(stderr, "usage: %s [all]\n", argv[0]);
 370                 return 0;
 371         }
 372
 373         for (count = 0;; count++) {
 374                 LIBCFS_IOC_INIT (data);
 375                 data.ioc_count = count;
 376                 rc = l_ioctl(LNET_DEV_ID, IOC_LIBCFS_GET_NI, &data);
 377
 378                 if (rc < 0) {
 379                         if ((count > 0) && (errno == ENOENT))
 380                                 /* We found them all */
 381                                 break;
 382                         fprintf(stderr,"IOC_LIBCFS_GET_NI error %d: %s\n",
 383                                 errno, strerror(errno));
 384                         return -1;
 385                 }
 386
 387                 if (all || (LNET_NETTYP(LNET_NIDNET(data.ioc_nid)) != LOLND)) {
 388                         printf("%s\n", libcfs_nid2str(data.ioc_nid));
 389                         if (return_nid) {
 390                                 *(__u64 *)(argv[1]) = data.ioc_nid;
 391                                 return_nid--;
 392                         }
 393                 }
 394         }
 395
 396         return 0;
 397 }
 398
 399 int
 400 jt_ptl_which_nid (int argc, char **argv)
 401 {
 402         struct libcfs_ioctl_data data;
 403         int          best_dist = 0;
 404         int          best_order = 0;
 405         lnet_nid_t   best_nid = LNET_NID_ANY;
 406         int          dist;
 407         int          order;
 408         lnet_nid_t   nid;
 409         char        *nidstr;
 410         int          rc;
 411         int          i;
 412
 413         if (argc < 2) {
 414                 fprintf(stderr, "usage: %s NID [NID...]\n", argv[0]);
 415                 return 0;
 416         }
 417
 418         for (i = 1; i < argc; i++) {
 419                 nidstr = argv[i];
 420                 nid = libcfs_str2nid(nidstr);
 421                 if (nid == LNET_NID_ANY) {
 422                         fprintf(stderr, "Can't parse NID %s\n", nidstr);
 423                         return -1;
 424                 }
 425
 426                 LIBCFS_IOC_INIT(data);
 427                 data.ioc_nid = nid;
 428
 429                 rc = l_ioctl(LNET_DEV_ID, IOC_LIBCFS_LNET_DIST, &data);
 430                 if (rc != 0) {
 431                         fprintf(stderr, "Can't get distance to %s: %s\n",
 432                                 nidstr, strerror(errno));
 433                         return -1;
 434                 }
 435
 436                 dist = data.ioc_u32[0];
 437                 order = data.ioc_u32[1];
 438
 439                 if (dist < 0) {
 440                         if (dist == -EHOSTUNREACH)
 441                                 continue;
 442
 443                         fprintf(stderr, "Unexpected distance to %s: %d\n",
 444                                 nidstr, dist);
 445                         return -1;
 446                 }
 447
 448                 if (best_nid == LNET_NID_ANY ||
 449                     dist < best_dist ||
 450                     (dist == best_dist && order < best_order)) {
 451                         best_dist = dist;
 452                         best_order = order;
 453                         best_nid = nid;
 454                 }
 455         }
 456
 457         if (best_nid == LNET_NID_ANY) {
 458                 fprintf(stderr, "No reachable NID\n");
 459                 return -1;
 460         }
 461
 462         printf("%s\n", libcfs_nid2str(best_nid));
 463         return 0;
 464 }
 465
 466 int
 467 jt_ptl_print_interfaces (int argc, char **argv)
 468 {
 469         struct libcfs_ioctl_data data;
 470         char                     buffer[3][HOST_NAME_MAX + 1];
 471         int                      index;
 472         int                      rc;
 473
 474         if (!g_net_is_compatible (argv[0], SOCKLND, 0))
 475                 return -1;
 476
 477         for (index = 0;;index++) {
 478                 LIBCFS_IOC_INIT(data);
 479                 data.ioc_net   = g_net;
 480                 data.ioc_count = index;
 481
 482                 rc = l_ioctl(LNET_DEV_ID, IOC_LIBCFS_GET_INTERFACE, &data);
 483                 if (rc != 0)
 484                         break;
 485
 486                 printf ("%s: (%s/%s) npeer %d nroute %d\n",
 487                         ptl_ipaddr_2_str(data.ioc_u32[0], buffer[2],
 488                                          sizeof(buffer[2]), 1),
 489                         ptl_ipaddr_2_str(data.ioc_u32[0], buffer[0],
 490                                          sizeof(buffer[0]), 0),
 491                         ptl_ipaddr_2_str(data.ioc_u32[1], buffer[1],
 492                                          sizeof(buffer[1]), 0),
 493                         data.ioc_u32[2], data.ioc_u32[3]);
 494         }
 495
 496         if (index == 0) {
 497                 if (errno == ENOENT) {
 498                         printf ("<no interfaces>\n");
 499                 } else {
 500                         fprintf(stderr, "Error getting interfaces: %s: "
 501                                 "check dmesg.\n",
 502                                 strerror(errno));
 503                 }
 504         }
 505
 506         return 0;
 507 }
 508
 509 int
 510 jt_ptl_add_interface (int argc, char **argv)
 511 {
 512         struct libcfs_ioctl_data data;
 513         __u32                    ipaddr;
 514         int                      rc;
 515         __u32                    netmask = 0xffffff00;
 516         int                      i;
 517         int                      count;
 518         char                    *end;
 519
 520         if (argc < 2 || argc > 3) {
 521                 fprintf (stderr, "usage: %s ipaddr [netmask]\n", argv[0]);
 522                 return 0;
 523         }
 524
 525         if (!g_net_is_compatible(argv[0], SOCKLND, 0))
 526                 return -1;
 527
 528         if (lnet_parse_ipaddr(&ipaddr, argv[1]) != 0) {
 529                 fprintf (stderr, "Can't parse ip: %s\n", argv[1]);
 530                 return -1;
 531         }
 532
 533         if (argc > 2 ) {
 534                 count = strtol(argv[2], &end, 0);
 535                 if (count > 0 && count < 32 && *end == 0) {
 536                         netmask = 0;
 537                         for (i = count; i > 0; i--)
 538                                 netmask = netmask|(1<<(32-i));
 539                 } else if (lnet_parse_ipquad(&netmask, argv[2]) != 0) {
 540                         fprintf (stderr, "Can't parse netmask: %s\n", argv[2]);
 541                         return -1;
 542                 }
 543         }
 544
 545         LIBCFS_IOC_INIT(data);
 546         data.ioc_net    = g_net;
 547         data.ioc_u32[0] = ipaddr;
 548         data.ioc_u32[1] = netmask;
 549
 550         rc = l_ioctl(LNET_DEV_ID, IOC_LIBCFS_ADD_INTERFACE, &data);
 551         if (rc != 0) {
 552                 fprintf (stderr, "failed to add interface: %s\n",
 553                          strerror (errno));
 554                 return -1;
 555         }
 556
 557         return 0;
 558 }
 559
 560 int
 561 jt_ptl_del_interface (int argc, char **argv)
 562 {
 563         struct libcfs_ioctl_data data;
 564         int                      rc;
 565         __u32                    ipaddr = 0;
 566
 567         if (argc > 2) {
 568                 fprintf (stderr, "usage: %s [ipaddr]\n", argv[0]);
 569                 return 0;
 570         }
 571
 572         if (!g_net_is_compatible(argv[0], SOCKLND, 0))
 573                 return -1;
 574
 575         if (argc == 2 &&
 576             lnet_parse_ipaddr(&ipaddr, argv[1]) != 0) {
 577                 fprintf (stderr, "Can't parse ip: %s\n", argv[1]);
 578                 return -1;
 579         }
 580
 581         LIBCFS_IOC_INIT(data);
 582         data.ioc_net    = g_net;
 583         data.ioc_u32[0] = ipaddr;
 584
 585         rc = l_ioctl(LNET_DEV_ID, IOC_LIBCFS_DEL_INTERFACE, &data);
 586         if (rc != 0) {
 587                 fprintf (stderr, "failed to delete interface: %s\n",
 588                          strerror (errno));
 589                 return -1;
 590         }
 591
 592         return 0;
 593 }
 594
 595 int
 596 jt_ptl_print_peers (int argc, char **argv)
 597 {
 598         struct libcfs_ioctl_data data;
 599         struct lnet_process_id        id;
 600         char                     buffer[2][HOST_NAME_MAX + 1];
 601         int                      index;
 602         int                      rc;
 603
 604         if (!g_net_is_compatible(argv[0], SOCKLND, O2IBLND, GNILND,
 605                                  PTL4LND, 0))
 606                 return -1;
 607
 608         for (index = 0;;index++) {
 609                 LIBCFS_IOC_INIT(data);
 610                 data.ioc_net     = g_net;
 611                 data.ioc_count   = index;
 612
 613                 rc = l_ioctl(LNET_DEV_ID, IOC_LIBCFS_GET_PEER, &data);
 614                 if (rc != 0)
 615                         break;
 616
 617                 if (g_net_is_compatible(NULL, SOCKLND, 0)) {
 618                         id.nid = data.ioc_nid;
 619                         id.pid = data.ioc_u32[4];
 620                         printf ("%-20s [%d]%s->%s:%d #%d\n",
 621                                 libcfs_id2str(id),
 622                                 data.ioc_count, /* persistence */
 623                                 /* my ip */
 624                                 ptl_ipaddr_2_str(data.ioc_u32[2], buffer[0],
 625                                                  sizeof(buffer[0]), 1),
 626                                 /* peer ip */
 627                                 ptl_ipaddr_2_str(data.ioc_u32[0], buffer[1],
 628                                                  sizeof(buffer[1]), 1),
 629                                 data.ioc_u32[1], /* peer port */
 630                                 data.ioc_u32[3]); /* conn_count */
 631                 } else if (g_net_is_compatible(NULL, GNILND, 0)) {
 632                         int disconn = data.ioc_flags >> 16;
 633                         char *state;
 634
 635                         if (disconn)
 636                                 state = "D";
 637                         else
 638                                 state = data.ioc_flags & 0xffff ? "C" : "U";
 639
 640                         printf("%-20s (%d) %s [%d] %ju sq %d/%d tx %d/%d/%d\n",
 641                                libcfs_nid2str(data.ioc_nid), /* peer nid */
 642                                data.ioc_net, /* gemini device id */
 643                                state, /* peer is Connecting, Up, or Down */
 644                                data.ioc_count,   /* peer refcount */
 645                                (uintmax_t)data.ioc_u64[0], /* peerstamp */
 646                                data.ioc_u32[2], data.ioc_u32[3], /* tx and rx seq */
 647                                /* fmaq, nfma, nrdma */
 648                                data.ioc_u32[0], data.ioc_u32[1], data.ioc_u32[4]);
 649                 } else {
 650                         printf ("%-20s [%d]\n",
 651                                 libcfs_nid2str(data.ioc_nid), data.ioc_count);
 652                 }
 653         }
 654
 655         if (index == 0) {
 656                 if (errno == ENOENT) {
 657                         printf ("<no peers>\n");
 658                 } else {
 659                         fprintf(stderr, "Error getting peer list: %s: "
 660                                 "check dmesg.\n",
 661                                 strerror(errno));
 662                 }
 663         }
 664         return 0;
 665 }
 666
 667 int jt_ptl_add_peer(int argc, char **argv)
 668 {
 669         struct libcfs_ioctl_data data;
 670         lnet_nid_t nid;
 671         __u32 ip = 0;
 672         int port = 0;
 673         int rc;
 674
 675         if (!g_net_is_compatible(argv[0], SOCKLND, GNILND, 0))
 676                 return -1;
 677
 678         if (argc != 4) {
 679                 fprintf(stderr, "usage(tcp,gni): %s nid ipaddr port\n",
 680                         argv[0]);
 681                 return 0;
 682         }
 683
 684         nid = libcfs_str2nid(argv[1]);
 685         if (nid == LNET_NID_ANY) {
 686                 fprintf (stderr, "Can't parse NID: %s\n", argv[1]);
 687                 return -1;
 688         }
 689
 690         if (lnet_parse_ipaddr (&ip, argv[2]) != 0) {
 691                 fprintf (stderr, "Can't parse ip addr: %s\n", argv[2]);
 692                 return -1;
 693         }
 694
 695         if (lnet_parse_port (&port, argv[3]) != 0) {
 696                 fprintf (stderr, "Can't parse port: %s\n", argv[3]);
 697                 return -1;
 698         }
 699
 700         LIBCFS_IOC_INIT(data);
 701         data.ioc_net    = g_net;
 702         data.ioc_nid    = nid;
 703         data.ioc_u32[0] = ip;
 704         data.ioc_u32[1] = port;
 705
 706         rc = l_ioctl (LNET_DEV_ID, IOC_LIBCFS_ADD_PEER, &data);
 707         if (rc != 0) {
 708                 fprintf (stderr, "failed to add peer: %s\n",
 709                          strerror (errno));
 710                 return -1;
 711         }
 712
 713         return 0;
 714 }
 715
 716 int
 717 jt_ptl_del_peer (int argc, char **argv)
 718 {
 719         struct libcfs_ioctl_data data;
 720         lnet_nid_t               nid = LNET_NID_ANY;
 721         lnet_pid_t               pid = LNET_PID_ANY;
 722         __u32                    ip = 0;
 723         int                      rc;
 724
 725         if (!g_net_is_compatible(argv[0], SOCKLND, O2IBLND, GNILND,
 726                                  PTL4LND, 0))
 727                 return -1;
 728
 729         if (g_net_is_compatible(NULL, SOCKLND, 0)) {
 730                 if (argc > 3) {
 731                         fprintf (stderr, "usage: %s [nid] [ipaddr]\n",
 732                                  argv[0]);
 733                         return 0;
 734                 }
 735         } else if (argc > 2) {
 736                 fprintf (stderr, "usage: %s [nid]\n", argv[0]);
 737                 return 0;
 738         }
 739
 740         if (argc > 1 &&
 741             !libcfs_str2anynid(&nid, argv[1])) {
 742                 fprintf (stderr, "Can't parse nid: %s\n", argv[1]);
 743                 return -1;
 744         }
 745
 746         if (g_net_is_compatible(NULL, SOCKLND, 0)) {
 747                 if (argc > 2 &&
 748                     lnet_parse_ipaddr (&ip, argv[2]) != 0) {
 749                         fprintf (stderr, "Can't parse ip addr: %s\n",
 750                                  argv[2]);
 751                         return -1;
 752                 }
 753         }
 754
 755         LIBCFS_IOC_INIT(data);
 756         data.ioc_net    = g_net;
 757         data.ioc_nid    = nid;
 758         data.ioc_u32[0] = ip;
 759         data.ioc_u32[1] = pid;
 760
 761         rc = l_ioctl(LNET_DEV_ID, IOC_LIBCFS_DEL_PEER, &data);
 762         if (rc != 0) {
 763                 fprintf (stderr, "failed to remove peer: %s\n",
 764                          strerror (errno));
 765                 return -1;
 766         }
 767
 768         return 0;
 769 }
 770
 771 int
 772 jt_ptl_print_connections (int argc, char **argv)
 773 {
 774         struct libcfs_ioctl_data data;
 775         struct lnet_process_id        id;
 776         char                     buffer[2][HOST_NAME_MAX + 1];
 777         int                      index;
 778         int                      rc;
 779
 780         if (!g_net_is_compatible(argv[0], SOCKLND, O2IBLND, GNILND, 0))
 781                 return -1;
 782
 783         for (index = 0; ; index++) {
 784                 LIBCFS_IOC_INIT(data);
 785                 data.ioc_net     = g_net;
 786                 data.ioc_count   = index;
 787
 788                 rc = l_ioctl(LNET_DEV_ID, IOC_LIBCFS_GET_CONN, &data);
 789                 if (rc != 0)
 790                         break;
 791
 792                 if (g_net_is_compatible(NULL, SOCKLND, 0)) {
 793                         id.nid = data.ioc_nid;
 794                         id.pid = data.ioc_u32[6];
 795                         printf("%-20s %s[%d]%s->%s:%d %d/%d %s\n",
 796                                libcfs_id2str(id),
 797                                (data.ioc_u32[3] == SOCKLND_CONN_ANY) ? "A" :
 798                                (data.ioc_u32[3] == SOCKLND_CONN_CONTROL) ? "C" :
 799                                (data.ioc_u32[3] == SOCKLND_CONN_BULK_IN) ? "I" :
 800                          (data.ioc_u32[3] == SOCKLND_CONN_BULK_OUT) ? "O" : "?",
 801                                data.ioc_u32[4], /* scheduler */
 802                                /* local IP addr */
 803                                ptl_ipaddr_2_str(data.ioc_u32[2], buffer[0],
 804                                                 sizeof(buffer[0]), 1),
 805                                /* remote IP addr */
 806                                ptl_ipaddr_2_str(data.ioc_u32[0], buffer[1],
 807                                                 sizeof(buffer[1]), 1),
 808                                data.ioc_u32[1],         /* remote port */
 809                                data.ioc_count, /* tx buffer size */
 810                                data.ioc_u32[5], /* rx buffer size */
 811                                data.ioc_flags ? "nagle" : "nonagle");
 812                 } else if (g_net_is_compatible(NULL, O2IBLND, 0)) {
 813                         printf("%s mtu %d\n",
 814                                libcfs_nid2str(data.ioc_nid),
 815                                data.ioc_u32[0]); /* path MTU */
 816                 } else if (g_net_is_compatible(NULL, GNILND, 0)) {
 817                         printf("%-20s [%d]\n",
 818                                libcfs_nid2str(data.ioc_nid),
 819                                data.ioc_u32[0] /* device id */);
 820                 } else {
 821                         printf("%s\n", libcfs_nid2str(data.ioc_nid));
 822                 }
 823         }
 824
 825         if (index == 0) {
 826                 if (errno == ENOENT) {
 827                         printf ("<no connections>\n");
 828                 } else {
 829                         fprintf(stderr, "Error getting connection list: %s: "
 830                                 "check dmesg.\n",
 831                                 strerror(errno));
 832                 }
 833         }
 834         return 0;
 835 }
 836
 837 int jt_ptl_disconnect(int argc, char **argv)
 838 {
 839         struct libcfs_ioctl_data data;
 840         lnet_nid_t               nid = LNET_NID_ANY;
 841         __u32                    ipaddr = 0;
 842         int                      rc;
 843
 844         if (argc > 3) {
 845                 fprintf(stderr, "usage: %s [nid] [ipaddr]\n", argv[0]);
 846                 return 0;
 847         }
 848
 849         if (!g_net_is_compatible(NULL, SOCKLND, O2IBLND, GNILND, 0))
 850                 return 0;
 851
 852         if (argc >= 2 &&
 853             !libcfs_str2anynid(&nid, argv[1])) {
 854                 fprintf (stderr, "Can't parse nid %s\n", argv[1]);
 855                 return -1;
 856         }
 857
 858         if (g_net_is_compatible (NULL, SOCKLND, 0) &&
 859             argc >= 3 &&
 860             lnet_parse_ipaddr (&ipaddr, argv[2]) != 0) {
 861                 fprintf (stderr, "Can't parse ip addr %s\n", argv[2]);
 862                 return -1;
 863         }
 864
 865         LIBCFS_IOC_INIT(data);
 866         data.ioc_net     = g_net;
 867         data.ioc_nid     = nid;
 868         data.ioc_u32[0]  = ipaddr;
 869
 870         rc = l_ioctl(LNET_DEV_ID, IOC_LIBCFS_CLOSE_CONNECTION, &data);
 871         if (rc != 0) {
 872                 fprintf(stderr, "failed to remove connection: %s\n",
 873                         strerror(errno));
 874                 return -1;
 875         }
 876
 877         return 0;
 878 }
 879
 880 int jt_ptl_push_connection (int argc, char **argv)
 881 {
 882         struct libcfs_ioctl_data data;
 883         int                      rc;
 884         lnet_nid_t               nid = LNET_NID_ANY;
 885
 886         if (argc > 2) {
 887                 fprintf(stderr, "usage: %s [nid]\n", argv[0]);
 888                 return 0;
 889         }
 890
 891         if (!g_net_is_compatible (argv[0], SOCKLND, GNILND, 0))
 892                 return -1;
 893
 894         if (argc > 1 &&
 895             !libcfs_str2anynid(&nid, argv[1])) {
 896                 fprintf(stderr, "Can't parse nid: %s\n", argv[1]);
 897                 return -1;
 898         }
 899
 900         LIBCFS_IOC_INIT(data);
 901         data.ioc_net     = g_net;
 902         data.ioc_nid     = nid;
 903
 904         rc = l_ioctl(LNET_DEV_ID, IOC_LIBCFS_PUSH_CONNECTION, &data);
 905         if (rc != 0) {
 906                 fprintf(stderr, "failed to push connection: %s\n",
 907                         strerror(errno));
 908                 return -1;
 909         }
 910
 911         return 0;
 912 }
 913
 914 int jt_ptl_ping(int argc, char **argv)
 915 {
 916         int                      rc;
 917         int                      timeout;
 918         struct lnet_process_id id;
 919         struct lnet_process_id ids[16];
 920         int                      maxids = sizeof(ids)/sizeof(ids[0]);
 921         struct libcfs_ioctl_data data;
 922         char                    *sep;
 923         int                      i;
 924
 925         fprintf(stderr, "This command has been deprecated. Plesae use 'lnetctl ping'\n");
 926
 927         if (argc < 2) {
 928                 fprintf(stderr, "usage: %s id [timeout (secs)]\n", argv[0]);
 929                 return 0;
 930         }
 931
 932         sep = strchr(argv[1], '-');
 933         if (sep == NULL) {
 934                 rc = lnet_parse_nid(argv[1], &id);
 935                 if (rc != 0)
 936                         return -1;
 937         } else {
 938                 char   *end;
 939
 940                 if (argv[1][0] == 'u' ||
 941                     argv[1][0] == 'U')
 942                         id.pid = strtoul(&argv[1][1], &end, 0) | LNET_PID_USERFLAG;
 943                 else
 944                         id.pid = strtoul(argv[1], &end, 0);
 945
 946                 if (end != sep) { /* assuming '-' is part of hostname */
 947                         rc = lnet_parse_nid(argv[1], &id);
 948                         if (rc != 0)
 949                                 return -1;
 950                 } else {
 951                         id.nid = libcfs_str2nid(sep + 1);
 952
 953                         if (id.nid == LNET_NID_ANY) {
 954                                 fprintf(stderr,
 955                                         "Can't parse process id \"%s\"\n",
 956                                         argv[1]);
 957                                 return -1;
 958                         }
 959                 }
 960         }
 961
 962         if (argc > 2) {
 963                 timeout = 1000 * atol(argv[2]);
 964                 if (timeout > 120 * 1000) {
 965                         fprintf(stderr, "Timeout %s is to large\n",
 966                                 argv[2]);
 967                         return -1;
 968                 }
 969         } else
 970                 timeout = 1000;                 /* default 1 second timeout */
 971
 972         LIBCFS_IOC_INIT (data);
 973         data.ioc_nid     = id.nid;
 974         data.ioc_u32[0]  = id.pid;
 975         data.ioc_u32[1]  = timeout;
 976         data.ioc_plen1   = sizeof(ids);
 977         data.ioc_pbuf1   = (char *)ids;
 978
 979         rc = l_ioctl(LNET_DEV_ID, IOC_LIBCFS_PING, &data);
 980         if (rc != 0) {
 981                 fprintf(stderr, "failed to ping %s: %s\n",
 982                         id.pid == LNET_PID_ANY ?
 983                         libcfs_nid2str(id.nid) : libcfs_id2str(id),
 984                         strerror(errno));
 985                 return -1;
 986         }
 987
 988         for (i = 0; i < data.ioc_count && i < maxids; i++)
 989                 printf("%s\n", libcfs_id2str(ids[i]));
 990
 991         if (data.ioc_count > maxids)
 992                 printf("%d out of %d ids listed\n", maxids, data.ioc_count);
 993
 994         return 0;
 995 }
 996
 997 int jt_ptl_mynid(int argc, char **argv)
 998 {
 999         struct libcfs_ioctl_data data;
1000         lnet_nid_t               nid;
1001         int rc;
1002
1003         if (argc != 2) {
1004                 fprintf(stderr, "usage: %s NID\n", argv[0]);
1005                 return 0;
1006         }
1007
1008         nid = libcfs_str2nid(argv[1]);
1009         if (nid == LNET_NID_ANY) {
1010                 fprintf(stderr, "Can't parse NID '%s'\n", argv[1]);
1011                 return -1;
1012         }
1013
1014         LIBCFS_IOC_INIT(data);
1015         data.ioc_net = LNET_NIDNET(nid);
1016         data.ioc_nid = nid;
1017
1018         rc = l_ioctl(LNET_DEV_ID, IOC_LIBCFS_REGISTER_MYNID, &data);
1019         if (rc < 0)
1020                 fprintf(stderr, "setting my NID failed: %s\n",
1021                        strerror(errno));
1022         else
1023                 printf("registered my nid %s\n", libcfs_nid2str(nid));
1024
1025         return 0;
1026 }
1027
1028 int
1029 jt_ptl_fail_nid (int argc, char **argv)
1030 {
1031         int                      rc;
1032         lnet_nid_t               nid;
1033         int                      threshold;
1034         struct libcfs_ioctl_data data;
1035
1036         if (argc < 2 || argc > 3)
1037         {
1038                 fprintf (stderr, "usage: %s nid|\"*\" [count (0 == mend)]\n", argv[0]);
1039                 return (0);
1040         }
1041
1042         if (!libcfs_str2anynid(&nid, argv[1]))
1043         {
1044                 fprintf (stderr, "Can't parse nid \"%s\"\n", argv[1]);
1045                 return (-1);
1046         }
1047
1048         if (argc < 3) {
1049                 threshold = LNET_MD_THRESH_INF;
1050         } else if (sscanf(argv[2], "%i", &threshold) != 1) {
1051                 fprintf (stderr, "Can't parse count \"%s\"\n", argv[2]);
1052                 return (-1);
1053         }
1054
1055         LIBCFS_IOC_INIT (data);
1056         data.ioc_nid = nid;
1057         data.ioc_count = threshold;
1058
1059         rc = l_ioctl (LNET_DEV_ID, IOC_LIBCFS_FAIL_NID, &data);
1060         if (rc < 0)
1061                 fprintf (stderr, "IOC_LIBCFS_FAIL_NID failed: %s\n",
1062                          strerror (errno));
1063         else
1064                 printf ("%s %s\n", threshold == 0 ? "Unfailing" : "Failing", argv[1]);
1065
1066         return (0);
1067 }
1068
1069 int
1070 jt_ptl_add_route (int argc, char **argv)
1071 {
1072         struct lnet_ioctl_config_data data;
1073         lnet_nid_t               gateway_nid;
1074         __u32                    hops = LNET_UNDEFINED_HOPS;
1075         unsigned int             priority = 0;
1076         char                    *end;
1077         int                      rc;
1078
1079         if (argc < 2 || argc > 4) {
1080                 fprintf(stderr, "usage: %s gateway [hopcount [priority]]\n",
1081                         argv[0]);
1082                 return -1;
1083         }
1084
1085         if (g_net_is_set(argv[0]) == 0)
1086                 return -1;
1087
1088         gateway_nid = libcfs_str2nid(argv[1]);
1089         if (gateway_nid == LNET_NID_ANY) {
1090                 fprintf(stderr, "Can't parse gateway NID \"%s\"\n", argv[1]);
1091                 return -1;
1092         }
1093
1094         if (argc > 2) {
1095                 hops = strtol(argv[2], &end, 0);
1096                 if (hops == 0 || hops >= 256 ||
1097                     (end != NULL && *end != 0)) {
1098                         fprintf(stderr, "Can't parse hopcount \"%s\"\n",
1099                                 argv[2]);
1100                         return -1;
1101                 }
1102                 if (argc == 4) {
1103                         priority = strtoul(argv[3], &end, 0);
1104                         if (end != NULL && *end != 0) {
1105                                 fprintf(stderr,
1106                                         "Can't parse priority \"%s\"\n",
1107                                         argv[3]);
1108                                 return -1;
1109                         }
1110                 }
1111         }
1112
1113         LIBCFS_IOC_INIT_V2(data, cfg_hdr);
1114         data.cfg_net = g_net;
1115         data.cfg_config_u.cfg_route.rtr_hop = hops;
1116         data.cfg_nid = gateway_nid;
1117         data.cfg_config_u.cfg_route.rtr_priority = priority;
1118
1119         rc = l_ioctl(LNET_DEV_ID, IOC_LIBCFS_ADD_ROUTE, &data);
1120         if (rc != 0) {
1121                 fprintf(stderr, "IOC_LIBCFS_ADD_ROUTE failed: %s\n",
1122                         strerror(errno));
1123                 return -1;
1124         }
1125
1126         return 0;
1127 }
1128
1129 int
1130 jt_ptl_del_route (int argc, char **argv)
1131 {
1132         struct lnet_ioctl_config_data data;
1133         lnet_nid_t               nid;
1134         int                      rc;
1135
1136         if (argc != 2) {
1137                 fprintf(stderr, "usage: %s gatewayNID\n", argv[0]);
1138                 return 0;
1139         }
1140
1141         if (libcfs_str2anynid(&nid, argv[1]) == 0) {
1142                 fprintf(stderr, "Can't parse gateway NID "
1143                         "\"%s\"\n", argv[1]);
1144                 return -1;
1145         }
1146
1147         LIBCFS_IOC_INIT_V2(data, cfg_hdr);
1148         data.cfg_net = g_net_set ? g_net : LNET_NIDNET(LNET_NID_ANY);
1149         data.cfg_nid = nid;
1150
1151         rc = l_ioctl(LNET_DEV_ID, IOC_LIBCFS_DEL_ROUTE, &data);
1152         if (rc != 0) {
1153                 fprintf(stderr, "IOC_LIBCFS_DEL_ROUTE (%s) failed: %s\n",
1154                         libcfs_nid2str(nid), strerror(errno));
1155                 return -1;
1156         }
1157
1158         return 0;
1159 }
1160
1161 int
1162 jt_ptl_notify_router (int argc, char **argv)
1163 {
1164         struct libcfs_ioctl_data data;
1165         int                      enable;
1166         lnet_nid_t               nid;
1167         int                      rc;
1168         struct timeval           now;
1169         time_t                   when;
1170
1171         if (argc < 3)
1172         {
1173                 fprintf (stderr, "usage: %s targetNID <up/down> [<time>]\n",
1174                          argv[0]);
1175                 return (0);
1176         }
1177
1178         nid = libcfs_str2nid(argv[1]);
1179         if (nid == LNET_NID_ANY) {
1180                 fprintf (stderr, "Can't parse target NID \"%s\"\n", argv[1]);
1181                 return (-1);
1182         }
1183
1184         if (lnet_parse_bool (&enable, argv[2]) != 0) {
1185                 fprintf (stderr, "Can't parse boolean %s\n", argv[2]);
1186                 return (-1);
1187         }
1188
1189         gettimeofday(&now, NULL);
1190
1191         if (argc < 4) {
1192                 when = now.tv_sec;
1193         } else if (lnet_parse_time (&when, argv[3]) != 0) {
1194                 fprintf(stderr, "Can't parse time %s\n"
1195                         "Please specify either 'YYYY-MM-DD-HH:MM:SS'\n"
1196                         "or an absolute unix time in seconds\n", argv[3]);
1197                 return (-1);
1198         } else if (when > now.tv_sec) {
1199                 fprintf (stderr, "%s specifies a time in the future\n",
1200                          argv[3]);
1201                 return (-1);
1202         }
1203
1204         LIBCFS_IOC_INIT(data);
1205         data.ioc_nid = nid;
1206         data.ioc_flags = enable;
1207         /* Yeuch; 'cept I need a __u64 on 64 bit machines... */
1208         data.ioc_u64[0] = (__u64)when;
1209
1210         rc = l_ioctl(LNET_DEV_ID, IOC_LIBCFS_NOTIFY_ROUTER, &data);
1211         if (rc != 0) {
1212                 fprintf (stderr, "IOC_LIBCFS_NOTIFY_ROUTER (%s) failed: %s\n",
1213                          libcfs_nid2str(nid), strerror (errno));
1214                 return (-1);
1215         }
1216
1217         return (0);
1218 }
1219
1220 int
1221 jt_ptl_print_routes (int argc, char **argv)
1222 {
1223         struct lnet_ioctl_config_data  data;
1224         int                       rc;
1225         int                       index;
1226         __u32                     net;
1227         lnet_nid_t                nid;
1228         unsigned int              hops;
1229         int                       alive;
1230         unsigned int              pri;
1231
1232         fprintf(stderr, "This command has been deprecated. Plesae use 'lnetctl route show'\n");
1233
1234         for (index = 0; ; index++) {
1235                 LIBCFS_IOC_INIT_V2(data, cfg_hdr);
1236                 data.cfg_count = index;
1237
1238                 rc = l_ioctl(LNET_DEV_ID, IOC_LIBCFS_GET_ROUTE, &data);
1239                 if (rc != 0)
1240                         break;
1241
1242                 net     = data.cfg_net;
1243                 hops    = data.cfg_config_u.cfg_route.rtr_hop;
1244                 nid     = data.cfg_nid;
1245                 alive   = data.cfg_config_u.cfg_route.rtr_flags;
1246                 pri     = data.cfg_config_u.cfg_route.rtr_priority;
1247
1248                 printf("net %18s hops %u gw %32s %s pri %u\n",
1249                        libcfs_net2str(net), hops,
1250                        libcfs_nid2str(nid), alive ? "up" : "down", pri);
1251         }
1252
1253         if (errno != ENOENT)
1254                 fprintf(stderr, "Error getting routes: %s: check dmesg.\n",
1255                         strerror(errno));
1256
1257         return 0;
1258 }
1259
1260 static int
1261 fault_attr_nid_parse(char *str, lnet_nid_t *nid_p)
1262 {
1263         lnet_nid_t nid;
1264         __u32      net;
1265         int        rc = 0;
1266
1267         /* NB: can't support range ipaddress except * and *@net */
1268         if (strlen(str) > 2 && str[0] == '*' && str[1] == '@') {
1269                 net = libcfs_str2net(str + 2);
1270                 if (net == LNET_NIDNET(LNET_NID_ANY))
1271                         goto failed;
1272
1273                 nid = LNET_MKNID(net, LNET_NIDADDR(LNET_NID_ANY));
1274         } else {
1275                 rc = libcfs_str2anynid(&nid, str);
1276                 if (!rc)
1277                         goto failed;
1278         }
1279
1280         *nid_p = nid;
1281         return 0;
1282 failed:
1283         fprintf(stderr, "Invalid NID : %s\n", str);
1284         return -1;
1285 }
1286
1287 static int
1288 fault_attr_msg_parse(char *msg_str, __u32 *mask_p)
1289 {
1290         if (!strcasecmp(msg_str, "put")) {
1291                 *mask_p |= LNET_PUT_BIT;
1292                 return 0;
1293
1294         } else if (!strcasecmp(msg_str, "ack")) {
1295                 *mask_p |= LNET_ACK_BIT;
1296                 return 0;
1297
1298         } else if (!strcasecmp(msg_str, "get")) {
1299                 *mask_p |= LNET_GET_BIT;
1300                 return 0;
1301
1302         } else if (!strcasecmp(msg_str, "reply")) {
1303                 *mask_p |= LNET_REPLY_BIT;
1304                 return 0;
1305         }
1306
1307         fprintf(stderr, "unknown message type %s\n", msg_str);
1308         return -1;
1309 }
1310
1311 static int
1312 fault_attr_ptl_parse(char *ptl_str, __u64 *mask_p)
1313 {
1314         unsigned long rc = strtoul(optarg, NULL, 0);
1315
1316         if (rc >= 64) {
1317                 fprintf(stderr, "invalid portal: %lu\n", rc);
1318                 return -1;
1319         }
1320
1321         *mask_p |= (1ULL << rc);
1322         return 0;
1323 }
1324
1325 static int
1326 fault_simul_rule_add(__u32 opc, char *name, int argc, char **argv)
1327 {
1328         struct libcfs_ioctl_data  data = { { 0 } };
1329         struct lnet_fault_attr    attr;
1330         char                     *optstr;
1331         int                       rc;
1332
1333         static const struct option opts[] = {
1334         { .name = "source",   .has_arg = required_argument, .val = 's' },
1335         { .name = "dest",     .has_arg = required_argument, .val = 'd' },
1336         { .name = "rate",     .has_arg = required_argument, .val = 'r' },
1337         { .name = "interval", .has_arg = required_argument, .val = 'i' },
1338         { .name = "latency",  .has_arg = required_argument, .val = 'l' },
1339         { .name = "portal",   .has_arg = required_argument, .val = 'p' },
1340         { .name = "message",  .has_arg = required_argument, .val = 'm' },
1341         { .name = NULL } };
1342
1343         if (argc == 1) {
1344                 fprintf(stderr, "Failed, please provide source, destination "
1345                                 "and rate of rule\n");
1346                 return -1;
1347         }
1348
1349         optstr = opc == LNET_CTL_DROP_ADD ? "s:d:r:i:p:m:" : "s:d:r:l:p:m:";
1350         memset(&attr, 0, sizeof(attr));
1351         while (1) {
1352                 char c = getopt_long(argc, argv, optstr, opts, NULL);
1353
1354                 if (c == -1)
1355                         break;
1356
1357                 switch (c) {
1358                 case 's': /* source NID/NET */
1359                         rc = fault_attr_nid_parse(optarg, &attr.fa_src);
1360                         if (rc != 0)
1361                                 goto getopt_failed;
1362                         break;
1363
1364                 case 'd': /* dest NID/NET */
1365                         rc = fault_attr_nid_parse(optarg, &attr.fa_dst);
1366                         if (rc != 0)
1367                                 goto getopt_failed;
1368                         break;
1369
1370                 case 'r': /* drop rate */
1371                         if (opc == LNET_CTL_DROP_ADD)
1372                                 attr.u.drop.da_rate = strtoul(optarg, NULL, 0);
1373                         else
1374                                 attr.u.delay.la_rate = strtoul(optarg, NULL, 0);
1375                         break;
1376
1377                 case 'i': /* time interval (# seconds) for message drop */
1378                         if (opc == LNET_CTL_DROP_ADD)
1379                                 attr.u.drop.da_interval = strtoul(optarg,
1380                                                                   NULL, 0);
1381                         else
1382                                 attr.u.delay.la_interval = strtoul(optarg,
1383                                                                    NULL, 0);
1384                         break;
1385
1386                 case 'l': /* seconds to wait before activating rule */
1387                         attr.u.delay.la_latency = strtoul(optarg, NULL, 0);
1388                         break;
1389
1390                 case 'p': /* portal to filter */
1391                         rc = fault_attr_ptl_parse(optarg, &attr.fa_ptl_mask);
1392                         if (rc != 0)
1393                                 goto getopt_failed;
1394                         break;
1395
1396                 case 'm': /* message types to filter */
1397                         rc = fault_attr_msg_parse(optarg, &attr.fa_msg_mask);
1398                         if (rc != 0)
1399                                 goto getopt_failed;
1400                         break;
1401
1402                 default:
1403                         fprintf(stderr, "error: %s: option '%s' "
1404                                 "unrecognized\n", argv[0], argv[optind - 1]);
1405                         goto getopt_failed;
1406                 }
1407         }
1408         optind = 1;
1409
1410         if (opc == LNET_CTL_DROP_ADD) {
1411                 /* NB: drop rate and interval are exclusive to each other */
1412                 if (!((attr.u.drop.da_rate == 0) ^
1413                       (attr.u.drop.da_interval == 0))) {
1414                         fprintf(stderr,
1415                                 "please provide either drop rate or interval "
1416                                 "but not both at the same time.\n");
1417                         return -1;
1418                 }
1419         } else if (opc == LNET_CTL_DELAY_ADD) {
1420                 if (!((attr.u.delay.la_rate == 0) ^
1421                       (attr.u.delay.la_interval == 0))) {
1422                         fprintf(stderr,
1423                                 "please provide either delay rate or interval "
1424                                 "but not both at the same time.\n");
1425                         return -1;
1426                 }
1427
1428                 if (attr.u.delay.la_latency == 0) {
1429                         fprintf(stderr, "latency cannot be zero\n");
1430                         return -1;
1431                 }
1432         }
1433
1434         if (attr.fa_src == 0 || attr.fa_dst == 0) {
1435                 fprintf(stderr, "Please provide both source and destination "
1436                                 "of %s rule\n", name);
1437                 return -1;
1438         }
1439
1440         data.ioc_flags = opc;
1441         data.ioc_inllen1 = sizeof(attr);
1442         data.ioc_inlbuf1 = (char *)&attr;
1443         if (libcfs_ioctl_pack(&data, &ioc_buf, IOC_BUF_SIZE) != 0) {
1444                 fprintf(stderr, "libcfs_ioctl_pack failed\n");
1445                 return -1;
1446         }
1447
1448         rc = l_ioctl(LNET_DEV_ID, IOC_LIBCFS_LNET_FAULT, ioc_buf);
1449         if (rc != 0) {
1450                 fprintf(stderr, "add %s rule %s->%s failed: %s\n",
1451                         name, libcfs_nid2str(attr.fa_src),
1452                         libcfs_nid2str(attr.fa_dst), strerror(errno));
1453                 return -1;
1454         }
1455
1456         printf("Added %s rule %s->%s (1/%d)\n",
1457                name, libcfs_nid2str(attr.fa_src), libcfs_nid2str(attr.fa_dst),
1458                opc == LNET_CTL_DROP_ADD ?
1459                attr.u.drop.da_rate : attr.u.delay.la_rate);
1460         return 0;
1461
1462 getopt_failed:
1463         optind = 1;
1464         return -1;
1465 }
1466
1467 int
1468 jt_ptl_drop_add(int argc, char **argv)
1469 {
1470         return fault_simul_rule_add(LNET_CTL_DROP_ADD, "drop", argc, argv);
1471 }
1472
1473 int
1474 jt_ptl_delay_add(int argc, char **argv)
1475 {
1476         return fault_simul_rule_add(LNET_CTL_DELAY_ADD, "delay", argc, argv);
1477 }
1478
1479 static int
1480 fault_simul_rule_del(__u32 opc, char *name, int argc, char **argv)
1481 {
1482         struct libcfs_ioctl_data data = { { 0 } };
1483         struct lnet_fault_attr   attr;
1484         bool                     all = false;
1485         int                      rc;
1486
1487         static const struct option opts[] = {
1488                 { .name = "source", .has_arg = required_argument, .val = 's' },
1489                 { .name = "dest",   .has_arg = required_argument, .val = 'd' },
1490                 { .name = "all",    .has_arg = no_argument,       .val = 'a' },
1491                 { .name = NULL } };
1492
1493         if (argc == 1) {
1494                 fprintf(stderr, "Failed, please provide source and "
1495                                 "destination of rule\n");
1496                 return -1;
1497         }
1498
1499         memset(&attr, 0, sizeof(attr));
1500         while (1) {
1501                 char c = getopt_long(argc, argv, "s:d:a", opts, NULL);
1502
1503                 if (c == -1 || all)
1504                         break;
1505
1506                 switch (c) {
1507                 case 's':
1508                         rc = fault_attr_nid_parse(optarg, &attr.fa_src);
1509                         if (rc != 0)
1510                                 goto getopt_failed;
1511                         break;
1512                 case 'd':
1513                         rc = fault_attr_nid_parse(optarg, &attr.fa_dst);
1514                         if (rc != 0)
1515                                 goto getopt_failed;
1516                         break;
1517                 case 'a':
1518                         attr.fa_src = attr.fa_dst = 0;
1519                         all = true;
1520                         break;
1521                 default:
1522                         fprintf(stderr, "error: %s: option '%s' "
1523                                 "unrecognized\n", argv[0], argv[optind - 1]);
1524                         goto getopt_failed;
1525                 }
1526         }
1527         optind = 1;
1528
1529         data.ioc_flags = opc;
1530         data.ioc_inllen1 = sizeof(attr);
1531         data.ioc_inlbuf1 = (char *)&attr;
1532         if (libcfs_ioctl_pack(&data, &ioc_buf, IOC_BUF_SIZE) != 0) {
1533                 fprintf(stderr, "libcfs_ioctl_pack failed\n");
1534                 return -1;
1535         }
1536
1537         rc = l_ioctl(LNET_DEV_ID, IOC_LIBCFS_LNET_FAULT, ioc_buf);
1538         if (rc != 0) {
1539                 fprintf(stderr, "remove %s rule %s->%s failed: %s\n", name,
1540                         all ? "all" : libcfs_nid2str(attr.fa_src),
1541                         all ? "all" : libcfs_nid2str(attr.fa_dst),
1542                         strerror(errno));
1543                 return -1;
1544         }
1545
1546         libcfs_ioctl_unpack(&data, ioc_buf);
1547         printf("Removed %d %s rules\n", data.ioc_count, name);
1548         return 0;
1549
1550 getopt_failed:
1551         optind = 1;
1552         return -1;
1553 }
1554
1555 int
1556 jt_ptl_drop_del(int argc, char **argv)
1557 {
1558         return fault_simul_rule_del(LNET_CTL_DROP_DEL, "drop", argc, argv);
1559 }
1560
1561 int
1562 jt_ptl_delay_del(int argc, char **argv)
1563 {
1564         return fault_simul_rule_del(LNET_CTL_DELAY_DEL, "delay", argc, argv);
1565 }
1566
1567 static int
1568 fault_simul_rule_reset(__u32 opc, char *name, int argc, char **argv)
1569 {
1570         struct libcfs_ioctl_data   data = { { 0 } };
1571         int                        rc;
1572
1573         LIBCFS_IOC_INIT(data);
1574         data.ioc_flags = opc;
1575
1576         rc = l_ioctl(LNET_DEV_ID, IOC_LIBCFS_LNET_FAULT, &data);
1577         if (rc != 0) {
1578                 fprintf(stderr, "failed to reset %s stats: %s\n",
1579                         name, strerror(errno));
1580                 return -1;
1581         }
1582         return 0;
1583 }
1584
1585 int
1586 jt_ptl_drop_reset(int argc, char **argv)
1587 {
1588         return fault_simul_rule_reset(LNET_CTL_DROP_RESET, "drop", argc, argv);
1589 }
1590
1591 int
1592 jt_ptl_delay_reset(int argc, char **argv)
1593 {
1594         return fault_simul_rule_reset(LNET_CTL_DELAY_RESET, "delay",
1595                                       argc, argv);
1596 }
1597
1598 static int
1599 fault_simul_rule_list(__u32 opc, char *name, int argc, char **argv)
1600 {
1601         struct libcfs_ioctl_data data = { { 0 } };
1602         struct lnet_fault_attr   attr;
1603         struct lnet_fault_stat   stat;
1604         int                      pos;
1605
1606         printf("LNet %s rules:\n", name);
1607         for (pos = 0;; pos++) {
1608                 int             rc;
1609
1610                 memset(&attr, 0, sizeof(attr));
1611                 memset(&stat, 0, sizeof(stat));
1612
1613                 data.ioc_count = pos;
1614                 data.ioc_flags = opc;
1615                 data.ioc_inllen1 = sizeof(attr);
1616                 data.ioc_inlbuf1 = (char *)&attr;
1617                 data.ioc_inllen2 = sizeof(stat);
1618                 data.ioc_inlbuf2 = (char *)&stat;
1619                 if (libcfs_ioctl_pack(&data, &ioc_buf, IOC_BUF_SIZE) != 0) {
1620                         fprintf(stderr, "libcfs_ioctl_pack failed\n");
1621                         return -1;
1622                 }
1623
1624                 rc = l_ioctl(LNET_DEV_ID, IOC_LIBCFS_LNET_FAULT, ioc_buf);
1625                 if (rc != 0)
1626                         break;
1627
1628                 libcfs_ioctl_unpack(&data, ioc_buf);
1629
1630                 if (opc == LNET_CTL_DROP_LIST) {
1631                         printf("%s->%s (1/%d | %d) ptl %#jx, msg %x, "
1632                                "%ju/%ju, PUT %ju, ACK %ju, GET "
1633                                "%ju, REP %ju\n",
1634                                libcfs_nid2str(attr.fa_src),
1635                                libcfs_nid2str(attr.fa_dst),
1636                                attr.u.drop.da_rate, attr.u.drop.da_interval,
1637                                (uintmax_t)attr.fa_ptl_mask, attr.fa_msg_mask,
1638                                (uintmax_t)stat.u.drop.ds_dropped,
1639                                (uintmax_t)stat.fs_count,
1640                                (uintmax_t)stat.fs_put,
1641                                (uintmax_t)stat.fs_ack,
1642                                (uintmax_t)stat.fs_get,
1643                                (uintmax_t)stat.fs_reply);
1644
1645                 } else if (opc == LNET_CTL_DELAY_LIST) {
1646                         printf("%s->%s (1/%d | %d, latency %d) ptl %#jx"
1647                                ", msg %x, %ju/%ju, PUT %ju"
1648                                ", ACK %ju, GET %ju, REP %ju\n",
1649                                libcfs_nid2str(attr.fa_src),
1650                                libcfs_nid2str(attr.fa_dst),
1651                                attr.u.delay.la_rate, attr.u.delay.la_interval,
1652                                attr.u.delay.la_latency,
1653                                (uintmax_t)attr.fa_ptl_mask, attr.fa_msg_mask,
1654                                (uintmax_t)stat.u.delay.ls_delayed,
1655                                (uintmax_t)stat.fs_count,
1656                                (uintmax_t)stat.fs_put,
1657                                (uintmax_t)stat.fs_ack,
1658                                (uintmax_t)stat.fs_get,
1659                                (uintmax_t)stat.fs_reply);
1660                 }
1661         }
1662         printf("found total %d\n", pos);
1663
1664         return 0;
1665 }
1666
1667 int
1668 jt_ptl_drop_list(int argc, char **argv)
1669 {
1670         return fault_simul_rule_list(LNET_CTL_DROP_LIST, "drop", argc, argv);
1671 }
1672
1673 int
1674 jt_ptl_delay_list(int argc, char **argv)
1675 {
1676         return fault_simul_rule_list(LNET_CTL_DELAY_LIST, "delay", argc, argv);
1677 }
1678
1679 double
1680 get_cycles_per_usec ()
1681 {
1682         FILE      *f = fopen ("/proc/cpuinfo", "r");
1683         double     mhz;
1684         char      line[64];
1685
1686         if (f != NULL) {
1687                 while (fgets (line, sizeof (line), f) != NULL)
1688                         if (sscanf (line, "cpu MHz : %lf", &mhz) == 1) {
1689                                 fclose (f);
1690                                 return (mhz);
1691                         }
1692                 fclose (f);
1693         }
1694
1695         fprintf (stderr, "Can't read/parse /proc/cpuinfo\n");
1696         return (1000.0);
1697 }
1698
1699 int jt_ptl_testprotocompat(int argc, char **argv)
1700 {
1701         struct libcfs_ioctl_data  data;
1702         int                       rc;
1703         int                       flags;
1704         char                     *end;
1705
1706         if (argc < 2)  {
1707                 fprintf(stderr, "usage: %s <number>\n", argv[0]);
1708                 return 0;
1709         }
1710
1711         flags = strtol(argv[1], &end, 0);
1712         if (flags < 0 || *end != 0) {
1713                 fprintf(stderr, "Can't parse flags '%s'\n", argv[1]);
1714                 return -1;
1715         }
1716
1717         LIBCFS_IOC_INIT(data);
1718         data.ioc_flags = flags;
1719         rc = l_ioctl(LNET_DEV_ID, IOC_LIBCFS_TESTPROTOCOMPAT, &data);
1720
1721         if (rc != 0) {
1722                 fprintf(stderr, "test proto compat %x failed: %s\n",
1723                         flags, strerror(errno));
1724                 return -1;
1725         }
1726
1727         printf("test proto compat %x OK\n", flags);
1728         return 0;
1729 }
1730
1731