lnet/klnds/gnilnd/gnilnd_gemini.h

   1 /*
   2  * Copyright (C) 2009-2012 Cray, Inc.
   3  *
   4  *   Author: Nic Henke <nic@cray.com>
   5  *   Author: James Shimek <jshimek@cray.com>
   6  *
   7  *   This file is part of Lustre, http://www.lustre.org.
   8  *
   9  *   Lustre is free software; you can redistribute it and/or
  10  *   modify it under the terms of version 2 of the GNU General Public
  11  *   License as published by the Free Software Foundation.
  12  *
  13  *   Lustre is distributed in the hope that it will be useful,
  14  *   but WITHOUT ANY WARRANTY; without even the implied warranty of
  15  *   MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  16  *   GNU General Public License for more details.
  17  *
  18  *   You should have received a copy of the GNU General Public License
  19  *   along with Lustre; if not, write to the Free Software
  20  *   Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
  21  *
  22  */
  23 #ifndef _GNILND_GEMINI_H
  24 #define _GNILND_GEMINI_H
  25
  26 #ifndef _GNILND_HSS_OPS_H
  27 # error "must include gnilnd_hss_ops.h first"
  28 #endif
  29
  30 /* Set HW related values */
  31 #define GNILND_BASE_TIMEOUT        60            /* default sane timeout */
  32 #define GNILND_CHECKSUM_DEFAULT     3            /* all on for Gemini */
  33
  34 #define GNILND_REVERSE_RDMA         GNILND_REVERSE_NONE
  35 #define GNILND_RDMA_DLVR_OPTION     GNI_DLVMODE_PERFORMANCE
  36
  37 /* plug in our functions for use on the simulator */
  38 #if !defined(GNILND_USE_RCA)
  39
  40 #define kgnilnd_hw_hb()              do {} while(0)
  41
  42 /* fake a table that'd work for lookups in SimNow */
  43
  44 typedef struct kgn_nid_entry {
  45         __u32   nid;
  46         __u32   nicaddr;
  47 } kgn_nid_entry_t;
  48
  49 /* Gemini SimNow has a hard coded table to use - no RCA there */
  50 #define GNILND_MAX_NID_TABLE    0xffffffff
  51
  52 /* this is all of the nodes defined in the Baker SimNow "sim_platforms" page */
  53 static kgn_nid_entry_t kgn_nid_table[] = {
  54         {0x1, 0x100}, {0x2, 0x101}, {0x3, 0x104}, {0x4, 0x105},
  55         {0x5, 0x108}, {0x6, 0x109}, {0x7, 0x10c}, {0x8, 0x10d},
  56         {0x9, 0x110}, {0xa, 0x111}, {0xb, 0x114}, {0xc, 0x115},
  57         {0xd, 0x118}, {0xe, 0x119}, {0xf, 0x11c}, {0x10, 0x11d},
  58         {0x11, 0x120}, {0x12, 0x121}, {0x13, 0x124}, {0x14, 0x125},
  59         {0x15, 0x128}, {0x16, 0x129}, {0x17, 0x12c}, {0x18, 0x12d},
  60         {0x19, 0x130}, {0x1a, 0x131}, {0x1b, 0x134}, {0x1c, 0x135},
  61         {0x1d, 0x138}, {0x1e, 0x139}, {0x1f, 0x13c}, {0x20, 0x13d},
  62         {0x21, 0x140}, {0x22, 0x141}, {0x23, 0x144}, {0x24, 0x145},
  63         {0x25, 0x148}, {0x26, 0x149}, {0x27, 0x14c}, {0x28, 0x14d},
  64         {0x29, 0x150}, {0x2a, 0x151}, {0x2b, 0x154}, {0x2c, 0x155},
  65         {0x2d, 0x158}, {0x2e, 0x159}, {0x2f, 0x15c}, {0x30, 0x15d},
  66         {0x31, 0x160}, {0x32, 0x161}, {0x33, 0x164}, {0x3d, 0x178},
  67         {0x34, 0x165}, {0x3e, 0x179}, {0x35, 0x168}, {0x3f, 0x17c},
  68         {0x36, 0x169}, {0x40, 0x17d}, {0x37, 0x16c}, {0x41, 0x180},
  69         {0x38, 0x16d}, {0x42, 0x181}, {0x39, 0x170}, {0x3a, 0x171},
  70         {0x3b, 0x174}, {0x3c, 0x175}, {0x43, 0x184}, {0x44, 0x185},
  71         {0x45, 0x188}, {0x46, 0x189}, {0x47, 0x18c}, {0x48, 0x18d},
  72         /* entries after this are for 'dead' peer tests */
  73         {0x63, 0x1ff}, {0x111, 0x209},
  74         {GNILND_MAX_NID_TABLE, GNILND_MAX_NID_TABLE}
  75 };
  76
  77 static inline int
  78 kgnilnd_nid_to_nicaddrs(__u32 nid, int numnic, __u32 *nicaddr)
  79 {
  80         int i;
  81         /* GNILND_NO_RCA, so use hardcoded table for Gemini SimNow */
  82         if (numnic > 1) {
  83                 CERROR("manual nid2nic translation doesn't support"
  84                        "multiple nic addrs (you asked for %d)\n",
  85                         numnic);
  86                 return -EINVAL;
  87         }
  88         for (i = 0; ; i++) {
  89                 if (kgn_nid_table[i].nid == GNILND_MAX_NID_TABLE) {
  90                         CERROR("could not translate %u to a NIC "
  91                                "address\n", nid);
  92                         return -ESRCH;
  93                 }
  94                 if (kgn_nid_table[i].nid == nid) {
  95                         *nicaddr = kgn_nid_table[i].nicaddr;
  96                         CDEBUG(D_NETTRACE, "Sim nid %d -> nic 0x%x\n", nid, *nicaddr);
  97
  98                         return 1;
  99                 }
 100         }
 101 }
 102
 103 static inline int
 104 kgnilnd_nicaddr_to_nid(__u32 nicaddr, __u32 *nid)
 105 {
 106         int i;
 107         /* GNILND_RCA_NOT_HOME, so use hardcoded table for SimNow */
 108         for (i = 0; ; i++) {
 109                 if (kgn_nid_table[i].nicaddr == GNILND_MAX_NID_TABLE) {
 110                         CERROR("could not translate NIC address "
 111                                 "%u\n",
 112                                 nicaddr);
 113                         return -ESRCH;
 114                 }
 115                 if (kgn_nid_table[i].nicaddr == nicaddr) {
 116                         *nid = kgn_nid_table[i].nid;
 117                         return 1;
 118                 }
 119         }
 120 }
 121
 122 static inline int
 123 kgnilnd_setup_nic_translation(__u32 device_id)
 124 {
 125         LCONSOLE_INFO("using Gemini SimNow nid table for RCA translation\n");
 126
 127         /* no real setup for Gemini Sim, just log the console message */
 128
 129         return 0;
 130 }
 131
 132 #endif /* GNILND_USE_RCA */
 133
 134
 135 #endif /* _GNILND_GEMINI_H */