lustre/tests/mcr-routed-config.sh

   1 #!/bin/bash
   2
   3 config=${1:-mcr2.xml}
   4
   5 LMC="save_cmd"
   6 LMC_REAL="../../lustre/utils/lmc -m $config"
   7
   8 # TCP/IP servers
   9 SERVER_START=1
  10 SERVER_CNT=62
  11 GW_START=1
  12 GW_CNT=31
  13 MDS=mcr23
  14 UUIDLIST=${UUIDLIST:-/home/bluearc/UUID.0920}
  15
  16 # THis is needed for to create route for elan network
  17 CLIENT_LO=mcr40
  18 CLIENT_HI=mcr96
  19
  20 TCPBUF=1048576
  21
  22
  23 h2elan () {
  24     echo $1 | sed 's/[^0-9]*//g'
  25 }
  26
  27 h2ip () {
  28     echo "${1}"
  29 }
  30 # map gwNN to mcrNN
  31 # assumes /etc/hosts looks like this:
  32 # 192.168.40.11 emcr10  mcr10-eth0      emcr-r2-s1      gw10
  33 gw2mcr() {
  34     awk '$5 = /'$1'$/ {print substr($2,2)}'  /etc/hosts
  35 }
  36 BATCH=/tmp/lmc-batch.$$
  37 save_cmd() {
  38     echo "$@" >> $BATCH
  39 }
  40
  41 [ -f $config ] && rm $config
  42
  43 ${LMC} --node $MDS --net `h2elan $MDS` elan || exit 1
  44 ${LMC} --node $MDS --mds mds1 /tmp/mds1 100000 || exit 1
  45 ${LMC} --lov lov1 mds1 65536 0 0
  46
  47 # Client node
  48 #${LMC} --node client --tcpbuf $TCPBUF --net '*' tcp || exit 1
  49 ${LMC} --node client --net '*' elan || exit 1
  50 ${LMC} --node client --mtpt /mnt/lustre mds1 lov1
  51
  52 # this is crude, but effective
  53 let server_per_gw=($SERVER_CNT / $GW_CNT )
  54 let tot_server=$server_per_gw*$GW_CNT
  55 echo "Allocating $server_per_gw per gateway."
  56 echo "For a total of $tot_server Blue Arcs"
  57
  58 let gw=$GW_START
  59 let server=$SERVER_START
  60 while (( $gw < $GW_CNT + GW_START ));
  61 do
  62    echo "gw$gw"
  63    gwnode=`gw2mcr gw$gw`
  64    ${LMC} --router --node $gwnode --tcpbuf $TCPBUF --net `h2ip $gwnode`  tcp || exit 1
  65    ${LMC} --node $gwnode --net `h2elan $gwnode` elan|| exit 1
  66    ${LMC} --node $gwnode --route elan `h2elan $gwnode` `h2elan $CLIENT_LO` `h2elan $CLIENT_HI` || exit 2
  67
  68    let  i=0
  69    while (( $i < $server_per_gw ));
  70    do
  71       echo "server: $server"
  72       OST=ba$server
  73       OBD_UUID=`awk "/$OST / { print \\$3 }" $UUIDLIST`
  74       [ "$OBD_UUID" ] && OBD_UUID="--obduuid=$OBD_UUID" || echo "$OST: no UUID"
  75       # server node
  76       ${LMC} --node $OST --tcpbuf $TCPBUF --net $OST tcp || exit 1
  77       # the device on the server
  78       ${LMC} --lov lov1 --node $OST $OBD_UUID --ost bluearc || exit 3
  79       # route to server
  80       ${LMC} --node $gwnode --route tcp `h2ip $gwnode` $OST || exit 2
  81       let server=$server+1
  82       let i=$i+1
  83    done
  84
  85    let gw=$gw+1
  86 done
  87
  88 $LMC_REAL --batch $BATCH
  89 rm -f $BATCH