lustre/tests/run_IOR.sh

   1 #!/bin/bash
   2
   3 TMP=${TMP:-/tmp}
   4
   5 TESTLOG_PREFIX=${TESTLOG_PREFIX:-$TMP/recovery-mds-scale}
   6 TESTNAME=${TESTNAME:-""}
   7 [ -n "$TESTNAME" ] && TESTLOG_PREFIX=$TESTLOG_PREFIX.$TESTNAME
   8
   9 LOG=$TESTLOG_PREFIX.$(basename $0 .sh)_stdout.$(hostname -s).log
  10 DEBUGLOG=$(echo $LOG | sed 's/\(.*\)stdout/\1debug/')
  11
  12 mkdir -p ${LOG%/*}
  13
  14 rm -f $LOG $DEBUGLOG
  15 exec 2>$DEBUGLOG
  16 set -x
  17
  18 . $(dirname $0)/functions.sh
  19
  20 IOR=${IOR:-"$(which IOR)"}
  21
  22 assert_env MOUNT END_RUN_FILE LOAD_PID_FILE IOR
  23
  24 trap signaled TERM
  25
  26 # if MACHINEFILE set and exists -- use it
  27 if [ -z $MACHINEFILE ] || [ ! -e $MACHINEFILE ]; then
  28     MACHINEFILE=$TMP/$(basename $0)-$(hostname).machines
  29     echo $(hostname) >$MACHINEFILE
  30 fi
  31
  32 THREADS_PER_CLIENT=${THREADS_PER_CLIENT:-3}
  33 NUM_CLIENTS=$(cat $MACHINEFILE | wc -l)
  34
  35 # recovery-*-scale scripts use this to signal the client loads to die
  36 echo $$ >$LOAD_PID_FILE
  37
  38 TESTDIR=${TESTDIR:-$MOUNT/d0.ior-$(hostname)}
  39
  40 CONTINUE=true
  41 while [ ! -e "$END_RUN_FILE" ] && $CONTINUE; do
  42     echoerr "$(date +'%F %H:%M:%S'): IOR run starting"
  43     mkdir -p $TESTDIR
  44     # need this only if TESTDIR is not default
  45     chmod -R 777 $TESTDIR
  46
  47         mpi_run -np $((NUM_CLIENTS * THREADS_PER_CLIENT)) \
  48                 ${MACHINEFILE_OPTION} ${MACHINEFILE} $IOR -a POSIX -b 1g \
  49                 -o $TESTDIR/IOR-file -s 1 -t 1m -v -w -r 1>$LOG &
  50     load_pid=$!
  51     wait $load_pid
  52     if [ ${PIPESTATUS[0]} -eq 0 ]; then
  53         echoerr "$(date +'%F %H:%M:%S'): IOR succeeded"
  54         cd $TMP
  55         rm -rf $TESTDIR
  56         echoerr "$(date +'%F %H:%M:%S'): IOR run finished"
  57     else
  58         echoerr "$(date +'%F %H:%M:%S'): IOR failed"
  59         if [ -z "$ERRORS_OK" ]; then
  60             echo $(hostname) >> $END_RUN_FILE
  61         fi
  62         if [ $BREAK_ON_ERROR ]; then
  63             # break
  64             CONTINUE=false
  65         fi
  66     fi
  67 done
  68
  69 echoerr "$(date +'%F %H:%M:%S'): IOR run exiting"