lustre/tests/mdsrate-create-small.sh

   1  #!/bin/bash
   2 #
   3 # This test was used in a set of CMD3 tests (cmd3-3 test).
   4
   5 LUSTRE=${LUSTRE:-$(dirname $0)/..}
   6 . $LUSTRE/tests/test-framework.sh
   7 init_test_env $@
   8
   9 assert_env CLIENTS MDSRATE SINGLECLIENT MPIRUN
  10
  11 BASEDIR=$MOUNT/mdsrate
  12
  13 # Requirements
  14 NUM_FILES=${NUM_FILES:-1000000}
  15 TIME_PERIOD=${TIME_PERIOD:-600}                        # seconds
  16
  17 # Local test variables
  18 TESTDIR_SINGLE="${BASEDIR}/single"
  19 TESTDIR_MULTI="${BASEDIR}/multi"
  20
  21 LOG=${TESTSUITELOG:-$TMP/$(basename $0 .sh).log}
  22 CLIENT=$SINGLECLIENT
  23 NODES_TO_USE=${NODES_TO_USE:-$CLIENTS}
  24 NUM_CLIENTS=$(get_node_count ${NODES_TO_USE//,/ })
  25 # XXX - this needs to be determined given the number of MDTs and the number
  26 #       of clients.
  27 THREADS_PER_CLIENT=3                   # threads/client for multi client test
  28 if [ $NUM_CLIENTS -gt 50 ]; then
  29     THREADS_PER_CLIENT=1
  30 fi
  31
  32 [ ! -x ${MDSRATE} ] && error "${MDSRATE} not built."
  33
  34 # Make sure we start with a clean slate
  35 rm -f ${LOG}
  36
  37 log "===== $0 ====== "
  38
  39 check_and_setup_lustre
  40
  41 MDSRATE_ENABLE_DNE=${MDSRATE_ENABLE_DNE:-false}
  42 if $MDSRATE_ENABLE_DNE; then
  43         test_mkdir $BASEDIR
  44         mdtcount_opt="--mdtcount $MDSCOUNT"
  45 else
  46         mkdir $BASEDIR
  47 fi
  48 if $VERBOSE; then
  49         debug_opt="--debug"
  50 fi
  51 chmod 0777 $BASEDIR
  52 mdsrate_STRIPEPARAMS=${mdsrate_STRIPEPARAMS:-${fs_STRIPEPARAMS:-"-i 0 -c 1"}}
  53 setstripe_getstripe $BASEDIR $mdsrate_STRIPEPARAMS
  54
  55 IFree=$(mdsrate_inodes_available)
  56 if [ $IFree -lt $NUM_FILES ]; then
  57     NUM_FILES=$IFree
  58 fi
  59
  60 generate_machine_file $NODES_TO_USE $MACHINEFILE ||
  61         error "can not generate machinefile"
  62
  63 p="$TMP/$TESTSUITE-$TESTNAME.parameters"
  64 save_lustre_params $(get_facets MDS) mdt.*.enable_remote_dir_gid > $p
  65 do_nodes $(comma_list $(mdts_nodes)) \
  66         $LCTL set_param mdt.*.enable_remote_dir_gid=-1
  67
  68 if [ -n "$NOSINGLE" ]; then
  69     echo "NO Tests on single client."
  70 else
  71     if [ -n "$NOCREATE" ]; then
  72         echo "NO Test for creates for a single client."
  73     else
  74         # We can use np = $NUM_CLIENTS to speed up the cleanup
  75         mdsrate_cleanup $NUM_CLIENTS $MACHINEFILE $NUM_FILES $TESTDIR_SINGLE 'f%%d' --ignore
  76
  77         log "===== $0 ### 1 NODE CREATE ###"
  78
  79         COMMAND="${MDSRATE} ${MDSRATE_DEBUG} --create --time ${TIME_PERIOD}
  80                 --nfiles $NUM_FILES --dir ${TESTDIR_SINGLE} --filefmt 'f%%d'
  81                 $mdtcount_opt $debug_opt"
  82         echo "+ ${COMMAND}"
  83         mpi_run ${MACHINEFILE_OPTION} ${MACHINEFILE} -np 1 ${COMMAND} |
  84                 tee ${LOG}
  85
  86         if [ ${PIPESTATUS[0]} != 0 ]; then
  87                 [ -f $LOG ] && sed -e "s/^/log: /" $LOG
  88                 error_noexit "mdsrate create on single client failed, aborting"
  89                 restore_lustre_params < $p
  90                 mdsrate_cleanup $NUM_CLIENTS $MACHINEFILE $NUM_FILES \
  91                                 $TESTDIR_SINGLE 'f%%d' --ignore
  92                 exit 1
  93         fi
  94     fi
  95
  96     if [ -n "$NOUNLINK" ]; then
  97         echo "NO Test for unlinks for a single client."
  98     else
  99         log "===== $0 ### 1 NODE UNLINK ###"
 100
 101         COMMAND="${MDSRATE} ${MDSRATE_DEBUG} --unlink
 102                      --nfiles ${NUM_FILES} --dir ${TESTDIR_SINGLE} --filefmt 'f%%d'"
 103         echo "+ ${COMMAND}"
 104         mpi_run ${MACHINEFILE_OPTION} ${MACHINEFILE} -np 1 ${COMMAND} |
 105                 tee ${LOG}
 106
 107         if [ ${PIPESTATUS[0]} != 0 ]; then
 108             [ -f $LOG ] && sed -e "s/^/log: /" $LOG
 109             error "mdsrate unlinks for a single client failed, aborting"
 110         fi
 111
 112         rmdir $TESTDIR_SINGLE
 113     fi
 114 fi
 115
 116 IFree=$(mdsrate_inodes_available)
 117 if [ $IFree -lt $NUM_FILES ]; then
 118     NUM_FILES=$IFree
 119 fi
 120
 121 if [ -n "$NOMULTI" ]; then
 122     echo "NO tests on multiple nodes."
 123 else
 124     if [ -n "$NOCREATE" ]; then
 125         echo "NO test for create on multiple nodes."
 126     else
 127         mdsrate_cleanup $NUM_CLIENTS $MACHINEFILE $NUM_FILES $TESTDIR_MULTI 'f%%d' --ignore
 128
 129         log "===== $0 ### $NUM_CLIENTS NODES CREATE with $THREADS_PER_CLIENT threads per client ###"
 130
 131         COMMAND="${MDSRATE} ${MDSRATE_DEBUG} --create --time ${TIME_PERIOD}
 132                 --nfiles $NUM_FILES --dir ${TESTDIR_MULTI} --filefmt 'f%%d'"
 133         echo "+ ${COMMAND}"
 134         mpi_run ${MACHINEFILE_OPTION} ${MACHINEFILE} \
 135                 -np $((NUM_CLIENTS * THREADS_PER_CLIENT)) ${COMMAND} |
 136                 tee ${LOG}
 137
 138         if [ ${PIPESTATUS[0]} != 0 ]; then
 139                 [ -f $LOG ] && sed -e "s/^/log: /" $LOG
 140                 error_noexit "mdsrate create on multiple nodes failed, aborting"
 141                 restore_lustre_params < $p
 142                 mdsrate_cleanup $((NUM_CLIENTS * THREADS_PER_CLIENT)) \
 143                                 $MACHINEFILE $NUM_FILES \
 144                                 $TESTDIR_MULTI 'f%%d' --ignore
 145                 exit 1
 146         fi
 147     fi
 148
 149     if [ -n "$NOUNLINK" ]; then
 150         echo "NO Test for unlinks multiple nodes."
 151     else
 152         log "===== $0 ### $NUM_CLIENTS NODES UNLINK with $THREADS_PER_CLIENT threads per client ###"
 153
 154         COMMAND="${MDSRATE} ${MDSRATE_DEBUG} --unlink
 155                       --nfiles ${NUM_FILES} --dir ${TESTDIR_MULTI} --filefmt 'f%%d'"
 156         echo "+ ${COMMAND}"
 157         mpi_run ${MACHINEFILE_OPTION} ${MACHINEFILE} \
 158                 -np $((NUM_CLIENTS * THREADS_PER_CLIENT)) ${COMMAND} |
 159                 tee ${LOG}
 160         if [ ${PIPESTATUS[0]} != 0 ]; then
 161             [ -f $LOG ] && sed -e "s/^/log: /" $LOG
 162             error "mdsrate unlinks multiple nodes failed, aborting"
 163         fi
 164
 165         rmdir $TESTDIR_MULTI
 166     fi
 167 fi
 168
 169 complete $SECONDS
 170 restore_lustre_params < $p
 171 rmdir $BASEDIR || true
 172 rm -f $MACHINEFILE
 173 check_and_cleanup_lustre
 174 #rm -f $LOG
 175
 176 exit 0