Whamcloud - gitweb
575166d4c9e58bd73909ad6153defde933c22c70
[fs/lustre-release.git] / lustre / tests / mdsrate-create-small.sh
1  #!/bin/bash
2 #
3 # This test was used in a set of CMD3 tests (cmd3-3 test). 
4
5 LUSTRE=${LUSTRE:-`dirname $0`/..}
6 . $LUSTRE/tests/test-framework.sh
7 init_test_env $@
8 . ${CONFIG:=$LUSTRE/tests/cfg/$NAME.sh}
9
10 assert_env CLIENTS MDSRATE SINGLECLIENT MPIRUN
11
12 MACHINEFILE=${MACHINEFILE:-$TMP/$(basename $0 .sh).machines}
13 BASEDIR=$MOUNT/mdsrate
14
15 # Requirements
16 NUM_FILES=${NUM_FILES:-1000000}
17 TIME_PERIOD=${TIME_PERIOD:-600}                        # seconds
18
19 # Local test variables
20 TESTDIR_SINGLE="${BASEDIR}/single"
21 TESTDIR_MULTI="${BASEDIR}/multi"
22
23 LOG=${TESTSUITELOG:-$TMP/$(basename $0 .sh).log}
24 CLIENT=$SINGLECLIENT
25 NODES_TO_USE=${NODES_TO_USE:-$CLIENTS}
26 NUM_CLIENTS=$(get_node_count ${NODES_TO_USE//,/ })
27 # XXX - this needs to be determined given the number of MDTs and the number
28 #       of clients.
29 THREADS_PER_CLIENT=3                   # threads/client for multi client test
30 if [ $NUM_CLIENTS -gt 50 ]; then
31     THREADS_PER_CLIENT=1
32 fi
33
34 [ ! -x ${MDSRATE} ] && error "${MDSRATE} not built."
35
36 # Make sure we start with a clean slate
37 rm -f ${LOG}
38
39 log "===== $0 ====== " 
40
41 check_and_setup_lustre
42
43 mkdir -p $BASEDIR
44 chmod 0777 $BASEDIR
45 $LFS setstripe $BASEDIR -i 0 -c 1
46 get_stripe $BASEDIR
47
48 IFree=$(mdsrate_inodes_available)
49 if [ $IFree -lt $NUM_FILES ]; then
50     NUM_FILES=$IFree
51 fi
52   
53 generate_machine_file $NODES_TO_USE $MACHINEFILE || error "can not generate machinefile"
54
55 if [ -n "$NOSINGLE" ]; then
56     echo "NO Tests on single client."
57 else
58     if [ -n "$NOCREATE" ]; then
59         echo "NO Test for creates for a single client."
60     else
61         # We can use np = $NUM_CLIENTS to speed up the cleanup
62         mdsrate_cleanup $NUM_CLIENTS $MACHINEFILE $NUM_FILES $TESTDIR_SINGLE 'f%%d' --ignore
63
64         log "===== $0 ### 1 NODE CREATE ###"
65
66         COMMAND="${MDSRATE} ${MDSRATE_DEBUG} --create --time ${TIME_PERIOD}
67                     --nfiles $NUM_FILES --dir ${TESTDIR_SINGLE} --filefmt 'f%%d'"
68         echo "+ ${COMMAND}"
69         mpi_run -np 1 -machinefile ${MACHINEFILE} ${COMMAND} | tee ${LOG}
70
71         if [ ${PIPESTATUS[0]} != 0 ]; then
72             [ -f $LOG ] && sed -e "s/^/log: /" $LOG
73             error "mdsrate create for a single client failed, aborting"
74         fi
75     fi
76
77     if [ -n "$NOUNLINK" ]; then
78         echo "NO Test for unlinks for a single client."
79     else
80         log "===== $0 ### 1 NODE UNLINK ###"
81
82         COMMAND="${MDSRATE} ${MDSRATE_DEBUG} --unlink
83                      --nfiles ${NUM_FILES} --dir ${TESTDIR_SINGLE} --filefmt 'f%%d'"
84         echo "+ ${COMMAND}"
85         mpi_run -np 1 -machinefile ${MACHINEFILE} ${COMMAND} | tee ${LOG}
86
87         if [ ${PIPESTATUS[0]} != 0 ]; then
88             [ -f $LOG ] && sed -e "s/^/log: /" $LOG
89             error "mdsrate unlinks for a single client failed, aborting"
90         fi
91
92         rmdir $TESTDIR_SINGLE
93     fi
94 fi
95
96 IFree=$(mdsrate_inodes_available)
97 if [ $IFree -lt $NUM_FILES ]; then
98     NUM_FILES=$IFree
99 fi
100
101 if [ -n "$NOMULTI" ]; then
102     echo "NO tests on multiple nodes."
103 else
104     if [ -n "$NOCREATE" ]; then
105         echo "NO test for create on multiple nodes."
106     else
107         mdsrate_cleanup $NUM_CLIENTS $MACHINEFILE $NUM_FILES $TESTDIR_MULTI 'f%%d' --ignore
108
109         log "===== $0 ### $NUM_CLIENTS NODES CREATE with $THREADS_PER_CLIENT threads per client ###"
110
111         COMMAND="${MDSRATE} ${MDSRATE_DEBUG} --create --time ${TIME_PERIOD}
112                     --nfiles $NUM_FILES --dir ${TESTDIR_MULTI} --filefmt 'f%%d'"
113         echo "+ ${COMMAND}"
114         mpi_run -np $((NUM_CLIENTS * THREADS_PER_CLIENT)) -machinefile ${MACHINEFILE} \
115             ${COMMAND} | tee ${LOG}
116         if [ ${PIPESTATUS[0]} != 0 ]; then
117             [ -f $LOG ] && sed -e "s/^/log: /" $LOG
118             error "mdsrate create on multiple nodes failed, aborting"
119         fi
120     fi
121
122     if [ -n "$NOUNLINK" ]; then
123         echo "NO Test for unlinks multiple nodes."
124     else
125         log "===== $0 ### $NUM_CLIENTS NODES UNLINK with $THREADS_PER_CLIENT threads per client ###"
126
127         COMMAND="${MDSRATE} ${MDSRATE_DEBUG} --unlink
128                       --nfiles ${NUM_FILES} --dir ${TESTDIR_MULTI} --filefmt 'f%%d'"
129         echo "+ ${COMMAND}"
130         mpi_run -np $((NUM_CLIENTS * THREADS_PER_CLIENT)) -machinefile ${MACHINEFILE} \
131             ${COMMAND} | tee ${LOG}
132         if [ ${PIPESTATUS[0]} != 0 ]; then
133             [ -f $LOG ] && sed -e "s/^/log: /" $LOG
134             error "mdsrate unlinks multiple nodes failed, aborting"
135         fi
136
137         rmdir $TESTDIR_MULTI
138     fi
139 fi
140
141 equals_msg `basename $0`: test complete, cleaning up
142 rmdir $BASEDIR || true
143 rm -f $MACHINEFILE 
144 check_and_cleanup_lustre
145 #rm -f $LOG
146
147 exit 0