lustre/tests/obdfilter-survey.sh

   1 #!/bin/bash
   2 set -e
   3
   4 LUSTRE=${LUSTRE:-$(dirname $0)/..}
   5 . $LUSTRE/tests/test-framework.sh
   6 init_test_env $@
   7 init_logging
   8
   9 # bug number for skipped test:
  10 ALWAYS_EXCEPT="$OBDFILTER_SURVEY_EXCEPT "
  11 # UPDATE THE COMMENT ABOVE WITH BUG NUMBERS WHEN CHANGING ALWAYS_EXCEPT!
  12
  13 build_test_filter
  14
  15 [ "$SLOW" = no ] && { nobjhi=1; thrhi=4; }
  16 nobjhi=${nobjhi:-1}
  17 thrhi=${thrhi:-16}
  18 size=${size:-1024}
  19 thrlo=${thrlo:-$(( thrhi / 2))}
  20
  21 OBDSURVEY=${OBDSURVEY:-$(which obdfilter-survey)}
  22
  23 check_and_setup_lustre
  24
  25 # FIXME: the summary file a bit smaller than OSTSIZE, add estimation
  26 minsize=$(min_ost_size)
  27 if [ $(( size * 1024 )) -ge $minsize  ]; then
  28     size=$((minsize * 10 / 1024 / 12 ))
  29     echo min kbytesavail: $minsize using size=${size} MBytes per obd instance
  30 fi
  31
  32 get_targets () {
  33         local targets
  34         local target
  35         local dev
  36         local nid
  37         local osc
  38
  39         for osc in $($LCTL get_param -N osc.${FSNAME}-*osc-*); do
  40                 nid=$($LCTL get_param $osc.import |
  41                         awk '/current_connection:/ {sub(/@.*/,""); print $2}')
  42                 dev=$(echo $osc | sed -e 's/^osc\.//' -e 's/-osc.*//')
  43                 target=$dev
  44
  45                 # For local disk obdfilter-survey requires target devs w/o nid.
  46                 # obdfilter-survey :
  47                 # case 1 (local disk):
  48                 #    $ nobjhi=2 thrhi=2 size=1024
  49                 #      targets="$nid:$FSNAME-OST0000 $nid:$FSNAME-OST0001 ..."
  50                 #                 sh obdfilter-survey
  51                 local_node && [ "$1" == "disk" ] || target=$nid:$target
  52                 targets="$targets $target"
  53         done
  54         echo $targets
  55 }
  56
  57 obdflter_survey_targets () {
  58         local case=$1
  59         local targets
  60
  61         case $case in
  62                 disk)    targets=$(get_targets $case);;
  63                 netdisk) targets=$(get_targets $case);;
  64                 network) targets=$(host_nids_address $(comma_list $(osts_nodes)) $NETTYPE);;
  65                 *) error "unknown obdflter-survey case!" ;;
  66         esac
  67         echo $targets
  68 }
  69
  70 obdflter_survey_run () {
  71         local case=$1
  72
  73         rm -f ${TMP}/obdfilter_survey*
  74
  75         local targets=$(obdflter_survey_targets $case)
  76         local cmd="NETTYPE=$NETTYPE thrlo=$thrlo nobjhi=$nobjhi thrhi=$thrhi size=$size case=$case rslt_loc=${TMP} targets=\"$targets\" $OBDSURVEY"
  77         echo + $cmd
  78         eval $cmd
  79         local rc=$?
  80
  81         cat ${TMP}/obdfilter_survey*
  82         [ $rc = 0 ] || error "$OBDSURVEY failed: $rc"
  83 }
  84
  85 test_1a () {
  86         obdflter_survey_run disk
  87 }
  88 run_test 1a "Object Storage Targets survey"
  89
  90 test_1b () {
  91         local param_file=$TMP/$tfile-params
  92
  93         do_nodesv $(comma_list $(osts_nodes)) \
  94                 $LCTL get_param obdfilter.${FSNAME}-*.sync_journal
  95         save_lustre_params $(get_facets OST) \
  96                 "obdfilter.${FSNAME}-*.sync_journal" > $param_file
  97         do_nodesv $(comma_list $(osts_nodes)) \
  98                 $LCTL set_param obdfilter.${FSNAME}-*.sync_journal=0
  99
 100         local stime=$(date +%s)
 101         thrlo=4 nobjhi=1 thrhi=4 obdflter_survey_run disk
 102         local etime=$(date +%s)
 103         # run time of obd survey
 104         local rtime=$((etime - stime))
 105
 106         echo "obd survey finished in $rtime seconds"
 107         restore_lustre_params < $param_file
 108
 109         rm -f $param_file
 110 }
 111 run_test 1b "Object Storage Targets survey, async journal"
 112
 113 test_1c () {
 114         nobjlo=1 nobjhi=1 thrlo=32 thrhi=32 rszlo=1024 rszhi=1024 size=8192\
 115         obdflter_survey_run disk
 116 }
 117 run_test 1c "Object Storage Targets survey, big batch"
 118
 119 test_2a () {
 120         obdflter_survey_run netdisk
 121 }
 122 run_test 2a "Stripe F/S over the Network"
 123
 124 test_2b () {
 125         local param_file=$TMP/$tfile-params
 126
 127         do_nodesv $(comma_list $(osts_nodes)) \
 128                 $LCTL get_param obdfilter.${FSNAME}-*.sync_journal
 129         save_lustre_params $(get_facets OST) \
 130                 "obdfilter.${FSNAME}-*.sync_journal" > $param_file
 131         do_nodesv $(comma_list $(osts_nodes)) \
 132                 $LCTL set_param obdfilter.${FSNAME}-*.sync_journal=0
 133
 134         local stime=$(date +%s)
 135         thrlo=4 nobjhi=1 thrhi=4 obdflter_survey_run netdisk
 136         local etime=$(date +%s)
 137         local rtime=$((etime - stime))
 138
 139         echo "obd survey finished in $rtime seconds"
 140         restore_lustre_params < $param_file
 141
 142         rm -f $param_file
 143 }
 144 run_test 2b "Stripe F/S over the Network, async journal"
 145
 146
 147 # README.obdfilter-survey: In network test only automated run is supported.
 148 test_3a () {
 149         # obdfilter-survey Prerequisite:
 150         #    For "network" case  you need to have all
 151         #    modules (those llmount.sh loads) loaded in kernel. And the
 152         #    'lctl dl' output must be blank.
 153         # Skipping test for CLIENTONLY mode because of
 154         # cleanupall()->stopall() does not cleanup the servers on this mode.
 155         [ "$CLIENTONLY" ] && skip "CLIENTONLY mode"
 156
 157         remote_servers || skip "Local servers"
 158
 159         cleanupall
 160
 161         obdflter_survey_run network
 162
 163         setupall
 164 }
 165 run_test 3a "Network survey"
 166
 167 complete $SECONDS
 168 cleanup_echo_devs
 169 check_and_cleanup_lustre
 170 exit_status