lustre/tests/oos.sh

   1 #!/bin/bash
   2
   3 set -e
   4 #set -vx
   5
   6 LUSTRE=${LUSTRE:-$(cd $(dirname $0)/..; echo $PWD)}
   7 . $LUSTRE/tests/test-framework.sh
   8 . ${CONFIG:=$LUSTRE/tests/cfg/${NAME}.sh}
   9
  10 export PATH=`dirname $0`/../utils:$PATH
  11 LFS=${LFS:-lfs}
  12 LCTL=${LCTL:-lctl}
  13 MOUNT=${MOUNT:-$1}
  14 MOUNT=${MOUNT:-/mnt/lustre}
  15 OOS=$MOUNT/oosfile
  16 TMP=${TMP:-/tmp}
  17 LOG=$TMP/$(basename $0 .sh).log
  18
  19 SUCCESS=1
  20
  21 rm -f $OOS $LOG
  22
  23 sync; sleep 1; sync     # to ensure we get up-to-date statfs info
  24
  25 #$LCTL set_param -n debug=-1
  26 #$LCTL set_param -n subsystem_debug=0x40a8
  27
  28 #$LCTL clear
  29 #$LCTL debug_daemon start /r/tmp/debug 1024
  30
  31 STRIPECOUNT=`$LCTL get_param -n lov.*.activeobd | head -n 1`
  32 ORIGFREE=`$LCTL get_param -n llite.*.kbytesavail | head -n 1`
  33 MAXFREE=${MAXFREE:-$((400000 * $STRIPECOUNT))}
  34 echo STRIPECOUNT=$STRIPECOUNT ORIGFREE=$ORIGFREE MAXFREE=$MAXFREE
  35 if [ $ORIGFREE -gt $MAXFREE ]; then
  36         skip "$0: ${ORIGFREE}kB free gt MAXFREE ${MAXFREE}kB, increase $MAXFREE (or reduce test fs size) to proceed"
  37         exit 0
  38 fi
  39
  40 export LANG=C LC_LANG=C # for "No space left on device" message
  41
  42 [ -f $LOG ] && error "log file wasn't removed?"
  43
  44 echo BEFORE dd started
  45 oos_full || true
  46
  47 # make sure we stripe over all OSTs to avoid OOS on only a subset of OSTs
  48 $LFS setstripe $OOS -c $STRIPECOUNT
  49 if dd if=/dev/zero of=$OOS count=$(($ORIGFREE + 100)) bs=1k 2> $LOG; then
  50         echo "ERROR: dd did not fail"
  51         SUCCESS=0
  52 fi
  53
  54 [ ! -s "$LOG" ] && error "LOG file is empty!"
  55
  56 if [ "`grep -c 'No space left on device' $LOG`" -ne 1 ]; then
  57         echo "ERROR: dd not return ENOSPC"
  58         sed "s/^/LOG: /" $LOG
  59         SUCCESS=0
  60 fi
  61
  62 # flush cache to OST(s) so avail numbers are correct
  63 sync; sleep 1 ; sync
  64
  65 echo AFTER dd
  66 if ! oos_full; then
  67         echo "no OSTs are close to full"
  68         SUCCESS=0
  69 fi
  70
  71 RECORDSOUT=`grep "records out" $LOG | cut -d + -f1`
  72 FILESIZE=`ls -l $OOS | awk '{ print $5 }'`
  73 if [ -z "$RECORDSOUT" ]; then
  74         echo "ERROR: no blocks written by dd?"
  75         sed "s/^/LOG: /" $LOG
  76         SUCCESS=0
  77 elif [ "$RECORDSOUT" -ne $((FILESIZE / 1024)) ]; then
  78         echo "ERROR: blocks written by dd not equal to the size of file"
  79         SUCCESS=0
  80 fi
  81
  82 #$LCTL debug_daemon stop
  83
  84 echo LOG file
  85 cat $LOG
  86 rm -f $OOS
  87 sync; sleep 1; sync
  88
  89 sync; sleep 3; sync
  90
  91 if [ $SUCCESS -eq 1 ]; then
  92         echo "Success!"
  93         rm -f $LOG
  94 else
  95         exit 1
  96 fi