lustre/tests/sanity-quota.sh

   1 #!/bin/bash
   2 #
   3 # Run select tests by setting ONLY, or as arguments to the script.
   4 # Skip specific tests by setting EXCEPT.
   5 #
   6 # Run test by setting NOSETUP=true when ltest has setup env for us
   7 set -e
   8
   9 #kernel 2.4.x doesn't support quota
  10 K_VER=`uname --kernel-release | cut -b 1-3`
  11 if [ $K_VER = "2.4" ]; then
  12     echo "Kernel 2.4 doesn't support quota"
  13     exit 0
  14 fi
  15
  16 SRCDIR=`dirname $0`
  17 export PATH=$PWD/$SRCDIR:$SRCDIR:$PWD/$SRCDIR/../utils:$PATH:/sbin
  18
  19 if [ "$1" == "9_10" ]; then
  20         echo "only run for test9 and test10"
  21         shift
  22         TEST_9_10=1
  23         ONLY="9 10"
  24 else
  25         TEST_9_10=0
  26 fi
  27 ONLY=${ONLY:-"$*"}
  28 ALWAYS_EXCEPT=${ALWAYS_EXCEPT:-""}
  29 # UPDATE THE COMMENT ABOVE WITH BUG NUMBERS WHEN CHANGING ALWAYS_EXCEPT!
  30
  31 case `uname -r` in
  32 2.6*) FSTYPE=${FSTYPE:-ldiskfs};;
  33 *) error "unsupported kernel" ;;
  34 esac
  35
  36 [ "$ALWAYS_EXCEPT$EXCEPT" ] && \
  37         echo "Skipping tests: `echo $ALWAYS_EXCEPT $EXCEPT`"
  38
  39 TMP=${TMP:-/tmp}
  40
  41 ORIG_PWD=${PWD}
  42 LFS=${LFS:-lfs}
  43 LCTL=${LCTL:-lctl}
  44 SETSTRIPE=${SETSTRIPE:-"$LFS setstripe"}
  45 TSTID=${TSTID:-60000}
  46 TSTID2=${TSTID2:-60001}
  47 RUNAS=${RUNAS:-"runas -u $TSTID"}
  48 RUNAS2=${RUNAS2:-"runas -u $TSTID2"}
  49 TSTUSR=${TSTUSR:-"quota_usr"}
  50 TSTUSR2=${TSTUSR2:-"quota_2usr"}
  51 BLK_SZ=1024
  52 BUNIT_SZ=${BUNIT_SZ:-1000}      # default 1000 quota blocks
  53 BTUNE_SZ=${BTUNE_SZ:-500}       # default 50% of BUNIT_SZ
  54 IUNIT_SZ=${IUNIT_SZ:-10}        # default 10 files
  55 ITUNE_SZ=${ITUNE_SZ:-5}         # default 50% of IUNIT_SZ
  56 MAX_DQ_TIME=604800
  57 MAX_IQ_TIME=604800
  58
  59 LUSTRE=${LUSTRE:-`dirname $0`/..}
  60 . $LUSTRE/tests/test-framework.sh
  61 init_test_env $@
  62 . ${CONFIG:=$LUSTRE/tests/cfg/$NAME.sh}
  63
  64 QUOTALOG=${TESTSUITELOG:-$TMP/$(basename $0 .sh).log}
  65 FAIL_ON_ERROR=false
  66
  67 log() {
  68         echo "$*"
  69         $LCTL mark "$*" 2> /dev/null || true
  70 }
  71
  72 trace() {
  73         log "STARTING: $*"
  74         strace -o $TMP/$1.strace -ttt $*
  75         RC=$?
  76         log "FINISHED: $*: rc $RC"
  77         return 1
  78 }
  79 TRACE=${TRACE:-""}
  80
  81 run_one() {
  82         BEFORE=`date +%s`
  83         log "== test $1: $2= `date +%H:%M:%S` ($BEFORE)"
  84         export TESTNAME=test_$1
  85         test_$1 || error "exit with rc=$?"
  86         unset TESTNAME
  87         pass "($((`date +%s` - $BEFORE))s)"
  88         cd $SAVE_PWD
  89 }
  90
  91 build_test_filter() {
  92         [ "$ALWAYS_EXCEPT$EXCEPT$SANITY_EXCEPT" ] && \
  93             echo "Skipping tests: `echo $ALWAYS_EXCEPT $EXCEPT $SANITY_QUOTA_EXCEPT`"
  94
  95         for O in $ONLY; do
  96             eval ONLY_${O}=true
  97         done
  98         for E in $EXCEPT $ALWAYS_EXCEPT $SANITY_QUOTA_EXCEPT; do
  99             eval EXCEPT_${E}=true
 100         done
 101         # turn on/off quota tests must be included
 102         eval ONLY_0=true
 103         eval ONLY_99=true
 104 }
 105
 106 _basetest() {
 107         echo $*
 108 }
 109
 110 basetest() {
 111         IFS=abcdefghijklmnopqrstuvwxyz _basetest $1
 112 }
 113
 114 run_test() {
 115          base=`basetest $1`
 116          if [ "$ONLY" ]; then
 117                  testname=ONLY_$1
 118                  if [ ${!testname}x != x ]; then
 119                         run_one $1 "$2"
 120                         return $?
 121                  fi
 122                  testname=ONLY_$base
 123                  if [ ${!testname}x != x ]; then
 124                          run_one $1 "$2"
 125                          return $?
 126                  fi
 127                  echo -n "."
 128                  return 0
 129         fi
 130         testname=EXCEPT_$1
 131         if [ ${!testname}x != x ]; then
 132                  TESTNAME=test_$1 skip "skipping excluded test $1"
 133                  return 0
 134         fi
 135         testname=EXCEPT_$base
 136         if [ ${!testname}x != x ]; then
 137                  TESTNAME=test_$1 skip "skipping excluded test $1 (base $base)"
 138                  return 0
 139         fi
 140         run_one $1 "$2"
 141         return $?
 142 }
 143
 144 [ "$QUOTALOG" ] && rm -f $QUOTALOG || true
 145
 146 mounted_lustre_filesystems() {
 147         awk '($3 ~ "lustre" && $1 ~ ":") { print $2 }' /proc/mounts | sed -n ${1}p
 148 }
 149
 150 # Remember where our caller has hinted that we should mount lustre
 151 MOUNT_HINT=$MOUNT
 152 MOUNT_HINT2=$MOUNT_2
 153 MOUNT="`mounted_lustre_filesystems 1`"
 154 MOUNT_2="`mounted_lustre_filesystems 2`"
 155 if [ $TEST_9_10 -eq 1 -a "$MOUNT" ]; then
 156         echo "test9 and test10 will run on $MOUNT"
 157 elif [ "$MOUNT" -a "$MOUNT_2" ]; then
 158         echo "testing on $MOUNT and $MOUNT_2"
 159 elif [ "$MOUNT" -o "$MOUNT_2" ]; then
 160         error "test needs two mounts, only found $MOUNT $MOUNT_2!"
 161 else
 162         export QUOTA_OPTS="quotaon=ug"
 163         export MOUNT=$MOUNT_HINT
 164         export MOUNT_2=$MOUNT_HINT2
 165         MOUNT_2=${MOUNT_2:-/mnt/lustre_2}
 166         bash llmount.sh
 167         MOUNT="`mounted_lustre_filesystems 1`"
 168         MOUNT_2="`mounted_lustre_filesystems 2`"
 169         [ -z "$MOUNT" ] && error "NAME=$MOUNT not mounted"
 170         [ -z "$MOUNT_2" ] && error "NAME=$MOUNT_2 not mounted"
 171         I_MOUNTED=yes
 172 fi
 173
 174 [ `echo $MOUNT | wc -w` -gt 1 ] && error "NAME=$NAME mounted more than once"
 175
 176 DIR=${DIR:-$MOUNT}
 177 [ -z "`echo $DIR | grep $MOUNT`" ] && echo "$DIR not in $MOUNT" && exit 99
 178 DIR2=${DIR2:-$MOUNT_2}
 179
 180 LPROC=/proc/fs/lustre
 181 LOVNAME=`cat $LPROC/llite/*/lov/common_name | tail -n 1`
 182 if [ $TEST_9_10 -eq 1 ]; then
 183     OSTCOUNT=2
 184 else
 185     OSTCOUNT=`cat $LPROC/lov/$LOVNAME/numobd`
 186 fi
 187 STRIPECOUNT=`cat $LPROC/lov/$LOVNAME/stripecount`
 188 STRIPESIZE=`cat $LPROC/lov/$LOVNAME/stripesize`
 189 ORIGFREE=`cat $LPROC/lov/$LOVNAME/kbytesavail`
 190 MAXFREE=${MAXFREE:-$((200000 * $OSTCOUNT))}
 191 MDS=$(\ls $LPROC/mds 2> /dev/null | grep -v num_refs | tail -n 1)
 192 TSTDIR=$DIR/quota_test_dir
 193 TSTDIR2=$DIR2/quota_test_dir
 194 SHOW_QUOTA_USER="$LFS quota -u $TSTUSR $MOUNT"
 195 SHOW_QUOTA_GROUP="$LFS quota -g $TSTUSR $MOUNT"
 196 SHOW_QUOTA_INFO="$LFS quota -t $MOUNT"
 197
 198 build_test_filter
 199
 200
 201 # set_blk_tunables(btune_sz)
 202 set_blk_tunesz() {
 203         # set btune size on all obdfilters
 204         do_facet ost1 "set -x; for i in /proc/fs/lustre/obdfilter/*/quota_btune_sz; do
 205                 echo $(($1 * BLK_SZ)) >> \\\$i;
 206         done"
 207         # set btune size on mds
 208         do_facet mds "for i in /proc/fs/lustre/mds/${FSNAME}-MDT*/quota_btune_sz; do
 209                 echo $(($1 * BLK_SZ)) >> \\\$i;
 210         done"
 211 }
 212
 213 # set_blk_unitsz(bunit_sz)
 214 set_blk_unitsz() {
 215         do_facet ost1 "for i in /proc/fs/lustre/obdfilter/*/quota_bunit_sz; do
 216                 echo $(($1 * BLK_SZ)) >> \\\$i;
 217         done"
 218         do_facet mds "for i in /proc/fs/lustre/mds/${FSNAME}-MDT*/quota_bunit_sz; do
 219                 echo $(($1 * BLK_SZ)) >> \\\$i;
 220         done"
 221 }
 222
 223 # set_file_tunesz(itune_sz)
 224 set_file_tunesz() {
 225         # set iunit and itune size on all obdfilters
 226         do_facet ost1 "for i in /proc/fs/lustre/obdfilter/*/quota_itune_sz; do
 227                 echo $1 >> \\\$i;
 228         done"
 229         # set iunit and itune size on mds
 230         do_facet mds "for i in /proc/fs/lustre/mds/${FSNAME}-MDT*/quota_itune_sz; do
 231                 echo $1 >> \\\$i;
 232         done"
 233 }
 234
 235 # set_file_unitsz(iunit_sz)
 236 set_file_unitsz() {
 237         do_facet ost1 "for i in /proc/fs/lustre/obdfilter/*/quota_iunit_sz; do
 238                 echo $1 >> \\\$i;
 239         done"
 240         do_facet mds "for i in /proc/fs/lustre/mds/${FSNAME}-MDT*/quota_iunit_sz; do
 241                 echo $1 >> \\\$i;
 242         done"
 243 }
 244
 245 # These are for test on local machine,if run sanity-quota.sh on
 246 # real cluster, ltest should have setup the test environment:
 247 #
 248 # - create test user/group on all servers with same id.
 249 # - set unit size/tune on all servers size to reasonable value.
 250 pre_test() {
 251         if [ -z "$NOSETUP" ]; then
 252                 # set block tunables
 253                 set_blk_tunesz $BTUNE_SZ
 254                 set_blk_unitsz $BUNIT_SZ
 255                 # set file tunables
 256                 set_file_tunesz $ITUNE_SZ
 257                 set_file_unitsz $IUNIT_SZ
 258         fi
 259 }
 260 if [ $TEST_9_10 -eq 0 ]; then
 261     pre_test
 262 fi
 263
 264 post_test() {
 265         if [ -z "$NOSETUP" ]; then
 266                 # restore block tunables to default size
 267                 set_blk_unitsz $((1024 * 100))
 268                 set_blk_tunesz $((1024 * 50))
 269                 # restore file tunables to default size
 270                 set_file_unitsz 5000
 271                 set_file_tunesz 2500
 272         fi
 273 }
 274
 275 setup() {
 276         # create local test group
 277         GRP="`cat /etc/group | grep "^${TSTUSR}:" | awk -F: '{print $1}'`"
 278         if [ -z "$GRP" ]; then
 279                 groupadd -g $TSTID "$TSTUSR"
 280         fi
 281         TSTID="`cat /etc/group | grep "^${TSTUSR}:" | awk -F: '{print $3}'`"
 282
 283         GRP2="`cat /etc/group | grep "^${TSTUSR2}:" | awk -F: '{print $1}'`"
 284         if [ -z "$GRP2" ]; then
 285                 groupadd -g $TSTID2 "$TSTUSR2"
 286         fi
 287         TSTID2="`cat /etc/group | grep "^${TSTUSR2}:" | awk -F: '{print $3}'`"
 288
 289         # create test user
 290         USR="`cat /etc/passwd | grep "^${TSTUSR}:" | awk -F: '{print $1}'`"
 291         if [ -z "$USR" ]; then
 292                 useradd -u $TSTID -g $TSTID -d /tmp "$TSTUSR"
 293         fi
 294
 295         RUNAS="runas -u $TSTID"
 296
 297         USR2="`cat /etc/passwd | grep "^${TSTUSR2}:" | awk -F: '{print $1}'`"
 298         if [ -z "$USR2" ]; then
 299                 useradd -u $TSTID2 -g $TSTID2 -d /tmp "$TSTUSR2"
 300         fi
 301
 302         RUNAS2="runas -u $TSTID2"
 303
 304         # create test directory
 305         rm -fr $TSTDIR
 306
 307         mkdir -p $TSTDIR
 308         chmod 777 $TSTDIR
 309 }
 310 setup
 311
 312 # set quota
 313 test_0() {
 314         $LFS quotaoff -ug $MOUNT
 315         $LFS quotacheck -ug $MOUNT
 316
 317         $LFS setquota -u $TSTUSR 0 0 0 0 $MOUNT
 318         $LFS setquota -g $TSTUSR 0 0 0 0 $MOUNT
 319 }
 320 run_test 0 "Set quota ============================="
 321
 322 # block hard limit (normal use and out of quota)
 323 test_1() {
 324         LIMIT=$(( $BUNIT_SZ * $(($OSTCOUNT + 1)) * 5)) # 5 bunits each sever
 325         TESTFILE="$TSTDIR/quota_tst10"
 326
 327         echo "  User quota (limit: $LIMIT kbytes)"
 328         $LFS setquota -u $TSTUSR 0 $LIMIT 0 0 $MOUNT
 329         $SHOW_QUOTA_USER
 330
 331         $LFS setstripe $TESTFILE 65536 0 1
 332         chown $TSTUSR.$TSTUSR $TESTFILE
 333
 334         echo "    Write ..."
 335         $RUNAS dd if=/dev/zero of=$TESTFILE bs=$BLK_SZ count=$(($LIMIT/2)) || error "(usr) write failure, but expect success"
 336         echo "    Done"
 337         echo "    Write out of block quota ..."
 338         # this time maybe cache write,  ignore it's failure
 339         $RUNAS dd if=/dev/zero of=$TESTFILE bs=$BLK_SZ count=$(($LIMIT/2)) seek=$(($LIMIT/2)) || true
 340         # flush cache, ensure noquota flag is setted on client
 341         sync; sleep 1; sync;
 342         $RUNAS dd if=/dev/zero of=$TESTFILE bs=$BLK_SZ count=$BUNIT_SZ seek=$LIMIT && error "(usr) write success, but expect EDQUOT"
 343
 344         rm -f $TESTFILE
 345
 346         echo "  Group quota (limit: $LIMIT kbytes)"
 347         $LFS setquota -u $TSTUSR 0 0 0 0 $MOUNT         # clear user limit
 348         $LFS setquota -g $TSTUSR 0 $LIMIT 0 0 $MOUNT
 349         $SHOW_QUOTA_GROUP
 350         TESTFILE="$TSTDIR/quota_tst11"
 351
 352         $LFS setstripe $TESTFILE 65536 0 1
 353         chown $TSTUSR.$TSTUSR $TESTFILE
 354
 355         echo "    Write ..."
 356         $RUNAS dd if=/dev/zero of=$TESTFILE bs=$BLK_SZ count=$(($LIMIT/2)) || error "(grp) write failure, but expect success"
 357         echo "    Done"
 358         echo "    Write out of block quota ..."
 359         # this time maybe cache write, ignore it's failure
 360         $RUNAS dd if=/dev/zero of=$TESTFILE bs=$BLK_SZ count=$(($LIMIT/2)) seek=$(($LIMIT/2)) || true
 361         sync; sleep 1; sync;
 362         $RUNAS dd if=/dev/zero of=$TESTFILE bs=$BLK_SZ count=$BUNIT_SZ seek=$LIMIT && error "(grp) write success, but expect EDQUOT"
 363
 364         # cleanup
 365         rm -f $TESTFILE
 366         $LFS setquota -g $TSTUSR 0 0 0 0 $MOUNT
 367 }
 368 run_test 1 "Block hard limit (normal use and out of quota) ==="
 369
 370 # file hard limit (normal use and out of quota)
 371 test_2() {
 372         LIMIT=$(($IUNIT_SZ * 10)) # 10 iunits on mds
 373         TESTFILE="$TSTDIR/quota_tstr20"
 374
 375         echo "  User quota (limit: $LIMIT files)"
 376         $LFS setquota -u $TSTUSR 0 0 0 $LIMIT $MOUNT
 377         $SHOW_QUOTA_USER
 378
 379         echo "    Create $LIMIT files ..."
 380         $RUNAS createmany -m ${TESTFILE} $LIMIT || \
 381             error "(usr) create failure, but except success"
 382         echo "    Done"
 383         echo "    Create out of file quota ..."
 384         $RUNAS touch ${TESTFILE}_xxx && \
 385                 error "(usr) touch success, but expect EDQUOT"
 386
 387         unlinkmany ${TESTFILE} $LIMIT
 388         rm ${TESTFILE}_xxx
 389
 390         echo "  Group quota (limit: $LIMIT files)"
 391         $LFS setquota -u $TSTUSR 0 0 0 0 $MOUNT         # clear user limit
 392         $LFS setquota -g $TSTUSR 0 0 0 $LIMIT $MOUNT
 393         $SHOW_QUOTA_GROUP
 394         TESTFILE="$TSTDIR/quota_tst21"
 395
 396         echo "    Create $LIMIT files ..."
 397         $RUNAS createmany -m ${TESTFILE} $LIMIT || \
 398                 error "(grp) create failure, but expect success"
 399
 400         echo "    Done"
 401         echo "    Create out of file quota ..."
 402         $RUNAS touch ${TESTFILE}_xxx && \
 403                 error "(grp) touch success, but expect EDQUOT"
 404
 405         $RUNAS touch ${TESTFILE}_xxx > /dev/null 2>&1 && error "(grp) touch success, but expect EDQUOT"
 406
 407         # cleanup
 408         unlinkmany ${TESTFILE} $LIMIT
 409         rm ${TESTFILE}_xxx
 410
 411         $LFS setquota -g $TSTUSR 0 0 0 0 $MOUNT
 412 }
 413 run_test 2 "File hard limit (normal use and out of quota) ==="
 414
 415 test_block_soft() {
 416         TESTFILE=$1
 417         TIMER=$(($2 * 3 / 2))
 418         OFFSET=0
 419
 420         echo "    Write to exceed soft limit"
 421         RUNDD="$RUNAS dd if=/dev/zero of=$TESTFILE bs=$BLK_SZ"
 422         $RUNDD count=$((BUNIT_SZ+1)) || \
 423                 error "write failure, but expect success"
 424         OFFSET=$((OFFSET + BUNIT_SZ + 1))
 425         sync; sleep 1; sync;
 426
 427         $SHOW_QUOTA_USER
 428         $SHOW_QUOTA_GROUP
 429         $SHOW_QUOTA_INFO
 430
 431         echo "    Write before timer goes off"
 432         $RUNDD count=$BUNIT_SZ seek=$OFFSET || \
 433                 error "write failure, but expect success"
 434         OFFSET=$((OFFSET + BUNIT_SZ))
 435         sync; sleep 1; sync;
 436         echo "    Done"
 437
 438         echo "    Sleep $TIMER seconds ..."
 439         sleep $TIMER
 440
 441         $SHOW_QUOTA_USER
 442         $SHOW_QUOTA_GROUP
 443         $SHOW_QUOTA_INFO
 444
 445         echo "    Write after timer goes off"
 446         # maybe cache write, ignore.
 447         sync; sleep 1; sync;
 448         $RUNDD count=$BUNIT_SZ seek=$OFFSET || true
 449         OFFSET=$((OFFSET + BUNIT_SZ))
 450         sync; sleep 1; sync;
 451         $RUNDD count=$BUNIT_SZ seek=$OFFSET && \
 452                 error "write success, but expect EDQUOT"
 453
 454         $SHOW_QUOTA_USER
 455         $SHOW_QUOTA_GROUP
 456         $SHOW_QUOTA_INFO
 457
 458         echo "    Unlink file to stop timer"
 459         rm -f $TESTFILE
 460         echo "    Done"
 461
 462         $SHOW_QUOTA_USER
 463         $SHOW_QUOTA_GROUP
 464         $SHOW_QUOTA_INFO
 465
 466         echo "    Write ..."
 467         $RUNDD count=$BUNIT_SZ || error "write failure, but expect success"
 468         echo "    Done"
 469
 470         # cleanup
 471         rm -f $TESTFILE
 472 }
 473
 474 # block soft limit (start timer, timer goes off, stop timer)
 475 test_3() {
 476         LIMIT=$(( $BUNIT_SZ * 2 )) # 1 bunit on mds and 1 bunit on the ost
 477         GRACE=10
 478
 479         echo "  User quota (soft limit: $LIMIT kbytes  grace: $GRACE seconds)"
 480         TESTFILE="$TSTDIR/quota_tst30"
 481         $LFS setstripe $TESTFILE 65536 0 1
 482         chown $TSTUSR.$TSTUSR $TESTFILE
 483
 484         $LFS setquota -t -u $GRACE $MAX_IQ_TIME $MOUNT
 485         $LFS setquota -u $TSTUSR $LIMIT 0 0 0 $MOUNT
 486
 487         test_block_soft $TESTFILE $GRACE
 488         $LFS setquota -u $TSTUSR 0 0 0 0 $MOUNT
 489
 490         echo "  Group quota (soft limit: $LIMIT kbytes  grace: $GRACE seconds)"
 491         TESTFILE="$TSTDIR/quota_tst31"
 492         $LFS setstripe $TESTFILE 65536 0 1
 493         chown $TSTUSR.$TSTUSR $TESTFILE
 494
 495         $LFS setquota -t -g $GRACE $MAX_IQ_TIME $MOUNT
 496         $LFS setquota -g $TSTUSR $LIMIT 0 0 0 $MOUNT
 497
 498         test_block_soft $TESTFILE $GRACE
 499         $LFS setquota -g $TSTUSR 0 0 0 0 $MOUNT
 500 }
 501 run_test 3 "Block soft limit (start timer, timer goes off, stop timer) ==="
 502
 503 test_file_soft() {
 504         TESTFILE=$1
 505         LIMIT=$2
 506         TIMER=$(($3 * 3 / 2))
 507
 508         echo "    Create files to exceed soft limit"
 509         $RUNAS createmany -m ${TESTFILE}_ $((LIMIT + 1)) || \
 510                 error "create failure, but expect success"
 511         sync; sleep 1; sync
 512         echo "    Done"
 513
 514         echo "    Create file before timer goes off"
 515         $RUNAS touch ${TESTFILE}_before || \
 516                 error "failed create before timer expired, but expect success"
 517         sync; sleep 1; sync
 518         echo "    Done"
 519
 520         echo "    Sleep $TIMER seconds ..."
 521         sleep $TIMER
 522
 523         $SHOW_QUOTA_USER
 524         $SHOW_QUOTA_GROUP
 525         $SHOW_QUOTA_INFO
 526
 527         echo "    Create file after timer goes off"
 528         $RUNAS createmany -m ${TESTFILE}_after_ $((IUNIT_SZ - 2)) || \
 529                 error "create ${TESTFILE}_after failure, but expect success"
 530         sync; sleep 1; sync
 531         $RUNAS touch ${TESTFILE}_after && \
 532                 error "create after timer expired, but expect EDQUOT"
 533         sync; sleep 1; sync
 534
 535         $SHOW_QUOTA_USER
 536         $SHOW_QUOTA_GROUP
 537         $SHOW_QUOTA_INFO
 538
 539         echo "    Unlink files to stop timer"
 540         find `dirname $TESTFILE` -name "`basename ${TESTFILE}`*" | xargs rm -f
 541         echo "    Done"
 542
 543         echo "    Create file"
 544         $RUNAS touch ${TESTFILE}_xxx || \
 545                 error "touch after timer stop failure, but expect success"
 546         sync; sleep 1; sync
 547         echo "    Done"
 548
 549         # cleanup
 550         rm -f ${TESTFILE}_xxx
 551 }
 552
 553 # file soft limit (start timer, timer goes off, stop timer)
 554 test_4() {
 555         LIMIT=$(($IUNIT_SZ * 10))       # 10 iunits on mds
 556         TESTFILE="$TSTDIR/quota_tst40"
 557         GRACE=5
 558
 559         echo "  User quota (soft limit: $LIMIT files  grace: $GRACE seconds)"
 560         $LFS setquota -t -u $MAX_DQ_TIME $GRACE $MOUNT
 561         $LFS setquota -u $TSTUSR 0 0 $LIMIT 0 $MOUNT
 562         $SHOW_QUOTA_USER
 563
 564         test_file_soft $TESTFILE $LIMIT $GRACE
 565         $LFS setquota -u $TSTUSR 0 0 0 0 $MOUNT
 566
 567         echo "  Group quota (soft limit: $LIMIT files  grace: $GRACE seconds)"
 568         $LFS setquota -t -g $MAX_DQ_TIME $GRACE $MOUNT
 569         $LFS setquota -g $TSTUSR 0 0 $LIMIT 0 $MOUNT
 570         $SHOW_QUOTA_GROUP
 571         TESTFILE="$TSTDIR/quota_tst41"
 572
 573         test_file_soft $TESTFILE $LIMIT $GRACE
 574         $LFS setquota -g $TSTUSR 0 0 0 0 $MOUNT
 575
 576         # cleanup
 577         $LFS setquota -t -u $MAX_DQ_TIME $MAX_IQ_TIME $MOUNT
 578         $LFS setquota -t -g $MAX_DQ_TIME $MAX_IQ_TIME $MOUNT
 579 }
 580 run_test 4 "File soft limit (start timer, timer goes off, stop timer) ==="
 581
 582 # chown & chgrp (chown & chgrp successfully even out of block/file quota)
 583 test_5() {
 584         BLIMIT=$(( $BUNIT_SZ * $((OSTCOUNT + 1)) * 10)) # 10 bunits on each server
 585         ILIMIT=$(( $IUNIT_SZ * 10 )) # 10 iunits on mds
 586
 587         echo "  Set quota limit (0 $BLIMIT 0 $ILIMIT) for $TSTUSR.$TSTUSR"
 588         $LFS setquota -u $TSTUSR 0 $BLIMIT 0 $ILIMIT $MOUNT
 589         $LFS setquota -g $TSTUSR 0 $BLIMIT 0 $ILIMIT $MOUNT
 590         $SHOW_QUOTA_USER
 591         $SHOW_QUOTA_GROUP
 592
 593         echo "  Create more than $ILIMIT files and more than $BLIMIT kbytes ..."
 594         createmany -m $TSTDIR/quota_tst50_ $((ILIMIT + 1)) || \
 595                 error "touch failure, expect success"
 596         dd if=/dev/zero of=$TSTDIR/quota_tst50_1 bs=$BLK_SZ count=$((BLIMIT+1)) || error "write failure, expect success"
 597
 598         echo "  Chown files to $TSTUSR.$TSTUSR ..."
 599         for i in `seq 0 $ILIMIT`; do
 600                 chown $TSTUSR.$TSTUSR $TSTDIR/quota_tst50_$i || \
 601                         error "chown failure, but expect success"
 602         done
 603
 604         # cleanup
 605         unlinkmany $TSTDIR/quota_tst50_ $((ILIMIT + 1))
 606
 607         $LFS setquota -u $TSTUSR 0 0 0 0 $MOUNT
 608         $LFS setquota -g $TSTUSR 0 0 0 0 $MOUNT
 609 }
 610 run_test 5 "Chown & chgrp successfully even out of block/file quota ==="
 611
 612 # block quota acquire & release
 613 test_6() {
 614         if [ $OSTCOUNT -lt 2 ]; then
 615                 skip "$OSTCOUNT < 2, too few osts"
 616                 return 0;
 617         fi
 618
 619         LIMIT=$((BUNIT_SZ * (OSTCOUNT + 1) * 5)) # 5 bunits per server
 620         FILEA="$TSTDIR/quota_tst60_a"
 621         FILEB="$TSTDIR/quota_tst60_b"
 622
 623         echo "  Set block limit $LIMIT kbytes to $TSTUSR.$TSTUSR"
 624         $LFS setquota -u $TSTUSR 0 $LIMIT 0 0 $MOUNT
 625         $LFS setquota -g $TSTUSR 0 $LIMIT 0 0 $MOUNT
 626         $SHOW_QUOTA_USER
 627         $SHOW_QUOTA_GROUP
 628
 629         echo "  Create filea on OST0 and fileb on OST1"
 630         $LFS setstripe $FILEA 65536 0 1
 631         $LFS setstripe $FILEB 65536 1 1
 632         chown $TSTUSR.$TSTUSR $FILEA
 633         chown $TSTUSR.$TSTUSR $FILEB
 634
 635         echo "  Exceed quota limit ..."
 636         RUNDD="$RUNAS dd if=/dev/zero of=$FILEB bs=$BLK_SZ"
 637         $RUNDD count=$((LIMIT - BUNIT_SZ * OSTCOUNT)) || \
 638                 error "write fileb failure, but expect success"
 639
 640         sync; sleep 1; sync;
 641         $SHOW_QUOTA_USER
 642         $SHOW_QUOTA_GROUP
 643         $RUNDD seek=$LIMIT count=$((BUNIT_SZ * OSTCOUNT)) && \
 644                 error "write fileb success, but expect EDQUOT"
 645         sync; sleep 1; sync;
 646         echo "  Write to OST0 return EDQUOT"
 647         # this write maybe cache write, ignore it's failure
 648         RUNDD="$RUNAS dd if=/dev/zero of=$FILEA bs=$BLK_SZ"
 649         $RUNDD count=$(($BUNIT_SZ * 2)) || true
 650         sync; sleep 1; sync;
 651         $SHOW_QUOTA_USER
 652         $SHOW_QUOTA_GROUP
 653         $RUNDD count=$((BUNIT_SZ * 2)) seek=$((BUNIT_SZ *2)) && \
 654                 error "write filea success, but expect EDQUOT"
 655
 656         echo "  Remove fileb to let OST1 release quota"
 657         rm -f $FILEB
 658         sync; sleep 10; sync; # need to allow journal commit for small fs
 659
 660         echo "  Write to OST0"
 661         $RUNDD count=$((LIMIT - BUNIT_SZ * OSTCOUNT)) || \
 662                 error "write filea failure, expect success"
 663         echo "  Done"
 664
 665         # cleanup
 666         rm -f $FILEA
 667         $LFS setquota -u $TSTUSR 0 0 0 0 $MOUNT
 668         $LFS setquota -g $TSTUSR 0 0 0 0 $MOUNT
 669         return 0
 670 }
 671 run_test 6 "Block quota acquire & release ========="
 672
 673 # quota recovery (block quota only by now)
 674 test_7()
 675 {
 676         remote_mds && skip "remote mds"
 677
 678         LIMIT=$(( $BUNIT_SZ * $(($OSTCOUNT + 1)) * 10)) # 10 bunits each sever
 679         TESTFILE="$TSTDIR/quota_tst70"
 680
 681         $LFS setquota -u $TSTUSR 0 $LIMIT 0 0 $MOUNT
 682
 683         $LFS setstripe $TESTFILE 65536 0 1
 684         chown $TSTUSR.$TSTUSR $TESTFILE
 685
 686         echo "  Write to OST0..."
 687         $RUNAS dd if=/dev/zero of=$TESTFILE bs=$BLK_SZ count=$BUNIT_SZ || \
 688                 error "write failure, but expect success"
 689
 690         #define OBD_FAIL_OBD_DQACQ               0x604
 691         echo 0x604 > /proc/sys/lustre/fail_loc
 692         echo "  Remove files on OST0"
 693         rm -f $TESTFILE
 694         echo 0 > /proc/sys/lustre/fail_loc
 695
 696         echo "  Trigger recovery..."
 697         OSC0_UUID="`$LCTL dl | awk '$3 ~ /osc/ { print $1 }'`"
 698         for i in $OSC0_UUID; do
 699                 $LCTL --device $i activate || error "activate osc failed!"
 700         done
 701
 702         # sleep a while to wait for recovery done
 703         sleep 20
 704
 705         # check limits
 706         PATTERN="`echo $MOUNT | sed 's/\//\\\\\//g'`"
 707         TOTAL_LIMIT="`$LFS quota -u $TSTUSR $MOUNT | awk '/^.*'$PATTERN'.*[[:digit:]+][[:space:]+]/ { print $4 }'`"
 708         [ $TOTAL_LIMIT -eq $LIMIT ] || error "total limits not recovery!"
 709         echo "  total limits = $TOTAL_LIMIT"
 710
 711         OST0_UUID=`do_facet ost1 "$LCTL dl | grep -m1 obdfilter" | awk '{print $((NF-1))}'`
 712         [ -z "$OST0_UUID" ] && OST0_UUID=`do_facet ost1 "$LCTL dl | grep -m1 obdfilter" | awk '{print $((NF-1))}'`
 713         OST0_LIMIT="`$LFS quota -o $OST0_UUID -u $TSTUSR $MOUNT | awk '/^.*[[:digit:]+][[:space:]+]/ { print $3 }'`"
 714         [ $OST0_LIMIT -eq $BUNIT_SZ ] || error "high limits not released!"
 715         echo "  limits on $OST0_UUID = $OST0_LIMIT"
 716
 717         # cleanup
 718         $LFS setquota -u $TSTUSR 0 0 0 0 $MOUNT
 719 }
 720 run_test 7 "Quota recovery (only block limit) ======"
 721
 722 # run dbench with quota enabled
 723 test_8() {
 724         BLK_LIMIT=$((100 * 1024 * 1024)) # 100G
 725         FILE_LIMIT=1000000
 726         DBENCH_LIB=${DBENCH_LIB:-/usr/lib/dbench}
 727
 728         [ ! -d $DBENCH_LIB ] && skip "dbench not installed" && return 0
 729
 730         echo "  Set enough high limit for user: $TSTUSR"
 731         $LFS setquota -u $TSTUSR 0 $BLK_LIMIT 0 $FILE_LIMIT $MOUNT
 732         echo "  Set enough high limit for group: $TSTUSR"
 733         $LFS setquota -g $USER 0 $BLK_LIMIT 0 $FILE_LIMIT $MOUNT
 734
 735
 736         TGT=$TSTDIR/client.txt
 737         SRC=${SRC:-$DBENCH_LIB/client.txt}
 738         [ ! -e $TGT -a -e $SRC ] && echo "copying $SRC to $TGT" && cp $SRC $TGT
 739         SRC=$DBENCH_LIB/client_plain.txt
 740         [ ! -e $TGT -a -e $SRC ] && echo "copying $SRC to $TGT" && cp $SRC $TGT
 741
 742         SAVE_PWD=$PWD
 743         cd $TSTDIR
 744         $RUNAS dbench -c client.txt 3
 745         RC=$?
 746
 747         rm -f client.txt
 748         cd $SAVE_PWD
 749         return $RC
 750 }
 751 run_test 8 "Run dbench with quota enabled ==========="
 752
 753 # run for fixing bug10707, it needs a big room. test for 64bit
 754 test_9() {
 755         lustrefs_size=`(echo 0; df -t lustre -P | awk '{print $4}') | tail -n 1`
 756         size_file=$((1024 * 1024 * 9 / 2 * $OSTCOUNT))
 757         echo "lustrefs_size:$lustrefs_size  size_file:$size_file"
 758         if [ $lustrefs_size -lt $size_file ]; then
 759             skip "less than $size_file free"
 760             return 0;
 761         fi
 762
 763         # set the D_QUOTA flag
 764         debugsave
 765         sysctl -w lnet.debug="+quota"
 766
 767         TESTFILE="$TSTDIR/quota_tst90"
 768
 769         echo "  Set block limit $LIMIT kbytes to $TSTUSR.$TSTUSR"
 770         BLK_LIMIT=$((100 * 1024 * 1024)) # 100G
 771         FILE_LIMIT=1000000
 772
 773         echo "  Set enough high limit for user: $TSTUSR"
 774         $LFS setquota -u $TSTUSR 0 $BLK_LIMIT 0 $FILE_LIMIT $MOUNT
 775         echo "  Set enough high limit for group: $TSTUSR"
 776         $LFS setquota -g $TSTUSR 0 $BLK_LIMIT 0 $FILE_LIMIT $MOUNT
 777
 778         echo "  Set stripe"
 779         [ $OSTCOUNT -ge 2 ] && $LFS setstripe $TESTFILE 65536 0 $OSTCOUNT
 780         touch $TESTFILE
 781         chown $TSTUSR.$TSTUSR $TESTFILE
 782
 783         echo "    Write the big file of $(($OSTCOUNT * 9 / 2 ))G ..."
 784         $RUNAS dd if=/dev/zero of=$TESTFILE  bs=$BLK_SZ count=$size_file || error "(usr) write $((9 / 2 * $OSTCOUNT))G file failure, but expect success"
 785
 786         echo "    delete the big file of $(($OSTCOUNT * 9 / 2))G..."
 787         $RUNAS rm -f $TESTFILE
 788
 789         echo "    write the big file of 2G..."
 790         $RUNAS dd if=/dev/zero of=$TESTFILE  bs=$BLK_SZ count=$((1024 * 1024 * 2)) || error "(usr) write $((9 / 2 * $OSTCOUNT))G file failure, but expect seccess"
 791
 792         echo "    delete the big file of 2G..."
 793         $RUNAS rm -f $TESTFILE
 794         RC=$?
 795
 796         debugrestore
 797         return $RC
 798 }
 799 run_test 9 "run for fixing bug10707(64bit) ==========="
 800
 801 # run for fixing bug10707, it need a big room. test for 32bit
 802 test_10() {
 803         lustrefs_size=`(echo 0; df -t lustre -P | awk '{print $4}') | tail -n 1`
 804         size_file=$((1024 * 1024 * 9 / 2 * $OSTCOUNT))
 805         echo "lustrefs_size:$lustrefs_size  size_file:$size_file"
 806         if [ $lustrefs_size -lt $size_file ]; then
 807                 skip "less than $size_file free"
 808                 return 0;
 809         fi
 810
 811         if [ ! -d /proc/fs/lustre/ost/ -o ! -d /proc/fs/lustre/mds ]; then
 812                 skip "mds or ost isn't local"
 813                 return 0;
 814         fi
 815
 816         sync; sleep 10; sync;
 817
 818         # set the D_QUOTA flag
 819         debugsave
 820         sysctl -w lnet.debug="+quota"
 821
 822         # make qd_count 32 bit
 823         sysctl -w lustre.fail_loc=0xA00
 824
 825         TESTFILE="$TSTDIR/quota_tst100"
 826
 827         echo "  Set block limit $LIMIT kbytes to $TSTUSR.$TSTUSR"
 828         BLK_LIMIT=$((100 * 1024 * 1024)) # 100G
 829         FILE_LIMIT=1000000
 830
 831         echo "  Set enough high limit for user: $TSTUSR"
 832         $LFS setquota -u $TSTUSR 0 $BLK_LIMIT 0 $FILE_LIMIT $MOUNT
 833         echo "  Set enough high limit for group: $TSTUSR"
 834         $LFS setquota -g $TSTUSR 0 $BLK_LIMIT 0 $FILE_LIMIT $MOUNT
 835
 836         echo "  Set stripe"
 837         [ $OSTCOUNT -ge 2 ] && $LFS setstripe $TESTFILE 65536 0 $OSTCOUNT
 838         touch $TESTFILE
 839         chown $TSTUSR.$TSTUSR $TESTFILE
 840
 841         echo "    Write the big file of $(($OSTCOUNT * 9 / 2 ))G ..."
 842         $RUNAS dd if=/dev/zero of=$TESTFILE  bs=$BLK_SZ count=$size_file || error "(usr) write $((9 / 2 * $OSTCOUNT))G file failure, but expect success"
 843
 844         echo "    delete the big file of $(($OSTCOUNT * 9 / 2))G..."
 845         $RUNAS rm -f $TESTFILE
 846
 847         echo "    write the big file of 2G..."
 848         $RUNAS dd if=/dev/zero of=$TESTFILE  bs=$BLK_SZ count=$((1024 * 1024 * 2)) || error "(usr) write $((9 / 2 * $OSTCOUNT))G file failure, but expect success"
 849
 850         echo "    delete the big file of 2G..."
 851         $RUNAS rm -f $TESTFILE
 852
 853         RC=$?
 854
 855         # clear the flage
 856         debugrestore
 857
 858         # make qd_count 64 bit
 859         sysctl -w lustre.fail_loc=0
 860
 861         return $RC
 862 }
 863 run_test 10 "run for fixing bug10707(32bit) ==========="
 864
 865 test_11() {
 866        #prepare the test
 867        block_limit=`(echo 0; df -t lustre -P | awk '{print $(NF - 4)}') | tail -n 1`
 868        echo $block_limit
 869        orig_dbr=`cat /proc/sys/vm/dirty_background_ratio`
 870        orig_dec=`cat /proc/sys/vm/dirty_expire_centisecs`
 871        orig_dr=`cat /proc/sys/vm/dirty_ratio`
 872        orig_dwc=`cat /proc/sys/vm/dirty_writeback_centisecs`
 873        echo 1  > /proc/sys/vm/dirty_background_ratio
 874        echo 30 > /proc/sys/vm/dirty_expire_centisecs
 875        echo 1  > /proc/sys/vm/dirty_ratio
 876        echo 50 > /proc/sys/vm/dirty_writeback_centisecs
 877        TESTDIR="$TSTDIR/quota_tst110"
 878        local RV=0
 879
 880        #do the test
 881        MINS=0
 882        REPS=3
 883        i=1
 884        while [ $i -le $REPS ]; do
 885            echo "test: cycle($i of $REPS) start at $(date)"
 886            mkdir -p $TESTDIR && chmod 777 $TESTDIR
 887            echo -n "    create a file for uid "
 888            for j in `seq 1 30`; do
 889                echo -n "$j "
 890                # 30MB per dd for a total of 900MB (if space even permits)
 891                runas -u $j dd if=/dev/zero of=$TESTDIR/$j  bs=$BLK_SZ count=30720 > /dev/null 2>&1 &
 892            done
 893            echo ""
 894            PROCS=$(ps -ef | grep -v grep | grep "dd if /dev/zero of $TESTDIR" | wc -l)
 895            LAST_USED=0
 896            while [ $PROCS -gt 0 ]; do
 897              sleep 60
 898              MINS=$(($MINS+1))
 899              PROCS=$(ps -ef | grep -v grep | grep "dd if /dev/zero of $TESTDIR" | wc -l)
 900              USED=$(du -s $TESTDIR | awk '{print $1}')
 901              PCT=$(($USED * 100 / $block_limit))
 902              echo "${i}/${REPS} ${PCT}% p${PROCS} t${MINS}  "
 903              if [ $USED -le $LAST_USED ]; then
 904                  kill -9 $(ps -ef | grep "dd if /dev/zero of $TESTDIR" | grep -v grep | awk '{ print $2 }')
 905                  i=$REPS
 906                  RV=2
 907                  break
 908              fi
 909              LAST_USED=$USED
 910            done
 911            echo "    removing the test files..."
 912            rm -rf $TESTDIR
 913            echo "cycle $i done at $(date)"
 914            i=$[$i+1]
 915        done
 916        echo "Test took $MINS minutes"
 917
 918        #clean
 919        echo $orig_dbr > /proc/sys/vm/dirty_background_ratio
 920        echo $orig_dec > /proc/sys/vm/dirty_expire_centisecs
 921        echo $orig_dr  > /proc/sys/vm/dirty_ratio
 922        echo $orig_dwc > /proc/sys/vm/dirty_writeback_centisecs
 923        if [ $RV -ne 0 ]; then
 924            error "Nothing was written for over a minute... aborting"
 925        fi
 926        return $RV
 927 }
 928 run_test 11 "run for fixing bug10912 ==========="
 929
 930
 931 # test a deadlock between quota and journal b=11693
 932 test_12() {
 933         LIMIT=$(( $BUNIT_SZ * $(($OSTCOUNT + 1)) * 10)) # 10 bunits each sever
 934         TESTFILE="$TSTDIR/quota_tst120"
 935         TESTFILE2="$TSTDIR2/quota_tst121"
 936
 937         echo "   User quota (limit: $LIMIT kbytes)"
 938         $LFS setquota -u $TSTUSR 0 $LIMIT 0 0 $MOUNT
 939
 940         $LFS setstripe $TESTFILE 65536 0 1
 941         chown $TSTUSR.$TSTUSR $TESTFILE
 942         $LFS setstripe $TESTFILE2 65536 0 1
 943         chown $TSTUSR2.$TSTUSR2 $TESTFILE2
 944
 945         #define OBD_FAIL_OST_HOLD_WRITE_RPC      0x21f
 946         sysctl -w lustre.fail_loc=0x0000021f
 947
 948         echo "   step1: write out of block quota ..."
 949         $RUNAS dd if=/dev/zero of=$TESTFILE bs=$BLK_SZ count=$(($LIMIT*2)) &
 950         DDPID=$!
 951         sleep 5
 952         $RUNAS2 dd if=/dev/zero of=$TESTFILE2 bs=$BLK_SZ count=102400 &
 953         DDPID1=$!
 954
 955         echo  "   step2: testing ......"
 956         count=0
 957         while [ true ]; do
 958             if [ -z `ps -ef | awk '$2 == '${DDPID1}' { print $8 }'` ]; then break; fi
 959             count=$[count+1]
 960             if [ $count -gt 64 ]; then
 961                 sysctl -w lustre.fail_loc=0
 962                 error "dd should be finished!"
 963             fi
 964             sleep 1
 965         done
 966         echo "(dd_pid=$DDPID1, time=$count)successful"
 967
 968         #Recover fail_loc and dd will finish soon
 969         sysctl -w lustre.fail_loc=0
 970
 971         echo  "   step3: testing ......"
 972         count=0
 973         while [ true ]; do
 974             if [ -z `ps -ef | awk '$2 == '${DDPID}' { print $8 }'` ]; then break; fi
 975             count=$[count+1]
 976             if [ $count -gt 100 ]; then
 977                 error "dd should be finished!"
 978             fi
 979             sleep 1
 980         done
 981         echo "(dd_pid=$DDPID, time=$count)successful"
 982
 983         rm -f $TESTFILE $TESTFILE2
 984
 985         $LFS setquota -u $TSTUSR 0 0 0 0 $MOUNT         # clear user limit
 986 }
 987 run_test 12 "test a deadlock between quota and journal ==="
 988
 989 # test multiple clients write block quota b=11693
 990 test_13() {
 991         # one OST * 10 + (mds + other OSTs)
 992         LIMIT=$((BUNIT_SZ * 10 + (BUNIT_SZ * OSTCOUNT)))
 993         TESTFILE="$TSTDIR/quota_tst13"
 994
 995         echo "   User quota (limit: $LIMIT kbytes)"
 996         $LFS setquota -u $TSTUSR 0 $LIMIT 0 0 $MOUNT
 997         $SHOW_QUOTA_USER
 998
 999         $LFS setstripe $TESTFILE 65536 0 1
1000         chown $TSTUSR.$TSTUSR $TESTFILE
1001         $LFS setstripe $TESTFILE.2 65536 0 1
1002         chown $TSTUSR.$TSTUSR $TESTFILE.2
1003
1004         echo "   step1: write out of block quota ..."
1005         # one bunit will give mds
1006         $RUNAS dd if=/dev/zero of=$TESTFILE bs=$BLK_SZ count=$[($LIMIT - $BUNIT_SZ) / 2] &
1007         DDPID=$!
1008         $RUNAS dd if=/dev/zero of=$TESTFILE.2 bs=$BLK_SZ count=$[($LIMIT - $BUNIT_SZ) / 2] &
1009         DDPID1=$!
1010
1011         echo  "   step2: testing ......"
1012         count=0
1013         while [ true ]; do
1014             if [ -z `ps -ef | awk '$2 == '${DDPID}' { print $8 }'` ]; then break; fi
1015             count=$[count+1]
1016             if [ $count -gt 64 ]; then
1017                 error "dd should be finished!"
1018             fi
1019             sleep 1
1020         done
1021         echo "(dd_pid=$DDPID, time=$count)successful"
1022
1023         count=0
1024         while [ true ]; do
1025             if [ -z `ps -ef | awk '$2 == '${DDPID1}' { print $8 }'` ]; then break; fi
1026             count=$[count+1]
1027             if [ $count -gt 64 ]; then
1028                 error "dd should be finished!"
1029             fi
1030             sleep 1
1031         done
1032         echo "(dd_pid=$DDPID1, time=$count)successful"
1033
1034         sync; sleep 5; sync;
1035
1036         echo  "   step3: checking ......"
1037         fz=`stat -c %s $TESTFILE`
1038         fz2=`stat -c %s $TESTFILE.2`
1039         $SHOW_QUOTA_USER
1040         [ $((fz + fz2)) -lt $((BUNIT_SZ * BLK_SZ * 10)) ] && \
1041                 error "files too small $fz + $fz < $((BUNIT_SZ * BLK_SZ * 10))"
1042
1043         rm -f $TESTFILE $TESTFILE.2
1044
1045         $LFS setquota -u $TSTUSR 0 0 0 0 $MOUNT         # clear user limit
1046 }
1047 run_test 13 "test multiple clients write block quota ==="
1048
1049 check_if_quota_zero(){
1050         line=`$LFS quota -$1 $2 $MOUNT | wc -l`
1051         for i in `seq 3 $line`; do
1052             for j in 3 4 6 7; do
1053                 tmp=`$LFS quota -$1 $2 $MOUNT | sed -n ${i}p |
1054                      awk  '{print $'"$j"'}'`
1055                 [ -n "$tmp" ] && [ $tmp -ne 0 ] && $LFS quota -$1 $2 $MOUNT && \
1056                     error "quota on $1 isn't clean"
1057             done
1058         done
1059         echo "pass check_if_quota_zero"
1060 }
1061
1062 # test setting quota on root, b=12223
1063 test_13(){
1064         TESTFILE="$TSTDIR/quota_tst13"
1065
1066         # reboot the lustre
1067         cd $T_PWD; sh llmountcleanup.sh || error "llmountcleanup failed"
1068         sh llmount.sh
1069         pre_test
1070         setup
1071         run_test 0 "reboot lustre"
1072
1073         # out of root's file and block quota
1074         $LFS setquota -u root 10 10 10 10 $MOUNT
1075         createmany -m ${TESTFILE} 20 || \
1076             error "unexpected: user(root) create files failly!"
1077         dd if=/dev/zero of=$TESTFILE bs=4k count=4096 || \
1078             error "unexpected: user(root) write files failly!"
1079         chmod 666 $TESTFILE
1080         $RUNAS dd if=/dev/zero of=${TESTFILE} seek=4096 bs=4k count=4096 && \
1081             error "unexpected: user(quota_usr) write a file successfully!"
1082
1083         # trigger the llog
1084         chmod 777 $MOUNT
1085         for i in `seq 1 10`; do $RUNAS touch ${TESTFILE}a_$i; done
1086         for i in `seq 1 10`; do $RUNAS rm -f ${TESTFILE}a_$i; done
1087
1088         # do the check
1089         dmesg | tail | grep "\-122" |grep llog_obd_origin_add && error "test_13 failed."
1090         $LFS setquota -u root 0 0 0 0 $MOUNT
1091         #check_if_quota_zero u root
1092
1093         # clean
1094         unlinkmany ${TESTFILE} 15
1095         rm -f $TESTFILE
1096 }
1097 run_test 13 "test setting quota on root ==="
1098
1099 # turn off quota
1100 test_99()
1101 {
1102         $LFS quotaoff $MOUNT
1103         return 0
1104 }
1105 run_test 99 "Quota off ==============================="
1106
1107
1108 log "cleanup: ======================================================"
1109 if [ "`mount | grep ^$NAME`" ]; then
1110         rm -fr $TSTDIR
1111         if [ $TEST_9_10 -eq 0 ]; then
1112             post_test
1113         fi
1114         # delete test user and group
1115         userdel "$TSTUSR"
1116         userdel "$TSTUSR2"
1117         if [ "$I_MOUNTED" = "yes" ]; then
1118                 cd $ORIG_PWD && (sh llmountcleanup.sh || error "llmountcleanup failed")
1119         fi
1120 fi
1121
1122 echo '=========================== finished ==============================='
1123 [ -f "$QUOTALOG" ] && cat $QUOTALOG && grep -q FAIL $QUOTALOG && exit 1 || true
1124 echo "$0: completed"