lustre/tests/sanity.sh

   1 #!/bin/bash
   2 #
   3 # Run select tests by setting ONLY, or as arguments to the script.
   4 # Skip specific tests by setting EXCEPT.
   5 #
   6 # e.g. ONLY="22 23" or ONLY="`seq 32 39`" or EXCEPT="31"
   7 set -e
   8
   9 ONLY=${ONLY:-"$*"}
  10 # bug number for skipped test: 2108 3637 3561
  11 ALWAYS_EXCEPT=${ALWAYS_EXCEPT:-"42a 42c  45"}
  12 # UPDATE THE COMMENT ABOVE WITH BUG NUMBERS WHEN CHANGING ALWAYS_EXCEPT!
  13
  14 [ "$ALWAYS_EXCEPT$EXCEPT" ] && echo "Skipping tests: $ALWAYS_EXCEPT $EXCEPT"
  15
  16 SRCDIR=`dirname $0`
  17 export PATH=$PWD/$SRCDIR:$SRCDIR:$SRCDIR/../utils:$PATH
  18
  19 TMP=${TMP:-/tmp}
  20 FSTYPE=${FSTYPE:-ext3}
  21
  22 CHECKSTAT=${CHECKSTAT:-"checkstat -v"}
  23 CREATETEST=${CREATETEST:-createtest}
  24 LFS=${LFS:-lfs}
  25 LSTRIPE=${LSTRIPE:-"$LFS setstripe"}
  26 LFIND=${LFIND:-"$LFS find"}
  27 LVERIFY=${LVERIFY:-ll_dirstripe_verify}
  28 LCTL=${LCTL:-lctl}
  29 MCREATE=${MCREATE:-mcreate}
  30 OPENFILE=${OPENFILE:-openfile}
  31 OPENUNLINK=${OPENUNLINK:-openunlink}
  32 TOEXCL=${TOEXCL:-toexcl}
  33 TRUNCATE=${TRUNCATE:-truncate}
  34 MUNLINK=${MUNLINK:-munlink}
  35 SOCKETSERVER=${SOCKETSERVER:-socketserver}
  36 SOCKETCLIENT=${SOCKETCLIENT:-socketclient}
  37 IOPENTEST1=${IOPENTEST1:-iopentest1}
  38 IOPENTEST2=${IOPENTEST2:-iopentest2}
  39 MEMHOG=${MEMHOG:-memhog}
  40
  41 if [ $UID -ne 0 ]; then
  42         RUNAS_ID="$UID"
  43         RUNAS=""
  44 else
  45         RUNAS_ID=${RUNAS_ID:-500}
  46         RUNAS=${RUNAS:-"runas -u $RUNAS_ID"}
  47 fi
  48
  49 export NAME=${NAME:-local}
  50
  51 SAVE_PWD=$PWD
  52
  53 clean() {
  54         echo -n "cln.."
  55         sh llmountcleanup.sh > /dev/null || exit 20
  56         I_MOUNTED=no
  57 }
  58 CLEAN=${CLEAN:-:}
  59
  60 start() {
  61         echo -n "mnt.."
  62         sh llrmount.sh > /dev/null || exit 10
  63         I_MOUNTED=yes
  64         echo "done"
  65 }
  66 START=${START:-:}
  67
  68 log() {
  69         echo "$*"
  70         lctl mark "$*" 2> /dev/null || true
  71 }
  72
  73 trace() {
  74         log "STARTING: $*"
  75         strace -o $TMP/$1.strace -ttt $*
  76         RC=$?
  77         log "FINISHED: $*: rc $RC"
  78         return 1
  79 }
  80 TRACE=${TRACE:-""}
  81
  82 check_kernel_version() {
  83         VERSION_FILE=/proc/fs/lustre/kernel_version
  84         WANT_VER=$1
  85         [ ! -f $VERSION_FILE ] && echo "can't find kernel version" && return 1
  86         GOT_VER=`cat $VERSION_FILE`
  87         [ $GOT_VER -ge $WANT_VER ] && return 0
  88         log "test needs at least kernel version $WANT_VER, running $GOT_VER"
  89         return 1
  90 }
  91
  92 run_one() {
  93         if ! mount | grep -q $DIR; then
  94                 $START
  95         fi
  96         log "== test $1: $2= `date +%H:%M:%S`"
  97         export TESTNAME=test_$1
  98         test_$1 || error "test_$1: exit with rc=$?"
  99         unset TESTNAME
 100         pass
 101         cd $SAVE_PWD
 102         $CLEAN
 103 }
 104
 105 build_test_filter() {
 106         for O in $ONLY; do
 107             eval ONLY_${O}=true
 108         done
 109         for E in $EXCEPT $ALWAYS_EXCEPT; do
 110             eval EXCEPT_${E}=true
 111         done
 112 }
 113
 114 _basetest() {
 115     echo $*
 116 }
 117
 118 basetest() {
 119     IFS=abcdefghijklmnopqrstuvwxyz _basetest $1
 120 }
 121
 122 run_test() {
 123          base=`basetest $1`
 124          if [ "$ONLY" ]; then
 125                  testname=ONLY_$1
 126                  if [ ${!testname}x != x ]; then
 127                         run_one $1 "$2"
 128                         return $?
 129                  fi
 130                  testname=ONLY_$base
 131                  if [ ${!testname}x != x ]; then
 132                          run_one $1 "$2"
 133                          return $?
 134                  fi
 135                  echo -n "."
 136                  return 0
 137         fi
 138         testname=EXCEPT_$1
 139         if [ ${!testname}x != x ]; then
 140                  echo "skipping excluded test $1"
 141                  return 0
 142         fi
 143         testname=EXCEPT_$base
 144         if [ ${!testname}x != x ]; then
 145                  echo "skipping excluded test $1 (base $base)"
 146                  return 0
 147         fi
 148         run_one $1 "$2"
 149         return $?
 150 }
 151
 152 [ "$SANITYLOG" ] && rm -f $SANITYLOG || true
 153
 154 error() {
 155         log "FAIL: $@"
 156         if [ "$SANITYLOG" ]; then
 157                 echo "FAIL: $TESTNAME $@" >> $SANITYLOG
 158         else
 159                 exit 1
 160         fi
 161 }
 162
 163 pass() {
 164         echo PASS
 165 }
 166
 167 MOUNT="`mount | awk '/^'$NAME' .* lustre_lite / { print $3 }'`"
 168 if [ -z "$MOUNT" ]; then
 169         sh llmount.sh
 170         MOUNT="`mount | awk '/^'$NAME' .* lustre_lite / { print $3 }'`"
 171         [ -z "$MOUNT" ] && error "NAME=$NAME not mounted"
 172         I_MOUNTED=yes
 173 fi
 174
 175 [ `echo $MOUNT | wc -w` -gt 1 ] && error "NAME=$NAME mounted more than once"
 176
 177 DIR=${DIR:-$MOUNT}
 178 [ -z "`echo $DIR | grep $MOUNT`" ] && echo "$DIR not in $MOUNT" && exit 99
 179
 180 LOVNAME=`cat /proc/fs/lustre/llite/fs0/lov/common_name`
 181 OSTCOUNT=`cat /proc/fs/lustre/lov/$LOVNAME/numobd`
 182 STRIPECOUNT=`cat /proc/fs/lustre/lov/$LOVNAME/stripecount`
 183 STRIPESIZE=`cat /proc/fs/lustre/lov/$LOVNAME/stripesize`
 184
 185 [ -f $DIR/d52a/foo ] && chattr -a $DIR/d52a/foo
 186 [ -f $DIR/d52b/foo ] && chattr -i $DIR/d52b/foo
 187 rm -rf $DIR/[Rdfs][1-9]*
 188
 189 build_test_filter
 190
 191 echo preparing for tests involving mounts
 192 EXT2_DEV=${EXT2_DEV:-/tmp/SANITY.LOOP}
 193 touch $EXT2_DEV
 194 mke2fs -j -F $EXT2_DEV 8000 > /dev/null
 195
 196 umask 077
 197
 198 test_0() {
 199         touch $DIR/f
 200         $CHECKSTAT -t file $DIR/f || error
 201         rm $DIR/f
 202         $CHECKSTAT -a $DIR/f || error
 203 }
 204 run_test 0 "touch .../f ; rm .../f ============================="
 205
 206 test_0b() {
 207         chmod 0755 $DIR || error
 208         $CHECKSTAT -p 0755 $DIR || error
 209 }
 210 run_test 0b "chmod 0755 $DIR ============================="
 211
 212 test_1a() {
 213         mkdir $DIR/d1
 214         mkdir $DIR/d1/d2
 215         $CHECKSTAT -t dir $DIR/d1/d2 || error
 216 }
 217 run_test 1a "mkdir .../d1; mkdir .../d1/d2 ====================="
 218
 219 test_1b() {
 220         rmdir $DIR/d1/d2
 221         rmdir $DIR/d1
 222         $CHECKSTAT -a $DIR/d1 || error
 223 }
 224 run_test 1b "rmdir .../d1/d2; rmdir .../d1 ====================="
 225
 226 test_2a() {
 227         mkdir $DIR/d2
 228         touch $DIR/d2/f
 229         $CHECKSTAT -t file $DIR/d2/f || error
 230 }
 231 run_test 2a "mkdir .../d2; touch .../d2/f ======================"
 232
 233 test_2b() {
 234         rm -r $DIR/d2
 235         $CHECKSTAT -a $DIR/d2 || error
 236 }
 237 run_test 2b "rm -r .../d2; checkstat .../d2/f ======================"
 238
 239 test_3a() {
 240         mkdir $DIR/d3
 241         $CHECKSTAT -t dir $DIR/d3 || error
 242 }
 243 run_test 3a "mkdir .../d3 ======================================"
 244
 245 test_3b() {
 246         if [ ! -d $DIR/d3 ]; then
 247                 mkdir $DIR/d3
 248         fi
 249         touch $DIR/d3/f
 250         $CHECKSTAT -t file $DIR/d3/f || error
 251 }
 252 run_test 3b "touch .../d3/f ===================================="
 253
 254 test_3c() {
 255         rm -r $DIR/d3
 256         $CHECKSTAT -a $DIR/d3 || error
 257 }
 258 run_test 3c "rm -r .../d3 ======================================"
 259
 260 test_4a() {
 261         mkdir $DIR/d4
 262         $CHECKSTAT -t dir $DIR/d4 || error
 263 }
 264 run_test 4a "mkdir .../d4 ======================================"
 265
 266 test_4b() {
 267         if [ ! -d $DIR/d4 ]; then
 268                 mkdir $DIR/d4
 269         fi
 270         mkdir $DIR/d4/d2
 271         $CHECKSTAT -t dir $DIR/d4/d2 || error
 272 }
 273 run_test 4b "mkdir .../d4/d2 ==================================="
 274
 275 test_5() {
 276         mkdir $DIR/d5
 277         mkdir $DIR/d5/d2
 278         chmod 0707 $DIR/d5/d2
 279         $CHECKSTAT -t dir -p 0707 $DIR/d5/d2 || error
 280 }
 281 run_test 5 "mkdir .../d5 .../d5/d2; chmod .../d5/d2 ============"
 282
 283 test_6a() {
 284         touch $DIR/f6a
 285         chmod 0666 $DIR/f6a || error
 286         $CHECKSTAT -t file -p 0666 -u \#$UID $DIR/f6a || error
 287 }
 288 run_test 6a "touch .../f6a; chmod .../f6a ======================"
 289
 290 test_6b() {
 291         [ $RUNAS_ID -eq $UID ] && echo "skipping test 6b" && return
 292         if [ ! -f $DIR/f6a ]; then
 293                 touch $DIR/f6a
 294                 chmod 0666 $DIR/f6a
 295         fi
 296         $RUNAS chmod 0444 $DIR/f6a && error
 297         $CHECKSTAT -t file -p 0666 -u \#$UID $DIR/f6a || error
 298 }
 299 run_test 6b "$RUNAS chmod .../f6a (should return error) =="
 300
 301 test_6c() {
 302         [ $RUNAS_ID -eq $UID ] && echo "skipping test 6c" && return
 303         touch $DIR/f6c
 304         chown $RUNAS_ID $DIR/f6c || error
 305         $CHECKSTAT -t file -u \#$RUNAS_ID $DIR/f6c || error
 306 }
 307 run_test 6c "touch .../f6c; chown .../f6c ======================"
 308
 309 test_6d() {
 310         [ $RUNAS_ID -eq $UID ] && echo "skipping test 6d" && return
 311         if [ ! -f $DIR/f6c ]; then
 312                 touch $DIR/f6c
 313                 chown $RUNAS_ID $DIR/f6c
 314         fi
 315         $RUNAS chown $UID $DIR/f6c && error
 316         $CHECKSTAT -t file -u \#$RUNAS_ID $DIR/f6c || error
 317 }
 318 run_test 6d "$RUNAS chown .../f6c (should return error) =="
 319
 320 test_6e() {
 321         [ $RUNAS_ID -eq $UID ] && echo "skipping test 6e" && return
 322         touch $DIR/f6e
 323         chgrp $RUNAS_ID $DIR/f6e || error
 324         $CHECKSTAT -t file -u \#$UID -g \#$RUNAS_ID $DIR/f6e || error
 325 }
 326 run_test 6e "touch .../f6e; chgrp .../f6e ======================"
 327
 328 test_6f() {
 329         [ $RUNAS_ID -eq $UID ] && echo "skipping test 6f" && return
 330         if [ ! -f $DIR/f6e ]; then
 331                 touch $DIR/f6e
 332                 chgrp $RUNAS_ID $DIR/f6e
 333         fi
 334         $RUNAS chgrp $UID $DIR/f6e && error
 335         $CHECKSTAT -t file -u \#$UID -g \#$RUNAS_ID $DIR/f6e || error
 336 }
 337 run_test 6f "$RUNAS chgrp .../f6e (should return error) =="
 338
 339 test_6g() {
 340         [ $RUNAS_ID -eq $UID ] && echo "skipping test 6g" && return
 341         mkdir $DIR/d6g || error
 342         chmod 777 $DIR/d6g || error
 343         $RUNAS mkdir $DIR/d6g/d || error
 344         chmod g+s $DIR/d6g/d || error
 345         mkdir $DIR/d6g/d/subdir
 346         $CHECKSTAT -g \#$RUNAS_ID $DIR/d6g/d/subdir || error
 347 }
 348 run_test 6g "Is new dir in sgid dir inheriting group?"
 349
 350 test_7a() {
 351         mkdir $DIR/d7
 352         $MCREATE $DIR/d7/f
 353         chmod 0666 $DIR/d7/f
 354         $CHECKSTAT -t file -p 0666 $DIR/d7/f || error
 355 }
 356 run_test 7a "mkdir .../d7; mcreate .../d7/f; chmod .../d7/f ===="
 357
 358 test_7b() {
 359         if [ ! -d $DIR/d7 ]; then
 360                 mkdir $DIR/d7
 361         fi
 362         $MCREATE $DIR/d7/f2
 363         echo -n foo > $DIR/d7/f2
 364         [ "`cat $DIR/d7/f2`" = "foo" ] || error
 365         $CHECKSTAT -t file -s 3 $DIR/d7/f2 || error
 366 }
 367 run_test 7b "mkdir .../d7; mcreate d7/f2; echo foo > d7/f2 ====="
 368
 369 test_8() {
 370         mkdir $DIR/d8
 371         touch $DIR/d8/f
 372         chmod 0666 $DIR/d8/f
 373         $CHECKSTAT -t file -p 0666 $DIR/d8/f || error
 374 }
 375 run_test 8 "mkdir .../d8; touch .../d8/f; chmod .../d8/f ======="
 376
 377 test_9() {
 378         mkdir $DIR/d9
 379         mkdir $DIR/d9/d2
 380         mkdir $DIR/d9/d2/d3
 381         $CHECKSTAT -t dir $DIR/d9/d2/d3 || error
 382 }
 383 run_test 9 "mkdir .../d9 .../d9/d2 .../d9/d2/d3 ================"
 384
 385 test_10() {
 386         mkdir $DIR/d10
 387         mkdir $DIR/d10/d2
 388         touch $DIR/d10/d2/f
 389         $CHECKSTAT -t file $DIR/d10/d2/f || error
 390 }
 391 run_test 10 "mkdir .../d10 .../d10/d2; touch .../d10/d2/f ======"
 392
 393 test_11() {
 394         mkdir $DIR/d11
 395         mkdir $DIR/d11/d2
 396         chmod 0666 $DIR/d11/d2
 397         chmod 0705 $DIR/d11/d2
 398         $CHECKSTAT -t dir -p 0705 $DIR/d11/d2 || error
 399 }
 400 run_test 11 "mkdir .../d11 d11/d2; chmod .../d11/d2 ============"
 401
 402 test_12() {
 403         mkdir $DIR/d12
 404         touch $DIR/d12/f
 405         chmod 0666 $DIR/d12/f
 406         chmod 0654 $DIR/d12/f
 407         $CHECKSTAT -t file -p 0654 $DIR/d12/f || error
 408 }
 409 run_test 12 "touch .../d12/f; chmod .../d12/f .../d12/f ========"
 410
 411 test_13() {
 412         mkdir $DIR/d13
 413         dd if=/dev/zero of=$DIR/d13/f count=10
 414         >  $DIR/d13/f
 415         $CHECKSTAT -t file -s 0 $DIR/d13/f || error
 416 }
 417 run_test 13 "creat .../d13/f; dd .../d13/f; > .../d13/f ========"
 418
 419 test_14() {
 420         mkdir $DIR/d14
 421         touch $DIR/d14/f
 422         rm $DIR/d14/f
 423         $CHECKSTAT -a $DIR/d14/f || error
 424 }
 425 run_test 14 "touch .../d14/f; rm .../d14/f; rm .../d14/f ======="
 426
 427 test_15() {
 428         mkdir $DIR/d15
 429         touch $DIR/d15/f
 430         mv $DIR/d15/f $DIR/d15/f2
 431         $CHECKSTAT -t file $DIR/d15/f2 || error
 432 }
 433 run_test 15 "touch .../d15/f; mv .../d15/f .../d15/f2 =========="
 434
 435 test_16() {
 436         mkdir $DIR/d16
 437         touch $DIR/d16/f
 438         rm -rf $DIR/d16/f
 439         $CHECKSTAT -a $DIR/d16/f || error
 440 }
 441 run_test 16 "touch .../d16/f; rm -rf .../d16/f ================="
 442
 443 test_17a() {
 444         mkdir $DIR/d17
 445         touch $DIR/d17/f
 446         ln -s $DIR/d17/f $DIR/d17/l-exist
 447         ls -l $DIR/d17
 448         $CHECKSTAT -l $DIR/d17/f $DIR/d17/l-exist || error
 449         $CHECKSTAT -f -t f $DIR/d17/l-exist || error
 450         rm -f $DIR/l-exist
 451         $CHECKSTAT -a $DIR/l-exist || error
 452 }
 453 run_test 17a "symlinks: create, remove (real) =================="
 454
 455 test_17b() {
 456         if [ ! -d $DIR/d17 ]; then
 457                 mkdir $DIR/d17
 458         fi
 459         ln -s no-such-file $DIR/d17/l-dangle
 460         ls -l $DIR/d17
 461         $CHECKSTAT -l no-such-file $DIR/d17/l-dangle || error
 462         $CHECKSTAT -fa $DIR/d17/l-dangle || error
 463         rm -f $DIR/l-dangle
 464         $CHECKSTAT -a $DIR/l-dangle || error
 465 }
 466 run_test 17b "symlinks: create, remove (dangling) =============="
 467
 468 test_18() {
 469         touch $DIR/f
 470         ls $DIR || error
 471 }
 472 run_test 18 "touch .../f ; ls ... =============================="
 473
 474 test_19a() {
 475         touch $DIR/f19
 476         ls -l $DIR
 477         rm $DIR/f19
 478         $CHECKSTAT -a $DIR/f19 || error
 479 }
 480 run_test 19a "touch .../f19 ; ls -l ... ; rm .../f19 ==========="
 481
 482 test_19b() {
 483         ls -l $DIR/f19 && error || true
 484 }
 485 run_test 19b "ls -l .../f19 (should return error) =============="
 486
 487 test_19c() {
 488         [ $RUNAS_ID -eq $UID ] && echo "skipping test 19c" && return
 489         $RUNAS touch $DIR/f19 && error || true
 490 }
 491 run_test 19c "$RUNAS touch .../f19 (should return error) =="
 492
 493 test_19d() {
 494         cat $DIR/f19 && error || true
 495 }
 496 run_test 19d "cat .../f19 (should return error) =============="
 497
 498 test_20() {
 499         touch $DIR/f
 500         rm $DIR/f
 501         log "1 done"
 502         touch $DIR/f
 503         rm $DIR/f
 504         log "2 done"
 505         touch $DIR/f
 506         rm $DIR/f
 507         log "3 done"
 508         $CHECKSTAT -a $DIR/f || error
 509 }
 510 run_test 20 "touch .../f ; ls -l ... ==========================="
 511
 512 test_21() {
 513         mkdir $DIR/d21
 514         [ -f $DIR/d21/dangle ] && rm -f $DIR/d21/dangle
 515         ln -s dangle $DIR/d21/link
 516         echo foo >> $DIR/d21/link
 517         cat $DIR/d21/dangle
 518         $CHECKSTAT -t link $DIR/d21/link || error
 519         $CHECKSTAT -f -t file $DIR/d21/link || error
 520 }
 521 run_test 21 "write to dangling link ============================"
 522
 523 test_22() {
 524         mkdir $DIR/d22
 525         chown $RUNAS_ID $DIR/d22
 526         # Tar gets pissy if it can't access $PWD *sigh*
 527         (cd /tmp;
 528         $RUNAS tar cf - /etc/hosts /etc/sysconfig/network | \
 529         $RUNAS tar xfC - $DIR/d22)
 530         ls -lR $DIR/d22/etc
 531         $CHECKSTAT -t dir $DIR/d22/etc || error
 532         $CHECKSTAT -u \#$RUNAS_ID $DIR/d22/etc || error
 533 }
 534 run_test 22 "unpack tar archive as non-root user ==============="
 535
 536 test_23() {
 537         mkdir $DIR/d23
 538         $TOEXCL $DIR/d23/f23
 539         $TOEXCL -e $DIR/d23/f23 || error
 540 }
 541 run_test 23 "O_CREAT|O_EXCL in subdir =========================="
 542
 543 test_24a() {
 544         echo '== rename sanity =============================================='
 545         echo '-- same directory rename'
 546         mkdir $DIR/R1
 547         touch $DIR/R1/f
 548         mv $DIR/R1/f $DIR/R1/g
 549         $CHECKSTAT -t file $DIR/R1/g || error
 550 }
 551 run_test 24a "touch .../R1/f; rename .../R1/f .../R1/g ========="
 552
 553 test_24b() {
 554         mkdir $DIR/R2
 555         touch $DIR/R2/{f,g}
 556         mv $DIR/R2/f $DIR/R2/g
 557         $CHECKSTAT -a $DIR/R2/f || error
 558         $CHECKSTAT -t file $DIR/R2/g || error
 559 }
 560 run_test 24b "touch .../R2/{f,g}; rename .../R2/f .../R2/g ====="
 561
 562 test_24c() {
 563         mkdir $DIR/R3
 564         mkdir $DIR/R3/f
 565         mv $DIR/R3/f $DIR/R3/g
 566         $CHECKSTAT -a $DIR/R3/f || error
 567         $CHECKSTAT -t dir $DIR/R3/g || error
 568 }
 569 run_test 24c "mkdir .../R3/f; rename .../R3/f .../R3/g ========="
 570
 571 test_24d() {
 572         mkdir $DIR/R4
 573         mkdir $DIR/R4/{f,g}
 574         mrename $DIR/R4/f $DIR/R4/g
 575         $CHECKSTAT -a $DIR/R4/f || error
 576         $CHECKSTAT -t dir $DIR/R4/g || error
 577 }
 578 run_test 24d "mkdir .../R4/{f,g}; rename .../R4/f .../R4/g ====="
 579
 580 test_24e() {
 581         echo '-- cross directory renames --'
 582         mkdir $DIR/R5{a,b}
 583         touch $DIR/R5a/f
 584         mv $DIR/R5a/f $DIR/R5b/g
 585         $CHECKSTAT -a $DIR/R5a/f || error
 586         $CHECKSTAT -t file $DIR/R5b/g || error
 587 }
 588 run_test 24e "touch .../R5a/f; rename .../R5a/f .../R5b/g ======"
 589
 590 test_24f() {
 591         mkdir $DIR/R6{a,b}
 592         touch $DIR/R6a/f $DIR/R6b/g
 593         mv $DIR/R6a/f $DIR/R6b/g
 594         $CHECKSTAT -a $DIR/R6a/f || error
 595         $CHECKSTAT -t file $DIR/R6b/g || error
 596 }
 597 run_test 24f "touch .../R6a/f R6b/g; mv .../R6a/f .../R6b/g ===="
 598
 599 test_24g() {
 600         mkdir $DIR/R7{a,b}
 601         mkdir $DIR/R7a/d
 602         mv $DIR/R7a/d $DIR/R7b/e
 603         $CHECKSTAT -a $DIR/R7a/d || error
 604         $CHECKSTAT -t dir $DIR/R7b/e || error
 605 }
 606 run_test 24g "mkdir .../R7{a,b}/d; mv .../R7a/d .../R5b/e ======"
 607
 608 test_24h() {
 609         mkdir $DIR/R8{a,b}
 610         mkdir $DIR/R8a/d $DIR/R8b/e
 611         mrename $DIR/R8a/d $DIR/R8b/e
 612         $CHECKSTAT -a $DIR/R8a/d || error
 613         $CHECKSTAT -t dir $DIR/R8b/e || error
 614 }
 615 run_test 24h "mkdir .../R8{a,b}/{d,e}; rename .../R8a/d .../R8b/e"
 616
 617 test_24i() {
 618         echo "-- rename error cases"
 619         mkdir $DIR/R9
 620         mkdir $DIR/R9/a
 621         touch $DIR/R9/f
 622         mrename $DIR/R9/f $DIR/R9/a
 623         $CHECKSTAT -t file $DIR/R9/f || error
 624         $CHECKSTAT -t dir  $DIR/R9/a || error
 625         $CHECKSTAT -a file $DIR/R9/a/f || error
 626 }
 627 run_test 24i "rename file to dir error: touch f ; mkdir a ; rename f a"
 628
 629 test_24j() {
 630         mkdir $DIR/R10
 631         mrename $DIR/R10/f $DIR/R10/g
 632         $CHECKSTAT -t dir $DIR/R10 || error
 633         $CHECKSTAT -a $DIR/R10/f || error
 634         $CHECKSTAT -a $DIR/R10/g || error
 635 }
 636 run_test 24j "source does not exist ============================"
 637
 638 test_24k() {
 639         mkdir $DIR/R11a $DIR/R11a/d
 640         touch $DIR/R11a/f
 641         mv $DIR/R11a/f $DIR/R11a/d
 642         $CHECKSTAT -a $DIR/R11a/f || error
 643         $CHECKSTAT -t file $DIR/R11a/d/f || error
 644 }
 645 run_test 24k "touch .../R11a/f; mv .../R11a/f .../R11a/d ======="
 646
 647 # bug 2429 - rename foo foo foo creates invalid file
 648 test_24l() {
 649         f="$DIR/f24l"
 650         multiop $f OcNs || error
 651 }
 652 run_test 24l "Renaming a file to itself ========================"
 653
 654 test_24m() {
 655         f="$DIR/f24m"
 656         multiop $f OcLN ${f}2 ${f}2 || error
 657 }
 658 run_test 24m "Renaming a file to a hard link to itself ========="
 659
 660 test_24n() {
 661     f="$DIR/f24n"
 662     # this stats the old file after it was renamed, so it should fail
 663     touch ${f}
 664     $CHECKSTAT ${f}
 665     mv ${f} ${f}.rename
 666     $CHECKSTAT ${f}.rename
 667     $CHECKSTAT -a ${f}
 668 }
 669 run_test 24n "Statting the old file after renameing (Posix rename 2)"
 670
 671 test_24o() {
 672         check_kernel_version 37 || return 0
 673         rename_many -s random -v -n 10 $DIR
 674 }
 675 run_test 24o "rename of files during htree split ==============="
 676
 677 test_24p() {
 678         mkdir $DIR/R12{a,b}
 679         DIRINO=`ls -lid $DIR/R12a | awk '{ print $1 }'`
 680         mrename $DIR/R12a $DIR/R12b
 681         $CHECKSTAT -a $DIR/R12a || error
 682         $CHECKSTAT -t dir $DIR/R12b || error
 683         DIRINO2=`ls -lid $DIR/R12b | awk '{ print $1 }'`
 684         [ "$DIRINO" = "$DIRINO2" ] || error "R12a $DIRINO != R12b $DIRINO2"
 685 }
 686 run_test 24p "mkdir .../R12{a,b}; rename .../R12a .../R12b"
 687
 688 test_24q() {
 689         mkdir $DIR/R13{a,b}
 690         DIRINO=`ls -lid $DIR/R13a | awk '{ print $1 }'`
 691         multiop $DIR/R13b D_c &
 692         MULTIPID=$!
 693
 694         mrename $DIR/R13a $DIR/R13b
 695         $CHECKSTAT -a $DIR/R13a || error
 696         $CHECKSTAT -t dir $DIR/R13b || error
 697         DIRINO2=`ls -lid $DIR/R13b | awk '{ print $1 }'`
 698         [ "$DIRINO" = "$DIRINO2" ] || error "R13a $DIRINO != R13b $DIRINO2"
 699         kill -USR1 $MULTIPID
 700         wait $MULTIPID || error "multiop close failed"
 701 }
 702 run_test 24q "mkdir .../R13{a,b}; open R13b rename R13a R13b ==="
 703
 704 test_24r() { #bug 3789
 705         mkdir $DIR/R14a $DIR/R14a/b
 706         mrename $DIR/R14a $DIR/R14a/b && error "rename to subdir worked!"
 707         $CHECKSTAT -t dir $DIR/R14a || error "$DIR/R14a missing"
 708         $CHECKSTAT -t dir $DIR/R14a/b || error "$DIR/R14a/b missing"
 709 }
 710 run_test 24r "mkdir .../R14a/b; rename .../R14a .../R14a/b ====="
 711
 712 test_24s() {
 713         mkdir $DIR/R15a $DIR/R15a/b $DIR/R15a/b/c
 714         mrename $DIR/R15a $DIR/R15a/b/c && error "rename to sub-subdir worked!"
 715         $CHECKSTAT -t dir $DIR/R15a || error "$DIR/R15a missing"
 716         $CHECKSTAT -t dir $DIR/R15a/b/c || error "$DIR/R15a/b/c missing"
 717 }
 718 run_test 24s "mkdir .../R15a/b/c; rename .../R15a .../R15a/b/c ="
 719 test_24t() {
 720         mkdir $DIR/R16a $DIR/R16a/b $DIR/R16a/b/c
 721         mrename $DIR/R16a/b/c $DIR/R16a && error "rename to sub-subdir worked!"
 722         $CHECKSTAT -t dir $DIR/R16a || error "$DIR/R16a missing"
 723         $CHECKSTAT -t dir $DIR/R16a/b/c || error "$DIR/R16a/b/c missing"
 724 }
 725 run_test 24t "mkdir .../R16a/b/c; rename .../R16a/b/c .../R16a ="
 726
 727 test_25a() {
 728         echo '== symlink sanity ============================================='
 729
 730         mkdir $DIR/d25
 731         ln -s d25 $DIR/s25
 732         touch $DIR/s25/foo || error
 733 }
 734 run_test 25a "create file in symlinked directory ==============="
 735
 736 test_25b() {
 737         [ ! -d $DIR/d25 ] && test_25a
 738         $CHECKSTAT -t file $DIR/s25/foo || error
 739 }
 740 run_test 25b "lookup file in symlinked directory ==============="
 741
 742 test_26a() {
 743         mkdir $DIR/d26
 744         mkdir $DIR/d26/d26-2
 745         ln -s d26/d26-2 $DIR/s26
 746         touch $DIR/s26/foo || error
 747 }
 748 run_test 26a "multiple component symlink ======================="
 749
 750 test_26b() {
 751         mkdir -p $DIR/d26b/d26-2
 752         ln -s d26b/d26-2/foo $DIR/s26-2
 753         touch $DIR/s26-2 || error
 754 }
 755 run_test 26b "multiple component symlink at end of lookup ======"
 756
 757 test_26c() {
 758         mkdir $DIR/d26.2
 759         touch $DIR/d26.2/foo
 760         ln -s d26.2 $DIR/s26.2-1
 761         ln -s s26.2-1 $DIR/s26.2-2
 762         ln -s s26.2-2 $DIR/s26.2-3
 763         chmod 0666 $DIR/s26.2-3/foo
 764 }
 765 run_test 26c "chain of symlinks ================================"
 766
 767 # recursive symlinks (bug 439)
 768 test_26d() {
 769         ln -s d26-3/foo $DIR/d26-3
 770 }
 771 run_test 26d "create multiple component recursive symlink ======"
 772
 773 test_26e() {
 774         [ ! -h $DIR/d26-3 ] && test_26d
 775         rm $DIR/d26-3
 776 }
 777 run_test 26e "unlink multiple component recursive symlink ======"
 778
 779 test_27a() {
 780         echo '== stripe sanity =============================================='
 781         mkdir $DIR/d27
 782         $LSTRIPE $DIR/d27/f0 65536 0 1 || error "lstripe failed"
 783         $CHECKSTAT -t file $DIR/d27/f0 || error "checkstat failed"
 784         pass
 785         log "== test_27b: write to one stripe file ========================="
 786         cp /etc/hosts $DIR/d27/f0 || error
 787 }
 788 run_test 27a "one stripe file =================================="
 789
 790 test_27c() {
 791         [ "$OSTCOUNT" -lt "2" ] && echo "skipping 2-stripe test" && return
 792         if [ ! -d $DIR/d27 ]; then
 793                 mkdir $DIR/d27
 794         fi
 795         $LSTRIPE $DIR/d27/f01 65536 0 2 || error "lstripe failed"
 796         [ `$LFIND $DIR/d27/f01 | grep -A 10 obdidx | wc -l` -eq 4 ] ||
 797                 error "two-stripe file doesn't have two stripes"
 798         pass
 799         log "== test_27d: write to two stripe file file f01 ================"
 800         dd if=/dev/zero of=$DIR/d27/f01 bs=4k count=4 || error "dd failed"
 801 }
 802 run_test 27c "create two stripe file f01 ======================="
 803
 804 test_27d() {
 805         if [ ! -d $DIR/d27 ]; then
 806                 mkdir $DIR/d27
 807         fi
 808         $LSTRIPE $DIR/d27/fdef 0 -1 0 || error "lstripe failed"
 809         $CHECKSTAT -t file $DIR/d27/fdef || error "checkstat failed"
 810         #dd if=/dev/zero of=$DIR/d27/fdef bs=4k count=4 || error
 811 }
 812 run_test 27d "create file with default settings ================"
 813
 814 test_27e() {
 815         if [ ! -d $DIR/d27 ]; then
 816                 mkdir $DIR/d27
 817         fi
 818         $LSTRIPE $DIR/d27/f12 65536 0 2 || error "lstripe failed"
 819         $LSTRIPE $DIR/d27/f12 65536 0 2 && error "lstripe succeeded twice"
 820         $CHECKSTAT -t file $DIR/d27/f12 || error "checkstat failed"
 821 }
 822 run_test 27e "lstripe existing file (should return error) ======"
 823
 824 test_27f() {
 825         if [ ! -d $DIR/d27 ]; then
 826                 mkdir $DIR/d27
 827         fi
 828         $LSTRIPE $DIR/d27/fbad 100 0 1 && error "lstripe failed"
 829         dd if=/dev/zero of=$DIR/d27/f12 bs=4k count=4 || error "dd failed"
 830         $LFIND $DIR/d27/fbad || error "lfind failed"
 831 }
 832 run_test 27f "lstripe with bad stripe size (should return error)"
 833
 834 test_27g() {
 835         if [ ! -d $DIR/d27 ]; then
 836                 mkdir $DIR/d27
 837         fi
 838         $MCREATE $DIR/d27/fnone || error "mcreate failed"
 839         pass
 840         log "== test 27h: lfind with no objects ============================"
 841         $LFIND $DIR/d27/fnone 2>&1 | grep "no stripe info" || error "has object"
 842         pass
 843         log "== test 27i: lfind with some objects =========================="
 844         touch $DIR/d27/fsome || error "touch failed"
 845         $LFIND $DIR/d27/fsome | grep obdidx || error "missing objects"
 846 }
 847 run_test 27g "test lfind ======================================="
 848
 849 test_27j() {
 850         if [ ! -d $DIR/d27 ]; then
 851                 mkdir $DIR/d27
 852         fi
 853         $LSTRIPE $DIR/d27/f27j 65536 $OSTCOUNT 1 && error "lstripe failed"||true
 854 }
 855 run_test 27j "lstripe with bad stripe offset (should return error)"
 856
 857 test_27k() { # bug 2844
 858         FILE=$DIR/d27/f27k
 859         LL_MAX_BLKSIZE=$((4 * 1024 * 1024))
 860         [ ! -d $DIR/d27 ] && mkdir -p $DIR/d27
 861         $LSTRIPE $FILE 67108864 -1 0 || error "lstripe failed"
 862         BLKSIZE=`stat $FILE | awk '/IO Block:/ { print $7 }'`
 863         [ $BLKSIZE -le $LL_MAX_BLKSIZE ] || error "$BLKSIZE > $LL_MAX_BLKSIZE"
 864         dd if=/dev/zero of=$FILE bs=4k count=1
 865         BLKSIZE=`stat $FILE | awk '/IO Block:/ { print $7 }'`
 866         [ $BLKSIZE -le $LL_MAX_BLKSIZE ] || error "$BLKSIZE > $LL_MAX_BLKSIZE"
 867 }
 868 run_test 27k "limit i_blksize for broken user apps ============="
 869
 870 test_27l() {
 871         mcreate $DIR/f27l || error "creating file"
 872         $RUNAS $LSTRIPE $DIR/f27l 65536 -1 1 && \
 873                 error "lstripe should have failed" || true
 874 }
 875 run_test 27l "check setstripe permissions (should return error)"
 876
 877 test_28() {
 878         mkdir $DIR/d28
 879         $CREATETEST $DIR/d28/ct || error
 880 }
 881 run_test 28 "create/mknod/mkdir with bad file types ============"
 882
 883 cancel_lru_locks() {
 884         for d in /proc/fs/lustre/ldlm/namespaces/$1*; do
 885                 echo clear > $d/lru_size
 886         done
 887         grep [0-9] /proc/fs/lustre/ldlm/namespaces/$1*/lock_unused_count /dev/null
 888 }
 889
 890 test_29() {
 891         cancel_lru_locks MDC
 892         mkdir $DIR/d29
 893         touch $DIR/d29/foo
 894         log 'first d29'
 895         ls -l $DIR/d29
 896         MDCDIR=${MDCDIR:-/proc/fs/lustre/ldlm/namespaces/MDC_*}
 897         LOCKCOUNTORIG=`cat $MDCDIR/lock_count`
 898         LOCKUNUSEDCOUNTORIG=`cat $MDCDIR/lock_unused_count`
 899         log 'second d29'
 900         ls -l $DIR/d29
 901         log 'done'
 902         LOCKCOUNTCURRENT=`cat $MDCDIR/lock_count`
 903         LOCKUNUSEDCOUNTCURRENT=`cat $MDCDIR/lock_unused_count`
 904         if [ $LOCKCOUNTCURRENT -gt $LOCKCOUNTORIG ]; then
 905                 echo "CURRENT: $LOCKCOUNTCURRENT > $LOCKCOUNTORIG"
 906                 error
 907         fi
 908         if [ $LOCKUNUSEDCOUNTCURRENT -gt $LOCKUNUSEDCOUNTORIG ]; then
 909                 echo "UNUSED: $LOCKUNUSEDCOUNTCURRENT > $LOCKUNUSEDCOUNTORIG"
 910                 error
 911         fi
 912 }
 913 run_test 29 "IT_GETATTR regression  ============================"
 914
 915 test_30() {
 916         cp `which ls` $DIR
 917         $DIR/ls /
 918         rm $DIR/ls
 919 }
 920 run_test 30 "run binary from Lustre (execve) ==================="
 921
 922 test_31a() {
 923         $OPENUNLINK $DIR/f31 $DIR/f31 || error
 924         $CHECKSTAT -a $DIR/f31 || error
 925 }
 926 run_test 31a "open-unlink file =================================="
 927
 928 test_31b() {
 929         touch $DIR/f31 || error
 930         ln $DIR/f31 $DIR/f31b || error
 931         multiop $DIR/f31b Ouc || error
 932         $CHECKSTAT -t file $DIR/f31 || error
 933 }
 934 run_test 31b "unlink file with multiple links while open ======="
 935
 936 test_31c() {
 937         touch $DIR/f31 || error
 938         ln $DIR/f31 $DIR/f31c || error
 939         multiop $DIR/f31 O_uc &
 940         MULTIPID=$!
 941         multiop $DIR/f31c Ouc
 942         usleep 500
 943         kill -USR1 $MULTIPID
 944         wait $MULTIPID
 945 }
 946 run_test 31c "open-unlink file with multiple links ============="
 947
 948 test_31d() {
 949         opendirunlink $DIR/d31d $DIR/d31d || error
 950         $CHECKSTAT -a $DIR/d31d || error
 951 }
 952 run_test 31d "remove of open directory ========================="
 953
 954 test_31e() { # bug 2904
 955         check_kernel_version 34 || return 0
 956         openfilleddirunlink $DIR/d31e || error
 957 }
 958 run_test 31e "remove of open non-empty directory ==============="
 959
 960 test_32a() {
 961         echo "== more mountpoints and symlinks ================="
 962         [ -e $DIR/d32a ] && rm -fr $DIR/d32a
 963         mkdir -p $DIR/d32a/ext2-mountpoint
 964         mount -t ext2 -o loop $EXT2_DEV $DIR/d32a/ext2-mountpoint || error
 965         $CHECKSTAT -t dir $DIR/d32a/ext2-mountpoint/.. || error
 966         umount $DIR/d32a/ext2-mountpoint || error
 967 }
 968 run_test 32a "stat d32a/ext2-mountpoint/.. ====================="
 969
 970 test_32b() {
 971         [ -e $DIR/d32b ] && rm -fr $DIR/d32b
 972         mkdir -p $DIR/d32b/ext2-mountpoint
 973         mount -t ext2 -o loop $EXT2_DEV $DIR/d32b/ext2-mountpoint || error
 974         ls -al $DIR/d32b/ext2-mountpoint/.. || error
 975         umount $DIR/d32b/ext2-mountpoint || error
 976 }
 977 run_test 32b "open d32b/ext2-mountpoint/.. ====================="
 978
 979 test_32c() {
 980         [ -e $DIR/d32c ] && rm -fr $DIR/d32c
 981         mkdir -p $DIR/d32c/ext2-mountpoint
 982         mount -t ext2 -o loop $EXT2_DEV $DIR/d32c/ext2-mountpoint || error
 983         mkdir -p $DIR/d32c/d2/test_dir
 984         $CHECKSTAT -t dir $DIR/d32c/ext2-mountpoint/../d2/test_dir || error
 985         umount $DIR/d32c/ext2-mountpoint || error
 986 }
 987 run_test 32c "stat d32c/ext2-mountpoint/../d2/test_dir ========="
 988
 989 test_32d() {
 990         [ -e $DIR/d32d ] && rm -fr $DIR/d32d
 991         mkdir -p $DIR/d32d/ext2-mountpoint
 992         mount -t ext2 -o loop $EXT2_DEV $DIR/d32d/ext2-mountpoint || error
 993         mkdir -p $DIR/d32d/d2/test_dir
 994         ls -al $DIR/d32d/ext2-mountpoint/../d2/test_dir || error
 995         umount $DIR/d32d/ext2-mountpoint || error
 996 }
 997 run_test 32d "open d32d/ext2-mountpoint/../d2/test_dir ========="
 998
 999 test_32e() {
1000         [ -e $DIR/d32e ] && rm -fr $DIR/d32e
1001         mkdir -p $DIR/d32e/tmp
1002         TMP_DIR=$DIR/d32e/tmp
1003         ln -s $DIR/d32e $TMP_DIR/symlink11
1004         ln -s $TMP_DIR/symlink11 $TMP_DIR/../symlink01
1005         $CHECKSTAT -t link $DIR/d32e/tmp/symlink11 || error
1006         $CHECKSTAT -t link $DIR/d32e/symlink01 || error
1007 }
1008 run_test 32e "stat d32e/symlink->tmp/symlink->lustre-subdir ===="
1009
1010 test_32f() {
1011         [ -e $DIR/d32f ] && rm -fr $DIR/d32f
1012         mkdir -p $DIR/d32f/tmp
1013         TMP_DIR=$DIR/d32f/tmp
1014         ln -s $DIR/d32f $TMP_DIR/symlink11
1015         ln -s $TMP_DIR/symlink11 $TMP_DIR/../symlink01
1016         ls $DIR/d32f/tmp/symlink11  || error
1017         ls $DIR/d32f/symlink01 || error
1018 }
1019 run_test 32f "open d32f/symlink->tmp/symlink->lustre-subdir ===="
1020
1021 test_32g() {
1022         [ -e $DIR/d32g ] && rm -fr $DIR/d32g
1023         [ -e $DIR/test_dir ] && rm -fr $DIR/test_dir
1024         mkdir -p $DIR/test_dir
1025         mkdir -p $DIR/d32g/tmp
1026         TMP_DIR=$DIR/d32g/tmp
1027         ln -s $DIR/test_dir $TMP_DIR/symlink12
1028         ln -s $TMP_DIR/symlink12 $TMP_DIR/../symlink02
1029         $CHECKSTAT -t link $DIR/d32g/tmp/symlink12 || error
1030         $CHECKSTAT -t link $DIR/d32g/symlink02 || error
1031         $CHECKSTAT -t dir -f $DIR/d32g/tmp/symlink12 || error
1032         $CHECKSTAT -t dir -f $DIR/d32g/symlink02 || error
1033 }
1034 run_test 32g "stat d32g/symlink->tmp/symlink->lustre-subdir/test_dir"
1035
1036 test_32h() {
1037         [ -e $DIR/d32h ] && rm -fr $DIR/d32h
1038         [ -e $DIR/test_dir ] && rm -fr $DIR/test_dir
1039         mkdir -p $DIR/test_dir
1040         mkdir -p $DIR/d32h/tmp
1041         TMP_DIR=$DIR/d32h/tmp
1042         ln -s $DIR/test_dir $TMP_DIR/symlink12
1043         ln -s $TMP_DIR/symlink12 $TMP_DIR/../symlink02
1044         ls $DIR/d32h/tmp/symlink12 || error
1045         ls $DIR/d32h/symlink02  || error
1046 }
1047 run_test 32h "open d32h/symlink->tmp/symlink->lustre-subdir/test_dir"
1048
1049 test_32i() {
1050         [ -e $DIR/d32i ] && rm -fr $DIR/d32i
1051         mkdir -p $DIR/d32i/ext2-mountpoint
1052         mount -t ext2 -o loop $EXT2_DEV $DIR/d32i/ext2-mountpoint || error
1053         touch $DIR/d32i/test_file
1054         $CHECKSTAT -t file $DIR/d32i/ext2-mountpoint/../test_file || error
1055         umount $DIR/d32i/ext2-mountpoint || error
1056 }
1057 run_test 32i "stat d32i/ext2-mountpoint/../test_file ==========="
1058
1059 test_32j() {
1060         [ -e $DIR/d32j ] && rm -fr $DIR/d32j
1061         mkdir -p $DIR/d32j/ext2-mountpoint
1062         mount -t ext2 -o loop $EXT2_DEV $DIR/d32j/ext2-mountpoint || error
1063         touch $DIR/d32j/test_file
1064         cat $DIR/d32j/ext2-mountpoint/../test_file || error
1065         umount $DIR/d32j/ext2-mountpoint || error
1066 }
1067 run_test 32j "open d32j/ext2-mountpoint/../test_file ==========="
1068
1069 test_32k() {
1070         rm -fr $DIR/d32k
1071         mkdir -p $DIR/d32k/ext2-mountpoint
1072         mount -t ext2 -o loop $EXT2_DEV $DIR/d32k/ext2-mountpoint
1073         mkdir -p $DIR/d32k/d2
1074         touch $DIR/d32k/d2/test_file || error
1075         $CHECKSTAT -t file $DIR/d32k/ext2-mountpoint/../d2/test_file || error
1076         umount $DIR/d32k/ext2-mountpoint || error
1077 }
1078 run_test 32k "stat d32k/ext2-mountpoint/../d2/test_file ========"
1079
1080 test_32l() {
1081         rm -fr $DIR/d32l
1082         mkdir -p $DIR/d32l/ext2-mountpoint
1083         mount -t ext2 -o loop $EXT2_DEV $DIR/d32l/ext2-mountpoint || error
1084         mkdir -p $DIR/d32l/d2
1085         touch $DIR/d32l/d2/test_file
1086         cat  $DIR/d32l/ext2-mountpoint/../d2/test_file || error
1087         umount $DIR/d32l/ext2-mountpoint || error
1088 }
1089 run_test 32l "open d32l/ext2-mountpoint/../d2/test_file ========"
1090
1091 test_32m() {
1092         rm -fr $DIR/d32m
1093         mkdir -p $DIR/d32m/tmp
1094         TMP_DIR=$DIR/d32m/tmp
1095         ln -s $DIR $TMP_DIR/symlink11
1096         ln -s $TMP_DIR/symlink11 $TMP_DIR/../symlink01
1097         $CHECKSTAT -t link $DIR/d32m/tmp/symlink11 || error
1098         $CHECKSTAT -t link $DIR/d32m/symlink01 || error
1099 }
1100 run_test 32m "stat d32m/symlink->tmp/symlink->lustre-root ======"
1101
1102 test_32n() {
1103         rm -fr $DIR/d32n
1104         mkdir -p $DIR/d32n/tmp
1105         TMP_DIR=$DIR/d32n/tmp
1106         ln -s $DIR $TMP_DIR/symlink11
1107         ln -s $TMP_DIR/symlink11 $TMP_DIR/../symlink01
1108         ls -l $DIR/d32n/tmp/symlink11  || error
1109         ls -l $DIR/d32n/symlink01 || error
1110 }
1111 run_test 32n "open d32n/symlink->tmp/symlink->lustre-root ======"
1112
1113 test_32o() {
1114         rm -fr $DIR/d32o
1115         rm -f $DIR/test_file
1116         touch $DIR/test_file
1117         mkdir -p $DIR/d32o/tmp
1118         TMP_DIR=$DIR/d32o/tmp
1119         ln -s $DIR/test_file $TMP_DIR/symlink12
1120         ln -s $TMP_DIR/symlink12 $TMP_DIR/../symlink02
1121         $CHECKSTAT -t link $DIR/d32o/tmp/symlink12 || error
1122         $CHECKSTAT -t link $DIR/d32o/symlink02 || error
1123         $CHECKSTAT -t file -f $DIR/d32o/tmp/symlink12 || error
1124         $CHECKSTAT -t file -f $DIR/d32o/symlink02 || error
1125 }
1126 run_test 32o "stat d32o/symlink->tmp/symlink->lustre-root/test_file"
1127
1128 test_32p() {
1129     log 32p_1
1130         rm -fr $DIR/d32p
1131     log 32p_2
1132         rm -f $DIR/test_file
1133     log 32p_3
1134         touch $DIR/test_file
1135     log 32p_4
1136         mkdir -p $DIR/d32p/tmp
1137     log 32p_5
1138         TMP_DIR=$DIR/d32p/tmp
1139     log 32p_6
1140         ln -s $DIR/test_file $TMP_DIR/symlink12
1141     log 32p_7
1142         ln -s $TMP_DIR/symlink12 $TMP_DIR/../symlink02
1143     log 32p_8
1144         cat $DIR/d32p/tmp/symlink12 || error
1145     log 32p_9
1146         cat $DIR/d32p/symlink02 || error
1147     log 32p_10
1148 }
1149 run_test 32p "open d32p/symlink->tmp/symlink->lustre-root/test_file"
1150
1151 test_32q() {
1152         [ -e $DIR/d32q ] && rm -fr $DIR/d32q
1153         mkdir -p $DIR/d32q
1154         touch $DIR/d32q/under_the_mount
1155         mount -t ext2 -o loop $EXT2_DEV $DIR/d32q
1156         ls $DIR/d32q/under_the_mount && error || true
1157         umount $DIR/d32q || error
1158 }
1159 run_test 32q "stat follows mountpoints in Lustre (should return error)"
1160
1161 test_32r() {
1162         [ -e $DIR/d32r ] && rm -fr $DIR/d32r
1163         mkdir -p $DIR/d32r
1164         touch $DIR/d32r/under_the_mount
1165         mount -t ext2 -o loop $EXT2_DEV $DIR/d32r
1166         ls $DIR/d32r | grep -q under_the_mount && error || true
1167         umount $DIR/d32r || error
1168 }
1169 run_test 32r "opendir follows mountpoints in Lustre (should return error)"
1170
1171 #   chmod 444 /mnt/lustre/somefile
1172 #   open(/mnt/lustre/somefile, O_RDWR)
1173 #   Should return -1
1174 test_33() {
1175         rm -f $DIR/test_33_file
1176         touch $DIR/test_33_file
1177         chmod 444 $DIR/test_33_file
1178         chown $RUNAS_ID $DIR/test_33_file
1179         log 33_1
1180         $RUNAS $OPENFILE -f O_RDWR $DIR/test_33_file && error || true
1181         log 33_2
1182 }
1183 run_test 33 "write file with mode 444 (should return error) ===="
1184
1185 test_33a() {
1186         rm -fr $DIR/d33
1187         mkdir -p $DIR/d33
1188         chown $RUNAS_ID $DIR/d33
1189         $RUNAS $OPENFILE -f O_RDWR:O_CREAT -m 0444 $DIR/d33/f33 || error
1190         $RUNAS $OPENFILE -f O_RDWR:O_CREAT -m 0444 $DIR/d33/f33 && error || true
1191 }
1192 run_test 33a "test open file(mode=0444) with O_RDWR (should return error)"
1193
1194 TEST_34_SIZE=${TEST_34_SIZE:-2000000000000}
1195 test_34a() {
1196         rm -f $DIR/f34
1197         $MCREATE $DIR/f34 || error
1198         $LFIND $DIR/f34 2>&1 | grep -q "no stripe info" || error
1199         $TRUNCATE $DIR/f34 $TEST_34_SIZE || error
1200         $LFIND $DIR/f34 2>&1 | grep -q "no stripe info" || error
1201         $CHECKSTAT -s $TEST_34_SIZE $DIR/f34 || error
1202 }
1203 run_test 34a "truncate file that has not been opened ==========="
1204
1205 test_34b() {
1206         [ ! -f $DIR/f34 ] && test_34a
1207         $CHECKSTAT -s $TEST_34_SIZE $DIR/f34 || error
1208         $OPENFILE -f O_RDONLY $DIR/f34
1209         $LFIND $DIR/f34 2>&1 | grep -q "no stripe info" || error
1210         $CHECKSTAT -s $TEST_34_SIZE $DIR/f34 || error
1211 }
1212 run_test 34b "O_RDONLY opening file doesn't create objects ====="
1213
1214 test_34c() {
1215         [ ! -f $DIR/f34 ] && test_34a
1216         $CHECKSTAT -s $TEST_34_SIZE $DIR/f34 || error
1217         $OPENFILE -f O_RDWR $DIR/f34
1218         $LFIND $DIR/f34 2>&1 | grep -q "no stripe info" && error
1219         $CHECKSTAT -s $TEST_34_SIZE $DIR/f34 || error
1220 }
1221 run_test 34c "O_RDWR opening file-with-size works =============="
1222
1223 test_34d() {
1224         [ ! -f $DIR/f34 ] && test_34a
1225         dd if=/dev/zero of=$DIR/f34 conv=notrunc bs=4k count=1 || error
1226         $CHECKSTAT -s $TEST_34_SIZE $DIR/f34 || error
1227         rm $DIR/f34
1228 }
1229 run_test 34d "write to sparse file ============================="
1230
1231 test_34e() {
1232         rm -f $DIR/f34e
1233         $MCREATE $DIR/f34e || error
1234         $TRUNCATE $DIR/f34e 1000 || error
1235         $CHECKSTAT -s 1000 $DIR/f34e || error
1236         $OPENFILE -f O_RDWR $DIR/f34e
1237         $CHECKSTAT -s 1000 $DIR/f34e || error
1238 }
1239 run_test 34e "create objects, some with size and some without =="
1240
1241 test_35a() {
1242         cp /bin/sh $DIR/f35a
1243         chmod 444 $DIR/f35a
1244         chown $RUNAS_ID $DIR/f35a
1245         $RUNAS $DIR/f35a && error || true
1246         rm $DIR/f35a
1247 }
1248 run_test 35a "exec file with mode 444 (should return and not leak) ====="
1249
1250 test_36a() {
1251         rm -f $DIR/f36
1252         utime $DIR/f36 || error
1253 }
1254 run_test 36a "MDS utime check (mknod, utime) ==================="
1255
1256 test_36b() {
1257         echo "" > $DIR/f36
1258         utime $DIR/f36 || error
1259 }
1260 run_test 36b "OST utime check (open, utime) ===================="
1261
1262 test_36c() {
1263         rm -f $DIR/d36/f36
1264         mkdir $DIR/d36
1265         chown $RUNAS_ID $DIR/d36
1266         $RUNAS utime $DIR/d36/f36 || error
1267 }
1268 run_test 36c "non-root MDS utime check (mknod, utime) =========="
1269
1270 test_36d() {
1271         [ ! -d $DIR/d36 ] && test_36c
1272         echo "" > $DIR/d36/f36
1273         $RUNAS utime $DIR/d36/f36 || error
1274 }
1275 run_test 36d "non-root OST utime check (open, utime) ==========="
1276
1277 test_36e() {
1278         [ $RUNAS_ID -eq $UID ] && echo "skipping test 36e" && return
1279         [ ! -d $DIR/d36 ] && mkdir $DIR/d36
1280         touch $DIR/d36/f36e
1281         $RUNAS utime $DIR/d36/f36e && error "utime worked, want failure" || true
1282 }
1283 run_test 36e "utime on non-owned file (should return error) ===="
1284
1285 test_37() {
1286         mkdir -p $DIR/dextra
1287         echo f > $DIR/dextra/fbugfile
1288         mount -t ext2 -o loop $EXT2_DEV $DIR/dextra
1289         ls $DIR/dextra | grep "\<fbugfile\>" && error
1290         umount $DIR/dextra || error
1291         rm -f $DIR/dextra/fbugfile || error
1292 }
1293 run_test 37 "ls a mounted file system to check old content ====="
1294
1295 test_38() {
1296         o_directory $DIR/test38
1297 }
1298 run_test 38 "open a regular file with O_DIRECTORY =============="
1299
1300 test_39() {
1301         touch $DIR/test_39_file
1302         touch $DIR/test_39_file2
1303 #       ls -l  $DIR/test_39_file $DIR/test_39_file2
1304 #       ls -lu  $DIR/test_39_file $DIR/test_39_file2
1305 #       ls -lc  $DIR/test_39_file $DIR/test_39_file2
1306         sleep 2
1307         $OPENFILE -f O_CREAT:O_TRUNC:O_WRONLY $DIR/test_39_file2
1308 #       ls -l  $DIR/test_39_file $DIR/test_39_file2
1309 #       ls -lu  $DIR/test_39_file $DIR/test_39_file2
1310 #       ls -lc  $DIR/test_39_file $DIR/test_39_file2
1311         [ $DIR/test_39_file2 -nt $DIR/test_39_file ] || error
1312 }
1313 run_test 39 "mtime changed on create ==========================="
1314
1315 test_40() {
1316         dd if=/dev/zero of=$DIR/f40 bs=4096 count=1
1317         $RUNAS $OPENFILE -f O_WRONLY:O_TRUNC $DIR/f40 && error
1318         $CHECKSTAT -t file -s 4096 $DIR/f40 || error
1319 }
1320 run_test 40 "failed open(O_TRUNC) doesn't truncate ============="
1321
1322 test_41() {
1323         # bug 1553
1324         small_write $DIR/f41 18
1325 }
1326 run_test 41 "test small file write + fstat ====================="
1327
1328 count_ost_writes() {
1329         cat /proc/fs/lustre/osc/*/stats |
1330             awk -vwrites=0 '/ost_write/ { writes += $2 } END { print writes; }'
1331 }
1332
1333 # decent default
1334 WRITEBACK_SAVE=500
1335
1336 start_writeback() {
1337         # in 2.6, restore /proc/sys/vm/dirty_writeback_centisecs
1338         if [ -f /proc/sys/vm/dirty_writeback_centisecs ]; then
1339                 echo $WRITEBACK_SAVE > /proc/sys/vm/dirty_writeback_centisecs
1340         else
1341                 # if file not here, we are a 2.4 kernel
1342                 kill -CONT `pidof kupdated`
1343         fi
1344 }
1345 stop_writeback() {
1346         # setup the trap first, so someone cannot exit the test at the
1347         # exact wrong time and mess up a machine
1348         trap start_writeback EXIT
1349         # in 2.6, save and 0 /proc/sys/vm/dirty_writeback_centisecs
1350         if [ -f /proc/sys/vm/dirty_writeback_centisecs ]; then
1351                 WRITEBACK_SAVE=`cat /proc/sys/vm/dirty_writeback_centisecs`
1352                 echo 0 > /proc/sys/vm/dirty_writeback_centisecs
1353         else
1354                 # if file not here, we are a 2.4 kernel
1355                 kill -STOP `pidof kupdated`
1356         fi
1357 }
1358
1359 # ensure that all stripes have some grant before we test client-side cache
1360 setup_test42() {
1361         [ "$SETUP_TEST42" ] && return
1362         for i in `seq -f $DIR/f42-%g 1 $OSTCOUNT`; do
1363                 dd if=/dev/zero of=$i bs=4k count=1
1364                 rm $i
1365         done
1366         SETUP_TEST42=DONE
1367 }
1368
1369 # Tests 42* verify that our behaviour is correct WRT caching, file closure,
1370 # file truncation, and file removal.
1371 test_42a() {
1372         setup_test42
1373         cancel_lru_locks OSC
1374         stop_writeback
1375         sync; sleep 1; sync # just to be safe
1376         BEFOREWRITES=`count_ost_writes`
1377         grep [0-9] /proc/fs/lustre/osc/OSC*MNT*/cur_grant_bytes
1378         dd if=/dev/zero of=$DIR/f42a bs=1024 count=100
1379         AFTERWRITES=`count_ost_writes`
1380         [ $BEFOREWRITES -eq $AFTERWRITES ] || \
1381                 error "$BEFOREWRITES < $AFTERWRITES"
1382         start_writeback
1383 }
1384 run_test 42a "ensure that we don't flush on close =============="
1385
1386 test_42b() {
1387         setup_test42
1388         cancel_lru_locks OSC
1389         stop_writeback
1390         sync
1391         dd if=/dev/zero of=$DIR/f42b bs=1024 count=100
1392         BEFOREWRITES=`count_ost_writes`
1393         $MUNLINK $DIR/f42b || error "$MUNLINK $DIR/f42b: $?"
1394         AFTERWRITES=`count_ost_writes`
1395         [ $BEFOREWRITES -eq $AFTERWRITES ] ||
1396             error "$BEFOREWRITES < $AFTERWRITES on unlink"
1397         BEFOREWRITES=`count_ost_writes`
1398         sync || error "sync: $?"
1399         AFTERWRITES=`count_ost_writes`
1400         [ $BEFOREWRITES -eq $AFTERWRITES ] ||
1401             error "$BEFOREWRITES < $AFTERWRITES on sync"
1402         dmesg | grep 'error from obd_brw_async' && error 'error writing back'
1403         start_writeback
1404         return 0
1405 }
1406 run_test 42b "test destroy of file with cached dirty data ======"
1407
1408 # if these tests just want to test the effect of truncation,
1409 # they have to be very careful.  consider:
1410 # - the first open gets a {0,EOF}PR lock
1411 # - the first write conflicts and gets a {0, count-1}PW
1412 # - the rest of the writes are under {count,EOF}PW
1413 # - the open for truncate tries to match a {0,EOF}PR
1414 #   for the filesize and cancels the PWs.
1415 # any number of fixes (don't get {0,EOF} on open, match
1416 # composite locks, do smarter file size management) fix
1417 # this, but for now we want these tests to verify that
1418 # the cancellation with truncate intent works, so we
1419 # start the file with a full-file pw lock to match against
1420 # until the truncate.
1421 trunc_test() {
1422         test=$1
1423         file=$DIR/$test
1424         offset=$2
1425         cancel_lru_locks OSC
1426         stop_writeback
1427         # prime the file with 0,EOF PW to match
1428         touch $file
1429         $TRUNCATE $file 0
1430         sync; sync
1431         # now the real test..
1432         dd if=/dev/zero of=$file bs=1024 count=100
1433         BEFOREWRITES=`count_ost_writes`
1434         $TRUNCATE $file $offset
1435         cancel_lru_locks OSC
1436         AFTERWRITES=`count_ost_writes`
1437         start_writeback
1438 }
1439
1440 test_42c() {
1441         trunc_test 42c 1024
1442         [ $BEFOREWRITES -eq $AFTERWRITES ] && \
1443             error "beforewrites $BEFOREWRITES == afterwrites $AFTERWRITES on truncate"
1444         rm $file
1445 }
1446 run_test 42c "test partial truncate of file with cached dirty data"
1447
1448 test_42d() {
1449         trunc_test 42d 0
1450         [ $BEFOREWRITES -eq $AFTERWRITES ] || \
1451             error "beforewrites $BEFOREWRITES != afterwrites $AFTERWRITES on truncate"
1452         rm $file
1453 }
1454 run_test 42d "test complete truncate of file with cached dirty data"
1455
1456 test_43() {
1457         mkdir $DIR/d43
1458         cp -p /bin/ls $DIR/d43/f
1459         exec 100>> $DIR/d43/f
1460         $DIR/d43/f && error || true
1461         exec 100<&-
1462 }
1463 run_test 43 "execution of file opened for write should return -ETXTBSY"
1464
1465 test_43a() {
1466         mkdir -p $DIR/d43
1467         cp -p `which multiop` $DIR/d43/multiop
1468         $DIR/d43/multiop $TMP/test43.junk O_c &
1469         MULTIPID=$!
1470         sleep 1
1471         multiop $DIR/d43/multiop Oc && error "expected error, got success"
1472         kill -USR1 $MULTIPID || return 2
1473         wait $MULTIPID || return 3
1474 }
1475 run_test 43a "open(RDWR) of file being executed should return -ETXTBSY"
1476
1477 test_43b() {
1478         mkdir -p $DIR/d43
1479         cp -p `which multiop` $DIR/d43/multiop
1480         $DIR/d43/multiop $TMP/test43.junk O_c &
1481         MULTIPID=$!
1482         sleep 1
1483         truncate $DIR/d43/multiop 0 && error "expected error, got success"
1484         kill -USR1 $MULTIPID || return 2
1485         wait $MULTIPID || return 3
1486 }
1487 run_test 43b "truncate of file being executed should return -ETXTBSY"
1488
1489 test_43c() {
1490         local testdir="$DIR/d43c"
1491         mkdir -p $testdir
1492         cp $SHELL $testdir/
1493         ( cd $(dirname $SHELL) && md5sum $(basename $SHELL) ) | \
1494                 ( cd $testdir && md5sum -c)
1495 }
1496 run_test 43c "md5sum of copy into lustre========================"
1497
1498 test_44() {
1499         [  "$OSTCOUNT" -lt "2" ] && echo "skipping 2-stripe test" && return
1500         dd if=/dev/zero of=$DIR/f1 bs=4k count=1 seek=1023
1501         dd if=$DIR/f1 bs=4k count=1
1502 }
1503 run_test 44 "zero length read from a sparse stripe ============="
1504
1505 test_44a() {
1506     local nstripe=`$LCTL lov_getconfig $DIR | grep default_stripe_count: | \
1507                          awk '{print $2}'`
1508     local stride=`$LCTL lov_getconfig $DIR | grep default_stripe_size: | \
1509                       awk '{print $2}'`
1510     if [ $nstripe -eq 0 ] ; then
1511         nstripe=`$LCTL lov_getconfig $DIR | grep obd_count: | awk '{print $2}'`
1512     fi
1513
1514     OFFSETS="0 $((stride/2)) $((stride-1))"
1515     for offset in $OFFSETS ; do
1516       for i in `seq 0 $((nstripe-1))`; do
1517         rm -f $DIR/d44a
1518         local GLOBALOFFSETS=""
1519         local size=$((((i + 2 * $nstripe )*$stride + $offset)))  # Bytes
1520         ll_sparseness_write $DIR/d44a $size  || error "ll_sparseness_write"
1521         GLOBALOFFSETS="$GLOBALOFFSETS $size"
1522         ll_sparseness_verify $DIR/d44a $GLOBALOFFSETS \
1523                             || error "ll_sparseness_verify $GLOBALOFFSETS"
1524
1525         for j in `seq 0 $((nstripe-1))`; do
1526             size=$((((j + $nstripe )*$stride + $offset)))  # Bytes
1527             ll_sparseness_write $DIR/d44a $size || error "ll_sparseness_write"
1528             GLOBALOFFSETS="$GLOBALOFFSETS $size"
1529         done
1530         ll_sparseness_verify $DIR/d44a $GLOBALOFFSETS \
1531                             || error "ll_sparseness_verify $GLOBALOFFSETS"
1532       done
1533     done
1534 }
1535 run_test 44a "test sparse pwrite ==============================="
1536
1537 dirty_osc_total() {
1538         tot=0
1539         for d in /proc/fs/lustre/osc/*/cur_dirty_bytes; do
1540                 tot=$(($tot + `cat $d`))
1541         done
1542         echo $tot
1543 }
1544 do_dirty_record() {
1545         before=`dirty_osc_total`
1546         echo executing "\"$*\""
1547         eval $*
1548         after=`dirty_osc_total`
1549         echo before $before, after $after
1550 }
1551 test_45() {
1552         f="$DIR/f45"
1553         # Obtain grants from OST if it supports it
1554         echo blah > ${f}_grant
1555         stop_writeback
1556         sync
1557         do_dirty_record "echo blah > $f"
1558         [ $before -eq $after ] && error "write wasn't cached"
1559         do_dirty_record "> $f"
1560         [ $before -gt $after ] || error "truncate didn't lower dirty count"
1561         do_dirty_record "echo blah > $f"
1562         [ $before -eq $after ] && error "write wasn't cached"
1563         do_dirty_record "sync"
1564         [ $before -gt $after ] || error "writeback didn't lower dirty count"
1565         do_dirty_record "echo blah > $f"
1566         [ $before -eq $after ] && error "write wasn't cached"
1567         do_dirty_record "cancel_lru_locks OSC"
1568         [ $before -gt $after ] || error "lock cancellation didn't lower dirty count"
1569         start_writeback
1570 }
1571 run_test 45 "osc io page accounting ============================"
1572
1573 page_size() {
1574         getconf PAGE_SIZE
1575 }
1576
1577 # in a 2 stripe file (lov.sh), page 1023 maps to page 511 in its object.  this
1578 # test tickles a bug where re-dirtying a page was failing to be mapped to the
1579 # objects offset and an assert hit when an rpc was built with 1023's mapped
1580 # offset 511 and 511's raw 511 offset. it also found general redirtying bugs.
1581 test_46() {
1582         f="$DIR/f46"
1583         stop_writeback
1584         sync
1585         dd if=/dev/zero of=$f bs=`page_size` seek=511 count=1
1586         sync
1587         dd conv=notrunc if=/dev/zero of=$f bs=`page_size` seek=1023 count=1
1588         dd conv=notrunc if=/dev/zero of=$f bs=`page_size` seek=511 count=1
1589         sync
1590         start_writeback
1591 }
1592 run_test 46 "dirtying a previously written page ================"
1593
1594 # Check that device nodes are created and then visible correctly (#2091)
1595 test_47() {
1596         cmknod $DIR/test_47_node || error
1597 }
1598 run_test 47 "Device nodes check ================================"
1599
1600 test_48a() { # bug 2399
1601         check_kernel_version 34 || return 0
1602         mkdir -p $DIR/d48a
1603         cd $DIR/d48a
1604         mv $DIR/d48a $DIR/d48.new || error "move directory failed"
1605         mkdir $DIR/d48a || error "recreate directory failed"
1606         touch foo || error "'touch foo' failed after recreating cwd"
1607         mkdir bar || error "'mkdir foo' failed after recreating cwd"
1608         ls . || error "'ls .' failed after recreating cwd"
1609         ls .. || error "'ls ..' failed after removing cwd"
1610         cd . || error "'cd .' failed after recreating cwd"
1611         mkdir . && error "'mkdir .' worked after recreating cwd"
1612         rmdir . && error "'rmdir .' worked after recreating cwd"
1613         ln -s . baz || error "'ln -s .' failed after recreating cwd"
1614         cd .. || error "'cd ..' failed after recreating cwd"
1615 }
1616 run_test 48a "Access renamed working dir (should return errors)="
1617
1618 test_48b() { # bug 2399
1619         check_kernel_version 34 || return 0
1620         mkdir -p $DIR/d48b
1621         cd $DIR/d48b
1622         rmdir $DIR/d48b || error "remove cwd $DIR/d48b failed"
1623         touch foo && error "'touch foo' worked after removing cwd"
1624         mkdir foo && error "'mkdir foo' worked after removing cwd"
1625         ls . && error "'ls .' worked after removing cwd"
1626         ls .. || error "'ls ..' failed after removing cwd"
1627         cd . && error "'cd .' worked after removing cwd"
1628         mkdir . && error "'mkdir .' worked after removing cwd"
1629         rmdir . && error "'rmdir .' worked after removing cwd"
1630         ln -s . foo && error "'ln -s .' worked after removing cwd"
1631         cd .. || echo "'cd ..' failed after removing cwd `pwd`"  #bug 3517
1632 }
1633 run_test 48b "Access removed working dir (should return errors)="
1634
1635 test_48c() { # bug 2350
1636         check_kernel_version 36 || return 0
1637         #sysctl -w portals.debug=-1
1638         #set -vx
1639         mkdir -p $DIR/d48c/dir
1640         cd $DIR/d48c/dir
1641         $TRACE rmdir $DIR/d48c/dir || error "remove cwd $DIR/d48c/dir failed"
1642         $TRACE touch foo && error "'touch foo' worked after removing cwd"
1643         $TRACE mkdir foo && error "'mkdir foo' worked after removing cwd"
1644         $TRACE ls . && error "'ls .' worked after removing cwd"
1645         $TRACE ls .. || error "'ls ..' failed after removing cwd"
1646         $TRACE cd . && error "'cd .' worked after removing cwd"
1647         $TRACE mkdir . && error "'mkdir .' worked after removing cwd"
1648         $TRACE rmdir . && error "'rmdir .' worked after removing cwd"
1649         $TRACE ln -s . foo && error "'ln -s .' worked after removing cwd"
1650         $TRACE cd .. || echo "'cd ..' failed after removing cwd `pwd`" #bug 3415
1651 }
1652 run_test 48c "Access removed working subdir (should return errors)"
1653
1654 test_48d() { # bug 2350
1655         check_kernel_version 36 || return 0
1656         #sysctl -w portals.debug=-1
1657         #set -vx
1658         mkdir -p $DIR/d48d/dir
1659         cd $DIR/d48d/dir
1660         $TRACE rmdir $DIR/d48d/dir || error "remove cwd $DIR/d48d/dir failed"
1661         $TRACE rmdir $DIR/d48d || error "remove parent $DIR/d48d failed"
1662         $TRACE touch foo && error "'touch foo' worked after removing parent"
1663         $TRACE mkdir foo && error "'mkdir foo' worked after removing parent"
1664         $TRACE ls . && error "'ls .' worked after removing parent"
1665         $TRACE ls .. && error "'ls ..' worked after removing parent"
1666         $TRACE cd . && error "'cd .' worked after recreate parent"
1667         $TRACE mkdir . && error "'mkdir .' worked after removing parent"
1668         $TRACE rmdir . && error "'rmdir .' worked after removing parent"
1669         $TRACE ln -s . foo && error "'ln -s .' worked after removing parent"
1670         $TRACE cd .. && error "'cd ..' worked after removing parent" || true
1671 }
1672 run_test 48d "Access removed parent subdir (should return errors)"
1673
1674 test_50() {
1675         # bug 1485
1676         mkdir $DIR/d50
1677         cd $DIR/d50
1678         ls /proc/$$/cwd || error
1679 }
1680 run_test 50 "special situations: /proc symlinks  ==============="
1681
1682 test_51() {
1683         # bug 1516 - create an empty entry right after ".." then split dir
1684         mkdir $DIR/d49
1685         touch $DIR/d49/foo
1686         $MCREATE $DIR/d49/bar
1687         rm $DIR/d49/foo
1688         createmany -m $DIR/d49/longfile 201
1689         FNUM=202
1690         while [ `ls -sd $DIR/d49 | awk '{ print $1 }'` -eq 4 ]; do
1691                 $MCREATE $DIR/d49/longfile$FNUM
1692                 FNUM=$(($FNUM + 1))
1693                 echo -n "+"
1694         done
1695         ls -l $DIR/d49 > /dev/null || error
1696 }
1697 run_test 51 "special situations: split htree with empty entry =="
1698
1699 export NUMTEST=70000
1700 test_51b() {
1701         NUMFREE=`df -i -P $DIR | tail -n 1 | awk '{ print $4 }'`
1702         [ $NUMFREE -lt 21000 ] && \
1703                 echo "skipping test 51b, not enough free inodes ($NUMFREE)" && \
1704                 return
1705
1706         check_kernel_version 40 || NUMTEST=31000
1707         [ $NUMFREE -lt $NUMTEST ] && NUMTEST=$(($NUMFREE - 50))
1708
1709         mkdir -p $DIR/d51b
1710         (cd $DIR/d51b; mkdirmany t $NUMTEST)
1711 }
1712 run_test 51b "mkdir .../t-0 --- .../t-70000 ===================="
1713
1714 test_51c() {
1715         [ ! -d $DIR/d51b ] && echo "skipping test 51c: $DIR/51b missing" && \
1716                 return
1717
1718         (cd $DIR/d51b; rmdirmany t $NUMTEST)
1719 }
1720 run_test 51c "rmdir .../t-0 --- .../t-70000 ===================="
1721
1722 test_52a() {
1723         [ -f $DIR/d52a/foo ] && chattr -a $DIR/d52a/foo
1724         mkdir -p $DIR/d52a
1725         touch $DIR/d52a/foo
1726         chattr =a $DIR/d52a/foo || error
1727         echo bar >> $DIR/d52a/foo || error
1728         cp /etc/hosts $DIR/d52a/foo && error
1729         rm -f $DIR/d52a/foo 2>/dev/null && error
1730         link $DIR/d52a/foo $DIR/d52a/foo_link 2>/dev/null && error
1731         echo foo >> $DIR/d52a/foo || error
1732         mrename $DIR/d52a/foo $DIR/d52a/foo_ren && error
1733         lsattr $DIR/d52a/foo | egrep -q "^-+a-+ $DIR/d52a/foo" || error
1734         chattr -a $DIR/d52a/foo || error
1735
1736         rm -fr $DIR/d52a || error
1737 }
1738 run_test 52a "append-only flag test (should return errors) ====="
1739
1740 test_52b() {
1741         [ -f $DIR/d52b/foo ] && chattr -i $DIR/d52b/foo
1742         mkdir -p $DIR/d52b
1743         touch $DIR/d52b/foo
1744         chattr =i $DIR/d52b/foo || error
1745         cat test > $DIR/d52b/foo && error
1746         cp /etc/hosts $DIR/d52b/foo && error
1747         rm -f $DIR/d52b/foo 2>/dev/null && error
1748         link $DIR/d52b/foo $DIR/d52b/foo_link 2>/dev/null && error
1749         echo foo >> $DIR/d52b/foo && error
1750         mrename $DIR/d52b/foo $DIR/d52b/foo_ren && error
1751         [ -f $DIR/d52b/foo ] || error
1752         [ -f $DIR/d52b/foo_ren ] && error
1753         lsattr $DIR/d52b/foo | egrep -q "^-+i-+ $DIR/d52b/foo" || error
1754         chattr -i $DIR/d52b/foo || error
1755
1756         rm -fr $DIR/d52b || error
1757 }
1758 run_test 52b "immutable flag test (should return errors) ======="
1759
1760 test_53() {
1761         for i in `ls -d /proc/fs/lustre/osc/OSC*mds1 2> /dev/null` ; do
1762                 ostname=`echo $i | cut -d _ -f 3-4 | sed -e s/_mds1//`
1763                 ost_last=`cat /proc/fs/lustre/obdfilter/$ostname/last_id`
1764                 mds_last=`cat $i/prealloc_last_id`
1765                 echo "$ostname.last_id=$ost_last ; MDS.last_id=$mds_last"
1766                 if [ $ost_last != $mds_last ]; then
1767                     error "$ostname.last_id=$ost_last ; MDS.last_id=$mds_last"
1768                 fi
1769         done
1770 }
1771 run_test 53 "verify that MDS and OSTs agree on pre-creation ===="
1772
1773 test_54a() {
1774         $SOCKETSERVER $DIR/socket
1775         $SOCKETCLIENT $DIR/socket || error
1776         $MUNLINK $DIR/socket
1777 }
1778 run_test 54a "unix damain socket test =========================="
1779
1780 test_54b() {
1781         f="$DIR/f54b"
1782         mknod $f c 1 3
1783         chmod 0666 $f
1784         dd if=/dev/zero of=$f bs=`page_size` count=1
1785 }
1786 run_test 54b "char device works in lustre ======================"
1787
1788 find_loop_dev() {
1789         [ -b /dev/loop/0 ] && LOOPBASE=/dev/loop/
1790         [ -b /dev/loop0 ] && LOOPBASE=/dev/loop
1791         [ -z "$LOOPBASE" ] && echo "/dev/loop/0 and /dev/loop0 gone?" && return
1792
1793         for i in `seq 3 7`; do
1794                 losetup $LOOPBASE$i > /dev/null 2>&1 && continue
1795                 LOOPDEV=$LOOPBASE$i
1796                 LOOPNUM=$i
1797                 break
1798         done
1799 }
1800
1801 test_54c() {
1802         tfile="$DIR/f54c"
1803         tdir="$DIR/d54c"
1804         loopdev="$DIR/loop54c"
1805
1806         find_loop_dev
1807         [ -z "$LOOPNUM" ] && echo "couldn't find empty loop device" && return
1808         mknod $loopdev b 7 $LOOPNUM
1809         echo "make a loop file system with $tfile on $loopdev ($LOOPNUM)..."
1810         dd if=/dev/zero of=$tfile bs=`page_size` seek=1024 count=1 > /dev/null
1811         losetup $loopdev $tfile || error "can't set up $loopdev for $tfile"
1812         mkfs.ext2 $loopdev || error "mke2fs on $loopdev"
1813         mkdir -p $tdir
1814         mount -t ext2 $loopdev $tdir || error "error mounting $loopdev on $tdir"
1815         dd if=/dev/zero of=$tdir/tmp bs=`page_size` count=30 || error "dd write"
1816         df $tdir
1817         dd if=$tdir/tmp of=/dev/zero bs=`page_size` count=30 || error "dd read"
1818         umount $tdir
1819         losetup -d $loopdev
1820         rm $loopdev
1821 }
1822 run_test 54c "block device works in lustre ====================="
1823
1824 test_54d() {
1825         f="$DIR/f54d"
1826         string="aaaaaa"
1827         mknod $f p
1828         [ "$string" = `echo $string > $f | cat $f` ] || error
1829 }
1830 run_test 54d "fifo device works in lustre ======================"
1831
1832 check_fstype() {
1833         grep -q $FSTYPE /proc/filesystems && return 0
1834         modprobe $FSTYPE
1835         grep -q $FSTYPE /proc/filesystems && return 0
1836         insmod ../$FSTYPE/$FSTYPE.o
1837         grep -q $FSTYPE /proc/filesystems && return 0
1838         return 1
1839 }
1840
1841 test_55() {
1842         rm -rf $DIR/d55
1843         mkdir $DIR/d55
1844         check_fstype && echo "can't find fs $FSTYPE, skipping test 55" && return
1845         mount -t $FSTYPE -o loop,iopen $EXT2_DEV $DIR/d55 || error "mounting"
1846         touch $DIR/d55/foo
1847         $IOPENTEST1 $DIR/d55/foo $DIR/d55 || error "running $IOPENTEST1"
1848         $IOPENTEST2 $DIR/d55 || error "running $IOPENTEST2"
1849         echo "check for $EXT2_DEV. Please wait..."
1850         rm -rf $DIR/d55/*
1851         umount $DIR/d55 || error "unmounting"
1852 }
1853 run_test 55 "check iopen_connect_dentry() ======================"
1854
1855 test_56() {
1856         rm -rf $DIR/d56
1857         mkdir $DIR/d56
1858         mkdir $DIR/d56/dir
1859         NUMFILES=3
1860         NUMFILESx2=$(($NUMFILES * 2))
1861         for i in `seq 1 $NUMFILES` ; do
1862                 touch $DIR/d56/file$i
1863                 touch $DIR/d56/dir/file$i
1864         done
1865
1866         # test lfs find with --recursive
1867         FILENUM=`$LFIND --recursive $DIR/d56 | grep -c obdidx`
1868         [ $FILENUM -eq $NUMFILESx2 ] || error \
1869                 "lfs find --recursive $DIR/d56 wrong: found $FILENUM, expected $NUMFILESx2"
1870         FILENUM=`$LFIND $DIR/d56 | grep -c obdidx`
1871         [ $FILENUM -eq $NUMFILES ] || error \
1872                 "lfs find $DIR/d56 without --recursive wrong: found $FILENUM,
1873                 expected $NUMFILES"
1874         echo "lfs find --recursive passed."
1875
1876         # test lfs find with file instead of dir
1877         FILENUM=`$LFIND $DIR/d56/file1 | grep -c obdidx`
1878         [ $FILENUM  -eq 1 ] || error \
1879                  "lfs find $DIR/d56/file1 wrong:found $FILENUM, expected 1"
1880         echo "lfs find file passed."
1881
1882         #test lfs find with --verbose
1883         [ `$LFIND --verbose $DIR/d56 | grep -c lmm_magic` -eq $NUMFILES ] ||\
1884                 error "lfs find --verbose $DIR/d56 wrong: should find $NUMFILES lmm_magic info"
1885         [ `$LFIND $DIR/d56 | grep -c lmm_magic` -eq 0 ] || error \
1886                 "lfs find $DIR/d56 without --verbose wrong: should not show lmm_magic info"
1887         echo "lfs find --verbose passed."
1888
1889         #test lfs find with --obd
1890         $LFIND --obd wrong_uuid $DIR/d56 2>&1 | grep -q "unknown obduuid" || \
1891                 error "lfs find --obd wrong_uuid should return error information"
1892
1893         [  "$OSTCOUNT" -lt 2 ] && \
1894                 echo "skipping other lfs find --obd test" && return
1895         FILENUM=`$LFIND --recursive $DIR/d56 | sed -n '/^[       ]*1[    ]/p' | wc -l`
1896         OBDUUID=`$LFIND --recursive $DIR/d56 | sed -n '/^[       ]*1:/p' | awk '{print $2}'`
1897         FOUND=`$LFIND -r --obd $OBDUUID $DIR/d56 | wc -l`
1898         [ $FOUND -eq $FILENUM ] || \
1899                 error "lfs find --obd wrong: found $FOUND, expected $FILENUM"
1900         [ `$LFIND -r -v --obd $OBDUUID $DIR/d56 | sed '/^[       ]*1[    ]/d' | \
1901                 sed -n '/^[      ]*[0-9][0-9]*[  ]/p' | wc -l` -eq 0 ] || \
1902                 error "lfs find --obd wrong: should not show file on other obd"
1903         echo "lfs find --obd passed."
1904 }
1905 run_test 56 "check lfs find ===================================="
1906
1907 test_57a() {
1908         # note test will not do anything if MDS is not local
1909         for DEV in `cat /proc/fs/lustre/mds/*/mntdev`; do
1910                 dumpe2fs -h $DEV > $TMP/t57a.dump || error "can't access $DEV"
1911                 DEVISIZE=`awk '/Inode size:/ { print $3 }' $TMP/t57a.dump`
1912                 [ "$DEVISIZE" -gt 128 ] || error "inode size $DEVISIZE"
1913                 rm $TMP/t57a.dump
1914         done
1915 }
1916 run_test 57a "verify MDS filesystem created with large inodes =="
1917
1918 test_57b() {
1919         FILECOUNT=100
1920         FILE1=$DIR/d57b/f1
1921         FILEN=$DIR/d57b/f$FILECOUNT
1922         rm -rf $DIR/d57b || error "removing $DIR/d57b"
1923         mkdir -p $DIR/d57b || error "creating $DIR/d57b"
1924         echo "mcreating $FILECOUNT files"
1925         createmany -m $DIR/d57b/f 1 $FILECOUNT || \
1926                 error "creating files in $DIR/d57b"
1927
1928         # verify that files do not have EAs yet
1929         $LFIND $FILE1 2>&1 | grep -q "no stripe" || error "$FILE1 has an EA"
1930         $LFIND $FILEN 2>&1 | grep -q "no stripe" || error "$FILEN has an EA"
1931
1932         MDSFREE="`cat /proc/fs/lustre/mds/*/kbytesfree`"
1933         MDCFREE="`cat /proc/fs/lustre/mdc/*/kbytesfree`"
1934         echo "opening files to create objects/EAs"
1935         for FILE in `seq -f $DIR/d57b/f%g 1 $FILECOUNT`; do
1936                 $OPENFILE -f O_RDWR $FILE > /dev/null || error "opening $FILE"
1937         done
1938
1939         # verify that files have EAs now
1940         $LFIND $FILE1 | grep -q "obdidx" || error "$FILE1 missing EA"
1941         $LFIND $FILEN | grep -q "obdidx" || error "$FILEN missing EA"
1942
1943         MDSFREE2="`cat /proc/fs/lustre/mds/*/kbytesfree`"
1944         MDCFREE2="`cat /proc/fs/lustre/mdc/*/kbytesfree`"
1945         if [ "$MDCFREE" != "$MDCFREE2" ]; then
1946                 if [ "$MDSFREE" != "$MDSFREE2" ]; then
1947                         error "MDC before $MDCFREE != after $MDCFREE2"
1948                 else
1949                         echo "MDC before $MDCFREE != after $MDCFREE2"
1950                         echo "unable to confirm if MDS has large inodes"
1951                 fi
1952         fi
1953         rm -rf $DIR/d57b
1954 }
1955 run_test 57b "default LOV EAs are stored inside large inodes ==="
1956
1957 test_58() {
1958         wiretest
1959 }
1960 run_test 58 "verify cross-platform wire constants =============="
1961
1962 test_59() {
1963         echo "touch 130 files"
1964         for i in `seq 1 130` ; do
1965                 touch $DIR/59-$i
1966         done
1967         echo "rm 130 files"
1968         for i in `seq 1 130` ; do
1969                 rm -f $DIR/59-$i
1970         done
1971         sync
1972         sleep 2
1973         # wait for commitment of removal
1974 }
1975 run_test 59 "verify cancellation of llog records async ========="
1976
1977 test_60() {
1978         echo 60 "llog tests run from kernel mode"
1979         sh run-llog.sh
1980 }
1981 run_test 60 "llog sanity tests run from kernel module =========="
1982
1983 test_61() {
1984         f="$DIR/f61"
1985         dd if=/dev/zero of=$f bs=`page_size` count=1
1986         cancel_lru_locks OSC
1987         multiop $f OSMWUc || error
1988         sync
1989 }
1990 run_test 61 "mmap() writes don't make sync hang ================"
1991
1992 # bug 2330 - insufficient obd_match error checking causes LBUG
1993 test_62() {
1994         f="$DIR/f62"
1995         echo foo > $f
1996         cancel_lru_locks OSC
1997         echo 0x405 > /proc/sys/lustre/fail_loc
1998         cat $f && error "cat succeeded, expect -EIO"
1999         echo 0 > /proc/sys/lustre/fail_loc
2000 }
2001 run_test 62 "verify obd_match failure doesn't LBUG (should -EIO)"
2002
2003 # bug 2319 - oig_wait() interrupted causes crash because of invalid waitq.
2004 test_63() {
2005         MAX_DIRTY_MB=`cat /proc/fs/lustre/osc/*/max_dirty_mb | head -n 1`
2006         for i in /proc/fs/lustre/osc/*/max_dirty_mb ; do
2007                 echo 0 > $i
2008         done
2009         for i in `seq 10` ; do
2010                 dd if=/dev/zero of=$DIR/f63 bs=8k &
2011                 sleep 5
2012                 kill $!
2013                 sleep 1
2014         done
2015
2016         for i in /proc/fs/lustre/osc/*/max_dirty_mb ; do
2017                 echo $MAX_DIRTY_MB > $i
2018         done
2019         true
2020 }
2021 run_test 63 "Verify oig_wait interruption does not crash ======"
2022
2023 test_64a () {
2024         df $DIR
2025         grep "[0-9]" /proc/fs/lustre/osc/OSC*MNT*/cur*
2026 }
2027 run_test 64a "verify filter grant calculations (in kernel) ====="
2028
2029 test_64b () {
2030         sh oos.sh $MOUNT
2031 }
2032 run_test 64b "check out-of-space detection on client ==========="
2033
2034 # bug 1414 - set/get directories' stripe info
2035 test_65a() {
2036         mkdir -p $DIR/d65
2037         touch $DIR/d65/f1
2038         $LVERIFY $DIR/d65 $DIR/d65/f1 || error "lverify failed"
2039 }
2040 run_test 65a "directory with no stripe info ===================="
2041
2042 test_65b() {
2043         mkdir -p $DIR/d65
2044         $LSTRIPE $DIR/d65 $(($STRIPESIZE * 2)) 0 1 || error "setstripe"
2045         touch $DIR/d65/f2
2046         $LVERIFY $DIR/d65 $DIR/d65/f2 || error "lverify failed"
2047 }
2048 run_test 65b "directory setstripe $(($STRIPESIZE * 2)) 0 1 ==============="
2049
2050 test_65c() {
2051         if [ $OSTCOUNT -gt 1 ]; then
2052                 mkdir -p $DIR/d65
2053                 $LSTRIPE $DIR/d65 $(($STRIPESIZE * 4)) 1 \
2054                         $(($OSTCOUNT - 1)) || error "setstripe"
2055                 touch $DIR/d65/f3
2056                 $LVERIFY $DIR/d65 $DIR/d65/f3 || error "lverify failed"
2057         fi
2058 }
2059 run_test 65c "directory setstripe $(($STRIPESIZE * 4)) 1 $(($OSTCOUNT - 1))"
2060
2061 [ $STRIPECOUNT -eq 0 ] && sc=1 || sc=$(($STRIPECOUNT - 1))
2062
2063 test_65d() {
2064         mkdir -p $DIR/d65
2065         $LSTRIPE $DIR/d65 $STRIPESIZE -1 $sc || error "setstripe"
2066         touch $DIR/d65/f4 $DIR/d65/f5
2067         $LVERIFY $DIR/d65 $DIR/d65/f4 $DIR/d65/f5 || error "lverify failed"
2068 }
2069 run_test 65d "directory setstripe $STRIPESIZE -1 $sc ======================"
2070
2071 test_65e() {
2072         mkdir -p $DIR/d65
2073
2074         $LSTRIPE $DIR/d65 0 -1 0 || error "setstripe"
2075         touch $DIR/d65/f6
2076         $LVERIFY $DIR/d65 $DIR/d65/f6 || error "lverify failed"
2077 }
2078 run_test 65e "directory setstripe 0 -1 0 (default) ============="
2079
2080 test_65f() {
2081         mkdir -p $DIR/d65f
2082         $RUNAS $LSTRIPE $DIR/d65f 0 -1 0 && error "setstripe succeeded" || true
2083 }
2084 run_test 65f "dir setstripe permission (should return error) ==="
2085
2086 # bug 2543 - update blocks count on client
2087 test_66() {
2088         COUNT=${COUNT:-8}
2089         dd if=/dev/zero of=$DIR/f66 bs=1k count=$COUNT
2090         sync
2091         BLOCKS=`ls -s $DIR/f66 | awk '{ print $1 }'`
2092         [ $BLOCKS -ge $COUNT ] || error "$DIR/f66 blocks $BLOCKS < $COUNT"
2093 }
2094 run_test 66 "update inode blocks count on client ==============="
2095
2096 test_67() { # bug 3285 - supplementary group fails on MDS, passes on client
2097         [ "$RUNAS_ID" = "$UID" ] && echo "skipping test 67" && return
2098         check_kernel_version 35 || return 0
2099         mkdir $DIR/d67
2100         chmod 771 $DIR/d67
2101         chgrp $RUNAS_ID $DIR/d67
2102         $RUNAS -g $(($RUNAS_ID + 1)) -G1,2,$RUNAS_ID ls $DIR/d67 && error ||true
2103 }
2104 run_test 67 "supplementary group failure (should return error) ="
2105
2106 cleanup_68() {
2107         if [ "$LOOPDEV" ]; then
2108                 swapoff $LOOPDEV || error "swapoff failed"
2109                 losetup -d $LOOPDEV || error "losetup -d failed"
2110                 unset LOOPDEV LOOPNUM
2111         fi
2112         rm -f $DIR/f68
2113 }
2114
2115 meminfo() {
2116         awk '($1 == "'$1':") { print $2 }' /proc/meminfo
2117 }
2118
2119 swap_used() {
2120         swapon -s | awk '($1 == "'$1'") { print $4 }'
2121 }
2122
2123 # excercise swapping to lustre by adding a high priority swapfile entry
2124 # and then consuming memory until it is used.
2125 test_68() {
2126         [ "$UID" != 0 ] && echo "skipping test 68 (must run as root)" && return
2127         [ "`lsmod|grep obdfilter`" ] && echo "skipping test 68 (local OST)" && \
2128                 return
2129
2130         find_loop_dev
2131         dd if=/dev/zero of=$DIR/f68 bs=64k count=1024
2132
2133         trap cleanup_68 EXIT
2134
2135         losetup $LOOPDEV $DIR/f68 || error "losetup $LOOPDEV failed"
2136         mkswap $LOOPDEV
2137         swapon -p 32767 $LOOPDEV || error "swapon $LOOPDEV failed"
2138
2139         echo "before: `swapon -s | grep $LOOPDEV`"
2140         KBFREE=`meminfo MemTotal`
2141         $MEMHOG $KBFREE || error "error allocating $KBFREE kB"
2142         echo "after: `swapon -s | grep $LOOPDEV`"
2143         SWAPUSED=`swap_used $LOOPDEV`
2144
2145         cleanup_68
2146
2147         [ $SWAPUSED -eq 0 ] && echo "no swap used???" || true
2148 }
2149 run_test 68 "support swapping to Lustre ========================"
2150
2151 # on the LLNL clusters, runas will still pick up root's $TMP settings,
2152 # which will not be writable for the runas user, and then you get a CVS
2153 # error message with a corrupt path string (CVS bug) and panic.
2154 # We're not using much space, so just stick it in /tmp, which is safe.
2155 OLDTMPDIR=$TMPDIR
2156 OLDTMP=$TMP
2157 TMPDIR=/tmp
2158 TMP=/tmp
2159 OLDHOME=$HOME
2160 [ $RUNAS_ID -ne $UID ] && HOME=/tmp
2161
2162 test_99a() {
2163         mkdir -p $DIR/d99cvsroot
2164         chown $RUNAS_ID $DIR/d99cvsroot
2165         $RUNAS cvs -d $DIR/d99cvsroot init || error
2166 }
2167 run_test 99a "cvs init ========================================="
2168
2169 test_99b() {
2170         [ ! -d $DIR/d99cvsroot ] && test_99a
2171         cd /etc/init.d
2172         # some versions of cvs import exit(1) when asked to import links or
2173         # files they can't read.  ignore those files.
2174         TOIGNORE=$(find . -type l -printf '-I %f\n' -o \
2175                         ! -perm +4 -printf '-I %f\n')
2176         $RUNAS cvs -d $DIR/d99cvsroot import -m "nomesg" $TOIGNORE \
2177                 d99reposname vtag rtag
2178 }
2179 run_test 99b "cvs import ======================================="
2180
2181 test_99c() {
2182         [ ! -d $DIR/d99cvsroot ] && test_99b
2183         cd $DIR
2184         mkdir -p $DIR/d99reposname
2185         chown $RUNAS_ID $DIR/d99reposname
2186         $RUNAS cvs -d $DIR/d99cvsroot co d99reposname
2187 }
2188 run_test 99c "cvs checkout ====================================="
2189
2190 test_99d() {
2191         [ ! -d $DIR/d99cvsroot ] && test_99c
2192         cd $DIR/d99reposname
2193         $RUNAS touch foo99
2194         $RUNAS cvs add -m 'addmsg' foo99
2195 }
2196 run_test 99d "cvs add =========================================="
2197
2198 test_99e() {
2199         [ ! -d $DIR/d99cvsroot ] && test_99c
2200         cd $DIR/d99reposname
2201         $RUNAS cvs update
2202 }
2203 run_test 99e "cvs update ======================================="
2204
2205 test_99f() {
2206         [ ! -d $DIR/d99cvsroot ] && test_99d
2207         cd $DIR/d99reposname
2208         $RUNAS cvs commit -m 'nomsg' foo99
2209 }
2210 run_test 99f "cvs commit ======================================="
2211
2212 TMPDIR=$OLDTMPDIR
2213 TMP=$OLDTMP
2214 HOME=$OLDHOME
2215
2216 log "cleanup: ======================================================"
2217 if [ "`mount | grep ^$NAME`" ]; then
2218         rm -rf $DIR/[Rdfs][1-9]*
2219         if [ "$I_MOUNTED" = "yes" ]; then
2220                 sh llmountcleanup.sh || error
2221         fi
2222 fi
2223
2224 echo '=========================== finished ==============================='
2225 [ -f "$SANITYLOG" ] && cat $SANITYLOG && exit 1 || true