Whamcloud - gitweb
git://git.whamcloud.com / fs / lustre-release.git / blobdiff
? search:
summary | shortlog | log | commit | commitdiff | tree
raw | inline | side by side
- disable debug
[fs/lustre-release.git] / lustre / tests / sanity-gns.sh
diff --git a/lustre/tests/sanity-gns.sh b/lustre/tests/sanity-gns.sh
index 0890742..6c529f1 100644 (file)
--- a/lustre/tests/sanity-gns.sh
+++ b/lustre/tests/sanity-gns.sh
@@ -7,7 +7,7 @@
 set -e
 
 ONLY=${ONLY:-"$*"}
-ALWAYS_EXCEPT=${ALWAYS_EXCEPT:-"1b 1c 3b"}
+ALWAYS_EXCEPT=${ALWAYS_EXCEPT:-"1b 1c"}
 [ "$ALWAYS_EXCEPT$EXCEPT" ] && echo "Skipping tests: $ALWAYS_EXCEPT $EXCEPT"
 
 SRCDIR=`dirname $0`
@@ -178,8 +178,7 @@ EXT2_DEV=${EXT2_DEV:-$TMP/SANITY.LOOP}
 touch $EXT2_DEV
 mke2fs -j -F $EXT2_DEV 8000 >/dev/null 2>&1
 
-find_free_loop() {
-    local LOOP_DEV=""
+find_loop() {
     test -b /dev/loop0 && 
        base="/dev/loop" || base="/dev/loop/"
 
@@ -187,21 +186,25 @@ find_free_loop() {
        test -b $base$i || continue
        
        losetup $base$i >/dev/null 2>&1 || {
-           LOOP_DEV="$base$i"
+           echo "$base$i"
            break
        }
     done
-    echo $LOOP_DEV
 }
 
-setup_loop() {
+cleanup_loop() {
     local LOOP_DEV=$1
     local LOOP_FILE=$2
     
-    echo "preparing loop device $LOOP_DEV <-> $LOOP_FILE..."
-    cleanup_loop $LOOP_DEV $LOOP_FILE
+    losetup -d $LOOP_DEV >/dev/null 2>&1
+    rm -fr $LOOP_FILE >/dev/null 2>&1
+}
+
+setup_loop() {
+    local LOOP_DEV=$(find_loop)
+    local LOOP_FILE=$1
     
-    dd if=/dev/zero of=$LOOP_FILE bs=1M count=10 2>/dev/null || 
+    dd if=/dev/zero of=$LOOP_FILE bs=1M count=10 2>/dev/null ||
        return $?
 
     losetup $LOOP_DEV $LOOP_FILE || {
@@ -213,18 +216,11 @@ setup_loop() {
     mke2fs -F $LOOP_DEV >/dev/null 2>&1 || {
        rc=$?
        cleanup_loop $LOOP_DEV $LOOP_FILE
-       echo "cannot create test ext2 fs on $LOOP_DEV"
-       return $?
+       return rc
     }
-    return 0
-}
-
-cleanup_loop() {
-    local LOOP_DEV=$1
-    local LOOP_FILE=$2
     
-    losetup -d $LOOP_DEV >/dev/null 2>&1
-    rm -fr $LOOP_FILE >/dev/null 2>&1
+    echo $LOOP_DEV
+    return 0
 }
 
 setup_upcall() {
@@ -234,7 +230,7 @@ setup_upcall() {
     local LOG=$3
     local BG=$4
     
-    echo "generating upcall $UPCALL"
+    echo "generating upcall $UPCALL" >&2
 
     test "x$BG" = "xBG" && 
        BG="&" || BG=""
@@ -263,9 +259,9 @@ EOF
     echo "$UPCALL" > /proc/fs/lustre/llite/fs0/gns_upcall || return $?
     echo "upcall:  $(cat /proc/fs/lustre/llite/fs0/gns_upcall)"
 
-    echo "======================== upcall script ==========================="
-    cat $UPCALL 2>/dev/null || return $?
-    echo "=================================================================="
+    echo "======================== upcall script ===========================" >&2
+    cat $UPCALL >&2
+    echo "==================================================================" >&2
    
     return 0
 }
@@ -279,40 +275,79 @@ show_log() {
     local LOG=$1
     
     test -f $LOG && {
-       echo "======================== upcall log ==========================="
-       cat $LOG
-       echo "==============================================================="
+       echo "======================== upcall log ===========================" >&2
+       cat $LOG >&2
+       echo "===============================================================" >&2
     }
 }
 
+sleep_on()
+{
+    local TIMOUT=$1
+    local TICK=$2
+    
+    local sleep_time=$TIMOUT
+    let sleep_time+=$TICK*2
+    sleep $sleep_time
+}
+
 check_mnt()
 {
     local OBJECT=$1
+    local MODE=$2
+    local TIMOUT=$3
+    local TICK=$4
+    
+    local res=0
     local mnt=""
     local p=""
+    local op
+    
+    test $MODE -eq 1 && op="mount" || op="umount"
+    echo -n "checking for $op $OBJECT: " >&2
+
+    test $MODE -eq 0 && sleep_on $TIMOUT $TICK
 
     OBJECT="`echo $OBJECT | sed 's/\/*$//'`"
     mnt="`cat /proc/mounts | grep $OBJECT | awk '{print \$2}'`"
-    test -z "$mnt" && return 1
-    
-    for p in $mnt; do
-       test "x$p" = "x$OBJECT" || return 1
-    done
+    test -z "$mnt" && {
+       res=0
+    } || {
+       for p in $mnt; do
+           test "x$p" = "x$OBJECT" && {
+               res=1
+               break
+           }
+       done
+    }
     
+    if test $MODE -eq 0; then
+       test $res -eq 1 && {
+           echo "failed" >&2
+           return 1
+       }
+    else
+       test $res -eq 0 && {
+           echo "failed" >&2
+           return 1
+       }
+    fi
+
+    echo "success" >&2
     return 0
 }
 
 check_gns() {
-    local LOG="$TMP/gns-log"
     local OBJECT1=$1
     local OBJECT2=$2
     local TIMOUT=$3
     local TICK=$4
     local MODE=$5
     local OP=$6
+    local CHECK=$7
     
     local OLD_PWD=$(pwd)
-    echo -n "mount on $OP: "
+    echo "testing mount on $OP against $OBJECT1 in $MODE mode" >&2
     
     case "$MODE" in
        GENERIC)
@@ -327,7 +362,7 @@ check_gns() {
                    cd $OBJECT1 || return $?
                    ;;
                *)
-                   echo "invalid testing operation $OP"
+                   echo "invalid testing operation $OP" >&2
                    return 1
            esac
            ;;
@@ -347,7 +382,7 @@ check_gns() {
                        cd $OBJECT1 >/dev/null 2>&1 &
                        ;;
                    *)
-                       echo "invalid testing operation $OP"
+                       echo "invalid testing operation $OP" >&2
                        return 1
                esac
            done
@@ -361,7 +396,7 @@ check_gns() {
            ;;
        CONCUR2)
            test "x$OBJECT2" = "x" && {
-               echo "not defined object2 for concurrent2 testing"
+               echo "not defined object2 for concurrent2 testing" >&2
                return 1
            }
            case "$OP" in
@@ -378,7 +413,7 @@ check_gns() {
                    cd $OBJECT2 >/dev/null 2>&1 &
                    ;;
                *)
-                   echo "invalid testing operation $OP"
+                   echo "invalid testing operation $OP" >&2
                    return 1
            esac
            
@@ -411,7 +446,7 @@ check_gns() {
                        mkdir $OBJECT1/dir$i &
                        ;;
                    *)
-                       echo "invalid testing operation $OP"
+                       echo "invalid testing operation $OP" >&2
                        return 1
                esac
            done
@@ -424,46 +459,26 @@ check_gns() {
                return $RETVAL
            ;;
        *)
-           echo "invalid testing mode $MODE"
+           echo "invalid testing mode $MODE" >&2
            return 1
     esac
 
     test "x$OP" = "xCHDIR" && cd $OLD_PWD
-    
-    check_mnt $OBJECT1 || {
-       echo "fail"
-       show_log $LOG
-       return 1
-    }
-    
-    if test "x$MODE" = "xCONCUR2"; then
-       check_mnt $OBJECT2 || {
-           echo "fail"
-           show_log $LOG
-           return 1
-       }
-    fi
-    
-    echo "success"
 
-    local sleep_time=$TIMOUT
-    let sleep_time+=$TICK*2
-    echo -n "waiting for umount ${sleep_time}s (timeout + tick*2): "
-    sleep $sleep_time
+    test $CHECK -eq 1 && {
+       # check if mount is here
+       check_mnt $OBJECT1 1 0 0 || return 1
+       if test "x$MODE" = "xCONCUR2"; then
+           check_mnt $OBJECT2 1 0 0 || return 1
+       fi
     
-    check_mnt $OBJECT1 && {
-       echo "failed"
-       return 2
+       # wait for $TIMEOUT and check for mount, it should go
+       check_mnt $OBJECT1 0 $TIMOUT $TICK || return 2
+       if test "x$MODE" = "xCONCUR2"; then
+           check_mnt $OBJECT2 0 $TIMOUT $TICK || return 2
+       fi
     }
     
-    if test "x$MODE" = "xCONCUR2"; then
-       check_mnt $OBJECT2 && {
-           echo "failed"
-           return 2
-       }
-    fi
-    
-    echo "success"
     return 0
 }
 
@@ -472,15 +487,15 @@ setup_object() {
     local OBJECT=$2
     local CONTENT=$3
     
-    echo "preparing mount object at $OBJPATH..."
+    echo "preparing mount object at $OBJPATH..." >&2
     
     mkdir -p $OBJPATH || return $?
     echo -n $CONTENT > $OBJPATH/$OBJECT || return $?
     
-    echo "======================== mount object ==========================="
-    cat $OBJPATH/$OBJECT
-    echo ""
-    echo "================================================================="
+    echo "======================== mount object ===========================" >&2
+    cat $OBJPATH/$OBJECT >&2
+    echo "" >&2
+    echo "=================================================================" >&2
     
     chmod u+s $OBJPATH
     return $?
@@ -499,7 +514,7 @@ setup_gns() {
     local TIMOUT=$2
     local TICK=$3
 
-    echo "setting up GNS timeouts and mount object..."
+    echo "setting up GNS timeouts and mount object..." >&2
 
     echo "$OBJECT" > /proc/fs/lustre/llite/fs0/gns_object_name || error
     echo "$TIMOUT" > /proc/fs/lustre/llite/fs0/gns_timeout || error
@@ -528,21 +543,19 @@ disable_gns()
 }
 
 test_1a() {
-    local LOOP_DEV=$(find_free_loop 2>/dev/null)
     local UPCALL="$TMP/gns-upcall-1a.sh"
     local LOOP_FILE="$TMP/gns_loop_1a"
     local LOG="$TMP/gns-log"
     local OBJECT=".mntinfo"
+    local LOOP_DEV=""
     local TIMOUT=5
     local TICK=1
 
     disable_gns
 
-    test "x$LOOP_DEV" != "x" && test -b $LOOP_DEV ||
-       error "can't find free loop device"
-
-    setup_loop $LOOP_DEV $LOOP_FILE || 
-       error
+    LOOP_DEV=$(setup_loop $LOOP_FILE)
+    test "x$LOOP_DEV" = "x" && 
+       error "can't find valid (free) loop device"
 
     setup_upcall $UPCALL GENERIC $LOG FG || {
        cleanup_loop $LOOP_DEV $LOOP_FILE
@@ -561,12 +574,10 @@ test_1a() {
 
     enable_gns
 
-    echo ""
-    echo "testing GNS with GENERIC upcall 3 times on the row"
-    
     for ((i=0;i<3;i++)); do
-       check_gns $DIR/gns_test_1a/ $DIR/gns_test_1a $TIMOUT $TICK GENERIC OPEN || {
+       check_gns $DIR/gns_test_1a $DIR/gns_test_1a $TIMOUT $TICK GENERIC OPEN 1 || {
            disable_gns
+           show_log $LOG
            cleanup_object $DIR/gns_test_1a
            cleanup_loop $LOOP_DEV $LOOP_FILE
            error
@@ -574,8 +585,9 @@ test_1a() {
     done
     
     for ((i=0;i<3;i++)); do
-       check_gns $DIR/gns_test_1a $DIR/gns_test_1a $TIMOUT $TICK GENERIC CHDIR || {
+       check_gns $DIR/gns_test_1a $DIR/gns_test_1a $TIMOUT $TICK GENERIC CHDIR 1 || {
            disable_gns
+           show_log $LOG
            cleanup_object $DIR/gns_test_1a
            cleanup_loop $LOOP_DEV $LOOP_FILE
            error
@@ -592,21 +604,19 @@ test_1a() {
 run_test 1a " general GNS test - mount/umount (GENERIC) ================"
 
 test_1b() {
-    local LOOP_DEV=$(find_free_loop 2>/dev/null)
     local UPCALL="$TMP/gns-upcall-1b.sh"
     local LOOP_FILE="$TMP/gns_loop_1b"
     local LOG="$TMP/gns-log"
     local OBJECT=".mntinfo"
+    local LOOP_DEV=""
     local TIMOUT=5
     local TICK=1
 
     disable_gns
 
-    test "x$LOOP_DEV" != "x" && test -b $LOOP_DEV ||
-       error "can't find free loop device"
-
-    setup_loop $LOOP_DEV $LOOP_FILE || 
-       error
+    LOOP_DEV=$(setup_loop $LOOP_FILE)
+    test "x$LOOP_DEV" = "x" && 
+       error "can't find valid (free) loop device"
 
     setup_upcall $UPCALL DEADLOCK $LOG FG || {
        cleanup_loop $LOOP_DEV $LOOP_FILE
@@ -625,11 +635,8 @@ test_1b() {
     
     enable_gns
 
-    echo ""
-    echo "testing GNS with DEADLOCK upcall 3 times on the row"
-    
     for ((i=0;i<3;i++)); do
-       check_gns $DIR/gns_test_1b $DIR/gns_test_1b $TIMOUT $TICK GENERIC OPEN
+       check_gns $DIR/gns_test_1b $DIR/gns_test_1b $TIMOUT $TICK GENERIC OPEN 1
     done
     
     disable_gns
@@ -642,21 +649,19 @@ test_1b() {
 run_test 1b " general GNS test - mount/umount (DEADLOCK) ==============="
 
 test_1c() {
-    local LOOP_DEV=$(find_free_loop 2>/dev/null)
     local UPCALL="$TMP/gns-upcall-1c.sh"
     local LOOP_FILE="$TMP/gns_loop_1c"
     local LOG="$TMP/gns-log"
     local OBJECT=".mntinfo"
+    local LOOP_DEV=""
     local TIMOUT=5
     local TICK=1
 
     disable_gns
 
-    test "x$LOOP_DEV" != "x" && test -b $LOOP_DEV ||
-       error "can't find free loop device"
-
-    setup_loop $LOOP_DEV $LOOP_FILE || 
-       error
+    LOOP_DEV=$(setup_loop $LOOP_FILE)
+    test "x$LOOP_DEV" = "x" && 
+       error "can't find valid (free) loop device"
 
     setup_gns $OBJECT $TIMOUT $TICK || {
        cleanup_loop $LOOP_DEV $LOOP_FILE
@@ -670,8 +675,6 @@ test_1c() {
 
     enable_gns
 
-    echo ""
-    echo "testing GNS with GENERIC/DEADLOCK upcall 4 times on the row in GENERIC mode"
     local i=0
     
     for ((;i<4;i++)); do
@@ -682,13 +685,15 @@ test_1c() {
            
        setup_upcall $UPCALL $UPCALL_MODE $LOG FG || {
            disable_gns
+           show_log $LOG
            cleanup_object $DIR/gns_test_1c
            cleanup_loop $LOOP_DEV $LOOP_FILE
            error
        }
 
-       check_gns $DIR/gns_test_1c $DIR/gns_test_1c $TIMOUT $TICK GENERIC OPEN || {
+       check_gns $DIR/gns_test_1c $DIR/gns_test_1c $TIMOUT $TICK GENERIC OPEN 1 || {
            disable_gns
+           show_log $LOG
            cleanup_object $DIR/gns_test_1c
            cleanup_loop $LOOP_DEV $LOOP_FILE
            error
@@ -705,21 +710,19 @@ test_1c() {
 run_test 1c " general GNS test - mount/umount (GENERIC/DEADLOCK) ========"
 
 test_1d() {
-    local LOOP_DEV=$(find_free_loop 2>/dev/null)
     local UPCALL="$TMP/gns-upcall-1d.sh"
     local LOOP_FILE="$TMP/gns_loop_1d"
     local LOG="$TMP/gns-log"
     local OBJECT=".mntinfo"
+    local LOOP_DEV=""
     local TIMOUT=5
     local TICK=1
 
     disable_gns
 
-    test "x$LOOP_DEV" != "x" && test -b $LOOP_DEV ||
-       error "can't find free loop device"
-
-    setup_loop $LOOP_DEV $LOOP_FILE || 
-       error
+    LOOP_DEV=$(setup_loop $LOOP_FILE)
+    test "x$LOOP_DEV" = "x" && 
+       error "can't find valid (free) loop device"
 
     setup_upcall $UPCALL GENERIC $LOG FG || {
        cleanup_loop $LOOP_DEV $LOOP_FILE
@@ -738,13 +741,12 @@ test_1d() {
     
     enable_gns
 
-    echo ""
-    echo "testing GNS with GENERIC upcall 4 times on the row in CONCUR1 mode"
     local i=0
     
     for ((;i<4;i++)); do
-       check_gns $DIR/gns_test_1d $DIR/gns_test_1d $TIMOUT $TICK CONCUR1 OPEN || {
+       check_gns $DIR/gns_test_1d $DIR/gns_test_1d $TIMOUT $TICK CONCUR1 OPEN 1 || {
            disable_gns
+           show_log $LOG
            cleanup_object $DIR/gns_test_1d
            cleanup_loop $LOOP_DEV $LOOP_FILE
            error
@@ -761,21 +763,19 @@ test_1d() {
 run_test 1d " general GNS test - concurrent mount ======================="
 
 test_1e() {
-    local LOOP_DEV=$(find_free_loop 2>/dev/null)
     local UPCALL="$TMP/gns-upcall-1e.sh"
     local LOOP_FILE="$TMP/gns_loop_1e"
     local LOG="$TMP/gns-log"
     local OBJECT=".mntinfo"
+    local LOOP_DEV=""
     local TIMOUT=5
     local TICK=1
 
     disable_gns
 
-    test "x$LOOP_DEV" != "x" && test -b $LOOP_DEV ||
-       error "can't find free loop device"
-
-    setup_loop $LOOP_DEV $LOOP_FILE || 
-       error
+    LOOP_DEV=$(setup_loop $LOOP_FILE)
+    test "x$LOOP_DEV" = "x" && 
+       error "can't find valid (free) loop device"
 
     setup_upcall $UPCALL GENERIC $LOG FG || {
        cleanup_loop $LOOP_DEV $LOOP_FILE
@@ -800,11 +800,9 @@ test_1e() {
     
     enable_gns
 
-    echo ""
-    echo "testing GNS with GENERIC upcall in CONCUR2 mode"
-    
-    check_gns $DIR/gns_test_1e1 $DIR/gns_test_1e2 $TIMOUT $TICK CONCUR2 OPEN || {
+    check_gns $DIR/gns_test_1e1 $DIR/gns_test_1e2 $TIMOUT $TICK CONCUR2 OPEN 1 || {
        disable_gns
+       show_log $LOG
         cleanup_object $DIR/gns_test_1e1
         cleanup_object $DIR/gns_test_1e2
         cleanup_loop $LOOP_DEV $LOOP_FILE
@@ -836,17 +834,13 @@ test_2a() {
     setup_upcall $UPCALL GENERIC $LOG FG ||
        error
 
-    echo "preparing mount object at $DIR/gns_test_2a/$OBJECT..."
     mkdir -p $DIR/gns_test_2a
     ln -s $DIR/gns_test_2a $DIR/gns_test_2a/$OBJECT
     chmod u+s $DIR/gns_test_2a
     
     enable_gns
 
-    echo ""
-    echo "testing GNS with GENERIC upcall"
-    
-    check_gns $DIR/gns_test_2a $DIR/gns_test_2a $TIMOUT $TICK GENERIC OPEN
+    check_gns $DIR/gns_test_2a $DIR/gns_test_2a $TIMOUT $TICK GENERIC OPEN 1
     
     disable_gns
     chmod u-s $DIR/gns_test_2a
@@ -872,7 +866,6 @@ test_2b() {
     setup_upcall $UPCALL GENERIC $LOG FG ||
        error
 
-    echo "preparing mount object at $DIR/gns_test_2b/$OBJECT..."
     mkdir -p $DIR/gns_test_2b/$OBJECT
     chmod u+s $DIR/gns_test_2b
     
@@ -881,7 +874,7 @@ test_2b() {
     echo ""
     echo "testing GNS with GENERIC upcall"
     
-    check_gns $DIR/gns_test_2b $DIR/gns_test_2b $TIMOUT $TICK GENERIC OPEN
+    check_gns $DIR/gns_test_2b $DIR/gns_test_2b $TIMOUT $TICK GENERIC OPEN 1
     
     disable_gns
     chmod u-s $DIR/gns_test_2b
@@ -907,16 +900,12 @@ test_2c() {
     setup_upcall $UPCALL GENERIC $LOG FG ||
        error
 
-    echo "preparing mount object at $DIR/gns_test_2c/$OBJECT..."
     mkdir -p $DIR/gns_test_2c/$OBJECT/$OBJECT/$OBJECT/$OBJECT
     chmod u+s -R $DIR/gns_test_2c
     
     enable_gns
     
-    echo ""
-    echo "testing GNS with GENERIC upcall"
-    
-    check_gns $DIR/gns_test_2c $DIR/gns_test_2c $TIMOUT $TICK GENERIC OPEN
+    check_gns $DIR/gns_test_2c $DIR/gns_test_2c $TIMOUT $TICK GENERIC OPEN 1
 
     disable_gns
     chmod u-s -R $DIR/gns_test_2c
@@ -942,16 +931,12 @@ test_2d() {
     setup_upcall $UPCALL GENERIC $LOG FG ||
        error
 
-    echo "preparing mount object at $DIR/gns_test_2d/$OBJECT..."
     mkdir -p $DIR/gns_test_2d
     chmod u+s $DIR/gns_test_2d
     
     enable_gns
 
-    echo ""
-    echo "testing GNS with GENERIC upcall"
-    
-    check_gns $DIR/gns_test_2d $DIR/gns_test_2d $TIMOUT $TICK GENERIC OPEN
+    check_gns $DIR/gns_test_2d $DIR/gns_test_2d $TIMOUT $TICK GENERIC OPEN 1
     
     disable_gns
     chmod u-s $DIR/gns_test_2d
@@ -989,21 +974,19 @@ test_2e() {
 run_test 2e " odd conditions ('.' and '..' as mount object) ============="
 
 test_2f() {
-    local LOOP_DEV=$(find_free_loop 2>/dev/null)
     local UPCALL="$TMP/gns-upcall-2f.sh"
     local LOOP_FILE="$TMP/gns_loop_2f"
     local LOG="$TMP/gns-log"
     local OBJECT=".mntinfo"
+    local LOOP_DEV=""
     local TIMOUT=5
     local TICK=1
 
     disable_gns
 
-    test "x$LOOP_DEV" != "x" && test -b $LOOP_DEV ||
-       error "can't find free loop device"
-
-    setup_loop $LOOP_DEV $LOOP_FILE || 
-       error
+    LOOP_DEV=$(setup_loop $LOOP_FILE)
+    test "x$LOOP_DEV" = "x" && 
+       error "can't find valid (free) loop device"
 
     setup_upcall $UPCALL GENERIC $LOG FG || {
        cleanup_loop $LOOP_DEV $LOOP_FILE
@@ -1022,11 +1005,9 @@ test_2f() {
     
     enable_gns
 
-    echo ""
-    echo "testing GNS with GENERIC upcall in CONCUR3 mode"
-    
-    check_gns $DIR/gns_test_2f $DIR/gns_test_2f $TIMOUT $TICK CONCUR3 OPEN || {
+    check_gns $DIR/gns_test_2f $DIR/gns_test_2f $TIMOUT $TICK CONCUR3 OPEN 1 || {
         disable_gns
+       show_log $LOG
         cleanup_object $DIR/gns_test_2f
         cleanup_loop $LOOP_DEV $LOOP_FILE
         error
@@ -1042,21 +1023,19 @@ test_2f() {
 run_test 2f " odd conditions (mount point is modifying during mount) ===="
 
 test_2g() {
-    local LOOP_DEV=$(find_free_loop 2>/dev/null)
     local UPCALL="$TMP/gns-upcall-2g.sh"
     local LOOP_FILE="$TMP/gns_loop_2g"
     local LOG="$TMP/gns-log"
     local OBJECT=".mntinfo"
+    local LOOP_DEV=""
     local TIMOUT=5
     local TICK=1
 
     disable_gns
 
-    test "x$LOOP_DEV" != "x" && test -b $LOOP_DEV ||
-       error "can't find free loop device"
-
-    setup_loop $LOOP_DEV $LOOP_FILE || 
-       error
+    LOOP_DEV=$(setup_loop $LOOP_FILE)
+    test "x$LOOP_DEV" = "x" && 
+       error "can't find valid (free) loop device"
 
     setup_upcall $UPCALL GENERIC $LOG FG || {
        cleanup_loop $LOOP_DEV $LOOP_FILE
@@ -1076,12 +1055,10 @@ test_2g() {
 
     enable_gns
 
-    echo ""
-    echo "testing GNS with GENERIC upcall in GENERIC mode"
-    
     check_gns $DIR/gns_test_2g/$OBJECT/$OBJECT/$OBJECT \
-$DIR/gns_test_2g/$OBJECT/$OBJECT/$OBJECT $TIMOUT $TICK GENERIC OPEN || {
+$DIR/gns_test_2g/$OBJECT/$OBJECT/$OBJECT $TIMOUT $TICK GENERIC OPEN 1 || {
         disable_gns
+       show_log $LOG
         cleanup_object $DIR/gns_test_2g
         cleanup_loop $LOOP_DEV $LOOP_FILE
         error "recursive mount point does not work"
@@ -1096,8 +1073,9 @@ $DIR/gns_test_2g/$OBJECT/$OBJECT/$OBJECT $TIMOUT $TICK GENERIC OPEN || {
     enable_gns
 
     check_gns $DIR/gns_test_2g/$OBJECT/$OBJECT/$OBJECT \
-$DIR/gns_test_2g/$OBJECT/$OBJECT/$OBJECT $TIMOUT $TICK GENERIC OPEN && {
+$DIR/gns_test_2g/$OBJECT/$OBJECT/$OBJECT $TIMOUT $TICK GENERIC OPEN 1 && {
         disable_gns
+       show_log $LOG
         cleanup_object $DIR/gns_test_2g
         cleanup_loop $LOOP_DEV $LOOP_FILE
         error "GNS works whereas mount point is not SUID marked dir"
@@ -1113,21 +1091,19 @@ $DIR/gns_test_2g/$OBJECT/$OBJECT/$OBJECT $TIMOUT $TICK GENERIC OPEN && {
 run_test 2g " odd conditions (mount point is recursive marked SUID dir) ="
 
 test_2h() {
-    local LOOP_DEV=$(find_free_loop 2>/dev/null)
     local UPCALL="$TMP/gns-upcall-2h.sh"
     local LOOP_FILE="$TMP/gns_loop_2h"
     local LOG="$TMP/gns-log"
     local OBJECT=".mntinfo"
+    local LOOP_DEV=""
     local TIMOUT=5
     local TICK=1
 
     disable_gns
 
-    test "x$LOOP_DEV" != "x" && test -b $LOOP_DEV ||
-       error "can't find free loop device"
-
-    setup_loop $LOOP_DEV $LOOP_FILE || 
-       error
+    LOOP_DEV=$(setup_loop $LOOP_FILE)
+    test "x$LOOP_DEV" = "x" && 
+       error "can't find valid (free) loop device"
 
     setup_upcall $UPCALL GENERIC $LOG BG || {
        cleanup_loop $LOOP_DEV $LOOP_FILE
@@ -1146,11 +1122,9 @@ test_2h() {
     
     enable_gns
 
-    echo ""
-    echo "testing GNS with GENERIC upcall in GENERIC mode"
-    
-    check_gns $DIR/gns_test_2h $DIR/gns_test_2h $TIMOUT $TICK GENERIC OPEN || {
+    check_gns $DIR/gns_test_2h $DIR/gns_test_2h $TIMOUT $TICK GENERIC OPEN 1 || {
         disable_gns
+       show_log $LOG
         cleanup_object $DIR/gns_test_2h
         cleanup_loop $LOOP_DEV $LOOP_FILE
         error
@@ -1166,21 +1140,19 @@ test_2h() {
 run_test 2h " odd conditions (mounting in background) ==================="
 
 test_3a() {
-    local LOOP_DEV=$(find_free_loop 2>/dev/null)
     local UPCALL="$TMP/gns-upcall-3a.sh"
     local LOOP_FILE="$TMP/gns_loop_3a"
     local LOG="$TMP/gns-log"
     local OBJECT=".mntinfo"
+    local LOOP_DEV=""
     local TIMOUT=5
     local TICK=1
 
     disable_gns
 
-    test "x$LOOP_DEV" != "x" && test -b $LOOP_DEV ||
-       error "can't find free loop device"
-
-    setup_loop $LOOP_DEV $LOOP_FILE || 
-       error
+    LOOP_DEV=$(setup_loop $LOOP_FILE)
+    test "x$LOOP_DEV" = "x" && 
+       error "can't find valid (free) loop device"
 
     setup_upcall $UPCALL GENERIC $LOG FG || {
        cleanup_loop $LOOP_DEV $LOOP_FILE
@@ -1199,11 +1171,9 @@ test_3a() {
     
     enable_gns
 
-    echo ""
-    echo "testing GNS with GENERIC upcall in GENERIC mode"
-    
-    check_gns $DIR/gns_test_3a $DIR/gns_test_3a $TIMOUT $TICK GENERIC OPEN || {
+    check_gns $DIR/gns_test_3a $DIR/gns_test_3a $TIMOUT $TICK GENERIC OPEN 1 || {
         disable_gns
+       show_log $LOG
         cleanup_object $DIR/gns_test_3a
         cleanup_loop $LOOP_DEV $LOOP_FILE
         error
@@ -1216,11 +1186,11 @@ test_3a() {
        error "can't chmod u-s $DIR/gns_test_3a"
     }
     
-    check_mnt $DIR/gns_test_3a && {
+    check_mnt $DIR/gns_test_3a 0 0 0 || {
         disable_gns
         cleanup_object $DIR/gns_test_3a
         cleanup_loop $LOOP_DEV $LOOP_FILE
-       error "chmod u-s $DIR/gns_test_3a caused mounting"
+       error "chmod u-s $DIR/gns_test_3a caused mounting?"
     }
     
     disable_gns
@@ -1233,74 +1203,86 @@ test_3a() {
 run_test 3a " removing mnt by chmod u-s ================================="
 
 test_3b() {
-    local LOOP_FILE1="$TMP/gns_loop_3b1"
-    local LOOP_FILE2="$TMP/gns_loop_3b2"
-    local LOOP_FILE3="$TMP/gns_loop_3b3"
+    local LOOP_FILE="$TMP/gns_loop_3b"
+    local UPCALL="$TMP/gns-upcall-3b.sh"
+    local LOG="$TMP/gns-log"
     local OBJECT=".mntinfo"
-    local LOOP_DEV1=""
-    local LOOP_DEV2=""
-    local LOOP_DEV3=""
+    local LOOP_DEV=""
     local TIMOUT=5
     local TICK=1
 
     disable_gns
 
-    LOOP_DEV1=$(find_free_loop 2>/dev/null)
-    test "x$LOOP_DEV1" != "x" && test -b $LOOP_DEV1 ||
-       error "can't find free loop device"
+    LOOP_DEV=$(setup_loop $LOOP_FILE)
+    test "x$LOOP_DEV" = "x" && 
+       error "can't find valid (free) loop device"
 
-    echo "preparing loop device $LOOP_DEV1 <-> $LOOP_FILE1..."
-    cleanup_loop $LOOP_DEV1 $LOOP_FILE1
-    setup_loop $LOOP_DEV1 $LOOP_FILE1 || error
+    setup_upcall $UPCALL GENERIC $LOG FG || {
+       cleanup_loop $LOOP_DEV $LOOP_FILE
+       error
+    }
 
-    echo "preparing mount object at $DIR/gns_test_3b1/$OBJECT..."
-    setup_object $DIR/gns_test_3b1 $OBJECT "-t ext2 $LOOP_DEV1" || {
-        cleanup_loop $LOOP_DEV1 $LOOP_FILE1
+    setup_object $DIR/gns_test_3b1 $OBJECT "-t ext2 $LOOP_DEV" || {
+        cleanup_loop $LOOP_DEV $LOOP_FILE
        error
     }
     
     mkdir -p $TMP/mnt || error
-    mount -t ext2 $LOOP_DEV1 $TMP/mnt || {
+    mount -t ext2 $LOOP_DEV $TMP/mnt || {
         cleanup_object $DIR/gns_test_3b1
-        cleanup_loop $LOOP_DEV1 $LOOP_FILE1
-       error "cannot mount $LOOP_DEV1"
+        cleanup_loop $LOOP_DEV $LOOP_FILE
+       error "cannot mount $LOOP_DEV"
     }
 
     mkdir $TMP/mnt/gns_test_3b2 || {
        umount $TMP/mnt
         cleanup_object $DIR/gns_test_3b1
-        cleanup_loop $LOOP_DEV1 $LOOP_FILE1
+        cleanup_loop $LOOP_DEV $LOOP_FILE
        error "can't create $TMP/mnt/gns_test_3b2"
     }
     
     umount $TMP/mnt || {
         cleanup_object $DIR/gns_test_3b1
-        cleanup_loop $LOOP_DEV1 $LOOP_FILE1
+        cleanup_loop $LOOP_DEV $LOOP_FILE
        error "can't umount $TMP/mnt"
     }
 
-    echo "setting up GNS timeouts and mount object..."
     setup_gns $OBJECT $TIMOUT $TICK || {
         cleanup_object $DIR/gns_test_3b1
-        cleanup_loop $LOOP_DEV1 $LOOP_FILE1
+        cleanup_loop $LOOP_DEV $LOOP_FILE
        error
     }
 
     enable_gns
 
-    echo ""
-    echo "testing GNS with GENERIC upcall in CONCUR2 mode"
+    check_gns $DIR/gns_test_3b1/gns_test_3b2 $DIR/gns_test_3b1/gns_test_3b2 \
+$TIMOUT $TICK GENERIC LIST 0 || {
+       disable_gns
+       show_log $LOG
+        cleanup_object $DIR/gns_test_3b1
+        cleanup_loop $LOOP_DEV $LOOP_FILE
+        error
+    }
     
-    check_gns $DIR/gns_test_3b1/gns_test_3b2 $DIR/gns_test_3b1/gns_test_3b2 $TIMOUT $TICK GENERIC LIST || {
+    check_mnt $DIR/gns_test_3b1 1 0 0 || {
        disable_gns
+       show_log $LOG
         cleanup_object $DIR/gns_test_3b1
-        cleanup_loop $LOOP_DEV1 $LOOP_FILE1
+        cleanup_loop $LOOP_DEV $LOOP_FILE
         error
     }
     
+    check_mnt $DIR/gns_test_3b1 0 $TIMOUT $TICK || {
+       disable_gns
+       show_log $LOG
+        cleanup_object $DIR/gns_test_3b1
+        cleanup_loop $LOOP_DEV $LOOP_FILE
+        error
+    }
+
     disable_gns
     cleanup_object $DIR/gns_test_3b1
-    cleanup_loop $LOOP_DEV1 $LOOP_FILE1
+    cleanup_loop $LOOP_DEV $LOOP_FILE
 
     return 0
 }
Lustre primary development and releases