Whamcloud - gitweb
o=Adilger
[fs/lustre-release.git] / lustre / tests / sanity.sh
1 #!/bin/bash
2 #
3 # Run select tests by setting ONLY, or as arguments to the script.
4 # Skip specific tests by setting EXCEPT.
5 #
6 # e.g. ONLY="22 23" or ONLY="`seq 32 39`" or EXCEPT="31"
7 set -e
8
9 ONLY=${ONLY:-"$*"}
10 # bug number for skipped test: 13297 2108 9789 3637 9789 3561 12622 12653 12653 5188 10764 16260
11 ALWAYS_EXCEPT="                27u   42a  42b  42c  42d  45   51d   65a   65e   68b   75    119d  $SANITY_EXCEPT"
12 # bug number for skipped test: 2108 9789 3637 9789 3561 5188/5749 1443
13 #ALWAYS_EXCEPT=${ALWAYS_EXCEPT:-"27m 42a 42b 42c 42d 45 68 76"}
14 # UPDATE THE COMMENT ABOVE WITH BUG NUMBERS WHEN CHANGING ALWAYS_EXCEPT!
15
16 # Tests that fail on uml
17 CPU=`awk '/model/ {print $4}' /proc/cpuinfo`
18 #                                    buffer i/o errs             sock spc runas
19 [ "$CPU" = "UML" ] && EXCEPT="$EXCEPT 27m 27n 27o 27p 27q 27r 31d 54a  64b 99a 99b 99c 99d 99e 99f 101"
20
21 # test76 is not valid with FIDs because inode numbers are not reused
22 ALWAYS_EXCEPT="$ALWAYS_EXCEPT 76"
23
24 case `uname -r` in
25 2.4*) FSTYPE=${FSTYPE:-ext3} ;;
26 2.6*) FSTYPE=${FSTYPE:-ldiskfs} ;;
27 *) error "unsupported kernel" ;;
28 esac
29
30 SRCDIR=$(cd $(dirname $0); echo $PWD)
31 export PATH=$PATH:/sbin
32
33 TMP=${TMP:-/tmp}
34
35 CHECKSTAT=${CHECKSTAT:-"checkstat -v"}
36 CREATETEST=${CREATETEST:-createtest}
37 LFS=${LFS:-lfs}
38 SETSTRIPE=${SETSTRIPE:-"$LFS setstripe"}
39 GETSTRIPE=${GETSTRIPE:-"$LFS getstripe"}
40 LSTRIPE=${LSTRIPE:-"$LFS setstripe"}
41 LFIND=${LFIND:-"$LFS find"}
42 LVERIFY=${LVERIFY:-ll_dirstripe_verify}
43 LSTRIPEINFO=${LSTRIPEINFO:-ll_getstripe_info}
44 LCTL=${LCTL:-lctl}
45 MCREATE=${MCREATE:-mcreate}
46 OPENFILE=${OPENFILE:-openfile}
47 OPENUNLINK=${OPENUNLINK:-openunlink}
48 READS=${READS:-"reads"}
49 TRUNCATE=${TRUNCATE:-truncate}
50 MUNLINK=${MUNLINK:-munlink}
51 SOCKETSERVER=${SOCKETSERVER:-socketserver}
52 SOCKETCLIENT=${SOCKETCLIENT:-socketclient}
53 IOPENTEST1=${IOPENTEST1:-iopentest1}
54 IOPENTEST2=${IOPENTEST2:-iopentest2}
55 MEMHOG=${MEMHOG:-memhog}
56 DIRECTIO=${DIRECTIO:-directio}
57 ACCEPTOR_PORT=${ACCEPTOR_PORT:-988}
58 UMOUNT=${UMOUNT:-"umount -d"}
59 STRIPES_PER_OBJ=-1
60 CHECK_GRANT=${CHECK_GRANT:-"yes"}
61 GRANT_CHECK_LIST=${GRANT_CHECK_LIST:-""}
62
63 export NAME=${NAME:-local}
64
65 SAVE_PWD=$PWD
66
67 CLEANUP=${CLEANUP:-:}
68 SETUP=${SETUP:-:}
69 TRACE=${TRACE:-""}
70 LUSTRE=${LUSTRE:-$(cd $(dirname $0)/..; echo $PWD)}
71 . $LUSTRE/tests/test-framework.sh
72 init_test_env $@
73 . ${CONFIG:=$LUSTRE/tests/cfg/${NAME}.sh}
74
75 [ "$SLOW" = "no" ] && EXCEPT_SLOW="24o 24v 27m 36f 36g 51b 51c 60c 63 64b 68 71 73 77f 78 101 103 115 120g 124b"
76
77 SANITYLOG=${TESTSUITELOG:-$TMP/$(basename $0 .sh).log}
78 FAIL_ON_ERROR=false
79
80 cleanup() {
81         echo -n "cln.."
82         pgrep ll_sa > /dev/null && { echo "There are ll_sa thread not exit!"; exit 20; }
83         cleanupall ${FORCE} $* || { echo "FAILed to clean up"; exit 20; }
84 }
85 setup() {
86         echo -n "mnt.."
87         load_modules
88         setupall || exit 10
89         echo "done"
90 }
91
92 check_kernel_version() {
93         WANT_VER=$1
94         GOT_VER=$(lctl get_param -n version | awk '/kernel:/ {print $2}')
95         case $GOT_VER in
96         patchless|patchless_client) return 0;;
97         *) [ $GOT_VER -ge $WANT_VER ] && return 0 ;;
98         esac
99         log "test needs at least kernel version $WANT_VER, running $GOT_VER"
100         return 1
101 }
102
103 if [ "$ONLY" == "cleanup" ]; then
104        sh llmountcleanup.sh
105        exit 0
106 fi
107
108 [ "$SANITYLOG" ] && rm -f $SANITYLOG || true
109
110 check_and_setup_lustre
111
112 DIR=${DIR:-$MOUNT}
113 assert_DIR
114
115 MDT0=$($LCTL get_param -n mdc.*.mds_server_uuid | \
116     awk '{gsub(/_UUID/,""); print $1}' | head -1)
117 LOVNAME=$($LCTL get_param -n llite.*.lov.common_name | tail -n 1)
118 OSTCOUNT=$($LCTL get_param -n lov.$LOVNAME.numobd)
119 STRIPECOUNT=$($LCTL get_param -n lov.$LOVNAME.stripecount)
120 STRIPESIZE=$($LCTL get_param -n lov.$LOVNAME.stripesize)
121 ORIGFREE=$($LCTL get_param -n lov.$LOVNAME.kbytesavail)
122 MAXFREE=${MAXFREE:-$((200000 * $OSTCOUNT))}
123
124 [ -f $DIR/d52a/foo ] && chattr -a $DIR/d52a/foo
125 [ -f $DIR/d52b/foo ] && chattr -i $DIR/d52b/foo
126 rm -rf $DIR/[Rdfs][0-9]*
127
128 # $RUNAS_ID may get set incorrectly somewhere else
129 [ $UID -eq 0 -a $RUNAS_ID -eq 0 ] && error "\$RUNAS_ID set to 0, but \$UID is also 0!"
130
131 check_runas_id $RUNAS_ID $RUNAS_ID $RUNAS
132
133 build_test_filter
134
135 if [ "${ONLY}" = "MOUNT" ] ; then
136         echo "Lustre is up, please go on"
137         exit
138 fi
139
140 echo "preparing for tests involving mounts"
141 EXT2_DEV=${EXT2_DEV:-$TMP/SANITY.LOOP}
142 touch $EXT2_DEV
143 mke2fs -j -F $EXT2_DEV 8000 > /dev/null
144 echo # add a newline after mke2fs.
145
146 umask 077
147
148 OLDDEBUG="`lctl get_param -n debug 2> /dev/null`"
149 lctl set_param debug=-1 2> /dev/null || true
150 test_0() {
151         touch $DIR/$tfile
152         $CHECKSTAT -t file $DIR/$tfile || error
153         rm $DIR/$tfile
154         $CHECKSTAT -a $DIR/$tfile || error
155 }
156 run_test 0 "touch .../$tfile ; rm .../$tfile ====================="
157
158 test_0b() {
159         chmod 0755 $DIR || error
160         $CHECKSTAT -p 0755 $DIR || error
161 }
162 run_test 0b "chmod 0755 $DIR ============================="
163
164 test_0c() {
165     $LCTL get_param mdc.*.import | grep  "state: FULL" || error "import not FULL"
166     $LCTL get_param mdc.*.import | grep  "target: $FSNAME-MDT" || error "bad target"
167 }
168 run_test 0c "check import proc ============================="
169
170 test_1a() {
171         mkdir $DIR/d1
172         mkdir $DIR/d1/d2
173         mkdir $DIR/d1/d2 && error "we expect EEXIST, but not returned"
174         $CHECKSTAT -t dir $DIR/d1/d2 || error
175 }
176 run_test 1a "mkdir .../d1; mkdir .../d1/d2 ====================="
177
178 test_1b() {
179         rmdir $DIR/d1/d2
180         rmdir $DIR/d1
181         $CHECKSTAT -a $DIR/d1 || error
182 }
183 run_test 1b "rmdir .../d1/d2; rmdir .../d1 ====================="
184
185 test_2a() {
186         mkdir $DIR/d2
187         touch $DIR/d2/f
188         $CHECKSTAT -t file $DIR/d2/f || error
189 }
190 run_test 2a "mkdir .../d2; touch .../d2/f ======================"
191
192 test_2b() {
193         rm -r $DIR/d2
194         $CHECKSTAT -a $DIR/d2 || error
195 }
196 run_test 2b "rm -r .../d2; checkstat .../d2/f ======================"
197
198 test_3a() {
199         mkdir $DIR/d3
200         $CHECKSTAT -t dir $DIR/d3 || error
201 }
202 run_test 3a "mkdir .../d3 ======================================"
203
204 test_3b() {
205         if [ ! -d $DIR/d3 ]; then
206                 mkdir $DIR/d3
207         fi
208         touch $DIR/d3/f
209         $CHECKSTAT -t file $DIR/d3/f || error
210 }
211 run_test 3b "touch .../d3/f ===================================="
212
213 test_3c() {
214         rm -r $DIR/d3
215         $CHECKSTAT -a $DIR/d3 || error
216 }
217 run_test 3c "rm -r .../d3 ======================================"
218
219 test_4a() {
220         mkdir $DIR/d4
221         $CHECKSTAT -t dir $DIR/d4 || error
222 }
223 run_test 4a "mkdir .../d4 ======================================"
224
225 test_4b() {
226         if [ ! -d $DIR/d4 ]; then
227                 mkdir $DIR/d4
228         fi
229         mkdir $DIR/d4/d2
230         $CHECKSTAT -t dir $DIR/d4/d2 || error
231 }
232 run_test 4b "mkdir .../d4/d2 ==================================="
233
234 test_5() {
235         mkdir $DIR/d5
236         mkdir $DIR/d5/d2
237         chmod 0707 $DIR/d5/d2
238         $CHECKSTAT -t dir -p 0707 $DIR/d5/d2 || error
239 }
240 run_test 5 "mkdir .../d5 .../d5/d2; chmod .../d5/d2 ============"
241
242 test_6a() {
243         touch $DIR/f6a
244         chmod 0666 $DIR/f6a || error
245         $CHECKSTAT -t file -p 0666 -u \#$UID $DIR/f6a || error
246 }
247 run_test 6a "touch .../f6a; chmod .../f6a ======================"
248
249 test_6b() {
250         [ $RUNAS_ID -eq $UID ] && skip "RUNAS_ID = UID = $UID -- skipping" && return
251         if [ ! -f $DIR/f6a ]; then
252                 touch $DIR/f6a
253                 chmod 0666 $DIR/f6a
254         fi
255         $RUNAS chmod 0444 $DIR/f6a && error
256         $CHECKSTAT -t file -p 0666 -u \#$UID $DIR/f6a || error
257 }
258 run_test 6b "$RUNAS chmod .../f6a (should return error) =="
259
260 test_6c() {
261         [ $RUNAS_ID -eq $UID ] && skip "RUNAS_ID = UID = $UID -- skipping" && return
262         touch $DIR/f6c
263         chown $RUNAS_ID $DIR/f6c || error
264         $CHECKSTAT -t file -u \#$RUNAS_ID $DIR/f6c || error
265 }
266 run_test 6c "touch .../f6c; chown .../f6c ======================"
267
268 test_6d() {
269         [ $RUNAS_ID -eq $UID ] && skip "RUNAS_ID = UID = $UID -- skipping" && return
270         if [ ! -f $DIR/f6c ]; then
271                 touch $DIR/f6c
272                 chown $RUNAS_ID $DIR/f6c
273         fi
274         $RUNAS chown $UID $DIR/f6c && error
275         $CHECKSTAT -t file -u \#$RUNAS_ID $DIR/f6c || error
276 }
277 run_test 6d "$RUNAS chown .../f6c (should return error) =="
278
279 test_6e() {
280         [ $RUNAS_ID -eq $UID ] && skip "RUNAS_ID = UID = $UID -- skipping" && return
281         touch $DIR/f6e
282         chgrp $RUNAS_ID $DIR/f6e || error
283         $CHECKSTAT -t file -u \#$UID -g \#$RUNAS_ID $DIR/f6e || error
284 }
285 run_test 6e "touch .../f6e; chgrp .../f6e ======================"
286
287 test_6f() {
288         [ $RUNAS_ID -eq $UID ] && skip "RUNAS_ID = UID = $UID -- skipping" && return
289         if [ ! -f $DIR/f6e ]; then
290                 touch $DIR/f6e
291                 chgrp $RUNAS_ID $DIR/f6e
292         fi
293         $RUNAS chgrp $UID $DIR/f6e && error
294         $CHECKSTAT -t file -u \#$UID -g \#$RUNAS_ID $DIR/f6e || error
295 }
296 run_test 6f "$RUNAS chgrp .../f6e (should return error) =="
297
298 test_6g() {
299         [ $RUNAS_ID -eq $UID ] && skip "RUNAS_ID = UID = $UID -- skipping" && return
300         mkdir $DIR/d6g || error
301         chmod 777 $DIR/d6g || error
302         $RUNAS mkdir $DIR/d6g/d || error
303         chmod g+s $DIR/d6g/d || error
304         mkdir $DIR/d6g/d/subdir
305         $CHECKSTAT -g \#$RUNAS_ID $DIR/d6g/d/subdir || error
306 }
307 run_test 6g "Is new dir in sgid dir inheriting group?"
308
309 test_6h() { # bug 7331
310         [ $RUNAS_ID -eq $UID ] && skip "RUNAS_ID = UID = $UID -- skipping" && return
311         touch $DIR/f6h || error "touch failed"
312         chown $RUNAS_ID:$RUNAS_ID $DIR/f6h || error "initial chown failed"
313         $RUNAS -G$RUNAS_ID chown $RUNAS_ID:0 $DIR/f6h && error "chown worked"
314         $CHECKSTAT -t file -u \#$RUNAS_ID -g \#$RUNAS_ID $DIR/f6h || error
315 }
316 run_test 6h "$RUNAS chown RUNAS_ID.0 .../f6h (should return error)"
317
318 test_7a() {
319         mkdir $DIR/d7
320         $MCREATE $DIR/d7/f
321         chmod 0666 $DIR/d7/f
322         $CHECKSTAT -t file -p 0666 $DIR/d7/f || error
323 }
324 run_test 7a "mkdir .../d7; mcreate .../d7/f; chmod .../d7/f ===="
325
326 test_7b() {
327         if [ ! -d $DIR/d7 ]; then
328                 mkdir $DIR/d7
329         fi
330         $MCREATE $DIR/d7/f2
331         echo -n foo > $DIR/d7/f2
332         [ "`cat $DIR/d7/f2`" = "foo" ] || error
333         $CHECKSTAT -t file -s 3 $DIR/d7/f2 || error
334 }
335 run_test 7b "mkdir .../d7; mcreate d7/f2; echo foo > d7/f2 ====="
336
337 test_8() {
338         mkdir $DIR/d8
339         touch $DIR/d8/f
340         chmod 0666 $DIR/d8/f
341         $CHECKSTAT -t file -p 0666 $DIR/d8/f || error
342 }
343 run_test 8 "mkdir .../d8; touch .../d8/f; chmod .../d8/f ======="
344
345 test_9() {
346         mkdir $DIR/d9
347         mkdir $DIR/d9/d2
348         mkdir $DIR/d9/d2/d3
349         $CHECKSTAT -t dir $DIR/d9/d2/d3 || error
350 }
351 run_test 9 "mkdir .../d9 .../d9/d2 .../d9/d2/d3 ================"
352
353 test_10() {
354         mkdir $DIR/d10
355         mkdir $DIR/d10/d2
356         touch $DIR/d10/d2/f
357         $CHECKSTAT -t file $DIR/d10/d2/f || error
358 }
359 run_test 10 "mkdir .../d10 .../d10/d2; touch .../d10/d2/f ======"
360
361 test_11() {
362         mkdir $DIR/d11
363         mkdir $DIR/d11/d2
364         chmod 0666 $DIR/d11/d2
365         chmod 0705 $DIR/d11/d2
366         $CHECKSTAT -t dir -p 0705 $DIR/d11/d2 || error
367 }
368 run_test 11 "mkdir .../d11 d11/d2; chmod .../d11/d2 ============"
369
370 test_12() {
371         mkdir $DIR/d12
372         touch $DIR/d12/f
373         chmod 0666 $DIR/d12/f
374         chmod 0654 $DIR/d12/f
375         $CHECKSTAT -t file -p 0654 $DIR/d12/f || error
376 }
377 run_test 12 "touch .../d12/f; chmod .../d12/f .../d12/f ========"
378
379 test_13() {
380         mkdir $DIR/d13
381         dd if=/dev/zero of=$DIR/d13/f count=10
382         >  $DIR/d13/f
383         $CHECKSTAT -t file -s 0 $DIR/d13/f || error
384 }
385 run_test 13 "creat .../d13/f; dd .../d13/f; > .../d13/f ========"
386
387 test_14() {
388         mkdir $DIR/d14
389         touch $DIR/d14/f
390         rm $DIR/d14/f
391         $CHECKSTAT -a $DIR/d14/f || error
392 }
393 run_test 14 "touch .../d14/f; rm .../d14/f; rm .../d14/f ======="
394
395 test_15() {
396         mkdir $DIR/d15
397         touch $DIR/d15/f
398         mv $DIR/d15/f $DIR/d15/f2
399         $CHECKSTAT -t file $DIR/d15/f2 || error
400 }
401 run_test 15 "touch .../d15/f; mv .../d15/f .../d15/f2 =========="
402
403 test_16() {
404         mkdir $DIR/d16
405         touch $DIR/d16/f
406         rm -rf $DIR/d16/f
407         $CHECKSTAT -a $DIR/d16/f || error
408 }
409 run_test 16 "touch .../d16/f; rm -rf .../d16/f ================="
410
411 test_17a() {
412         mkdir -p $DIR/d17
413         touch $DIR/d17/f
414         ln -s $DIR/d17/f $DIR/d17/l-exist
415         ls -l $DIR/d17
416         $CHECKSTAT -l $DIR/d17/f $DIR/d17/l-exist || error
417         $CHECKSTAT -f -t f $DIR/d17/l-exist || error
418         rm -f $DIR/d17/l-exist
419         $CHECKSTAT -a $DIR/d17/l-exist || error
420 }
421 run_test 17a "symlinks: create, remove (real) =================="
422
423 test_17b() {
424         mkdir -p $DIR/d17
425         ln -s no-such-file $DIR/d17/l-dangle
426         ls -l $DIR/d17
427         $CHECKSTAT -l no-such-file $DIR/d17/l-dangle || error
428         $CHECKSTAT -fa $DIR/d17/l-dangle || error
429         rm -f $DIR/d17/l-dangle
430         $CHECKSTAT -a $DIR/d17/l-dangle || error
431 }
432 run_test 17b "symlinks: create, remove (dangling) =============="
433
434 test_17c() { # bug 3440 - don't save failed open RPC for replay
435         mkdir -p $DIR/d17
436         ln -s foo $DIR/d17/f17c
437         cat $DIR/d17/f17c && error "opened non-existent symlink" || true
438 }
439 run_test 17c "symlinks: open dangling (should return error) ===="
440
441 test_17d() {
442         mkdir -p $DIR/d17
443         ln -s foo $DIR/d17/f17d
444         touch $DIR/d17/f17d || error "creating to new symlink"
445 }
446 run_test 17d "symlinks: create dangling ========================"
447
448 test_17e() {
449         mkdir -p $DIR/$tdir
450         local foo=$DIR/$tdir/$tfile
451         ln -s $foo $foo || error "create symlink failed"
452         ls -l $foo || error "ls -l failed"
453         ls $foo && error "ls not failed" || true
454 }
455 run_test 17e "symlinks: create recursive symlink (should return error) ===="
456
457 test_17f() {
458         mkdir -p $DIR/d17f
459         ln -s 1234567890/2234567890/3234567890/4234567890 $DIR/d17f/111
460         ln -s 1234567890/2234567890/3234567890/4234567890/5234567890/6234567890 $DIR/d17f/222
461         ln -s 1234567890/2234567890/3234567890/4234567890/5234567890/6234567890/7234567890/8234567890 $DIR/d17f/333
462         ln -s 1234567890/2234567890/3234567890/4234567890/5234567890/6234567890/7234567890/8234567890/9234567890/a234567890/b234567890 $DIR/d17f/444
463         ln -s 1234567890/2234567890/3234567890/4234567890/5234567890/6234567890/7234567890/8234567890/9234567890/a234567890/b234567890/c234567890/d234567890/f234567890 $DIR/d17f/555
464         ln -s 1234567890/2234567890/3234567890/4234567890/5234567890/6234567890/7234567890/8234567890/9234567890/a234567890/b234567890/c234567890/d234567890/f234567890/aaaaaaaaaa/bbbbbbbbbb/cccccccccc/dddddddddd/eeeeeeeeee/ffffffffff/ $DIR/d17f/666
465         ls -l  $DIR/d17f
466 }
467 run_test 17f "symlinks: long and very long symlink name ========================"
468
469 test_17g() {
470         mkdir -p $DIR/$tdir
471         LONGSYMLINK="$(dd if=/dev/zero bs=4095 count=1 | tr '\0' 'x')"
472         ln -s $LONGSYMLINK $DIR/$tdir/$tfile
473         ls -l $DIR/$tdir
474 }
475 run_test 17g "symlinks: really long symlink name ==============================="
476
477 test_17h() { #bug 17378
478         mkdir -p $DIR/$tdir
479         $SETSTRIPE $DIR/$tdir -c -1
480 #define OBD_FAIL_MDS_LOV_PREP_CREATE 0x141
481         do_facet mds lctl set_param fail_loc=0x80000141
482         touch $DIR/$tdir/$tfile || true
483 }
484 run_test 17h "create objects: lov_free_memmd() doesn't lbug"
485
486 test_18() {
487         touch $DIR/f
488         ls $DIR || error
489 }
490 run_test 18 "touch .../f ; ls ... =============================="
491
492 test_19a() {
493         touch $DIR/f19
494         ls -l $DIR
495         rm $DIR/f19
496         $CHECKSTAT -a $DIR/f19 || error
497 }
498 run_test 19a "touch .../f19 ; ls -l ... ; rm .../f19 ==========="
499
500 test_19b() {
501         ls -l $DIR/f19 && error || true
502 }
503 run_test 19b "ls -l .../f19 (should return error) =============="
504
505 test_19c() {
506         [ $RUNAS_ID -eq $UID ] && skip "RUNAS_ID = UID = $UID -- skipping" && return
507         $RUNAS touch $DIR/f19 && error || true
508 }
509 run_test 19c "$RUNAS touch .../f19 (should return error) =="
510
511 test_19d() {
512         cat $DIR/f19 && error || true
513 }
514 run_test 19d "cat .../f19 (should return error) =============="
515
516 test_20() {
517         touch $DIR/f
518         rm $DIR/f
519         log "1 done"
520         touch $DIR/f
521         rm $DIR/f
522         log "2 done"
523         touch $DIR/f
524         rm $DIR/f
525         log "3 done"
526         $CHECKSTAT -a $DIR/f || error
527 }
528 run_test 20 "touch .../f ; ls -l ... ==========================="
529
530 test_21() {
531         mkdir $DIR/d21
532         [ -f $DIR/d21/dangle ] && rm -f $DIR/d21/dangle
533         ln -s dangle $DIR/d21/link
534         echo foo >> $DIR/d21/link
535         cat $DIR/d21/dangle
536         $CHECKSTAT -t link $DIR/d21/link || error
537         $CHECKSTAT -f -t file $DIR/d21/link || error
538 }
539 run_test 21 "write to dangling link ============================"
540
541 test_22() {
542         WDIR=$DIR/$tdir
543         mkdir -p $WDIR
544         chown $RUNAS_ID $WDIR
545         (cd $WDIR || error "cd $WDIR failed";
546         $RUNAS tar cf - /etc/hosts /etc/sysconfig/network | \
547         $RUNAS tar xf -)
548         ls -lR $WDIR/etc || error "ls -lR $WDIR/etc failed"
549         $CHECKSTAT -t dir $WDIR/etc || error "checkstat -t dir failed"
550         $CHECKSTAT -u \#$RUNAS_ID $WDIR/etc || error "checkstat -u failed"
551 }
552 run_test 22 "unpack tar archive as non-root user ==============="
553
554 # was test_23
555 test_23a() {
556         mkdir -p $DIR/$tdir
557         local file=$DIR/$tdir/$tfile
558
559         openfile -f O_CREAT:O_EXCL $file || error "$file create failed"
560         openfile -f O_CREAT:O_EXCL $file &&
561                 error "$file recreate succeeded" || true
562 }
563 run_test 23a "O_CREAT|O_EXCL in subdir =========================="
564
565 test_23b() { # bug 18988
566         mkdir -p $DIR/$tdir
567         local file=$DIR/$tdir/$tfile
568
569         rm -f $file
570         echo foo > $file || error "write filed"
571         echo bar >> $file || error "append filed"
572         $CHECKSTAT -s 8 $file || error "wrong size"
573         rm $file
574 }
575 run_test 23b "O_APPEND check =========================="
576
577 test_24a() {
578         echo '== rename sanity =============================================='
579         echo '-- same directory rename'
580         mkdir $DIR/R1
581         touch $DIR/R1/f
582         mv $DIR/R1/f $DIR/R1/g
583         $CHECKSTAT -t file $DIR/R1/g || error
584 }
585 run_test 24a "touch .../R1/f; rename .../R1/f .../R1/g ========="
586
587 test_24b() {
588         mkdir $DIR/R2
589         touch $DIR/R2/{f,g}
590         mv $DIR/R2/f $DIR/R2/g
591         $CHECKSTAT -a $DIR/R2/f || error
592         $CHECKSTAT -t file $DIR/R2/g || error
593 }
594 run_test 24b "touch .../R2/{f,g}; rename .../R2/f .../R2/g ====="
595
596 test_24c() {
597         mkdir $DIR/R3
598         mkdir $DIR/R3/f
599         mv $DIR/R3/f $DIR/R3/g
600         $CHECKSTAT -a $DIR/R3/f || error
601         $CHECKSTAT -t dir $DIR/R3/g || error
602 }
603 run_test 24c "mkdir .../R3/f; rename .../R3/f .../R3/g ========="
604
605 test_24d() {
606         mkdir $DIR/R4
607         mkdir $DIR/R4/{f,g}
608         mrename $DIR/R4/f $DIR/R4/g
609         $CHECKSTAT -a $DIR/R4/f || error
610         $CHECKSTAT -t dir $DIR/R4/g || error
611 }
612 run_test 24d "mkdir .../R4/{f,g}; rename .../R4/f .../R4/g ====="
613
614 test_24e() {
615         echo '-- cross directory renames --'
616         mkdir $DIR/R5{a,b}
617         touch $DIR/R5a/f
618         mv $DIR/R5a/f $DIR/R5b/g
619         $CHECKSTAT -a $DIR/R5a/f || error
620         $CHECKSTAT -t file $DIR/R5b/g || error
621 }
622 run_test 24e "touch .../R5a/f; rename .../R5a/f .../R5b/g ======"
623
624 test_24f() {
625         mkdir $DIR/R6{a,b}
626         touch $DIR/R6a/f $DIR/R6b/g
627         mv $DIR/R6a/f $DIR/R6b/g
628         $CHECKSTAT -a $DIR/R6a/f || error
629         $CHECKSTAT -t file $DIR/R6b/g || error
630 }
631 run_test 24f "touch .../R6a/f R6b/g; mv .../R6a/f .../R6b/g ===="
632
633 test_24g() {
634         mkdir $DIR/R7{a,b}
635         mkdir $DIR/R7a/d
636         mv $DIR/R7a/d $DIR/R7b/e
637         $CHECKSTAT -a $DIR/R7a/d || error
638         $CHECKSTAT -t dir $DIR/R7b/e || error
639 }
640 run_test 24g "mkdir .../R7{a,b}/d; mv .../R7a/d .../R7b/e ======"
641
642 test_24h() {
643         mkdir $DIR/R8{a,b}
644         mkdir $DIR/R8a/d $DIR/R8b/e
645         mrename $DIR/R8a/d $DIR/R8b/e
646         $CHECKSTAT -a $DIR/R8a/d || error
647         $CHECKSTAT -t dir $DIR/R8b/e || error
648 }
649 run_test 24h "mkdir .../R8{a,b}/{d,e}; rename .../R8a/d .../R8b/e"
650
651 test_24i() {
652         echo "-- rename error cases"
653         mkdir $DIR/R9
654         mkdir $DIR/R9/a
655         touch $DIR/R9/f
656         mrename $DIR/R9/f $DIR/R9/a
657         $CHECKSTAT -t file $DIR/R9/f || error
658         $CHECKSTAT -t dir  $DIR/R9/a || error
659         $CHECKSTAT -a $DIR/R9/a/f || error
660 }
661 run_test 24i "rename file to dir error: touch f ; mkdir a ; rename f a"
662
663 test_24j() {
664         mkdir $DIR/R10
665         mrename $DIR/R10/f $DIR/R10/g
666         $CHECKSTAT -t dir $DIR/R10 || error
667         $CHECKSTAT -a $DIR/R10/f || error
668         $CHECKSTAT -a $DIR/R10/g || error
669 }
670 run_test 24j "source does not exist ============================"
671
672 test_24k() {
673         mkdir $DIR/R11a $DIR/R11a/d
674         touch $DIR/R11a/f
675         mv $DIR/R11a/f $DIR/R11a/d
676         $CHECKSTAT -a $DIR/R11a/f || error
677         $CHECKSTAT -t file $DIR/R11a/d/f || error
678 }
679 run_test 24k "touch .../R11a/f; mv .../R11a/f .../R11a/d ======="
680
681 # bug 2429 - rename foo foo foo creates invalid file
682 test_24l() {
683         f="$DIR/f24l"
684         multiop $f OcNs || error
685 }
686 run_test 24l "Renaming a file to itself ========================"
687
688 test_24m() {
689         f="$DIR/f24m"
690         multiop $f OcLN ${f}2 ${f}2 || error "link ${f}2 ${f}2 failed"
691         # on ext3 this does not remove either the source or target files
692         # though the "expected" operation would be to remove the source
693         $CHECKSTAT -t file ${f} || error "${f} missing"
694         $CHECKSTAT -t file ${f}2 || error "${f}2 missing"
695 }
696 run_test 24m "Renaming a file to a hard link to itself ========="
697
698 test_24n() {
699     f="$DIR/f24n"
700     # this stats the old file after it was renamed, so it should fail
701     touch ${f}
702     $CHECKSTAT ${f}
703     mv ${f} ${f}.rename
704     $CHECKSTAT ${f}.rename
705     $CHECKSTAT -a ${f}
706 }
707 run_test 24n "Statting the old file after renaming (Posix rename 2)"
708
709 test_24o() {
710         check_kernel_version 37 || return 0
711         mkdir -p $DIR/d24o
712         rename_many -s random -v -n 10 $DIR/d24o
713 }
714 run_test 24o "rename of files during htree split ==============="
715
716 test_24p() {
717         mkdir $DIR/R12{a,b}
718         DIRINO=`ls -lid $DIR/R12a | awk '{ print $1 }'`
719         mrename $DIR/R12a $DIR/R12b
720         $CHECKSTAT -a $DIR/R12a || error
721         $CHECKSTAT -t dir $DIR/R12b || error
722         DIRINO2=`ls -lid $DIR/R12b | awk '{ print $1 }'`
723         [ "$DIRINO" = "$DIRINO2" ] || error "R12a $DIRINO != R12b $DIRINO2"
724 }
725 run_test 24p "mkdir .../R12{a,b}; rename .../R12a .../R12b"
726
727 test_24q() {
728         mkdir $DIR/R13{a,b}
729         DIRINO=`ls -lid $DIR/R13a | awk '{ print $1 }'`
730         multiop_bg_pause $DIR/R13b D_c || return 1
731         MULTIPID=$!
732
733         mrename $DIR/R13a $DIR/R13b
734         $CHECKSTAT -a $DIR/R13a || error
735         $CHECKSTAT -t dir $DIR/R13b || error
736         DIRINO2=`ls -lid $DIR/R13b | awk '{ print $1 }'`
737         [ "$DIRINO" = "$DIRINO2" ] || error "R13a $DIRINO != R13b $DIRINO2"
738         kill -USR1 $MULTIPID
739         wait $MULTIPID || error "multiop close failed"
740 }
741 run_test 24q "mkdir .../R13{a,b}; open R13b rename R13a R13b ==="
742
743 test_24r() { #bug 3789
744         mkdir $DIR/R14a $DIR/R14a/b
745         mrename $DIR/R14a $DIR/R14a/b && error "rename to subdir worked!"
746         $CHECKSTAT -t dir $DIR/R14a || error "$DIR/R14a missing"
747         $CHECKSTAT -t dir $DIR/R14a/b || error "$DIR/R14a/b missing"
748 }
749 run_test 24r "mkdir .../R14a/b; rename .../R14a .../R14a/b ====="
750
751 test_24s() {
752         mkdir $DIR/R15a $DIR/R15a/b $DIR/R15a/b/c
753         mrename $DIR/R15a $DIR/R15a/b/c && error "rename to sub-subdir worked!"
754         $CHECKSTAT -t dir $DIR/R15a || error "$DIR/R15a missing"
755         $CHECKSTAT -t dir $DIR/R15a/b/c || error "$DIR/R15a/b/c missing"
756 }
757 run_test 24s "mkdir .../R15a/b/c; rename .../R15a .../R15a/b/c ="
758 test_24t() {
759         mkdir $DIR/R16a $DIR/R16a/b $DIR/R16a/b/c
760         mrename $DIR/R16a/b/c $DIR/R16a && error "rename to sub-subdir worked!"
761         $CHECKSTAT -t dir $DIR/R16a || error "$DIR/R16a missing"
762         $CHECKSTAT -t dir $DIR/R16a/b/c || error "$DIR/R16a/b/c missing"
763 }
764 run_test 24t "mkdir .../R16a/b/c; rename .../R16a/b/c .../R16a ="
765
766 test_24u() { # bug12192
767         multiop $DIR/$tfile C2w$((2048 * 1024))c || error
768         $CHECKSTAT -s $((2048 * 1024)) $DIR/$tfile || error "wrong file size"
769 }
770 run_test 24u "create stripe file"
771
772 test_24v() {
773         local NRFILES=100000
774         local FREE_INODES=`lfs df -i|grep "filesystem summary" | awk '{print $5}'`
775         [ $FREE_INODES -lt $NRFILES ] && \
776                 skip "not enough free inodes $FREE_INODES required $NRFILES" && \
777                 return
778
779         mkdir -p $DIR/d24v
780         createmany -m $DIR/d24v/$tfile $NRFILES
781         ls $DIR/d24v >/dev/null || error "error in listing large dir"
782
783         rm $DIR/d24v -rf
784 }
785 run_test 24v "list directory with large files (handle hash collision, bug: 17560)"
786
787 test_25a() {
788         echo '== symlink sanity ============================================='
789
790         mkdir $DIR/d25
791         ln -s d25 $DIR/s25
792         touch $DIR/s25/foo || error
793 }
794 run_test 25a "create file in symlinked directory ==============="
795
796 test_25b() {
797         [ ! -d $DIR/d25 ] && test_25a
798         $CHECKSTAT -t file $DIR/s25/foo || error
799 }
800 run_test 25b "lookup file in symlinked directory ==============="
801
802 test_26a() {
803         mkdir $DIR/d26
804         mkdir $DIR/d26/d26-2
805         ln -s d26/d26-2 $DIR/s26
806         touch $DIR/s26/foo || error
807 }
808 run_test 26a "multiple component symlink ======================="
809
810 test_26b() {
811         mkdir -p $DIR/d26b/d26-2
812         ln -s d26b/d26-2/foo $DIR/s26-2
813         touch $DIR/s26-2 || error
814 }
815 run_test 26b "multiple component symlink at end of lookup ======"
816
817 test_26c() {
818         mkdir $DIR/d26.2
819         touch $DIR/d26.2/foo
820         ln -s d26.2 $DIR/s26.2-1
821         ln -s s26.2-1 $DIR/s26.2-2
822         ln -s s26.2-2 $DIR/s26.2-3
823         chmod 0666 $DIR/s26.2-3/foo
824 }
825 run_test 26c "chain of symlinks ================================"
826
827 # recursive symlinks (bug 439)
828 test_26d() {
829         ln -s d26-3/foo $DIR/d26-3
830 }
831 run_test 26d "create multiple component recursive symlink ======"
832
833 test_26e() {
834         [ ! -h $DIR/d26-3 ] && test_26d
835         rm $DIR/d26-3
836 }
837 run_test 26e "unlink multiple component recursive symlink ======"
838
839 # recursive symlinks (bug 7022)
840 test_26f() {
841         mkdir -p $DIR/$tdir
842         mkdir $DIR/$tdir/$tfile        || error "mkdir $DIR/$tdir/$tfile failed"
843         cd $DIR/$tdir/$tfile           || error "cd $DIR/$tdir/$tfile failed"
844         mkdir -p lndir/bar1      || error "mkdir lndir/bar1 failed"
845         mkdir $tfile             || error "mkdir $tfile failed"
846         cd $tfile                || error "cd $tfile failed"
847         ln -s .. dotdot          || error "ln dotdot failed"
848         ln -s dotdot/lndir lndir || error "ln lndir failed"
849         cd $DIR/$tdir                 || error "cd $DIR/$tdir failed"
850         output=`ls $tfile/$tfile/lndir/bar1`
851         [ "$output" = bar1 ] && error "unexpected output"
852         rm -r $tfile             || error "rm $tfile failed"
853         $CHECKSTAT -a $DIR/$tfile || error "$tfile not gone"
854 }
855 run_test 26f "rm -r of a directory which has recursive symlink ="
856
857 test_27a() {
858         echo '== stripe sanity =============================================='
859         mkdir -p $DIR/d27 || error "mkdir failed"
860         $GETSTRIPE $DIR/d27
861         $SETSTRIPE $DIR/d27/f0 -c 1 || error "lstripe failed"
862         $CHECKSTAT -t file $DIR/d27/f0 || error "checkstat failed"
863         pass
864         log "== test_27a: write to one stripe file ========================="
865         cp /etc/hosts $DIR/d27/f0 || error
866 }
867 run_test 27a "one stripe file =================================="
868
869 test_27c() {
870         [ "$OSTCOUNT" -lt "2" ] && skip "skipping 2-stripe test" && return
871         mkdir -p $DIR/d27
872         $SETSTRIPE $DIR/d27/f01 -c 2 || error "lstripe failed"
873         [ `$GETSTRIPE $DIR/d27/f01 | grep -A 10 obdidx | wc -l` -eq 4 ] ||
874                 error "two-stripe file doesn't have two stripes"
875         pass
876         log "== test_27c: write to two stripe file file f01 ================"
877         dd if=/dev/zero of=$DIR/d27/f01 bs=4k count=4 || error "dd failed"
878 }
879 run_test 27c "create two stripe file f01 ======================="
880
881 test_27d() {
882         mkdir -p $DIR/d27
883         $SETSTRIPE -c0 -i-1 -s0 $DIR/d27/fdef || error "lstripe failed"
884         $CHECKSTAT -t file $DIR/d27/fdef || error "checkstat failed"
885         dd if=/dev/zero of=$DIR/d27/fdef bs=4k count=4 || error
886 }
887 run_test 27d "create file with default settings ================"
888
889 test_27e() {
890         mkdir -p $DIR/d27
891         $SETSTRIPE $DIR/d27/f12 -c 2 || error "lstripe failed"
892         $SETSTRIPE $DIR/d27/f12 -c 2 && error "lstripe succeeded twice"
893         $CHECKSTAT -t file $DIR/d27/f12 || error "checkstat failed"
894 }
895 run_test 27e "setstripe existing file (should return error) ======"
896
897 test_27f() {
898         mkdir -p $DIR/d27
899         $SETSTRIPE $DIR/d27/fbad -s 100 -i 0 -c 1 && error "lstripe failed"
900         dd if=/dev/zero of=$DIR/d27/f12 bs=4k count=4 || error "dd failed"
901         $GETSTRIPE $DIR/d27/fbad || error "lfs getstripe failed"
902 }
903 run_test 27f "setstripe with bad stripe size (should return error)"
904
905 test_27g() {
906         mkdir -p $DIR/d27
907         $MCREATE $DIR/d27/fnone || error "mcreate failed"
908         pass
909         log "== test 27h: lfs getstripe with no objects ===================="
910         $GETSTRIPE $DIR/d27/fnone 2>&1 | grep "no stripe info" || error "has object"
911         pass
912         log "== test 27i: lfs getstripe with some objects =================="
913         touch $DIR/d27/fsome || error "touch failed"
914         $GETSTRIPE $DIR/d27/fsome | grep obdidx || error "missing objects"
915 }
916 run_test 27g "test lfs getstripe ==========================================="
917
918 test_27j() {
919         mkdir -p $DIR/d27
920         $SETSTRIPE $DIR/d27/f27j -i $OSTCOUNT && error "lstripe failed"||true
921 }
922 run_test 27j "setstripe with bad stripe offset (should return error)"
923
924 test_27k() { # bug 2844
925         mkdir -p $DIR/d27
926         FILE=$DIR/d27/f27k
927         LL_MAX_BLKSIZE=$((4 * 1024 * 1024))
928         [ ! -d $DIR/d27 ] && mkdir -p $DIR/d27
929         $SETSTRIPE $FILE -s 67108864 || error "lstripe failed"
930         BLKSIZE=`stat $FILE | awk '/IO Block:/ { print $7 }'`
931         [ $BLKSIZE -le $LL_MAX_BLKSIZE ] || error "$BLKSIZE > $LL_MAX_BLKSIZE"
932         dd if=/dev/zero of=$FILE bs=4k count=1
933         BLKSIZE=`stat $FILE | awk '/IO Block:/ { print $7 }'`
934         [ $BLKSIZE -le $LL_MAX_BLKSIZE ] || error "$BLKSIZE > $LL_MAX_BLKSIZE"
935 }
936 run_test 27k "limit i_blksize for broken user apps ============="
937
938 test_27l() {
939         mkdir -p $DIR/d27
940         mcreate $DIR/f27l || error "creating file"
941         $RUNAS $SETSTRIPE $DIR/f27l -c 1 && \
942                 error "lstripe should have failed" || true
943 }
944 run_test 27l "check setstripe permissions (should return error)"
945
946 test_27m() {
947         [ "$OSTCOUNT" -lt "2" ] && skip "$OSTCOUNT < 2 OSTs -- skipping" && return
948         if [ $ORIGFREE -gt $MAXFREE ]; then
949                 skip "$ORIGFREE > $MAXFREE skipping out-of-space test on OST0"
950                 return
951         fi
952         mkdir -p $DIR/d27
953         $SETSTRIPE $DIR/d27/f27m_1 -i 0 -c 1
954         dd if=/dev/zero of=$DIR/d27/f27m_1 bs=1024 count=$MAXFREE && \
955                 error "dd should fill OST0"
956         i=2
957         while $SETSTRIPE $DIR/d27/f27m_$i -i 0 -c 1 ; do
958                 i=`expr $i + 1`
959                 [ $i -gt 256 ] && break
960         done
961         i=`expr $i + 1`
962         touch $DIR/d27/f27m_$i
963         [ `$GETSTRIPE $DIR/d27/f27m_$i | grep -A 10 obdidx | awk '{print $1}'| grep -w "0"` ] && \
964                 error "OST0 was full but new created file still use it"
965         i=`expr $i + 1`
966         touch $DIR/d27/f27m_$i
967         [ `$GETSTRIPE $DIR/d27/f27m_$i | grep -A 10 obdidx | awk '{print $1}'| grep -w "0"` ] && \
968                 error "OST0 was full but new created file still use it"
969         rm -r $DIR/d27
970         sleep 15
971 }
972 run_test 27m "create file while OST0 was full =================="
973
974 # osc's keep a NOSPC stick flag that gets unset with rmdir
975 reset_enospc() {
976         local FAIL_LOC=${1:-0}
977         local OSTIDX=${2:-""}
978
979         mkdir -p $DIR/d27/nospc
980         rmdir $DIR/d27/nospc
981         local list=$(comma_list $(osts_nodes))
982         [ "$OSTIDX" ] && list=$(facet_host ost$((OSTIDX + 1)))
983
984         do_nodes $list lctl set_param fail_loc=$FAIL_LOC
985 }
986
987 exhaust_precreations() {
988         local OSTIDX=$1
989         local MDSIDX=$(get_mds_dir "$DIR/d27")
990         echo OSTIDX=$OSTIDX MDSIDX=$MDSIDX
991
992         local OST=$(lfs osts | grep ${OSTIDX}": " | \
993                 awk '{print $2}' | sed -e 's/_UUID$//')
994         local MDT_INDEX=$(lfs df | grep "\[MDT:$((MDSIDX - 1))\]" | awk '{print $1}' | \
995                           sed -e 's/_UUID$//;s/^.*-//')
996
997         # on the mdt's osc
998         local last_id=$(do_facet mds${MDSIDX} lctl get_param -n osc.*${OST}-osc-${MDT_INDEX}.prealloc_last_id)
999         local next_id=$(do_facet mds${MDSIDX} lctl get_param -n osc.*${OST}-osc-${MDT_INDEX}.prealloc_next_id)
1000
1001         echo ${OST}-osc-${MDT_INDEX}.prealloc_last_id=$last_id
1002         echo ${OST}-osc-${MDT_INDEX}.prealloc_next_id=$next_id
1003
1004         mkdir -p $DIR/d27
1005         $SETSTRIPE $DIR/d27 -i $OSTIDX -c 1
1006 #define OBD_FAIL_OST_ENOSPC              0x215
1007         do_facet ost$((OSTIDX + 1)) lctl set_param fail_loc=0x215
1008         echo "Creating to objid $last_id on ost $OST..."
1009         createmany -o $DIR/d27/${OST}-f $next_id $((last_id - next_id + 2))
1010         do_facet mds${MDSIDX} lctl get_param osc.*${OST}-osc-${MDT_INDEX}.prealloc* | grep '[0-9]'
1011         reset_enospc $2 $OSTIDX
1012 }
1013
1014 exhaust_all_precreations() {
1015         local i
1016         for (( i=0; i < OSTCOUNT; i++ )) ; do
1017                 exhaust_precreations $i 0x215
1018         done
1019         reset_enospc $1
1020 }
1021
1022 test_27n() {
1023         [ "$OSTCOUNT" -lt "2" ] && skip "too few OSTs" && return
1024         remote_mds_nodsh && skip "remote MDS with nodsh" && return
1025         remote_ost_nodsh && skip "remote OST with nodsh" && return
1026
1027         reset_enospc
1028         rm -f $DIR/d27/f27n
1029         exhaust_precreations 0 0x80000215
1030         $SETSTRIPE -c -1 $DIR/d27
1031         touch $DIR/d27/f27n || error
1032         $GETSTRIPE $DIR/d27/f27n
1033         reset_enospc
1034 }
1035 run_test 27n "create file with some full OSTs =================="
1036
1037 test_27o() {
1038         [ "$OSTCOUNT" -lt "2" ] && skip "too few OSTs" && return
1039         remote_mds_nodsh && skip "remote MDS with nodsh" && return
1040         remote_ost_nodsh && skip "remote OST with nodsh" && return
1041
1042         reset_enospc
1043         rm -f $DIR/d27/f27o
1044         exhaust_all_precreations 0x215
1045         sleep 5
1046
1047         touch $DIR/d27/f27o && error "able to create $DIR/d27/f27o"
1048
1049         reset_enospc
1050         rm -rf $DIR/d27/*
1051 }
1052 run_test 27o "create file with all full OSTs (should error) ===="
1053
1054 test_27p() {
1055         [ "$OSTCOUNT" -lt "2" ] && skip "too few OSTs" && return
1056         remote_mds_nodsh && skip "remote MDS with nodsh" && return
1057         remote_ost_nodsh && skip "remote OST with nodsh" && return
1058
1059         reset_enospc
1060         rm -f $DIR/d27/f27p
1061
1062         $MCREATE $DIR/d27/f27p || error "mcreate failed"
1063         $TRUNCATE $DIR/d27/f27p 80000000 || error "truncate failed"
1064         $CHECKSTAT -s 80000000 $DIR/d27/f27p || error "checkstat failed"
1065
1066         exhaust_precreations 0 0x80000215
1067         echo foo >> $DIR/d27/f27p || error "append failed"
1068         $CHECKSTAT -s 80000004 $DIR/d27/f27p || error "checkstat failed"
1069
1070         reset_enospc
1071 }
1072 run_test 27p "append to a truncated file with some full OSTs ==="
1073
1074 test_27q() {
1075         [ "$OSTCOUNT" -lt "2" ] && skip "too few OSTs" && return
1076         remote_mds_nodsh && skip "remote MDS with nodsh" && return
1077         remote_ost_nodsh && skip "remote OST with nodsh" && return
1078
1079         reset_enospc
1080         rm -f $DIR/d27/f27q
1081
1082         $MCREATE $DIR/d27/f27q || error "mcreate $DIR/d27/f27q failed"
1083         $TRUNCATE $DIR/d27/f27q 80000000 ||error "truncate $DIR/d27/f27q failed"
1084         $CHECKSTAT -s 80000000 $DIR/d27/f27q || error "checkstat failed"
1085
1086         exhaust_all_precreations 0x215
1087
1088         echo foo >> $DIR/d27/f27q && error "append succeeded"
1089         $CHECKSTAT -s 80000000 $DIR/d27/f27q || error "checkstat 2 failed"
1090
1091         reset_enospc
1092 }
1093 run_test 27q "append to truncated file with all OSTs full (should error) ==="
1094
1095 test_27r() {
1096         [ "$OSTCOUNT" -lt "2" ] && skip "too few OSTs" && return
1097         remote_mds_nodsh && skip "remote MDS with nodsh" && return
1098         remote_ost_nodsh && skip "remote OST with nodsh" && return
1099
1100         reset_enospc
1101         rm -f $DIR/d27/f27r
1102         exhaust_precreations 0 0x80000215
1103
1104         $SETSTRIPE $DIR/d27/f27r -i 0 -c 2 # && error
1105
1106         reset_enospc
1107 }
1108 run_test 27r "stripe file with some full OSTs (shouldn't LBUG) ="
1109
1110 test_27s() { # bug 10725
1111         mkdir -p $DIR/$tdir
1112         local stripe_size=$((4096 * 1024 * 1024))       # 2^32
1113         local stripe_count=0
1114         [ $OSTCOUNT -eq 1 ] || stripe_count=2
1115         $SETSTRIPE $DIR/$tdir -s $stripe_size -c $stripe_count && \
1116                 error "stripe width >= 2^32 succeeded" || true
1117
1118 }
1119 run_test 27s "lsm_xfersize overflow (should error) (bug 10725)"
1120
1121 test_27t() { # bug 10864
1122         WDIR=`pwd`
1123         WLFS=`which lfs`
1124         cd $DIR
1125         touch $tfile
1126         $WLFS getstripe $tfile
1127         cd $WDIR
1128 }
1129 run_test 27t "check that utils parse path correctly"
1130
1131 test_27u() { # bug 4900
1132         [ "$OSTCOUNT" -lt "2" ] && skip "too few OSTs" && return
1133         remote_mds_nodsh && skip "remote MDS with nodsh" && return
1134
1135 #define OBD_FAIL_MDS_OSC_PRECREATE      0x139
1136         do_facet $SINGLEMDS lctl set_param fail_loc=0x139
1137         mkdir -p $DIR/d27u
1138         createmany -o $DIR/d27u/t- 1000
1139         do_facet $SINGLEMDS lctl set_param fail_loc=0
1140
1141         TLOG=$DIR/$tfile.getstripe
1142         $GETSTRIPE $DIR/d27u > $TLOG
1143         OBJS=`awk -vobj=0 '($1 == 0) { obj += 1 } END { print obj;}' $TLOG`
1144         unlinkmany $DIR/d27u/t- 1000
1145         [ $OBJS -gt 0 ] && \
1146                 error "$OBJS objects created on OST-0.  See $TLOG" || pass
1147 }
1148 run_test 27u "skip object creation on OSC w/o objects =========="
1149
1150 test_27v() { # bug 4900
1151         [ "$OSTCOUNT" -lt "2" ] && skip "too few OSTs" && return
1152         remote_mds_nodsh && skip "remote MDS with nodsh" && return
1153         remote_ost_nodsh && skip "remote OST with nodsh" && return
1154
1155         exhaust_all_precreations
1156
1157         mkdir -p $DIR/$tdir
1158         $SETSTRIPE $DIR/$tdir -c 1         # 1 stripe / file
1159
1160         touch $DIR/$tdir/$tfile
1161         #define OBD_FAIL_TGT_DELAY_PRECREATE     0x705
1162         # all except ost1
1163         for (( i=0; i < OSTCOUNT; i++ )) ; do
1164                 do_facet ost$i lctl set_param fail_loc=0x705
1165         done
1166         local START=`date +%s`
1167         createmany -o $DIR/$tdir/$tfile 32
1168
1169         reset_enospc
1170
1171         local FINISH=`date +%s`
1172         local TIMEOUT=`lctl get_param -n timeout`
1173         [ $((FINISH - START)) -ge $((TIMEOUT / 2)) ] && \
1174                error "$FINISH - $START >= $TIMEOUT / 2"
1175
1176         reset_enospc
1177 }
1178 run_test 27v "skip object creation on slow OST ================="
1179
1180 test_27w() { # bug 10997
1181         mkdir -p $DIR/d27w || error "mkdir failed"
1182         $LSTRIPE $DIR/d27w/f0 -s 65536 || error "lstripe failed"
1183         size=`$LSTRIPEINFO $DIR/d27w/f0 | awk {'print $1'}`
1184         [ $size -ne 65536 ] && error "stripe size $size != 65536" || true
1185
1186         [ "$OSTCOUNT" -lt "2" ] && skip "skipping multiple stripe count/offset test" && return
1187         for i in `seq 1 $OSTCOUNT`; do
1188                 offset=$(($i-1))
1189                 $LSTRIPE $DIR/d27w/f$i -c $i -i $offset || error "lstripe -c $i -i $offset failed"
1190                 count=`$LSTRIPEINFO $DIR/d27w/f$i | awk {'print $2'}`
1191                 index=`$LSTRIPEINFO $DIR/d27w/f$i | awk {'print $3'}`
1192                 [ $count -ne $i ] && error "stripe count $count != $i" || true
1193                 [ $index -ne $offset ] && error "stripe offset $index != $offset" || true
1194         done
1195 }
1196 run_test 27w "check lfs setstripe -c -s -i options ============="
1197
1198 # createtest also checks that device nodes are created and
1199 # then visible correctly (#2091)
1200 test_28() { # bug 2091
1201         mkdir $DIR/d28
1202         $CREATETEST $DIR/d28/ct || error
1203 }
1204 run_test 28 "create/mknod/mkdir with bad file types ============"
1205
1206 test_29() {
1207         cancel_lru_locks mdc
1208         mkdir $DIR/d29
1209         touch $DIR/d29/foo
1210         log 'first d29'
1211         ls -l $DIR/d29
1212
1213         declare -i LOCKCOUNTORIG=0
1214         for lock_count in $(lctl get_param -n ldlm.namespaces.*mdc*.lock_count); do
1215                 let LOCKCOUNTORIG=$LOCKCOUNTORIG+$lock_count
1216         done
1217         [ $LOCKCOUNTORIG -eq 0 ] && echo "No mdc lock count" && return 1
1218
1219         declare -i LOCKUNUSEDCOUNTORIG=0
1220         for unused_count in $(lctl get_param -n ldlm.namespaces.*mdc*.lock_unused_count); do
1221                 let LOCKUNUSEDCOUNTORIG=$LOCKUNUSEDCOUNTORIG+$unused_count
1222         done
1223
1224         log 'second d29'
1225         ls -l $DIR/d29
1226         log 'done'
1227
1228         declare -i LOCKCOUNTCURRENT=0
1229         for lock_count in $(lctl get_param -n ldlm.namespaces.*mdc*.lock_count); do
1230                 let LOCKCOUNTCURRENT=$LOCKCOUNTCURRENT+$lock_count
1231         done
1232
1233         declare -i LOCKUNUSEDCOUNTCURRENT=0
1234         for unused_count in $(lctl get_param -n ldlm.namespaces.*mdc*.lock_unused_count); do
1235                 let LOCKUNUSEDCOUNTCURRENT=$LOCKUNUSEDCOUNTCURRENT+$unused_count
1236         done
1237
1238         if [ "$LOCKCOUNTCURRENT" -gt "$LOCKCOUNTORIG" ]; then
1239                 lctl set_param -n ldlm.dump_namespaces ""
1240                 error "CURRENT: $LOCKCOUNTCURRENT > $LOCKCOUNTORIG"
1241                 $LCTL dk | sort -k4 -t: > $TMP/test_29.dk
1242                 log "dumped log to $TMP/test_29.dk (bug 5793)"
1243                 return 2
1244         fi
1245         if [ "$LOCKUNUSEDCOUNTCURRENT" -gt "$LOCKUNUSEDCOUNTORIG" ]; then
1246                 error "UNUSED: $LOCKUNUSEDCOUNTCURRENT > $LOCKUNUSEDCOUNTORIG"
1247                 $LCTL dk | sort -k4 -t: > $TMP/test_29.dk
1248                 log "dumped log to $TMP/test_29.dk (bug 5793)"
1249                 return 3
1250         fi
1251 }
1252 run_test 29 "IT_GETATTR regression  ============================"
1253
1254 test_30() {
1255         cp `which ls` $DIR || cp /bin/ls $DIR
1256         $DIR/ls /
1257         rm $DIR/ls
1258 }
1259 run_test 30 "run binary from Lustre (execve) ==================="
1260
1261 test_31a() {
1262         $OPENUNLINK $DIR/f31 $DIR/f31 || error
1263         $CHECKSTAT -a $DIR/f31 || error
1264 }
1265 run_test 31a "open-unlink file =================================="
1266
1267 test_31b() {
1268         touch $DIR/f31 || error
1269         ln $DIR/f31 $DIR/f31b || error
1270         multiop $DIR/f31b Ouc || error
1271         $CHECKSTAT -t file $DIR/f31 || error
1272 }
1273 run_test 31b "unlink file with multiple links while open ======="
1274
1275 test_31c() {
1276         touch $DIR/f31 || error
1277         ln $DIR/f31 $DIR/f31c || error
1278         multiop_bg_pause $DIR/f31 O_uc || return 1
1279         MULTIPID=$!
1280         multiop $DIR/f31c Ouc
1281         kill -USR1 $MULTIPID
1282         wait $MULTIPID
1283 }
1284 run_test 31c "open-unlink file with multiple links ============="
1285
1286 test_31d() {
1287         opendirunlink $DIR/d31d $DIR/d31d || error
1288         $CHECKSTAT -a $DIR/d31d || error
1289 }
1290 run_test 31d "remove of open directory ========================="
1291
1292 test_31e() { # bug 2904
1293         check_kernel_version 34 || return 0
1294         openfilleddirunlink $DIR/d31e || error
1295 }
1296 run_test 31e "remove of open non-empty directory ==============="
1297
1298 test_31f() { # bug 4554
1299         set -vx
1300         mkdir $DIR/d31f
1301         $SETSTRIPE $DIR/d31f -s 1048576 -c 1
1302         cp /etc/hosts $DIR/d31f
1303         ls -l $DIR/d31f
1304         $GETSTRIPE $DIR/d31f/hosts
1305         multiop_bg_pause $DIR/d31f D_c || return 1
1306         MULTIPID=$!
1307
1308         rm -rv $DIR/d31f || error "first of $DIR/d31f"
1309         mkdir $DIR/d31f
1310         $SETSTRIPE $DIR/d31f -s 1048576 -c 1
1311         cp /etc/hosts $DIR/d31f
1312         ls -l $DIR/d31f
1313         $DIR/d31f/hosts
1314         multiop_bg_pause $DIR/d31f D_c || return 1
1315         MULTIPID2=$!
1316
1317         kill -USR1 $MULTIPID || error "first opendir $MULTIPID not running"
1318         wait $MULTIPID || error "first opendir $MULTIPID failed"
1319
1320         sleep 6
1321
1322         kill -USR1 $MULTIPID2 || error "second opendir $MULTIPID not running"
1323         wait $MULTIPID2 || error "second opendir $MULTIPID2 failed"
1324         set +vx
1325 }
1326 run_test 31f "remove of open directory with open-unlink file ==="
1327
1328 test_31g() {
1329         echo "-- cross directory link --"
1330         mkdir $DIR/d31g{a,b}
1331         touch $DIR/d31ga/f
1332         ln $DIR/d31ga/f $DIR/d31gb/g
1333         $CHECKSTAT -t file $DIR/d31ga/f || error "source"
1334         [ `stat -c%h $DIR/d31ga/f` == '2' ] || error "source nlink"
1335         $CHECKSTAT -t file $DIR/d31gb/g || error "target"
1336         [ `stat -c%h $DIR/d31gb/g` == '2' ] || error "target nlink"
1337 }
1338 run_test 31g "cross directory link==============="
1339
1340 test_31h() {
1341         echo "-- cross directory link --"
1342         mkdir $DIR/d31h
1343         mkdir $DIR/d31h/dir
1344         touch $DIR/d31h/f
1345         ln $DIR/d31h/f $DIR/d31h/dir/g
1346         $CHECKSTAT -t file $DIR/d31h/f || error "source"
1347         [ `stat -c%h $DIR/d31h/f` == '2' ] || error "source nlink"
1348         $CHECKSTAT -t file $DIR/d31h/dir/g || error "target"
1349         [ `stat -c%h $DIR/d31h/dir/g` == '2' ] || error "target nlink"
1350 }
1351 run_test 31h "cross directory link under child==============="
1352
1353 test_31i() {
1354         echo "-- cross directory link --"
1355         mkdir $DIR/d31i
1356         mkdir $DIR/d31i/dir
1357         touch $DIR/d31i/dir/f
1358         ln $DIR/d31i/dir/f $DIR/d31i/g
1359         $CHECKSTAT -t file $DIR/d31i/dir/f || error "source"
1360         [ `stat -c%h $DIR/d31i/dir/f` == '2' ] || error "source nlink"
1361         $CHECKSTAT -t file $DIR/d31i/g || error "target"
1362         [ `stat -c%h $DIR/d31i/g` == '2' ] || error "target nlink"
1363 }
1364 run_test 31i "cross directory link under parent==============="
1365
1366
1367 test_31j() {
1368         mkdir $DIR/d31j
1369         mkdir $DIR/d31j/dir1
1370         ln $DIR/d31j/dir1 $DIR/d31j/dir2 && error "ln for dir"
1371         link $DIR/d31j/dir1 $DIR/d31j/dir3 && error "link for dir"
1372         mlink $DIR/d31j/dir1 $DIR/d31j/dir4 && error "mlink for dir"
1373         mlink $DIR/d31j/dir1 $DIR/d31j/dir1 && error "mlink to the same dir"
1374         return 0
1375 }
1376 run_test 31j "link for directory==============="
1377
1378
1379 test_31k() {
1380         mkdir $DIR/d31k
1381         touch $DIR/d31k/s
1382         touch $DIR/d31k/exist
1383         mlink $DIR/d31k/s $DIR/d31k/t || error "mlink"
1384         mlink $DIR/d31k/s $DIR/d31k/exist && error "mlink to exist file"
1385         mlink $DIR/d31k/s $DIR/d31k/s && error "mlink to the same file"
1386         mlink $DIR/d31k/s $DIR/d31k && error "mlink to parent dir"
1387         mlink $DIR/d31k $DIR/d31k/s && error "mlink parent dir to target"
1388         mlink $DIR/d31k/not-exist $DIR/d31k/foo && error "mlink non-existing to new"
1389         mlink $DIR/d31k/not-exist $DIR/d31k/s && error "mlink non-existing to exist"
1390         return 0
1391 }
1392 run_test 31k "link to file: the same, non-existing, dir==============="
1393
1394 test_31m() {
1395         mkdir $DIR/d31m
1396         touch $DIR/d31m/s
1397         mkdir $DIR/d31m2
1398         touch $DIR/d31m2/exist
1399         mlink $DIR/d31m/s $DIR/d31m2/t || error "mlink"
1400         mlink $DIR/d31m/s $DIR/d31m2/exist && error "mlink to exist file"
1401         mlink $DIR/d31m/s $DIR/d31m2 && error "mlink to parent dir"
1402         mlink $DIR/d31m2 $DIR/d31m/s && error "mlink parent dir to target"
1403         mlink $DIR/d31m/not-exist $DIR/d31m2/foo && error "mlink non-existing to new"
1404         mlink $DIR/d31m/not-exist $DIR/d31m2/s && error "mlink non-existing to exist"
1405         return 0
1406 }
1407 run_test 31m "link to file: the same, non-existing, dir==============="
1408
1409 test_32a() {
1410         echo "== more mountpoints and symlinks ================="
1411         [ -e $DIR/d32a ] && rm -fr $DIR/d32a
1412         mkdir -p $DIR/d32a/ext2-mountpoint
1413         mount -t ext2 -o loop $EXT2_DEV $DIR/d32a/ext2-mountpoint || error
1414         $CHECKSTAT -t dir $DIR/d32a/ext2-mountpoint/.. || error
1415         $UMOUNT $DIR/d32a/ext2-mountpoint || error
1416 }
1417 run_test 32a "stat d32a/ext2-mountpoint/.. ====================="
1418
1419 test_32b() {
1420         [ -e $DIR/d32b ] && rm -fr $DIR/d32b
1421         mkdir -p $DIR/d32b/ext2-mountpoint
1422         mount -t ext2 -o loop $EXT2_DEV $DIR/d32b/ext2-mountpoint || error
1423         ls -al $DIR/d32b/ext2-mountpoint/.. || error
1424         $UMOUNT $DIR/d32b/ext2-mountpoint || error
1425 }
1426 run_test 32b "open d32b/ext2-mountpoint/.. ====================="
1427
1428 test_32c() {
1429         [ -e $DIR/d32c ] && rm -fr $DIR/d32c
1430         mkdir -p $DIR/d32c/ext2-mountpoint
1431         mount -t ext2 -o loop $EXT2_DEV $DIR/d32c/ext2-mountpoint || error
1432         mkdir -p $DIR/d32c/d2/test_dir
1433         $CHECKSTAT -t dir $DIR/d32c/ext2-mountpoint/../d2/test_dir || error
1434         $UMOUNT $DIR/d32c/ext2-mountpoint || error
1435 }
1436 run_test 32c "stat d32c/ext2-mountpoint/../d2/test_dir ========="
1437
1438 test_32d() {
1439         [ -e $DIR/d32d ] && rm -fr $DIR/d32d
1440         mkdir -p $DIR/d32d/ext2-mountpoint
1441         mount -t ext2 -o loop $EXT2_DEV $DIR/d32d/ext2-mountpoint || error
1442         mkdir -p $DIR/d32d/d2/test_dir
1443         ls -al $DIR/d32d/ext2-mountpoint/../d2/test_dir || error
1444         $UMOUNT $DIR/d32d/ext2-mountpoint || error
1445 }
1446 run_test 32d "open d32d/ext2-mountpoint/../d2/test_dir ========="
1447
1448 test_32e() {
1449         [ -e $DIR/d32e ] && rm -fr $DIR/d32e
1450         mkdir -p $DIR/d32e/tmp
1451         TMP_DIR=$DIR/d32e/tmp
1452         ln -s $DIR/d32e $TMP_DIR/symlink11
1453         ln -s $TMP_DIR/symlink11 $TMP_DIR/../symlink01
1454         $CHECKSTAT -t link $DIR/d32e/tmp/symlink11 || error
1455         $CHECKSTAT -t link $DIR/d32e/symlink01 || error
1456 }
1457 run_test 32e "stat d32e/symlink->tmp/symlink->lustre-subdir ===="
1458
1459 test_32f() {
1460         [ -e $DIR/d32f ] && rm -fr $DIR/d32f
1461         mkdir -p $DIR/d32f/tmp
1462         TMP_DIR=$DIR/d32f/tmp
1463         ln -s $DIR/d32f $TMP_DIR/symlink11
1464         ln -s $TMP_DIR/symlink11 $TMP_DIR/../symlink01
1465         ls $DIR/d32f/tmp/symlink11  || error
1466         ls $DIR/d32f/symlink01 || error
1467 }
1468 run_test 32f "open d32f/symlink->tmp/symlink->lustre-subdir ===="
1469
1470 test_32g() {
1471         TMP_DIR=$DIR/$tdir/tmp
1472         mkdir -p $TMP_DIR $DIR/${tdir}2
1473         ln -s $DIR/${tdir}2 $TMP_DIR/symlink12
1474         ln -s $TMP_DIR/symlink12 $TMP_DIR/../symlink02
1475         $CHECKSTAT -t link $TMP_DIR/symlink12 || error
1476         $CHECKSTAT -t link $DIR/$tdir/symlink02 || error
1477         $CHECKSTAT -t dir -f $TMP_DIR/symlink12 || error
1478         $CHECKSTAT -t dir -f $DIR/$tdir/symlink02 || error
1479 }
1480 run_test 32g "stat d32g/symlink->tmp/symlink->lustre-subdir/${tdir}2"
1481
1482 test_32h() {
1483         rm -fr $DIR/$tdir $DIR/${tdir}2
1484         TMP_DIR=$DIR/$tdir/tmp
1485         mkdir -p $TMP_DIR $DIR/${tdir}2
1486         ln -s $DIR/${tdir}2 $TMP_DIR/symlink12
1487         ln -s $TMP_DIR/symlink12 $TMP_DIR/../symlink02
1488         ls $TMP_DIR/symlink12 || error
1489         ls $DIR/$tdir/symlink02  || error
1490 }
1491 run_test 32h "open d32h/symlink->tmp/symlink->lustre-subdir/${tdir}2"
1492
1493 test_32i() {
1494         [ -e $DIR/d32i ] && rm -fr $DIR/d32i
1495         mkdir -p $DIR/d32i/ext2-mountpoint
1496         mount -t ext2 -o loop $EXT2_DEV $DIR/d32i/ext2-mountpoint || error
1497         touch $DIR/d32i/test_file
1498         $CHECKSTAT -t file $DIR/d32i/ext2-mountpoint/../test_file || error
1499         $UMOUNT $DIR/d32i/ext2-mountpoint || error
1500 }
1501 run_test 32i "stat d32i/ext2-mountpoint/../test_file ==========="
1502
1503 test_32j() {
1504         [ -e $DIR/d32j ] && rm -fr $DIR/d32j
1505         mkdir -p $DIR/d32j/ext2-mountpoint
1506         mount -t ext2 -o loop $EXT2_DEV $DIR/d32j/ext2-mountpoint || error
1507         touch $DIR/d32j/test_file
1508         cat $DIR/d32j/ext2-mountpoint/../test_file || error
1509         $UMOUNT $DIR/d32j/ext2-mountpoint || error
1510 }
1511 run_test 32j "open d32j/ext2-mountpoint/../test_file ==========="
1512
1513 test_32k() {
1514         rm -fr $DIR/d32k
1515         mkdir -p $DIR/d32k/ext2-mountpoint
1516         mount -t ext2 -o loop $EXT2_DEV $DIR/d32k/ext2-mountpoint
1517         mkdir -p $DIR/d32k/d2
1518         touch $DIR/d32k/d2/test_file || error
1519         $CHECKSTAT -t file $DIR/d32k/ext2-mountpoint/../d2/test_file || error
1520         $UMOUNT $DIR/d32k/ext2-mountpoint || error
1521 }
1522 run_test 32k "stat d32k/ext2-mountpoint/../d2/test_file ========"
1523
1524 test_32l() {
1525         rm -fr $DIR/d32l
1526         mkdir -p $DIR/d32l/ext2-mountpoint
1527         mount -t ext2 -o loop $EXT2_DEV $DIR/d32l/ext2-mountpoint || error
1528         mkdir -p $DIR/d32l/d2
1529         touch $DIR/d32l/d2/test_file
1530         cat  $DIR/d32l/ext2-mountpoint/../d2/test_file || error
1531         $UMOUNT $DIR/d32l/ext2-mountpoint || error
1532 }
1533 run_test 32l "open d32l/ext2-mountpoint/../d2/test_file ========"
1534
1535 test_32m() {
1536         rm -fr $DIR/d32m
1537         mkdir -p $DIR/d32m/tmp
1538         TMP_DIR=$DIR/d32m/tmp
1539         ln -s $DIR $TMP_DIR/symlink11
1540         ln -s $TMP_DIR/symlink11 $TMP_DIR/../symlink01
1541         $CHECKSTAT -t link $DIR/d32m/tmp/symlink11 || error
1542         $CHECKSTAT -t link $DIR/d32m/symlink01 || error
1543 }
1544 run_test 32m "stat d32m/symlink->tmp/symlink->lustre-root ======"
1545
1546 test_32n() {
1547         rm -fr $DIR/d32n
1548         mkdir -p $DIR/d32n/tmp
1549         TMP_DIR=$DIR/d32n/tmp
1550         ln -s $DIR $TMP_DIR/symlink11
1551         ln -s $TMP_DIR/symlink11 $TMP_DIR/../symlink01
1552         ls -l $DIR/d32n/tmp/symlink11  || error
1553         ls -l $DIR/d32n/symlink01 || error
1554 }
1555 run_test 32n "open d32n/symlink->tmp/symlink->lustre-root ======"
1556
1557 test_32o() {
1558         rm -fr $DIR/d32o $DIR/$tfile
1559         touch $DIR/$tfile
1560         mkdir -p $DIR/d32o/tmp
1561         TMP_DIR=$DIR/d32o/tmp
1562         ln -s $DIR/$tfile $TMP_DIR/symlink12
1563         ln -s $TMP_DIR/symlink12 $TMP_DIR/../symlink02
1564         $CHECKSTAT -t link $DIR/d32o/tmp/symlink12 || error
1565         $CHECKSTAT -t link $DIR/d32o/symlink02 || error
1566         $CHECKSTAT -t file -f $DIR/d32o/tmp/symlink12 || error
1567         $CHECKSTAT -t file -f $DIR/d32o/symlink02 || error
1568 }
1569 run_test 32o "stat d32o/symlink->tmp/symlink->lustre-root/$tfile"
1570
1571 test_32p() {
1572     log 32p_1
1573         rm -fr $DIR/d32p
1574     log 32p_2
1575         rm -f $DIR/$tfile
1576     log 32p_3
1577         touch $DIR/$tfile
1578     log 32p_4
1579         mkdir -p $DIR/d32p/tmp
1580     log 32p_5
1581         TMP_DIR=$DIR/d32p/tmp
1582     log 32p_6
1583         ln -s $DIR/$tfile $TMP_DIR/symlink12
1584     log 32p_7
1585         ln -s $TMP_DIR/symlink12 $TMP_DIR/../symlink02
1586     log 32p_8
1587         cat $DIR/d32p/tmp/symlink12 || error
1588     log 32p_9
1589         cat $DIR/d32p/symlink02 || error
1590     log 32p_10
1591 }
1592 run_test 32p "open d32p/symlink->tmp/symlink->lustre-root/$tfile"
1593
1594 test_32q() {
1595         [ -e $DIR/d32q ] && rm -fr $DIR/d32q
1596         mkdir -p $DIR/d32q
1597         touch $DIR/d32q/under_the_mount
1598         mount -t ext2 -o loop $EXT2_DEV $DIR/d32q
1599         ls $DIR/d32q/under_the_mount && error || true
1600         $UMOUNT $DIR/d32q || error
1601 }
1602 run_test 32q "stat follows mountpoints in Lustre (should return error)"
1603
1604 test_32r() {
1605         [ -e $DIR/d32r ] && rm -fr $DIR/d32r
1606         mkdir -p $DIR/d32r
1607         touch $DIR/d32r/under_the_mount
1608         mount -t ext2 -o loop $EXT2_DEV $DIR/d32r
1609         ls $DIR/d32r | grep -q under_the_mount && error || true
1610         $UMOUNT $DIR/d32r || error
1611 }
1612 run_test 32r "opendir follows mountpoints in Lustre (should return error)"
1613
1614 test_33() {
1615         rm -f $DIR/$tfile
1616         touch $DIR/$tfile
1617         chmod 444 $DIR/$tfile
1618         chown $RUNAS_ID $DIR/$tfile
1619         log 33_1
1620         $RUNAS $OPENFILE -f O_RDWR $DIR/$tfile && error || true
1621         log 33_2
1622 }
1623 run_test 33 "write file with mode 444 (should return error) ===="
1624
1625 test_33a() {
1626         rm -fr $DIR/d33
1627         mkdir -p $DIR/d33
1628         chown $RUNAS_ID $DIR/d33
1629         $RUNAS $OPENFILE -f O_RDWR:O_CREAT -m 0444 $DIR/d33/f33|| error "create"
1630         $RUNAS $OPENFILE -f O_RDWR:O_CREAT -m 0444 $DIR/d33/f33 && \
1631                 error "open RDWR" || true
1632 }
1633 run_test 33a "test open file(mode=0444) with O_RDWR (should return error)"
1634
1635 test_33b() {
1636         rm -fr $DIR/d33
1637         mkdir -p $DIR/d33
1638         chown $RUNAS_ID $DIR/d33
1639         $RUNAS $OPENFILE -f 1286739555 $DIR/d33/f33 && error "create" || true
1640 }
1641 run_test 33b "test open file with malformed flags (No panic and return error)"
1642
1643 TEST_34_SIZE=${TEST_34_SIZE:-2000000000000}
1644 test_34a() {
1645         rm -f $DIR/f34
1646         $MCREATE $DIR/f34 || error
1647         $GETSTRIPE $DIR/f34 2>&1 | grep -q "no stripe info" || error
1648         $TRUNCATE $DIR/f34 $TEST_34_SIZE || error
1649         $GETSTRIPE $DIR/f34 2>&1 | grep -q "no stripe info" || error
1650         $CHECKSTAT -s $TEST_34_SIZE $DIR/f34 || error
1651 }
1652 run_test 34a "truncate file that has not been opened ==========="
1653
1654 test_34b() {
1655         [ ! -f $DIR/f34 ] && test_34a
1656         $CHECKSTAT -s $TEST_34_SIZE $DIR/f34 || error
1657         $OPENFILE -f O_RDONLY $DIR/f34
1658         $GETSTRIPE $DIR/f34 2>&1 | grep -q "no stripe info" || error
1659         $CHECKSTAT -s $TEST_34_SIZE $DIR/f34 || error
1660 }
1661 run_test 34b "O_RDONLY opening file doesn't create objects ====="
1662
1663 test_34c() {
1664         [ ! -f $DIR/f34 ] && test_34a
1665         $CHECKSTAT -s $TEST_34_SIZE $DIR/f34 || error
1666         $OPENFILE -f O_RDWR $DIR/f34
1667         $GETSTRIPE $DIR/f34 2>&1 | grep -q "no stripe info" && error
1668         $CHECKSTAT -s $TEST_34_SIZE $DIR/f34 || error
1669 }
1670 run_test 34c "O_RDWR opening file-with-size works =============="
1671
1672 test_34d() {
1673         [ ! -f $DIR/f34 ] && test_34a
1674         dd if=/dev/zero of=$DIR/f34 conv=notrunc bs=4k count=1 || error
1675         $CHECKSTAT -s $TEST_34_SIZE $DIR/f34 || error
1676         rm $DIR/f34
1677 }
1678 run_test 34d "write to sparse file ============================="
1679
1680 test_34e() {
1681         rm -f $DIR/f34e
1682         $MCREATE $DIR/f34e || error
1683         $TRUNCATE $DIR/f34e 1000 || error
1684         $CHECKSTAT -s 1000 $DIR/f34e || error
1685         $OPENFILE -f O_RDWR $DIR/f34e
1686         $CHECKSTAT -s 1000 $DIR/f34e || error
1687 }
1688 run_test 34e "create objects, some with size and some without =="
1689
1690 test_34f() { # bug 6242, 6243
1691         SIZE34F=48000
1692         rm -f $DIR/f34f
1693         $MCREATE $DIR/f34f || error
1694         $TRUNCATE $DIR/f34f $SIZE34F || error "truncating $DIR/f3f to $SIZE34F"
1695         dd if=$DIR/f34f of=$TMP/f34f
1696         $CHECKSTAT -s $SIZE34F $TMP/f34f || error "$TMP/f34f not $SIZE34F bytes"
1697         dd if=/dev/zero of=$TMP/f34fzero bs=$SIZE34F count=1
1698         cmp $DIR/f34f $TMP/f34fzero || error "$DIR/f34f not all zero"
1699         cmp $TMP/f34f $TMP/f34fzero || error "$TMP/f34f not all zero"
1700         rm $TMP/f34f $TMP/f34fzero $DIR/f34f
1701 }
1702 run_test 34f "read from a file with no objects until EOF ======="
1703
1704 test_35a() {
1705         cp /bin/sh $DIR/f35a
1706         chmod 444 $DIR/f35a
1707         chown $RUNAS_ID $DIR/f35a
1708         $RUNAS $DIR/f35a && error || true
1709         rm $DIR/f35a
1710 }
1711 run_test 35a "exec file with mode 444 (should return and not leak) ====="
1712
1713 test_36a() {
1714         rm -f $DIR/f36
1715         utime $DIR/f36 || error
1716 }
1717 run_test 36a "MDS utime check (mknod, utime) ==================="
1718
1719 test_36b() {
1720         echo "" > $DIR/f36
1721         utime $DIR/f36 || error
1722 }
1723 run_test 36b "OST utime check (open, utime) ===================="
1724
1725 test_36c() {
1726         rm -f $DIR/d36/f36
1727         mkdir $DIR/d36
1728         chown $RUNAS_ID $DIR/d36
1729         $RUNAS utime $DIR/d36/f36 || error
1730 }
1731 run_test 36c "non-root MDS utime check (mknod, utime) =========="
1732
1733 test_36d() {
1734         [ ! -d $DIR/d36 ] && test_36c
1735         echo "" > $DIR/d36/f36
1736         $RUNAS utime $DIR/d36/f36 || error
1737 }
1738 run_test 36d "non-root OST utime check (open, utime) ==========="
1739
1740 test_36e() {
1741         [ $RUNAS_ID -eq $UID ] && skip "RUNAS_ID = UID = $UID -- skipping" && return
1742         mkdir -p $DIR/$tdir
1743         touch $DIR/$tdir/$tfile
1744         $RUNAS utime $DIR/$tdir/$tfile && \
1745                 error "utime worked, expected failure" || true
1746 }
1747 run_test 36e "utime on non-owned file (should return error) ===="
1748
1749 test_36f() {
1750         export LANG=C LC_LANG=C # for date language
1751
1752         DATESTR="Dec 20  2000"
1753         mkdir -p $DIR/$tdir
1754         #define OBD_FAIL_OST_BRW_PAUSE_BULK 0x214
1755         lctl set_param fail_loc=0x80000214
1756         date; date +%s
1757         cp /etc/hosts $DIR/$tdir/$tfile
1758         sync & # write RPC generated with "current" inode timestamp, but delayed
1759         sleep 1
1760         touch --date="$DATESTR" $DIR/$tdir/$tfile # setattr timestamp in past
1761         LS_BEFORE="`ls -l $DIR/$tdir/$tfile`" # old timestamp from client cache
1762         cancel_lru_locks osc
1763         LS_AFTER="`ls -l $DIR/$tdir/$tfile`"  # timestamp from OST object
1764         date; date +%s
1765         [ "$LS_BEFORE" != "$LS_AFTER" ] && \
1766                 echo "BEFORE: $LS_BEFORE" && \
1767                 echo "AFTER : $LS_AFTER" && \
1768                 echo "WANT  : $DATESTR" && \
1769                 error "$DIR/$tdir/$tfile timestamps changed" || true
1770 }
1771 run_test 36f "utime on file racing with OST BRW write =========="
1772
1773 test_36g() {
1774         remote_ost_nodsh && skip "remote OST with nodsh" && return
1775
1776         mkdir -p $DIR/$tdir
1777         export FMD_MAX_AGE=`do_facet ost1 lctl get_param -n obdfilter.*.client_cache_seconds 2> /dev/null | head -n 1`
1778         FMD_BEFORE="`awk '/ll_fmd_cache/ { print $2 }' /proc/slabinfo`"
1779         touch $DIR/$tdir/$tfile
1780         sleep $((FMD_MAX_AGE + 12))
1781         FMD_AFTER="`awk '/ll_fmd_cache/ { print $2 }' /proc/slabinfo`"
1782         [ "$FMD_AFTER" -gt "$FMD_BEFORE" ] && \
1783                 echo "AFTER : $FMD_AFTER > BEFORE $FMD_BEFORE" && \
1784                 error "fmd didn't expire after ping" || true
1785 }
1786 run_test 36g "filter mod data cache expiry ====================="
1787
1788 test_37() {
1789         mkdir -p $DIR/$tdir
1790         echo f > $DIR/$tdir/fbugfile
1791         mount -t ext2 -o loop $EXT2_DEV $DIR/$tdir
1792         ls $DIR/$tdir | grep "\<fbugfile\>" && error
1793         $UMOUNT $DIR/$tdir || error
1794         rm -f $DIR/$tdir/fbugfile || error
1795 }
1796 run_test 37 "ls a mounted file system to check old content ====="
1797
1798 test_38() {
1799         local file=$DIR/$tfile
1800         touch $file
1801         openfile -f O_DIRECTORY $file
1802         local RC=$?
1803         local ENOTDIR=20
1804         [ $RC -eq 0 ] && error "opened file $file with O_DIRECTORY" || true
1805         [ $RC -eq $ENOTDIR ] || error "error $RC should be ENOTDIR ($ENOTDIR)"
1806 }
1807 run_test 38 "open a regular file with O_DIRECTORY should return -ENOTDIR ==="
1808
1809 test_39() {
1810         touch $DIR/$tfile
1811         touch $DIR/${tfile}2
1812 #       ls -l  $DIR/$tfile $DIR/${tfile}2
1813 #       ls -lu  $DIR/$tfile $DIR/${tfile}2
1814 #       ls -lc  $DIR/$tfile $DIR/${tfile}2
1815         sleep 2
1816         $OPENFILE -f O_CREAT:O_TRUNC:O_WRONLY $DIR/${tfile}2
1817         if [ ! $DIR/${tfile}2 -nt $DIR/$tfile ]; then
1818                 echo "mtime"
1819                 ls -l  $DIR/$tfile $DIR/${tfile}2
1820                 echo "atime"
1821                 ls -lu  $DIR/$tfile $DIR/${tfile}2
1822                 echo "ctime"
1823                 ls -lc  $DIR/$tfile $DIR/${tfile}2
1824                 error "O_TRUNC didn't change timestamps"
1825         fi
1826 }
1827 run_test 39 "mtime changed on create ==========================="
1828
1829 test_40() {
1830         dd if=/dev/zero of=$DIR/f40 bs=4096 count=1
1831         $RUNAS $OPENFILE -f O_WRONLY:O_TRUNC $DIR/f40 && error
1832         $CHECKSTAT -t file -s 4096 $DIR/f40 || error
1833 }
1834 run_test 40 "failed open(O_TRUNC) doesn't truncate ============="
1835
1836 test_41() {
1837         # bug 1553
1838         small_write $DIR/f41 18
1839 }
1840 run_test 41 "test small file write + fstat ====================="
1841
1842 count_ost_writes() {
1843         lctl get_param -n osc.*.stats |
1844             awk -vwrites=0 '/ost_write/ { writes += $2 } END { print writes; }'
1845 }
1846
1847 # decent default
1848 WRITEBACK_SAVE=500
1849 DIRTY_RATIO_SAVE=40
1850 MAX_DIRTY_RATIO=50
1851 BG_DIRTY_RATIO_SAVE=10
1852 MAX_BG_DIRTY_RATIO=25
1853
1854 start_writeback() {
1855         trap 0
1856         # in 2.6, restore /proc/sys/vm/dirty_writeback_centisecs,
1857         # dirty_ratio, dirty_background_ratio
1858         if [ -f /proc/sys/vm/dirty_writeback_centisecs ]; then
1859                 sysctl -w vm.dirty_writeback_centisecs=$WRITEBACK_SAVE
1860                 sysctl -w vm.dirty_background_ratio=$BG_DIRTY_RATIO_SAVE
1861                 sysctl -w vm.dirty_ratio=$DIRTY_RATIO_SAVE
1862         else
1863                 # if file not here, we are a 2.4 kernel
1864                 kill -CONT `pidof kupdated`
1865         fi
1866 }
1867
1868 stop_writeback() {
1869         # setup the trap first, so someone cannot exit the test at the
1870         # exact wrong time and mess up a machine
1871         trap start_writeback EXIT
1872         # in 2.6, save and 0 /proc/sys/vm/dirty_writeback_centisecs
1873         if [ -f /proc/sys/vm/dirty_writeback_centisecs ]; then
1874                 WRITEBACK_SAVE=`sysctl -n vm.dirty_writeback_centisecs`
1875                 sysctl -w vm.dirty_writeback_centisecs=0
1876                 sysctl -w vm.dirty_writeback_centisecs=0
1877                 # save and increase /proc/sys/vm/dirty_ratio
1878                 DIRTY_RATIO_SAVE=`sysctl -n vm.dirty_ratio`
1879                 sysctl -w vm.dirty_ratio=$MAX_DIRTY_RATIO
1880                 # save and increase /proc/sys/vm/dirty_background_ratio
1881                 BG_DIRTY_RATIO_SAVE=`sysctl -n vm.dirty_background_ratio`
1882                 sysctl -w vm.dirty_background_ratio=$MAX_BG_DIRTY_RATIO
1883         else
1884                 # if file not here, we are a 2.4 kernel
1885                 kill -STOP `pidof kupdated`
1886         fi
1887 }
1888
1889 # ensure that all stripes have some grant before we test client-side cache
1890 setup_test42() {
1891         [ "$SETUP_TEST42" ] && return
1892         for i in `seq -f $DIR/f42-%g 1 $OSTCOUNT`; do
1893                 dd if=/dev/zero of=$i bs=4k count=1
1894                 rm $i
1895         done
1896         SETUP_TEST42=DONE
1897 }
1898
1899 # Tests 42* verify that our behaviour is correct WRT caching, file closure,
1900 # file truncation, and file removal.
1901 test_42a() {
1902         setup_test42
1903         cancel_lru_locks osc
1904         stop_writeback
1905         sync; sleep 1; sync # just to be safe
1906         BEFOREWRITES=`count_ost_writes`
1907         lctl get_param -n osc.*[oO][sS][cC][_-]*.cur_grant_bytes | grep "[0-9]"
1908         dd if=/dev/zero of=$DIR/f42a bs=1024 count=100
1909         AFTERWRITES=`count_ost_writes`
1910         [ $BEFOREWRITES -eq $AFTERWRITES ] || \
1911                 error "$BEFOREWRITES < $AFTERWRITES"
1912         start_writeback
1913 }
1914 run_test 42a "ensure that we don't flush on close =============="
1915
1916 test_42b() {
1917         setup_test42
1918         cancel_lru_locks osc
1919         stop_writeback
1920         sync
1921         dd if=/dev/zero of=$DIR/f42b bs=1024 count=100
1922         BEFOREWRITES=`count_ost_writes`
1923         $MUNLINK $DIR/f42b || error "$MUNLINK $DIR/f42b: $?"
1924         AFTERWRITES=`count_ost_writes`
1925         if [ $BEFOREWRITES -lt $AFTERWRITES ]; then
1926                 error "$BEFOREWRITES < $AFTERWRITES on unlink"
1927         fi
1928         BEFOREWRITES=`count_ost_writes`
1929         sync || error "sync: $?"
1930         AFTERWRITES=`count_ost_writes`
1931         if [ $BEFOREWRITES -lt $AFTERWRITES ]; then
1932                 error "$BEFOREWRITES < $AFTERWRITES on sync"
1933         fi
1934         dmesg | grep 'error from obd_brw_async' && error 'error writing back'
1935         start_writeback
1936         return 0
1937 }
1938 run_test 42b "test destroy of file with cached dirty data ======"
1939
1940 # if these tests just want to test the effect of truncation,
1941 # they have to be very careful.  consider:
1942 # - the first open gets a {0,EOF}PR lock
1943 # - the first write conflicts and gets a {0, count-1}PW
1944 # - the rest of the writes are under {count,EOF}PW
1945 # - the open for truncate tries to match a {0,EOF}PR
1946 #   for the filesize and cancels the PWs.
1947 # any number of fixes (don't get {0,EOF} on open, match
1948 # composite locks, do smarter file size management) fix
1949 # this, but for now we want these tests to verify that
1950 # the cancellation with truncate intent works, so we
1951 # start the file with a full-file pw lock to match against
1952 # until the truncate.
1953 trunc_test() {
1954         test=$1
1955         file=$DIR/$test
1956         offset=$2
1957         cancel_lru_locks osc
1958         stop_writeback
1959         # prime the file with 0,EOF PW to match
1960         touch $file
1961         $TRUNCATE $file 0
1962         sync; sync
1963         # now the real test..
1964         dd if=/dev/zero of=$file bs=1024 count=100
1965         BEFOREWRITES=`count_ost_writes`
1966         $TRUNCATE $file $offset
1967         cancel_lru_locks osc
1968         AFTERWRITES=`count_ost_writes`
1969         start_writeback
1970 }
1971
1972 test_42c() {
1973         trunc_test 42c 1024
1974         [ $BEFOREWRITES -eq $AFTERWRITES ] && \
1975             error "beforewrites $BEFOREWRITES == afterwrites $AFTERWRITES on truncate"
1976         rm $file
1977 }
1978 run_test 42c "test partial truncate of file with cached dirty data"
1979
1980 test_42d() {
1981         trunc_test 42d 0
1982         [ $BEFOREWRITES -eq $AFTERWRITES ] || \
1983             error "beforewrites $BEFOREWRITES != afterwrites $AFTERWRITES on truncate"
1984         rm $file
1985 }
1986 run_test 42d "test complete truncate of file with cached dirty data"
1987
1988 test_43() {
1989         mkdir -p $DIR/$tdir
1990         cp -p /bin/ls $DIR/$tdir/$tfile
1991         multiop $DIR/$tdir/$tfile Ow_c &
1992         pid=$!
1993         # give multiop a chance to open
1994         sleep 1
1995
1996         $DIR/$tdir/$tfile && error || true
1997         kill -USR1 $pid
1998 }
1999 run_test 43 "execution of file opened for write should return -ETXTBSY"
2000
2001 test_43a() {
2002         mkdir -p $DIR/d43
2003         cp -p `which multiop` $DIR/d43/multiop || cp -p multiop $DIR/d43/multiop
2004         MULTIOP_PROG=$DIR/d43/multiop multiop_bg_pause $TMP/test43.junk O_c || return 1
2005         MULTIOP_PID=$!
2006         multiop $DIR/d43/multiop Oc && error "expected error, got success"
2007         kill -USR1 $MULTIOP_PID || return 2
2008         wait $MULTIOP_PID || return 3
2009         rm $TMP/test43.junk
2010 }
2011 run_test 43a "open(RDWR) of file being executed should return -ETXTBSY"
2012
2013 test_43b() {
2014         mkdir -p $DIR/d43
2015         cp -p `which multiop` $DIR/d43/multiop || cp -p multiop $DIR/d43/multiop
2016         MULTIOP_PROG=$DIR/d43/multiop multiop_bg_pause $TMP/test43.junk O_c || return 1
2017         MULTIOP_PID=$!
2018         truncate $DIR/d43/multiop 0 && error "expected error, got success"
2019         kill -USR1 $MULTIOP_PID || return 2
2020         wait $MULTIOP_PID || return 3
2021         rm $TMP/test43.junk
2022 }
2023 run_test 43b "truncate of file being executed should return -ETXTBSY"
2024
2025 test_43c() {
2026         local testdir="$DIR/d43c"
2027         mkdir -p $testdir
2028         cp $SHELL $testdir/
2029         ( cd $(dirname $SHELL) && md5sum $(basename $SHELL) ) | \
2030                 ( cd $testdir && md5sum -c)
2031 }
2032 run_test 43c "md5sum of copy into lustre========================"
2033
2034 test_44() {
2035         [  "$OSTCOUNT" -lt "2" ] && skip "skipping 2-stripe test" && return
2036         dd if=/dev/zero of=$DIR/f1 bs=4k count=1 seek=1023
2037         dd if=$DIR/f1 bs=4k count=1 > /dev/null
2038 }
2039 run_test 44 "zero length read from a sparse stripe ============="
2040
2041 test_44a() {
2042     local nstripe=`$LCTL lov_getconfig $DIR | grep default_stripe_count: | \
2043                          awk '{print $2}'`
2044     [ -z "$nstripe" ] && skip "can't get stripe info" && return
2045     [ "$nstripe" -gt "$OSTCOUNT" ] && skip "Wrong default_stripe_count: $nstripe (OSTCOUNT: $OSTCOUNT)" && return
2046     local stride=`$LCTL lov_getconfig $DIR | grep default_stripe_size: | \
2047                       awk '{print $2}'`
2048     if [ $nstripe -eq 0 -o $nstripe -eq -1 ] ; then
2049         nstripe=`$LCTL lov_getconfig $DIR | grep obd_count: | awk '{print $2}'`
2050     fi
2051
2052     OFFSETS="0 $((stride/2)) $((stride-1))"
2053     for offset in $OFFSETS ; do
2054       for i in `seq 0 $((nstripe-1))`; do
2055         local GLOBALOFFSETS=""
2056         local size=$((((i + 2 * $nstripe )*$stride + $offset)))  # Bytes
2057         local myfn=$DIR/d44a-$size
2058         echo "--------writing $myfn at $size"
2059         ll_sparseness_write $myfn $size  || error "ll_sparseness_write"
2060         GLOBALOFFSETS="$GLOBALOFFSETS $size"
2061         ll_sparseness_verify $myfn $GLOBALOFFSETS \
2062                             || error "ll_sparseness_verify $GLOBALOFFSETS"
2063
2064         for j in `seq 0 $((nstripe-1))`; do
2065             size=$((((j + $nstripe )*$stride + $offset)))  # Bytes
2066             ll_sparseness_write $myfn $size || error "ll_sparseness_write"
2067             GLOBALOFFSETS="$GLOBALOFFSETS $size"
2068         done
2069         ll_sparseness_verify $myfn $GLOBALOFFSETS \
2070                             || error "ll_sparseness_verify $GLOBALOFFSETS"
2071         rm -f $myfn
2072       done
2073     done
2074 }
2075 run_test 44a "test sparse pwrite ==============================="
2076
2077 dirty_osc_total() {
2078         tot=0
2079         for d in `lctl get_param -n osc.*.cur_dirty_bytes`; do
2080                 tot=$(($tot + $d))
2081         done
2082         echo $tot
2083 }
2084 do_dirty_record() {
2085         before=`dirty_osc_total`
2086         echo executing "\"$*\""
2087         eval $*
2088         after=`dirty_osc_total`
2089         echo before $before, after $after
2090 }
2091 test_45() {
2092         f="$DIR/f45"
2093         # Obtain grants from OST if it supports it
2094         echo blah > ${f}_grant
2095         stop_writeback
2096         sync
2097         do_dirty_record "echo blah > $f"
2098         [ $before -eq $after ] && error "write wasn't cached"
2099         do_dirty_record "> $f"
2100         [ $before -gt $after ] || error "truncate didn't lower dirty count"
2101         do_dirty_record "echo blah > $f"
2102         [ $before -eq $after ] && error "write wasn't cached"
2103         do_dirty_record "sync"
2104         [ $before -gt $after ] || error "writeback didn't lower dirty count"
2105         do_dirty_record "echo blah > $f"
2106         [ $before -eq $after ] && error "write wasn't cached"
2107         do_dirty_record "cancel_lru_locks osc"
2108         [ $before -gt $after ] || error "lock cancellation didn't lower dirty count"
2109         start_writeback
2110 }
2111 run_test 45 "osc io page accounting ============================"
2112
2113 page_size() {
2114         getconf PAGE_SIZE
2115 }
2116
2117 # in a 2 stripe file (lov.sh), page 1023 maps to page 511 in its object.  this
2118 # test tickles a bug where re-dirtying a page was failing to be mapped to the
2119 # objects offset and an assert hit when an rpc was built with 1023's mapped
2120 # offset 511 and 511's raw 511 offset. it also found general redirtying bugs.
2121 test_46() {
2122         f="$DIR/f46"
2123         stop_writeback
2124         sync
2125         dd if=/dev/zero of=$f bs=`page_size` seek=511 count=1
2126         sync
2127         dd conv=notrunc if=/dev/zero of=$f bs=`page_size` seek=1023 count=1
2128         dd conv=notrunc if=/dev/zero of=$f bs=`page_size` seek=511 count=1
2129         sync
2130         start_writeback
2131 }
2132 run_test 46 "dirtying a previously written page ================"
2133
2134 # test_47 is removed "Device nodes check" is moved to test_28
2135
2136 test_48a() { # bug 2399
2137         check_kernel_version 34 || return 0
2138         mkdir -p $DIR/d48a
2139         cd $DIR/d48a
2140         mv $DIR/d48a $DIR/d48.new || error "move directory failed"
2141         mkdir $DIR/d48a || error "recreate directory failed"
2142         touch foo || error "'touch foo' failed after recreating cwd"
2143         mkdir bar || error "'mkdir foo' failed after recreating cwd"
2144         if check_kernel_version 44; then
2145                 touch .foo || error "'touch .foo' failed after recreating cwd"
2146                 mkdir .bar || error "'mkdir .foo' failed after recreating cwd"
2147         fi
2148         ls . > /dev/null || error "'ls .' failed after recreating cwd"
2149         ls .. > /dev/null || error "'ls ..' failed after removing cwd"
2150         cd . || error "'cd .' failed after recreating cwd"
2151         mkdir . && error "'mkdir .' worked after recreating cwd"
2152         rmdir . && error "'rmdir .' worked after recreating cwd"
2153         ln -s . baz || error "'ln -s .' failed after recreating cwd"
2154         cd .. || error "'cd ..' failed after recreating cwd"
2155 }
2156 run_test 48a "Access renamed working dir (should return errors)="
2157
2158 test_48b() { # bug 2399
2159         check_kernel_version 34 || return 0
2160         mkdir -p $DIR/d48b
2161         cd $DIR/d48b
2162         rmdir $DIR/d48b || error "remove cwd $DIR/d48b failed"
2163         touch foo && error "'touch foo' worked after removing cwd"
2164         mkdir foo && error "'mkdir foo' worked after removing cwd"
2165         if check_kernel_version 44; then
2166                 touch .foo && error "'touch .foo' worked after removing cwd"
2167                 mkdir .foo && error "'mkdir .foo' worked after removing cwd"
2168         fi
2169         ls . > /dev/null && error "'ls .' worked after removing cwd"
2170         ls .. > /dev/null || error "'ls ..' failed after removing cwd"
2171         is_patchless || ( cd . && error "'cd .' worked after removing cwd" )
2172         mkdir . && error "'mkdir .' worked after removing cwd"
2173         rmdir . && error "'rmdir .' worked after removing cwd"
2174         ln -s . foo && error "'ln -s .' worked after removing cwd"
2175         cd .. || echo "'cd ..' failed after removing cwd `pwd`"  #bug 3517
2176 }
2177 run_test 48b "Access removed working dir (should return errors)="
2178
2179 test_48c() { # bug 2350
2180         check_kernel_version 36 || return 0
2181         #lctl set_param debug=-1
2182         #set -vx
2183         mkdir -p $DIR/d48c/dir
2184         cd $DIR/d48c/dir
2185         $TRACE rmdir $DIR/d48c/dir || error "remove cwd $DIR/d48c/dir failed"
2186         $TRACE touch foo && error "'touch foo' worked after removing cwd"
2187         $TRACE mkdir foo && error "'mkdir foo' worked after removing cwd"
2188         if check_kernel_version 44; then
2189                 touch .foo && error "'touch .foo' worked after removing cwd"
2190                 mkdir .foo && error "'mkdir .foo' worked after removing cwd"
2191         fi
2192         $TRACE ls . && error "'ls .' worked after removing cwd"
2193         $TRACE ls .. || error "'ls ..' failed after removing cwd"
2194         is_patchless || ( $TRACE cd . && error "'cd .' worked after removing cwd" )
2195         $TRACE mkdir . && error "'mkdir .' worked after removing cwd"
2196         $TRACE rmdir . && error "'rmdir .' worked after removing cwd"
2197         $TRACE ln -s . foo && error "'ln -s .' worked after removing cwd"
2198         $TRACE cd .. || echo "'cd ..' failed after removing cwd `pwd`" #bug 3415
2199 }
2200 run_test 48c "Access removed working subdir (should return errors)"
2201
2202 test_48d() { # bug 2350
2203         check_kernel_version 36 || return 0
2204         #lctl set_param debug=-1
2205         #set -vx
2206         mkdir -p $DIR/d48d/dir
2207         cd $DIR/d48d/dir
2208         $TRACE rmdir $DIR/d48d/dir || error "remove cwd $DIR/d48d/dir failed"
2209         $TRACE rmdir $DIR/d48d || error "remove parent $DIR/d48d failed"
2210         $TRACE touch foo && error "'touch foo' worked after removing parent"
2211         $TRACE mkdir foo && error "'mkdir foo' worked after removing parent"
2212         if check_kernel_version 44; then
2213                 touch .foo && error "'touch .foo' worked after removing parent"
2214                 mkdir .foo && error "'mkdir .foo' worked after removing parent"
2215         fi
2216         $TRACE ls . && error "'ls .' worked after removing parent"
2217         $TRACE ls .. && error "'ls ..' worked after removing parent"
2218         is_patchless || ( $TRACE cd . && error "'cd .' worked after recreate parent" )
2219         $TRACE mkdir . && error "'mkdir .' worked after removing parent"
2220         $TRACE rmdir . && error "'rmdir .' worked after removing parent"
2221         $TRACE ln -s . foo && error "'ln -s .' worked after removing parent"
2222         is_patchless || ( $TRACE cd .. && error "'cd ..' worked after removing parent" || true )
2223 }
2224 run_test 48d "Access removed parent subdir (should return errors)"
2225
2226 test_48e() { # bug 4134
2227         check_kernel_version 41 || return 0
2228         #lctl set_param debug=-1
2229         #set -vx
2230         mkdir -p $DIR/d48e/dir
2231         cd $DIR/d48e/dir
2232         $TRACE rmdir $DIR/d48e/dir || error "remove cwd $DIR/d48e/dir failed"
2233         $TRACE rmdir $DIR/d48e || error "remove parent $DIR/d48e failed"
2234         $TRACE touch $DIR/d48e || error "'touch $DIR/d48e' failed"
2235         $TRACE chmod +x $DIR/d48e || error "'chmod +x $DIR/d48e' failed"
2236         # On a buggy kernel addition of "touch foo" after cd .. will
2237         # produce kernel oops in lookup_hash_it
2238         touch ../foo && error "'cd ..' worked after recreate parent"
2239         cd $DIR
2240         $TRACE rm $DIR/d48e || error "rm '$DIR/d48e' failed"
2241 }
2242 run_test 48e "Access to recreated parent subdir (should return errors)"
2243
2244 test_50() {
2245         # bug 1485
2246         mkdir $DIR/d50
2247         cd $DIR/d50
2248         ls /proc/$$/cwd || error
2249 }
2250 run_test 50 "special situations: /proc symlinks  ==============="
2251
2252 test_51a() {    # was test_51
2253         # bug 1516 - create an empty entry right after ".." then split dir
2254         mkdir $DIR/d51
2255         touch $DIR/d51/foo
2256         $MCREATE $DIR/d51/bar
2257         rm $DIR/d51/foo
2258         createmany -m $DIR/d51/longfile 201
2259         FNUM=202
2260         while [ `ls -sd $DIR/d51 | awk '{ print $1 }'` -eq 4 ]; do
2261                 $MCREATE $DIR/d51/longfile$FNUM
2262                 FNUM=$(($FNUM + 1))
2263                 echo -n "+"
2264         done
2265         echo
2266         ls -l $DIR/d51 > /dev/null || error
2267 }
2268 run_test 51a "special situations: split htree with empty entry =="
2269
2270 #export NUMTEST=70000
2271 # FIXME: I select a relatively small number to do basic test.
2272 # large number may give panic(). debugging on this is going on.
2273 export NUMTEST=70
2274 test_51b() {
2275         NUMFREE=`df -i -P $DIR | tail -n 1 | awk '{ print $4 }'`
2276         [ $NUMFREE -lt 21000 ] && \
2277                 skip "not enough free inodes ($NUMFREE)" && \
2278                 return
2279
2280         check_kernel_version 40 || NUMTEST=31000
2281         [ $NUMFREE -lt $NUMTEST ] && NUMTEST=$(($NUMFREE - 50))
2282
2283         mkdir -p $DIR/d51b
2284         createmany -d $DIR/d51b/t- $NUMTEST
2285 }
2286 run_test 51b "mkdir .../t-0 --- .../t-$NUMTEST ===================="
2287
2288 test_51bb() {
2289         [ $MDSCOUNT -lt 2 ] && skip "needs >= 2 MDTs" && return
2290
2291         local ndirs=${TEST51BB_NDIRS:-10}
2292         local nfiles=${TEST51BB_NFILES:-100}
2293
2294         local numfree=`df -i -P $DIR | tail -n 1 | awk '{ print $4 }'`
2295
2296         [ $numfree -lt $(( ndirs * nfiles)) ] && \
2297                 nfiles=$(( numfree / ndirs - 10 ))
2298
2299         local dir=$DIR/d51bb
2300         mkdir -p $dir
2301         local savePOLICY=$(lctl get_param -n lmv.*.placement)
2302         lctl set_param -n lmv.*.placement=CHAR
2303
2304         lfs df -i $dir
2305         local IUSED=$(lfs df -i $dir | grep MDT | awk '{print $3}')
2306         OLDUSED=($IUSED)
2307
2308         declare -a dirs
2309         for ((i=0; i < $ndirs; i++)); do
2310                 dirs[i]=$dir/$RANDOM
2311                 echo Creating directory ${dirs[i]}
2312                 mkdir -p ${dirs[i]}
2313                 ls $dir
2314                 echo Creating $nfiles in dir ${dirs[i]} ...
2315                 echo "createmany -o ${dirs[i]}/$tfile- $nfiles"
2316                 createmany -o ${dirs[i]}/$tfile- $nfiles
2317         done
2318         ls $dir
2319
2320         sleep 1
2321
2322         IUSED=$(lfs df -i $dir | grep MDT | awk '{print $3}')
2323         NEWUSED=($IUSED)
2324
2325         local rc=0
2326         for ((i=0; i<${#NEWUSED[@]}; i++)); do
2327                 echo "mds $i: inodes count OLD ${OLDUSED[$i]} NEW ${NEWUSED[$i]}"
2328                 [ ${OLDUSED[$i]} -lt ${NEWUSED[$i]} ] || rc=$((rc + 1))
2329         done
2330
2331         lctl set_param -n lmv.*.placement=$savePOLICY
2332
2333         [ $rc -ne $MDSCOUNT ] || \
2334                 error "Objects/inodes are not distributed over all mds servers"
2335 }
2336 run_test 51bb "mkdir createmany CMD $MDSCOUNT  ===================="
2337
2338
2339 test_51c() {
2340         [ ! -d $DIR/d51b ] && skip "$DIR/51b missing" && \
2341                 return
2342
2343         unlinkmany -d $DIR/d51b/t- $NUMTEST
2344 }
2345 run_test 51c "rmdir .../t-0 --- .../t-$NUMTEST ===================="
2346
2347 test_51d() {
2348         [  "$OSTCOUNT" -lt "3" ] && skip "skipping test with few OSTs" && return
2349         mkdir -p $DIR/d51d
2350         createmany -o $DIR/d51d/t- 1000
2351         $LFS getstripe $DIR/d51d > $TMP/files
2352         for N in `seq 0 $((OSTCOUNT - 1))`; do
2353             OBJS[$N]=`awk -vobjs=0 '($1 == '$N') { objs += 1 } END { print objs;}' $TMP/files`
2354             OBJS0[$N]=`grep -A 1 idx $TMP/files | awk -vobjs=0 '($1 == '$N') { objs += 1 } END { print objs;}'`
2355             log "OST$N has ${OBJS[$N]} objects, ${OBJS0[$N]} are index 0"
2356         done
2357         unlinkmany $DIR/d51d/t- 1000
2358
2359         NLAST=0
2360         for N in `seq 1 $((OSTCOUNT - 1))`; do
2361             [ ${OBJS[$N]} -lt $((${OBJS[$NLAST]} - 20)) ] && \
2362                 error "OST $N has less objects vs OST $NLAST (${OBJS[$N]} < ${OBJS[$NLAST]}"
2363             [ ${OBJS[$N]} -gt $((${OBJS[$NLAST]} + 20)) ] && \
2364                 error "OST $N has less objects vs OST $NLAST (${OBJS[$N]} < ${OBJS[$NLAST]}"
2365
2366             [ ${OBJS0[$N]} -lt $((${OBJS0[$NLAST]} - 20)) ] && \
2367                 error "OST $N has less #0 objects vs OST $NLAST (${OBJS0[$N]} < ${OBJS0[$NLAST]}"
2368             [ ${OBJS0[$N]} -gt $((${OBJS0[$NLAST]} + 20)) ] && \
2369                 error "OST $N has less #0 objects vs OST $NLAST (${OBJS0[$N]} < ${OBJS0[$NLAST]}"
2370             NLAST=$N
2371         done
2372 }
2373 run_test 51d "check object distribution ===================="
2374
2375 test_52a() {
2376         [ -f $DIR/d52a/foo ] && chattr -a $DIR/d52a/foo
2377         mkdir -p $DIR/d52a
2378         touch $DIR/d52a/foo
2379         chattr =a $DIR/d52a/foo || error "chattr =a failed"
2380         echo bar >> $DIR/d52a/foo || error "append bar failed"
2381         cp /etc/hosts $DIR/d52a/foo && error "cp worked"
2382         rm -f $DIR/d52a/foo 2>/dev/null && error "rm worked"
2383         link $DIR/d52a/foo $DIR/d52a/foo_link 2>/dev/null && error "link worked"
2384         echo foo >> $DIR/d52a/foo || error "append foo failed"
2385         mrename $DIR/d52a/foo $DIR/d52a/foo_ren && error "rename worked"
2386         lsattr $DIR/d52a/foo | egrep -q "^-+a-+ $DIR/d52a/foo" || error "lsattr"
2387         chattr -a $DIR/d52a/foo || error "chattr -a failed"
2388
2389         rm -fr $DIR/d52a || error "cleanup rm failed"
2390 }
2391 run_test 52a "append-only flag test (should return errors) ====="
2392
2393 test_52b() {
2394         [ -f $DIR/d52b/foo ] && chattr -i $DIR/d52b/foo
2395         mkdir -p $DIR/d52b
2396         touch $DIR/d52b/foo
2397         chattr =i $DIR/d52b/foo || error
2398         cat test > $DIR/d52b/foo && error
2399         cp /etc/hosts $DIR/d52b/foo && error
2400         rm -f $DIR/d52b/foo 2>/dev/null && error
2401         link $DIR/d52b/foo $DIR/d52b/foo_link 2>/dev/null && error
2402         echo foo >> $DIR/d52b/foo && error
2403         mrename $DIR/d52b/foo $DIR/d52b/foo_ren && error
2404         [ -f $DIR/d52b/foo ] || error
2405         [ -f $DIR/d52b/foo_ren ] && error
2406         lsattr $DIR/d52b/foo | egrep -q "^-+i-+ $DIR/d52b/foo" || error
2407         chattr -i $DIR/d52b/foo || error
2408
2409         rm -fr $DIR/d52b || error
2410 }
2411 run_test 52b "immutable flag test (should return errors) ======="
2412
2413 test_53() {
2414         remote_mds_nodsh && skip "remote MDS with nodsh" && return
2415         remote_ost_nodsh && skip "remote OST with nodsh" && return
2416
2417         local param
2418         local ostname
2419         local mds_last
2420         local ost_last
2421         local ostnum
2422
2423         # only test MDT0000
2424         for value in $(do_facet $SINGLEMDS lctl get_param osc.*-osc-MDT0000.prealloc_last_id) ; do
2425                 param=`echo ${value[0]} | cut -d "=" -f1`
2426                 ostname=`echo $param | cut -d "." -f2 | cut -d - -f 1-2`
2427                 mds_last=$(do_facet $SINGLEMDS lctl get_param -n $param)
2428                 ostnum=$(echo $ostname | sed "s/${FSNAME}-OST//g" | awk '{print ($1+1)}' )
2429                 ost_last=$(do_facet ost$ostnum lctl get_param -n obdfilter.$ostname.last_id | head -n 1)
2430                 echo "$ostname.last_id=$ost_last ; MDS.last_id=$mds_last"
2431                 if [ $ost_last != $mds_last ]; then
2432                     error "$ostname.last_id=$ost_last ; MDS.last_id=$mds_last"
2433                 fi
2434         done
2435 }
2436 run_test 53 "verify that MDS and OSTs agree on pre-creation ===="
2437
2438 test_54a() {
2439         [ ! -f "$SOCKETSERVER" ] && skip "no socketserver, skipping" && return
2440         [ ! -f "$SOCKETCLIENT" ] && skip "no socketclient, skipping" && return
2441         $SOCKETSERVER $DIR/socket
2442         $SOCKETCLIENT $DIR/socket || error
2443         $MUNLINK $DIR/socket
2444 }
2445 run_test 54a "unix domain socket test =========================="
2446
2447 test_54b() {
2448         f="$DIR/f54b"
2449         mknod $f c 1 3
2450         chmod 0666 $f
2451         dd if=/dev/zero of=$f bs=`page_size` count=1
2452 }
2453 run_test 54b "char device works in lustre ======================"
2454
2455 find_loop_dev() {
2456         [ -b /dev/loop/0 ] && LOOPBASE=/dev/loop/
2457         [ -b /dev/loop0 ] && LOOPBASE=/dev/loop
2458         [ -z "$LOOPBASE" ] && echo "/dev/loop/0 and /dev/loop0 gone?" && return
2459
2460         for i in `seq 3 7`; do
2461                 losetup $LOOPBASE$i > /dev/null 2>&1 && continue
2462                 LOOPDEV=$LOOPBASE$i
2463                 LOOPNUM=$i
2464                 break
2465         done
2466 }
2467
2468 test_54c() {
2469         tfile="$DIR/f54c"
2470         tdir="$DIR/d54c"
2471         loopdev="$DIR/loop54c"
2472
2473         find_loop_dev
2474         [ -z "$LOOPNUM" ] && echo "couldn't find empty loop device" && return
2475         mknod $loopdev b 7 $LOOPNUM
2476         echo "make a loop file system with $tfile on $loopdev ($LOOPNUM)..."
2477         dd if=/dev/zero of=$tfile bs=`page_size` seek=1024 count=1 > /dev/null
2478         losetup $loopdev $tfile || error "can't set up $loopdev for $tfile"
2479         mkfs.ext2 $loopdev || error "mke2fs on $loopdev"
2480         mkdir -p $tdir
2481         mount -t ext2 $loopdev $tdir || error "error mounting $loopdev on $tdir"
2482         dd if=/dev/zero of=$tdir/tmp bs=`page_size` count=30 || error "dd write"
2483         df $tdir
2484         dd if=$tdir/tmp of=/dev/zero bs=`page_size` count=30 || error "dd read"
2485         $UMOUNT $tdir
2486         losetup -d $loopdev
2487         rm $loopdev
2488 }
2489 run_test 54c "block device works in lustre ====================="
2490
2491 test_54d() {
2492         f="$DIR/f54d"
2493         string="aaaaaa"
2494         mknod $f p
2495         [ "$string" = `echo $string > $f | cat $f` ] || error
2496 }
2497 run_test 54d "fifo device works in lustre ======================"
2498
2499 test_54e() {
2500         check_kernel_version 46 || return 0
2501         f="$DIR/f54e"
2502         string="aaaaaa"
2503         cp -aL /dev/console $f
2504         echo $string > $f || error
2505 }
2506 run_test 54e "console/tty device works in lustre ======================"
2507
2508 check_fstype() {
2509         grep -q $FSTYPE /proc/filesystems && return 1
2510         modprobe $FSTYPE
2511         grep -q $FSTYPE /proc/filesystems && return 1
2512         insmod ../$FSTYPE/$FSTYPE.o
2513         grep -q $FSTYPE /proc/filesystems && return 1
2514         insmod ../$FSTYPE/$FSTYPE.ko
2515         grep -q $FSTYPE /proc/filesystems && return 1
2516         return 0
2517 }
2518
2519 test_55() {
2520         rm -rf $DIR/d55
2521         mkdir $DIR/d55
2522         check_fstype && skip "can't find fs $FSTYPE" && return
2523         mount -t $FSTYPE -o loop,iopen $EXT2_DEV $DIR/d55 || error "mounting"
2524         touch $DIR/d55/foo
2525         $IOPENTEST1 $DIR/d55/foo $DIR/d55 || error "running $IOPENTEST1"
2526         $IOPENTEST2 $DIR/d55 || error "running $IOPENTEST2"
2527         echo "check for $EXT2_DEV. Please wait..."
2528         rm -rf $DIR/d55/*
2529         $UMOUNT $DIR/d55 || error "unmounting"
2530 }
2531 run_test 55 "check iopen_connect_dentry() ======================"
2532
2533 test_56a() {    # was test_56
2534         rm -rf $DIR/d56
2535         $SETSTRIPE -d $DIR
2536         mkdir $DIR/d56
2537         mkdir $DIR/d56/dir
2538         NUMFILES=3
2539         NUMFILESx2=$(($NUMFILES * 2))
2540         for i in `seq 1 $NUMFILES` ; do
2541                 touch $DIR/d56/file$i
2542                 touch $DIR/d56/dir/file$i
2543         done
2544
2545         # test lfs getstripe with --recursive
2546         FILENUM=`$GETSTRIPE --recursive $DIR/d56 | grep -c obdidx`
2547         [ $FILENUM -eq $NUMFILESx2 ] || error \
2548                 "lfs getstripe --recursive $DIR/d56 wrong: found $FILENUM, expected $NUMFILESx2"
2549         FILENUM=`$GETSTRIPE $DIR/d56 | grep -c obdidx`
2550         [ $FILENUM -eq $NUMFILES ] || error \
2551                 "lfs getstripe $DIR/d56 without --recursive wrong: found $FILENUM, expected $NUMFILES"
2552         echo "lfs getstripe --recursive passed."
2553
2554         # test lfs getstripe with file instead of dir
2555         FILENUM=`$GETSTRIPE $DIR/d56/file1 | grep -c obdidx`
2556         [ $FILENUM  -eq 1 ] || error \
2557                  "lfs getstripe $DIR/d56/file1 wrong:found $FILENUM, expected 1"
2558         echo "lfs getstripe file passed."
2559
2560         #test lfs getstripe with --verbose
2561         [ `$GETSTRIPE --verbose $DIR/d56 | grep -c lmm_magic` -eq $NUMFILES ] ||\
2562                 error "lfs getstripe --verbose $DIR/d56 wrong: should find $NUMFILES lmm_magic info"
2563         [ `$GETSTRIPE $DIR/d56 | grep -c lmm_magic` -eq 0 ] || error \
2564                 "lfs getstripe $DIR/d56 without --verbose wrong: should not show lmm_magic info"
2565         echo "lfs getstripe --verbose passed."
2566
2567         #test lfs getstripe with --obd
2568         $GETSTRIPE --obd wrong_uuid $DIR/d56 2>&1 | grep -q "unknown obduuid" || \
2569                 error "lfs getstripe --obd wrong_uuid should return error message"
2570
2571         [  "$OSTCOUNT" -lt 2 ] && \
2572                 skip "skipping other lfs getstripe --obd test" && return
2573         FILENUM=`$GETSTRIPE --recursive $DIR/d56 | sed -n '/^[   ]*1[    ]/p' | wc -l`
2574         OBDUUID=`$GETSTRIPE --recursive $DIR/d56 | sed -n '/^[   ]*1:/p' | awk '{print $2}'`
2575         FOUND=`$GETSTRIPE -r --obd $OBDUUID $DIR/d56 | wc -l`
2576         [ $FOUND -eq $FILENUM ] || \
2577                 error "lfs getstripe --obd wrong: found $FOUND, expected $FILENUM"
2578         [ `$GETSTRIPE -r -v --obd $OBDUUID $DIR/d56 | sed '/^[   ]*1[    ]/d' |\
2579                 sed -n '/^[      ]*[0-9][0-9]*[  ]/p' | wc -l` -eq 0 ] || \
2580                 error "lfs getstripe --obd wrong: should not show file on other obd"
2581         echo "lfs getstripe --obd passed."
2582 }
2583 run_test 56a "check lfs getstripe ===================================="
2584
2585 NUMFILES=3
2586 NUMDIRS=3
2587 setup_56() {
2588         LOCAL_NUMFILES=$1
2589         LOCAL_NUMDIRS=$2
2590         if [ ! -d "$DIR/${tdir}g" ] ; then
2591                 mkdir -p $DIR/${tdir}g
2592                 for i in `seq 1 $LOCAL_NUMFILES` ; do
2593                         touch $DIR/${tdir}g/file$i
2594                 done
2595                 for i in `seq 1 $LOCAL_NUMDIRS` ; do
2596                         mkdir $DIR/${tdir}g/dir$i
2597                         for j in `seq 1 $LOCAL_NUMFILES` ; do
2598                                 touch $DIR/${tdir}g/dir$i/file$j
2599                         done
2600                 done
2601         fi
2602 }
2603
2604 setup_56_special() {
2605         LOCAL_NUMFILES=$1
2606         LOCAL_NUMDIRS=$2
2607         TDIR=$DIR/${tdir}g
2608         setup_56 $1 $2
2609         if [ ! -e "$TDIR/loop1b" ] ; then
2610                 for i in `seq 1 $LOCAL_NUMFILES` ; do
2611                         mknod $TDIR/loop${i}b b 7 $i
2612                         mknod $TDIR/null${i}c c 1 3
2613                         ln -s $TDIR/file1 $TDIR/link${i}l
2614                 done
2615                 for i in `seq 1 $LOCAL_NUMDIRS` ; do
2616                         mknod $TDIR/dir$i/loop${i}b b 7 $i
2617                         mknod $TDIR/dir$i/null${i}c c 1 3
2618                         ln -s $TDIR/dir$i/file1 $TDIR/dir$i/link${i}l
2619                 done
2620         fi
2621 }
2622
2623 test_56g() {
2624         $LSTRIPE -d $DIR
2625
2626         setup_56 $NUMFILES $NUMDIRS
2627
2628         EXPECTED=$(($NUMDIRS + 2))
2629         # test lfs find with -name
2630         for i in `seq 1 $NUMFILES` ; do
2631                 NUMS=`$LFIND -name "*$i" $DIR/${tdir}g | wc -l`
2632                 [ $NUMS -eq $EXPECTED ] || error \
2633                         "lfs find -name \"*$i\" $DIR/${tdir}g wrong: found $NUMS, expected $EXPECTED"
2634         done
2635         echo "lfs find -name passed."
2636 }
2637 run_test 56g "check lfs find -name ============================="
2638
2639 test_56h() {
2640         $LSTRIPE -d $DIR
2641
2642         setup_56 $NUMFILES $NUMDIRS
2643
2644         EXPECTED=$((($NUMDIRS+1)*($NUMFILES-1)+$NUMFILES))
2645         # test lfs find with ! -name
2646         for i in `seq 1 $NUMFILES` ; do
2647                 NUMS=`$LFIND ! -name "*$i" $DIR/${tdir}g | wc -l`
2648                 [ $NUMS -eq $EXPECTED ] || error \
2649                         "lfs find ! -name \"*$i\" $DIR/${tdir}g wrong: found $NUMS, expected $EXPECTED"
2650         done
2651         echo "lfs find ! -name passed."
2652 }
2653 run_test 56h "check lfs find ! -name ============================="
2654
2655 test_56i() {
2656        tdir=${tdir}i
2657        mkdir -p $DIR/$tdir
2658        UUID=`$GETSTRIPE $DIR/$tdir | awk '/0: / { print $2 }'`
2659        OUT="`$LFIND -ost $UUID $DIR/$tdir`"
2660        [ "$OUT" ] && error "$LFIND returned directory '$OUT'" || true
2661 }
2662 run_test 56i "check 'lfs find -ost UUID' skips directories ======="
2663
2664 test_56j() {
2665         setup_56_special $NUMFILES $NUMDIRS
2666
2667         EXPECTED=$((NUMDIRS+1))
2668         NUMS=`$LFIND -type d $DIR/${tdir}g | wc -l`
2669         [ $NUMS -eq $EXPECTED ] || \
2670                 error "lfs find -type d $DIR/${tdir}g wrong: found $NUMS, expected $EXPECTED"
2671 }
2672 run_test 56j "check lfs find -type d ============================="
2673
2674 test_56k() {
2675         setup_56_special $NUMFILES $NUMDIRS
2676
2677         EXPECTED=$(((NUMDIRS+1) * NUMFILES))
2678         NUMS=`$LFIND -type f $DIR/${tdir}g | wc -l`
2679         [ $NUMS -eq $EXPECTED ] || \
2680                 error "lfs find -type f $DIR/${tdir}g wrong: found $NUMS, expected $EXPECTED"
2681 }
2682 run_test 56k "check lfs find -type f ============================="
2683
2684 test_56l() {
2685         setup_56_special $NUMFILES $NUMDIRS
2686
2687         EXPECTED=$((NUMDIRS + NUMFILES))
2688         NUMS=`$LFIND -type b $DIR/${tdir}g | wc -l`
2689         [ $NUMS -eq $EXPECTED ] || \
2690                 error "lfs find -type b $DIR/${tdir}g wrong: found $NUMS, expected $EXPECTED"
2691 }
2692 run_test 56l "check lfs find -type b ============================="
2693
2694 test_56m() {
2695         setup_56_special $NUMFILES $NUMDIRS
2696
2697         EXPECTED=$((NUMDIRS + NUMFILES))
2698         NUMS=`$LFIND -type c $DIR/${tdir}g | wc -l`
2699         [ $NUMS -eq $EXPECTED ] || \
2700                 error "lfs find -type c $DIR/${tdir}g wrong: found $NUMS, expected $EXPECTED"
2701 }
2702 run_test 56m "check lfs find -type c ============================="
2703
2704 test_56n() {
2705         setup_56_special $NUMFILES $NUMDIRS
2706
2707         EXPECTED=$((NUMDIRS + NUMFILES))
2708         NUMS=`$LFIND -type l $DIR/${tdir}g | wc -l`
2709         [ $NUMS -eq $EXPECTED ] || \
2710                 error "lfs find -type l $DIR/${tdir}g wrong: found $NUMS, expected $EXPECTED"
2711 }
2712 run_test 56n "check lfs find -type l ============================="
2713
2714 test_56o() {
2715         setup_56 $NUMFILES $NUMDIRS
2716         TDIR=$DIR/${tdir}g
2717
2718         utime $TDIR/file1 > /dev/null || error "utime (1)"
2719         utime $TDIR/file2 > /dev/null || error "utime (2)"
2720         utime $TDIR/dir1 > /dev/null || error "utime (3)"
2721         utime $TDIR/dir2 > /dev/null || error "utime (4)"
2722         utime $TDIR/dir1/file1 > /dev/null || error "utime (5)"
2723
2724         EXPECTED=5
2725         NUMS=`$LFIND -mtime +1 $TDIR | wc -l`
2726         [ $NUMS -eq $EXPECTED ] || \
2727                 error "lfs find -mtime $TDIR wrong: found $NUMS, expected $EXPECTED"
2728 }
2729 run_test 56o "check lfs find -mtime for old files =========================="
2730
2731 test_56p() {
2732         [ $RUNAS_ID -eq $UID ] && skip "RUNAS_ID = UID = $UID -- skipping" && return
2733
2734         TDIR=$DIR/${tdir}g
2735         rm -rf $TDIR
2736
2737         setup_56 $NUMFILES $NUMDIRS
2738
2739         chown $RUNAS_ID $TDIR/file* || error "chown $DIR/${tdir}g/file$i failed"
2740         EXPECTED=$NUMFILES
2741         NUMS="`$LFIND -uid $RUNAS_ID $TDIR | wc -l`"
2742         [ $NUMS -eq $EXPECTED ] || \
2743                 error "lfs find -uid $TDIR wrong: found $NUMS, expected $EXPECTED"
2744
2745         EXPECTED=$(( ($NUMFILES+1) * $NUMDIRS + 1))
2746         NUMS="`$LFIND ! -uid $RUNAS_ID $TDIR | wc -l`"
2747         [ $NUMS -eq $EXPECTED ] || \
2748                 error "lfs find ! -uid $TDIR wrong: found $NUMS, expected $EXPECTED"
2749
2750         echo "lfs find -uid and ! -uid passed."
2751 }
2752 run_test 56p "check lfs find -uid and ! -uid ==============================="
2753
2754 test_56q() {
2755         [ $RUNAS_ID -eq $UID ] && skip "RUNAS_ID = UID = $UID -- skipping" && return
2756
2757         TDIR=$DIR/${tdir}g
2758         rm -rf $TDIR
2759
2760         setup_56 $NUMFILES $NUMDIRS
2761
2762         chgrp $RUNAS_ID $TDIR/file* || error "chown $DIR/${tdir}g/file$i failed"
2763         EXPECTED=$NUMFILES
2764         NUMS="`$LFIND -gid $RUNAS_ID $TDIR | wc -l`"
2765         [ $NUMS -eq $EXPECTED ] || \
2766                 error "lfs find -gid $TDIR wrong: found $NUMS, expected $EXPECTED"
2767
2768         EXPECTED=$(( ($NUMFILES+1) * $NUMDIRS + 1))
2769         NUMS="`$LFIND ! -gid $RUNAS_ID $TDIR | wc -l`"
2770         [ $NUMS -eq $EXPECTED ] || \
2771                 error "lfs find ! -gid $TDIR wrong: found $NUMS, expected $EXPECTED"
2772
2773         echo "lfs find -gid and ! -gid passed."
2774 }
2775 run_test 56q "check lfs find -gid and ! -gid ==============================="
2776
2777 test_57a() {
2778         # note test will not do anything if MDS is not local
2779         remote_mds_nodsh && skip "remote MDS with nodsh" && return
2780
2781         local MNTDEV="osd.*MDT*.mntdev"
2782         DEV=$(do_facet $SINGLEMDS lctl get_param -n $MNTDEV)
2783         [ -z "$DEV" ] && error "can't access $MNTDEV"
2784         for DEV in $(do_facet $SINGLEMDS lctl get_param -n $MNTDEV); do
2785                 do_facet $SINGLEMDS $DUMPE2FS -h $DEV > $TMP/t57a.dump || error "can't access $DEV"
2786                 DEVISIZE=`awk '/Inode size:/ { print $3 }' $TMP/t57a.dump`
2787                 [ "$DEVISIZE" -gt 128 ] || error "inode size $DEVISIZE"
2788                 rm $TMP/t57a.dump
2789         done
2790 }
2791 run_test 57a "verify MDS filesystem created with large inodes =="
2792
2793 test_57b() {
2794         local dir=$DIR/d57b
2795
2796         local FILECOUNT=100
2797         local FILE1=$dir/f1
2798         local FILEN=$dir/f$FILECOUNT
2799
2800         rm -rf $dir || error "removing $dir"
2801         mkdir -p $dir || error "creating $dir"
2802         local num=$(get_mds_dir $dir)
2803         local mymds=mds$num
2804
2805         echo "mcreating $FILECOUNT files"
2806         createmany -m $dir/f 1 $FILECOUNT || \
2807                 error "creating files in $dir"
2808
2809         # verify that files do not have EAs yet
2810         $GETSTRIPE $FILE1 2>&1 | grep -q "no stripe" || error "$FILE1 has an EA"
2811         $GETSTRIPE $FILEN 2>&1 | grep -q "no stripe" || error "$FILEN has an EA"
2812
2813         sync
2814         sleep 1
2815         df $dir  #make sure we get new statfs data
2816         local MDSFREE=$(do_facet $mymds lctl get_param -n osd.*MDT000$((num -1)).kbytesfree)
2817         local MDCFREE=$(lctl get_param -n mdc.*MDT000$((num -1))-mdc-*.kbytesfree)
2818         echo "opening files to create objects/EAs"
2819         local FILE
2820         for FILE in `seq -f $dir/f%g 1 $FILECOUNT`; do
2821                 $OPENFILE -f O_RDWR $FILE > /dev/null 2>&1 || error "opening $FILE"
2822         done
2823
2824         # verify that files have EAs now
2825         $GETSTRIPE $FILE1 | grep -q "obdidx" || error "$FILE1 missing EA"
2826         $GETSTRIPE $FILEN | grep -q "obdidx" || error "$FILEN missing EA"
2827
2828         sleep 1  #make sure we get new statfs data
2829         df $dir
2830         local MDSFREE2=$(do_facet $mymds lctl get_param -n osd.*MDT000$((num -1)).kbytesfree)
2831         local MDCFREE2=$(lctl get_param -n mdc.*MDT000$((num -1))-mdc-*.kbytesfree)
2832         if [ "$MDCFREE2" -lt "$((MDCFREE - 8))" ]; then
2833                 if [ "$MDSFREE" != "$MDSFREE2" ]; then
2834                         error "MDC before $MDCFREE != after $MDCFREE2"
2835                 else
2836                         echo "MDC before $MDCFREE != after $MDCFREE2"
2837                         echo "unable to confirm if MDS has large inodes"
2838                 fi
2839         fi
2840         rm -rf $dir
2841 }
2842 run_test 57b "default LOV EAs are stored inside large inodes ==="
2843
2844 test_58() {
2845     [ -z "$(which wiretest 2>/dev/null)" ] && skip "could not find wiretest" && return
2846     wiretest
2847 }
2848 run_test 58 "verify cross-platform wire constants =============="
2849
2850 test_59() {
2851         echo "touch 130 files"
2852         createmany -o $DIR/f59- 130
2853         echo "rm 130 files"
2854         unlinkmany $DIR/f59- 130
2855         sync
2856         sleep 2
2857         # wait for commitment of removal
2858 }
2859 run_test 59 "verify cancellation of llog records async ========="
2860
2861 TEST60_HEAD="test_60 run $RANDOM"
2862 test_60a() {
2863         [ ! -f run-llog.sh ] && skip "missing subtest run-llog.sh" && return
2864         log "$TEST60_HEAD - from kernel mode"
2865         sh run-llog.sh
2866 }
2867 run_test 60a "llog sanity tests run from kernel module =========="
2868
2869 test_60b() { # bug 6411
2870         dmesg > $DIR/$tfile
2871         LLOG_COUNT=`dmesg | awk "/$TEST60_HEAD/{marker = 1; from_marker = 0;}
2872                                  /llog.test/ {
2873                                          if (marker)
2874                                                  from_marker++
2875                                          from_begin++
2876                                  }
2877                                  END {
2878                                          if (marker)
2879                                                  print from_marker
2880                                          else
2881                                                  print from_begin
2882                                  }"`
2883         [ $LLOG_COUNT -gt 50 ] && error "CDEBUG_LIMIT not limiting messages ($LLOG_COUNT)"|| true
2884 }
2885 run_test 60b "limit repeated messages from CERROR/CWARN ========"
2886
2887 test_60c() {
2888         echo "create 5000 files"
2889         createmany -o $DIR/f60c- 5000
2890 #define OBD_FAIL_MDS_LLOG_CREATE_FAILED  0x137
2891         lctl set_param fail_loc=0x80000137
2892         unlinkmany $DIR/f60c- 5000
2893         lctl set_param fail_loc=0
2894 }
2895 run_test 60c "unlink file when mds full"
2896
2897 test_60d() {
2898         SAVEPRINTK=$(lctl get_param -n printk)
2899
2900         # verify "lctl mark" is even working"
2901         MESSAGE="test message ID $RANDOM $$"
2902         $LCTL mark "$MESSAGE" || error "$LCTL mark failed"
2903         dmesg | grep -q "$MESSAGE" || error "didn't find debug marker in log"
2904
2905         lctl set_param printk=0 || error "set lnet.printk failed"
2906         lctl get_param -n printk | grep emerg || error "lnet.printk dropped emerg"
2907         MESSAGE="new test message ID $RANDOM $$"
2908         # Assume here that libcfs_debug_mark_buffer() uses D_WARNING
2909         $LCTL mark "$MESSAGE" || error "$LCTL mark failed"
2910         dmesg | grep -q "$MESSAGE" && error "D_WARNING wasn't masked" || true
2911
2912         lctl set_param -n printk="$SAVEPRINTK"
2913 }
2914 run_test 60d "test printk console message masking"
2915
2916 test_61() {
2917         f="$DIR/f61"
2918         dd if=/dev/zero of=$f bs=`page_size` count=1
2919         cancel_lru_locks osc
2920         multiop $f OSMWUc || error
2921         sync
2922 }
2923 run_test 61 "mmap() writes don't make sync hang ================"
2924
2925 # bug 2330 - insufficient obd_match error checking causes LBUG
2926 test_62() {
2927         f="$DIR/f62"
2928         echo foo > $f
2929         cancel_lru_locks osc
2930         lctl set_param fail_loc=0x405
2931         cat $f && error "cat succeeded, expect -EIO"
2932         lctl set_param fail_loc=0
2933 }
2934 # This test is now irrelevant (as of bug 10718 inclusion), we no longer
2935 # match every page all of the time.
2936 #run_test 62 "verify obd_match failure doesn't LBUG (should -EIO)"
2937
2938 # bug 2319 - oig_wait() interrupted causes crash because of invalid waitq.
2939 test_63a() {    # was test_63
2940         MAX_DIRTY_MB=`lctl get_param -n osc.*.max_dirty_mb | head -n 1`
2941         lctl set_param -n osc.*.max_dirty_mb 0
2942         for i in `seq 10` ; do
2943                 dd if=/dev/zero of=$DIR/f63 bs=8k &
2944                 sleep 5
2945                 kill $!
2946                 sleep 1
2947         done
2948
2949         lctl set_param -n osc.*.max_dirty_mb $MAX_DIRTY_MB
2950         rm -f $DIR/f63 || true
2951 }
2952 run_test 63a "Verify oig_wait interruption does not crash ======="
2953
2954 # bug 2248 - async write errors didn't return to application on sync
2955 # bug 3677 - async write errors left page locked
2956 test_63b() {
2957         debugsave
2958         lctl set_param debug=-1
2959
2960         # ensure we have a grant to do async writes
2961         dd if=/dev/zero of=$DIR/$tfile bs=4k count=1
2962         rm $DIR/$tfile
2963
2964         #define OBD_FAIL_OSC_BRW_PREP_REQ        0x406
2965         lctl set_param fail_loc=0x80000406
2966         multiop $DIR/$tfile Owy && \
2967                 error "sync didn't return ENOMEM"
2968         sync; sleep 2; sync     # do a real sync this time to flush page
2969         lctl get_param -n llite.*.dump_page_cache | grep locked && \
2970                 error "locked page left in cache after async error" || true
2971         debugrestore
2972 }
2973 run_test 63b "async write errors should be returned to fsync ==="
2974
2975 test_64a () {
2976         df $DIR
2977         lctl get_param -n osc.*[oO][sS][cC][_-]*.cur* | grep "[0-9]"
2978 }
2979 run_test 64a "verify filter grant calculations (in kernel) ====="
2980
2981 test_64b () {
2982         [ ! -f oos.sh ] && skip "missing subtest oos.sh" && return
2983         sh oos.sh $MOUNT
2984 }
2985 run_test 64b "check out-of-space detection on client ==========="
2986
2987 # bug 1414 - set/get directories' stripe info
2988 test_65a() {
2989         mkdir -p $DIR/d65
2990         touch $DIR/d65/f1
2991         $LVERIFY $DIR/d65 $DIR/d65/f1 || error "lverify failed"
2992 }
2993 run_test 65a "directory with no stripe info ===================="
2994
2995 test_65b() {
2996         mkdir -p $DIR/d65
2997         $SETSTRIPE $DIR/d65 -s $(($STRIPESIZE * 2)) -i 0 -c 1 || error "setstripe"
2998         touch $DIR/d65/f2
2999         $LVERIFY $DIR/d65 $DIR/d65/f2 || error "lverify failed"
3000 }
3001 run_test 65b "directory setstripe $(($STRIPESIZE * 2)) 0 1 ==============="
3002
3003 test_65c() {
3004         if [ $OSTCOUNT -gt 1 ]; then
3005                 mkdir -p $DIR/d65
3006                 $SETSTRIPE $DIR/d65 -s $(($STRIPESIZE * 4)) -i 1 \
3007                         -c $(($OSTCOUNT - 1)) || error "setstripe"
3008                 touch $DIR/d65/f3
3009                 $LVERIFY $DIR/d65 $DIR/d65/f3 || error "lverify failed"
3010         fi
3011 }
3012 run_test 65c "directory setstripe $(($STRIPESIZE * 4)) 1 $(($OSTCOUNT - 1))"
3013
3014 test_65d() {
3015         mkdir -p $DIR/d65
3016         if [ $STRIPECOUNT -le 0 ]; then
3017                 sc=1
3018         elif [ $STRIPECOUNT -gt 160 ]; then
3019 #LOV_MAX_STRIPE_COUNT is 160
3020                 [ $OSTCOUNT -gt 160 ] && sc=160 || sc=$(($OSTCOUNT - 1))
3021         else
3022                 sc=$(($STRIPECOUNT - 1))
3023         fi
3024         $SETSTRIPE $DIR/d65 -s $STRIPESIZE -c $sc || error "setstripe"
3025         touch $DIR/d65/f4 $DIR/d65/f5
3026         $LVERIFY $DIR/d65 $DIR/d65/f4 $DIR/d65/f5 || error "lverify failed"
3027 }
3028 run_test 65d "directory setstripe $STRIPESIZE -1 stripe_count =============="
3029
3030 test_65e() {
3031         mkdir -p $DIR/d65
3032
3033         $SETSTRIPE $DIR/d65 || error "setstripe"
3034         $GETSTRIPE -v $DIR/d65 | grep "Default" || error "no stripe info failed"
3035         touch $DIR/d65/f6
3036         $LVERIFY $DIR/d65 $DIR/d65/f6 || error "lverify failed"
3037 }
3038 run_test 65e "directory setstripe defaults ======================="
3039
3040 test_65f() {
3041         mkdir -p $DIR/d65f
3042         $RUNAS $SETSTRIPE $DIR/d65f && error "setstripe succeeded" || true
3043 }
3044 run_test 65f "dir setstripe permission (should return error) ==="
3045
3046 test_65g() {
3047         mkdir -p $DIR/d65
3048         $SETSTRIPE $DIR/d65 -s $(($STRIPESIZE * 2)) -i 0 -c 1 || error "setstripe"
3049         $SETSTRIPE -d $DIR/d65 || error "setstripe"
3050         $GETSTRIPE -v $DIR/d65 | grep "Default" || \
3051                 error "delete default stripe failed"
3052 }
3053 run_test 65g "directory setstripe -d ==========================="
3054
3055 test_65h() {
3056         mkdir -p $DIR/d65
3057         $SETSTRIPE $DIR/d65 -s $(($STRIPESIZE * 2)) -i 0 -c 1 || error "setstripe"
3058         mkdir -p $DIR/d65/dd1
3059         [ "`$GETSTRIPE -v $DIR/d65 | grep "^count"`" == \
3060           "`$GETSTRIPE -v $DIR/d65/dd1 | grep "^count"`" ] || error "stripe info inherit failed"
3061 }
3062 run_test 65h "directory stripe info inherit ===================="
3063
3064 test_65i() { # bug6367
3065         $SETSTRIPE $MOUNT -s 65536 -c -1
3066 }
3067 run_test 65i "set non-default striping on root directory (bug 6367)="
3068
3069 test_65ia() { # bug12836
3070         $LFS getstripe $MOUNT || error "getstripe $MOUNT failed"
3071 }
3072 run_test 65ia "getstripe on -1 default directory striping"
3073
3074 test_65ib() { # bug12836
3075         $LFS getstripe -v $MOUNT || error "getstripe -v $MOUNT failed"
3076 }
3077 run_test 65ib "getstripe -v on -1 default directory striping"
3078
3079 test_65ic() { # bug12836
3080         $LFS find -mtime -1 $MOUNT || error "find $MOUNT failed"
3081 }
3082 run_test 65ic "new find on -1 default directory striping"
3083
3084 test_65j() { # bug6367
3085         sync; sleep 1
3086         # if we aren't already remounting for each test, do so for this test
3087         if [ "$CLEANUP" = ":" -a "$I_MOUNTED" = "yes" ]; then
3088                 cleanup || error "failed to unmount"
3089                 setup
3090         fi
3091         $SETSTRIPE -d $MOUNT || error "setstripe failed"
3092 }
3093 run_test 65j "set default striping on root directory (bug 6367)="
3094
3095 test_65k() { # bug11679
3096         [ "$OSTCOUNT" -lt 2 ] && skip "too few OSTs" && return
3097         remote_mds_nodsh && skip "remote MDS with nodsh" && return
3098
3099         echo "Check OST status: "
3100         MDS_OSCS=`do_facet $SINGLEMDS lctl dl | awk '/[oO][sS][cC].*md[ts]/ { print $4 }'`
3101         for OSC in $MDS_OSCS; do
3102                 echo $OSC "is activate"
3103                 do_facet $SINGLEMDS lctl --device %$OSC activate
3104         done
3105         do_facet client mkdir -p $DIR/$tdir
3106         for INACTIVE_OSC in $MDS_OSCS; do
3107                 echo $INACTIVE_OSC "is Deactivate:"
3108                 do_facet $SINGLEMDS lctl --device  %$INACTIVE_OSC deactivate
3109                 for STRIPE_OSC in $MDS_OSCS; do
3110                         STRIPE_OST=`osc_to_ost $STRIPE_OSC`
3111                         STRIPE_INDEX=`do_facet $SINGLEMDS lctl get_param -n lov.*md*.target_obd |
3112                                       grep $STRIPE_OST | awk -F: '{print $1}' | head -n 1`
3113
3114                         [ -f $DIR/$tdir/${STRIPE_INDEX} ] && continue
3115                         echo "$SETSTRIPE $DIR/$tdir/${STRIPE_INDEX} -i ${STRIPE_INDEX} -c 1"
3116                         do_facet client $SETSTRIPE $DIR/$tdir/${STRIPE_INDEX} -i ${STRIPE_INDEX} -c 1
3117                         RC=$?
3118                         [ $RC -ne 0 ] && error "setstripe should have succeeded"
3119                 done
3120                 do_facet client rm -f $DIR/$tdir/*
3121                 echo $INACTIVE_OSC "is Activate."
3122                 do_facet $SINGLEMDS lctl --device  %$INACTIVE_OSC activate
3123         done
3124 }
3125 run_test 65k "validate manual striping works properly with deactivated OSCs"
3126
3127 test_65l() { # bug 12836
3128         mkdir -p $DIR/$tdir/test_dir
3129         $SETSTRIPE $DIR/$tdir/test_dir -c -1
3130         $LFS find -mtime -1 $DIR/$tdir >/dev/null
3131 }
3132 run_test 65l "lfs find on -1 stripe dir ========================"
3133
3134 # bug 2543 - update blocks count on client
3135 test_66() {
3136         COUNT=${COUNT:-8}
3137         dd if=/dev/zero of=$DIR/f66 bs=1k count=$COUNT
3138         sync; sleep 1; sync
3139         BLOCKS=`ls -s $DIR/f66 | awk '{ print $1 }'`
3140         [ $BLOCKS -ge $COUNT ] || error "$DIR/f66 blocks $BLOCKS < $COUNT"
3141 }
3142 run_test 66 "update inode blocks count on client ==============="
3143
3144 LLOOP=
3145 cleanup_68() {
3146         trap 0
3147         if [ ! -z "$LLOOP" ]; then
3148                 if swapon -s | grep -q $LLOOP; then
3149                         swapoff $LLOOP || error "swapoff failed"
3150                 fi
3151
3152                 $LCTL blockdev_detach $LLOOP || error "detach failed"
3153                 rm -f $LLOOP
3154                 unset LLOOP
3155         fi
3156         rm -f $DIR/f68*
3157 }
3158
3159 meminfo() {
3160         awk '($1 == "'$1':") { print $2 }' /proc/meminfo
3161 }
3162
3163 swap_used() {
3164         swapon -s | awk '($1 == "'$1'") { print $4 }'
3165 }
3166
3167 # test case for lloop driver, basic function
3168 test_68a() {
3169         [ "$UID" != 0 ] && skip "must run as root" && return
3170
3171         grep -q llite_lloop /proc/modules
3172         [ $? -ne 0 ] && skip "can't find module llite_lloop" && return
3173
3174         LLOOP=$TMP/lloop.`date +%s`.`date +%N`
3175         dd if=/dev/zero of=$DIR/f68a bs=4k count=1024
3176         $LCTL blockdev_attach $DIR/f68a $LLOOP || error "attach failed"
3177
3178         trap cleanup_68 EXIT
3179
3180         directio rdwr $LLOOP 0 1024 4096 || error "direct write failed"
3181         directio rdwr $LLOOP 0 1025 4096 && error "direct write should fail"
3182
3183         cleanup_68
3184 }
3185 run_test 68a "lloop driver - basic test ========================"
3186
3187 # excercise swapping to lustre by adding a high priority swapfile entry
3188 # and then consuming memory until it is used.
3189 test_68b() {  # was test_68
3190         [ "$UID" != 0 ] && skip "must run as root" && return
3191         lctl get_param -n devices | grep -q obdfilter && \
3192                 skip "local OST" && return
3193
3194         grep -q llite_lloop /proc/modules
3195         [ $? -ne 0 ] && skip "can't find module llite_lloop" && return
3196
3197         [ -z "`$LCTL list_nids | grep -v tcp`" ] && \
3198                 skip "can't reliably test swap with TCP" && return
3199
3200         MEMTOTAL=`meminfo MemTotal`
3201         NR_BLOCKS=$((MEMTOTAL>>8))
3202         [[ $NR_BLOCKS -le 2048 ]] && NR_BLOCKS=2048
3203
3204         LLOOP=$TMP/lloop.`date +%s`.`date +%N`
3205         dd if=/dev/zero of=$DIR/f68b bs=64k seek=$NR_BLOCKS count=1
3206         mkswap $DIR/f68b
3207
3208         $LCTL blockdev_attach $DIR/f68b $LLOOP || error "attach failed"
3209
3210         trap cleanup_68 EXIT
3211
3212         swapon -p 32767 $LLOOP || error "swapon $LLOOP failed"
3213
3214         echo "before: `swapon -s | grep $LLOOP`"
3215         $MEMHOG $MEMTOTAL || error "error allocating $MEMTOTAL kB"
3216         echo "after: `swapon -s | grep $LLOOP`"
3217         SWAPUSED=`swap_used $LLOOP`
3218
3219         cleanup_68
3220
3221         [ $SWAPUSED -eq 0 ] && echo "no swap used???" || true
3222 }
3223 run_test 68b "support swapping to Lustre ========================"
3224
3225 # bug5265, obdfilter oa2dentry return -ENOENT
3226 # #define OBD_FAIL_OST_ENOENT 0x217
3227 test_69() {
3228         remote_ost_nodsh && skip "remote OST with nodsh" && return
3229
3230         f="$DIR/$tfile"
3231         $SETSTRIPE $f -c 1 -i 0
3232
3233         $DIRECTIO write ${f}.2 0 1 || error "directio write error"
3234
3235         do_facet ost1 lctl set_param fail_loc=0x217
3236         truncate $f 1 # vmtruncate() will ignore truncate() error.
3237         $DIRECTIO write $f 0 2 && error "write succeeded, expect -ENOENT"
3238
3239         do_facet ost1 lctl set_param fail_loc=0
3240         $DIRECTIO write $f 0 2 || error "write error"
3241
3242         cancel_lru_locks osc
3243         $DIRECTIO read $f 0 1 || error "read error"
3244
3245         do_facet ost1 lctl set_param fail_loc=0x217
3246         $DIRECTIO read $f 1 1 && error "read succeeded, expect -ENOENT"
3247
3248         do_facet ost1 lctl set_param fail_loc=0
3249         rm -f $f
3250 }
3251 run_test 69 "verify oa2dentry return -ENOENT doesn't LBUG ======"
3252
3253 test_71() {
3254     mkdir -p $DIR/$tdir
3255     sh rundbench -C -D $DIR/$tdir 2 || error "dbench failed!"
3256 }
3257 run_test 71 "Running dbench on lustre (don't segment fault) ===="
3258
3259 test_72() { # bug 5695 - Test that on 2.6 remove_suid works properly
3260         check_kernel_version 43 || return 0
3261         [ "$RUNAS_ID" = "$UID" ] && skip "RUNAS_ID = UID = $UID -- skipping" && return
3262
3263         # Check that testing environment is properly set up. Skip if not
3264         FAIL_ON_ERROR=false check_runas_id_ret $RUNAS_ID $RUNAS_ID $RUNAS || {
3265                 skip "User $RUNAS_ID does not exist - skipping"
3266                 return 0
3267         }
3268         # We had better clear the $DIR to get enough space for dd
3269         rm -rf $DIR/*
3270         touch $DIR/f72
3271         chmod 777 $DIR/f72
3272         chmod ug+s $DIR/f72
3273         $RUNAS dd if=/dev/zero of=$DIR/f72 bs=512 count=1 || error
3274         # See if we are still setuid/sgid
3275         test -u $DIR/f72 -o -g $DIR/f72 && error "S/gid is not dropped on write"
3276         # Now test that MDS is updated too
3277         cancel_lru_locks mdc
3278         test -u $DIR/f72 -o -g $DIR/f72 && error "S/gid is not dropped on MDS"
3279         true
3280         rm -f $DIR/f72
3281 }
3282 run_test 72 "Test that remove suid works properly (bug5695) ===="
3283
3284 # bug 3462 - multiple simultaneous MDC requests
3285 test_73() {
3286         mkdir $DIR/d73-1
3287         mkdir $DIR/d73-2
3288         multiop_bg_pause $DIR/d73-1/f73-1 O_c || return 1
3289         pid1=$!
3290
3291         lctl set_param fail_loc=0x80000129
3292         multiop $DIR/d73-1/f73-2 Oc &
3293         sleep 1
3294         lctl set_param fail_loc=0
3295
3296         multiop $DIR/d73-2/f73-3 Oc &
3297         pid3=$!
3298
3299         kill -USR1 $pid1
3300         wait $pid1 || return 1
3301
3302         sleep 25
3303
3304         $CHECKSTAT -t file $DIR/d73-1/f73-1 || return 4
3305         $CHECKSTAT -t file $DIR/d73-1/f73-2 || return 5
3306         $CHECKSTAT -t file $DIR/d73-2/f73-3 || return 6
3307
3308         rm -rf $DIR/d73-*
3309 }
3310 run_test 73 "multiple MDC requests (should not deadlock)"
3311
3312 test_74a() { # bug 6149, 6184
3313         #define OBD_FAIL_LDLM_ENQUEUE_OLD_EXPORT 0x30e
3314         #
3315         # very important to OR with OBD_FAIL_ONCE (0x80000000) -- otherwise it
3316         # will spin in a tight reconnection loop
3317         touch $DIR/f74a
3318         lctl set_param fail_loc=0x8000030e
3319         # get any lock that won't be difficult - lookup works.
3320         ls $DIR/f74a
3321         lctl set_param fail_loc=0
3322         true
3323         rm -f $DIR/f74a
3324 }
3325 run_test 74a "ldlm_enqueue freed-export error path, ls (shouldn't LBUG)"
3326
3327 test_74b() { # bug 13310
3328         #define OBD_FAIL_LDLM_ENQUEUE_OLD_EXPORT 0x30e
3329         #
3330         # very important to OR with OBD_FAIL_ONCE (0x80000000) -- otherwise it
3331         # will spin in a tight reconnection loop
3332         lctl set_param fail_loc=0x8000030e
3333         # get a "difficult" lock
3334         touch $DIR/f74b
3335         lctl set_param fail_loc=0
3336         true
3337         rm -f $DIR/f74b
3338 }
3339 run_test 74b "ldlm_enqueue freed-export error path, touch (shouldn't LBUG)"
3340
3341 JOIN=${JOIN:-"lfs join"}
3342 F75=$DIR/f75
3343 F128k=${F75}_128k
3344 FHEAD=${F75}_head
3345 FTAIL=${F75}_tail
3346 export T75_PREP=no
3347 test75_prep() {
3348         [ $T75_PREP = "yes" ] && return
3349         echo "using F75=$F75, F128k=$F128k, FHEAD=$FHEAD, FTAIL=$FTAIL"
3350
3351         dd if=/dev/urandom of=${F75}_128k bs=128k count=1 || error "dd failed"
3352         log "finished dd"
3353         chmod 777 ${F128k}
3354         T75_PREP=yes
3355 }
3356
3357 test_75a() {
3358         test75_prep
3359
3360         cp -p ${F128k} ${FHEAD}
3361         log "finished cp to $FHEAD"
3362         cp -p ${F128k} ${FTAIL}
3363         log "finished cp to $FTAIL"
3364         cat ${F128k} ${F128k} > ${F75}_sim_sim
3365
3366         $JOIN ${FHEAD} ${FTAIL} || error "join ${FHEAD} ${FTAIL} error"
3367         log "finished join $FHEAD to ${F75}_sim_sim"
3368         cmp ${FHEAD} ${F75}_sim_sim || error "${FHEAD} ${F75}_sim_sim differ"
3369         log "finished cmp $FHEAD to ${F75}_sim_sim"
3370         $CHECKSTAT -a ${FTAIL} || error "tail ${FTAIL} still exist after join"
3371 }
3372 run_test 75a "TEST join file ===================================="
3373
3374 test_75b() {
3375         test75_prep
3376
3377         cp -p ${F128k} ${FTAIL}
3378         cat ${F75}_sim_sim >> ${F75}_join_sim
3379         cat ${F128k} >> ${F75}_join_sim
3380         $JOIN ${FHEAD} ${FTAIL} || error "join ${FHEAD} ${FTAIL} error"
3381         cmp ${FHEAD} ${F75}_join_sim || \
3382                 error "${FHEAD} ${F75}_join_sim are different"
3383         $CHECKSTAT -a ${FTAIL} || error "tail ${FTAIL} exist after join"
3384 }
3385 run_test 75b "TEST join file 2 =================================="
3386
3387 test_75c() {
3388         test75_prep
3389
3390         cp -p ${F128k} ${FTAIL}
3391         cat ${F128k} >> ${F75}_sim_join
3392         cat ${F75}_join_sim >> ${F75}_sim_join
3393         $JOIN ${FTAIL} ${FHEAD} || error "join error"
3394         cmp ${FTAIL} ${F75}_sim_join || \
3395                 error "${FTAIL} ${F75}_sim_join are different"
3396         $CHECKSTAT -a ${FHEAD} || error "tail ${FHEAD} exist after join"
3397 }
3398 run_test 75c "TEST join file 3 =================================="
3399
3400 test_75d() {
3401         test75_prep
3402
3403         cp -p ${F128k} ${FHEAD}
3404         cp -p ${F128k} ${FHEAD}_tmp
3405         cat ${F75}_sim_sim >> ${F75}_join_join
3406         cat ${F75}_sim_join >> ${F75}_join_join
3407         $JOIN ${FHEAD} ${FHEAD}_tmp || error "join ${FHEAD} ${FHEAD}_tmp error"
3408         $JOIN ${FHEAD} ${FTAIL} || error "join ${FHEAD} ${FTAIL} error"
3409         cmp ${FHEAD} ${F75}_join_join ||error "${FHEAD} ${F75}_join_join differ"        $CHECKSTAT -a ${FHEAD}_tmp || error "${FHEAD}_tmp exist after join"
3410         $CHECKSTAT -a ${FTAIL} || error "tail ${FTAIL} exist after join (2)"
3411 }
3412 run_test 75d "TEST join file 4 =================================="
3413
3414 test_75e() {
3415         test75_prep
3416
3417         rm -rf ${FHEAD} || "delete join file error"
3418 }
3419 run_test 75e "TEST join file 5 (remove joined file) ============="
3420
3421 test_75f() {
3422         test75_prep
3423
3424         cp -p ${F128k} ${F75}_join_10_compare
3425         cp -p ${F128k} ${F75}_join_10
3426         for ((i = 0; i < 10; i++)); do
3427                 cat ${F128k} >> ${F75}_join_10_compare
3428                 cp -p ${F128k} ${FTAIL}
3429                 $JOIN ${F75}_join_10 ${FTAIL} || \
3430                         error "join ${F75}_join_10 ${FTAIL} error"
3431                 $CHECKSTAT -a ${FTAIL} || error "tail file exist after join"
3432         done
3433         cmp ${F75}_join_10 ${F75}_join_10_compare || \
3434                 error "files ${F75}_join_10 ${F75}_join_10_compare differ"
3435 }
3436 run_test 75f "TEST join file 6 (join 10 files) =================="
3437
3438 test_75g() {
3439         [ ! -f ${F75}_join_10 ] && echo "${F75}_join_10 missing" && return
3440         $LFS getstripe ${F75}_join_10
3441
3442         $OPENUNLINK ${F75}_join_10 ${F75}_join_10 || error "files unlink open"
3443
3444         ls -l $F75*
3445 }
3446 run_test 75g "TEST join file 7 (open unlink) ===================="
3447
3448 num_inodes() {
3449         awk '/lustre_inode_cache/ {print $2; exit}' /proc/slabinfo
3450 }