Whamcloud - gitweb
LU-14399 hsm: process hsm_actions in coordinator
[fs/lustre-release.git] / lustre / tests / conf-sanity.sh
index ed38515..7a9a105 100644 (file)
@@ -15,7 +15,7 @@ init_logging
 ALWAYS_EXCEPT="$CONF_SANITY_EXCEPT 32newtarball"
 
 # bug number for skipped test: LU-11915
-ALWAYS_EXCEPT="$ALWAYS_EXCEPT  110 115"
+ALWAYS_EXCEPT="$ALWAYS_EXCEPT 110"
 # UPDATE THE COMMENT ABOVE WITH BUG NUMBERS WHEN CHANGING ALWAYS_EXCEPT!
 
 if $SHARED_KEY; then
@@ -596,6 +596,27 @@ test_9() {
 }
 run_test 9 "test ptldebug and subsystem for mkfs"
 
+test_10a() {
+       setup
+
+       if ! combined_mgs_mds; then
+               files=$(do_facet mgs "find /{proc/fs,sys/fs,sys/kernel/debug}/lustre -type l -exec test ! -e {} \; -print")
+               [ -z $files ] || echo "MGS $files is a broken symlink"
+       fi
+
+       files=$(do_facet mds1 "find /{proc/fs,sys/fs,sys/kernel/debug}/lustre -type l -exec test ! -e {} \; -print")
+       [ -z $files ] || echo "MDS $files is a broken symlink"
+
+       files=$(do_facet ost1 "find /{proc/fs,sys/fs,sys/kernel/debug}/lustre -type l -exec test ! -e {} \; -print")
+       [ -z $files ] || echo "OSS $files is a broken symlink"
+
+       files=$(do_facet client "find /{proc/fs,sys/fs,sys/kernel/debug}/lustre -type l -exec test ! -e {} \; -print")
+       [ -z $files ] || echo "clients $files is a broken symlink"
+
+       cleanup || error "cleanup failed with rc $?"
+}
+run_test 10a "find lctl param broken symlinks"
+
 #
 # Test 16 was to "verify that lustre will correct the mode of OBJECTS".
 # But with new MDS stack we don't care about the mode of local objects
@@ -2079,11 +2100,10 @@ t32_test() {
                shall_cleanup_lustre=true
                $r $LCTL set_param debug="$PTLDEBUG"
 
-               # Leave re-enabling this to a separate patch for LU-11558
-               # t32_verify_quota $SINGLEMDS $fsname $tmp/mnt/lustre || {
-               #       error_noexit "verify quota failed"
-               #       return 1
-               #}
+               t32_verify_quota $SINGLEMDS $fsname $tmp/mnt/lustre || {
+                       error_noexit "verify quota failed"
+                       return 1
+               }
 
                if $r test -f $tmp/list; then
                        #
@@ -5015,8 +5035,9 @@ test_69() {
        if [ $num_create -gt 0 ]; then
                # Check the number of inodes available on OST0
                local files=0
-               local ifree=$($LFS df -i $MOUNT | awk '/OST0000/ { print $4 }')
-               log "On OST0, $ifree inodes available. Want $num_create."
+               local ifree=$($LFS df -i $MOUNT |
+                       awk '/OST0000/ { print $4 }'; exit ${PIPESTATUS[0]})
+               log "On OST0, $ifree inodes available. Want $num_create. rc=$?"
 
                $LFS setstripe -i 0 $DIR/$tdir ||
                        error "$LFS setstripe -i 0 $DIR/$tdir failed"
@@ -5052,8 +5073,9 @@ test_69() {
        local idx=$($LFS getstripe -i $DIR/$tdir/$tfile-last)
        [ $idx -ne 0 ] && error "$DIR/$tdir/$tfile-last on $idx not 0" || true
 
-       local iused=$($LFS df -i $MOUNT | awk '/OST0000/ { print $3 }')
-       log "On OST0, $iused used inodes"
+       local iused=$($LFS df -i $MOUNT |
+               awk '/OST0000/ { print $3 }'; exit ${PIPESTATUS[0]})
+       log "On OST0, $iused used inodes rc=$?"
        [ $iused -ge $((ost_max_pre/2 + 1000)) ] &&
                error "OST replacement created too many inodes; $iused"
        cleanup || error "cleanup failed with $?"
@@ -6000,7 +6022,8 @@ test_82a() { # LU-4665
        mount_client $MOUNT || error "mount client $MOUNT failed"
        wait_osts_up
 
-       $LFS df $MOUNT || error "$LFS df $MOUNT failed"
+       $LFS df $MOUNT
+       check_lfs_df_ret_val $? || error "$LFS df $MOUNT failed"
        mkdir $DIR/$tdir || error "mkdir $DIR/$tdir failed"
 
        stack_trap "do_nodes $(comma_list $(mdts_nodes)) \
@@ -6115,7 +6138,8 @@ test_82b() { # LU-4665
        mount_client $MOUNT || error "mount client $MOUNT failed"
 
        wait_osts_up
-       $LFS df $MOUNT || error "$LFS df $MOUNT failed"
+       $LFS df $MOUNT
+       check_lfs_df_ret_val $? || error "$LFS df $MOUNT failed"
        mkdir $DIR/$tdir || error "mkdir $DIR/$tdir failed"
 
        # Create a new pool and add OSTs into it.
@@ -6468,12 +6492,15 @@ test_89() { # LU-7131
 
        stopall
 
-       [ "$mds1_FSTYPE" == zfs ] && import_zpool mds1
+       if [[ "$mds1_FSTYPE" == zfs ]]; then
+               import_zpool mds1 || return ${PIPESTATUS[0]}
+       fi
+
        # Check that parameters are added correctly
        echo "tunefs --param $key=$val1"
-       do_facet mds "$TUNEFS --param $key=$val1 $mdsdev >/dev/null" ||
+       do_facet mds1 "$TUNEFS --param $key=$val1 $mdsdev >/dev/null" ||
                error "tunefs --param $key=$val1 failed"
-       params=$(do_facet mds $TUNEFS --dryrun $mdsdev) ||
+       params=$(do_facet mds1 $TUNEFS --dryrun $mdsdev) ||
                error "tunefs --dryrun failed"
        params=${params##*Parameters:}
        params=${params%%exiting*}
@@ -6482,9 +6509,9 @@ test_89() { # LU-7131
 
        # Check that parameters replace existing instances when added
        echo "tunefs --param $key=$val2"
-       do_facet mds "$TUNEFS --param $key=$val2 $mdsdev >/dev/null" ||
+       do_facet mds1 "$TUNEFS --param $key=$val2 $mdsdev >/dev/null" ||
                error "tunefs --param $key=$val2 failed"
-       params=$(do_facet mds $TUNEFS --dryrun $mdsdev) ||
+       params=$(do_facet mds1 $TUNEFS --dryrun $mdsdev) ||
                error "tunefs --dryrun failed"
        params=${params##*Parameters:}
        params=${params%%exiting*}
@@ -6495,9 +6522,9 @@ test_89() { # LU-7131
 
        # Check that a parameter is erased properly
        echo "tunefs --erase-param $key"
-       do_facet mds "$TUNEFS --erase-param $key $mdsdev >/dev/null" ||
+       do_facet mds1 "$TUNEFS --erase-param $key $mdsdev >/dev/null" ||
                error "tunefs --erase-param $key failed"
-       params=$(do_facet mds $TUNEFS --dryrun $mdsdev) ||
+       params=$(do_facet mds1 $TUNEFS --dryrun $mdsdev) ||
                error "tunefs --dryrun failed"
        params=${params##*Parameters:}
        params=${params%%exiting*}
@@ -6505,22 +6532,25 @@ test_89() { # LU-7131
                error "on-disk parameter not erased correctly via tunefs"
 
        # Check that all the parameters are erased
+       do_facet mds1 "$TUNEFS --param $key=$val1 $mdsdev >/dev/null" ||
+               error "tunefs --param $key=$val1 failed"
        echo "tunefs --erase-params"
-       do_facet mds "$TUNEFS --erase-params $mdsdev >/dev/null" ||
+       do_facet mds1 "$TUNEFS --erase-params $mdsdev >/dev/null" ||
                error "tunefs --erase-params failed"
-       params=$(do_facet mds $TUNEFS --dryrun $mdsdev) ||
+       params=$(do_facet mds1 $TUNEFS --dryrun $mdsdev) ||
                error "tunefs --dryrun failed"
        params=${params##*Parameters:}
        params=${params%%exiting*}
-       [ -z $params ] ||
-               error "all on-disk parameters not erased correctly via tunefs"
+       params=$(echo $params | tr ' ' '\n')
+       [ -z "$params" ] ||
+               error "all on-disk parameters not erased correctly via tunefs $params"
 
        # Check the order of options --erase-params and --param
        echo "tunefs --param $key=$val1 --erase-params"
-       do_facet mds \
+       do_facet mds1 \
                "$TUNEFS --param $key=$val1 --erase-params $mdsdev >/dev/null"||
                error "tunefs --param $key=$val1 --erase-params failed"
-       params=$(do_facet mds $TUNEFS --dryrun $mdsdev) ||
+       params=$(do_facet mds1 $TUNEFS --dryrun $mdsdev) ||
                error "tunefs --dryrun failed"
        params=${params##*Parameters:}
        params=${params%%exiting*}
@@ -6940,63 +6970,33 @@ generate_ldev_conf() {
        local ldevconfpath=$1
        local fstype=
        local fsldevformat=""
-       touch $ldevconfpath
+       rm -f $ldevconfpath
 
-       fstype=$(facet_fstype mgs)
-       if [ "$fstype" == zfs ]; then
-               fsldevformat="$fstype:"
-       else
+       local facets="mgs,$(get_facets OST),$(get_facets MDS)"
+       for facet in ${facets//,/ }; do
                fsldevformat=""
-       fi
-
-       printf "%s\t-\t%s-MGS0000\t%s%s\n" \
-               $mgs_HOST \
-               $FSNAME \
-               $fsldevformat \
-               $(mgsdevname) > $ldevconfpath
-
-       local mdsfo_host=$mdsfailover_HOST;
-       if [ -z "$mdsfo_host" ]; then
-               mdsfo_host="-"
-       fi
-
-       for num in $(seq $MDSCOUNT); do
-               fstype=$(facet_fstype mds$num)
-               if [ "$fstype" == zfs ]; then
-                       fsldevformat="$fstype:"
-               else
-                       fsldevformat=""
+               fstype=$(facet_fstype $facet)
+               [ "$fstype" = zfs ] && fsldevformat="$fstype:"
+               local host=$(facet_host $facet)
+               local fo="-"
+               local varfo=${facet}failover_HOST
+               if [ $facet == mgs ] && combined_mgs_mds; then
+                       varfo=mds1failover_HOST
                fi
-
-               printf "%s\t%s\t%s-MDT%04d\t%s%s\n" \
-                       $mds_HOST \
-                       $mdsfo_host \
+               [ -n "${!varfo}" ] && fo=${!varfo}
+               local type=$(echo $facet | tr -d "[:digit:]" | \
+                       tr "[:lower:]" "[:upper:]" | sed s/MDS/MDT/ )
+               local num=1
+               [ ${facet} == mgs ] ||
+                       num=$(facet_number $facet)
+               printf "%s\t%s\t%s-%s%04x\t%s%s\n" \
+                       ${host} \
+                       ${fo} \
                        $FSNAME \
-                       $num \
+                       $type \
+                       $(( num - 1 )) \
                        $fsldevformat \
-                       $(mdsdevname $num) >> $ldevconfpath
-       done
-
-       local ostfo_host=$ostfailover_HOST;
-       if [ -z "$ostfo_host" ]; then
-               ostfo_host="-"
-       fi
-
-       for num in $(seq $OSTCOUNT); do
-               fstype=$(facet_fstype ost$num)
-               if [ "$fstype" == zfs ]; then
-                       fsldevformat="$fstype:"
-               else
-                       fsldevformat=""
-               fi
-
-               printf "%s\t%s\t%s-OST%04d\t%s%s\n" \
-                       $ost_HOST \
-                       $ostfo_host \
-                       $FSNAME \
-                       $num \
-                       $fsldevformat \
-                       $(ostdevname $num) >> $ldevconfpath
+                       $(facet_device $facet) >> $ldevconfpath
        done
 
        echo "----- $ldevconfpath -----"
@@ -7018,8 +7018,8 @@ generate_nids() {
 }
 
 compare_ldev_output() {
-       ldev_output=$1
-       expected_output=$2
+       local ldev_output=$1
+       local expected_output=$2
 
        sort $expected_output -o $expected_output
        sort $ldev_output -o $ldev_output
@@ -7050,30 +7050,27 @@ test_92() {
        generate_nids $NIDSPATH
 
        # echo the mgs nid and compare it to environment variable MGSNID
-       # also, ldev.conf and nids is a server side thing, use the OSS
-       # hostname
-       local output
-       output=$($LDEV -c $LDEVCONFPATH -H $ost_HOST -n $NIDSPATH echo %m)
-
-       echo "-- START OF LDEV OUTPUT --"
-       echo -e "$output"
-       echo "--- END OF LDEV OUTPUT ---"
-
-       # ldev failed, error
-       if [ $? -ne 0 ]; then
-               rm $LDEVCONFPATH $NIDSPATH
-               error "ldev failed to execute!"
-       fi
-
-       # need to process multiple lines because of combined MGS and MDS
-       echo -e $output | awk '{ print $2 }' | while read -r line ; do
-               if [ "$line" != "$MGSNID" ]; then
-                       rm $LDEVCONFPATH $NIDSPATH
-                       error "ldev failed mgs nid '$line', expected '$MGSNID'"
-               fi
+       local facets="$(get_facets OST),$(get_facets MDS),mgs"
+       for facet in ${facets//,/ }; do
+               local host=$(facet_host $facet)
+               local output=$($LDEV -c $LDEVCONFPATH -H $host -n $NIDSPATH echo %m)
+
+               echo "-- START OF LDEV OUTPUT --"
+               echo -e "$output"
+               echo "--- END OF LDEV OUTPUT ---"
+
+               [ -z "$output" ] &&
+                       error "ldev failed to execute!"
+
+               # need to process multiple lines because of
+               # several targets on host
+               echo -e $output | awk '{ print $2 }' | while read -r line ; do
+                       [ "$line" = "$MGSNID" ] ||
+                               error "ldev failed mgs nid '$line', \
+                                       expected '$MGSNID'"
+               done
        done
-
-       rm $LDEVCONFPATH $NIDSPATH
+       rm -f $LDEVCONFPATH $NIDSPATH
 }
 run_test 92 "ldev returns MGS NID correctly in command substitution"
 
@@ -7132,11 +7129,11 @@ test_94() {
        printf "%s-MGS0000\n" $FSNAME > $EXPECTED_OUTPUT
 
        for num in $(seq $MDSCOUNT); do
-               printf "%s-MDT%04d\n" $FSNAME $num >> $EXPECTED_OUTPUT
+               printf "%s-MDT%04x\n" $FSNAME $((num - 1)) >> $EXPECTED_OUTPUT
        done
 
        for num in $(seq $OSTCOUNT); do
-               printf "%s-OST%04d\n" $FSNAME $num >> $EXPECTED_OUTPUT
+               printf "%s-OST%04x\n" $FSNAME $((num - 1)) >> $EXPECTED_OUTPUT
        done
 
        compare_ldev_output $LDEV_OUTPUT $EXPECTED_OUTPUT
@@ -7264,19 +7261,13 @@ test_96() {
 
        echo "$mgs_HOST-$(facet_fstype mgs)" > $EXPECTED_OUTPUT
 
-       if [ "$mgs_HOST" == "$mds_HOST" ]; then
-               for num in $(seq $MDSCOUNT); do
-                       echo "$mds_HOST-$(facet_fstype mds$num)" \
+       local facets="$(get_facets OST),$(get_facets MDS)"
+       for facet in ${facets//,/ }; do
+               local host=$(facet_host $facet)
+               [ "$mgs_HOST" == "$host" ] &&
+                       echo "$host-$(facet_fstype $facet)" \
                        >> $EXPECTED_OUTPUT
-               done
-       fi
-
-       if [ "$mgs_HOST" == "$ost_HOST" ]; then
-               for num in $(seq $OSTCOUNT); do
-                       echo "$ost_HOST-$(facet_fstype ost$num)" \
-                       >> $EXPECTED_OUTPUT
-               done
-       fi
+       done
 
        compare_ldev_output $LDEV_OUTPUT $EXPECTED_OUTPUT
 
@@ -7312,7 +7303,7 @@ test_97() {
        fi
 
        for num in $(seq $MDSCOUNT); do
-               printf "%s-MDT%04d\n" $FSNAME $num >> $EXPECTED_OUTPUT
+               printf "%s-MDT%04x\n" $FSNAME $((num - 1)) >> $EXPECTED_OUTPUT
        done
 
        compare_ldev_output $LDEV_OUTPUT $EXPECTED_OUTPUT
@@ -7332,7 +7323,7 @@ test_97() {
 
        rm $EXPECTED_OUTPUT
        for num in $(seq $OSTCOUNT); do
-               printf "%s-OST%04d\n" $FSNAME $num >> $EXPECTED_OUTPUT
+               printf "%s-OST%04x\n" $FSNAME $((num - 1)) >> $EXPECTED_OUTPUT
        done
 
        compare_ldev_output $LDEV_OUTPUT $EXPECTED_OUTPUT
@@ -8028,7 +8019,6 @@ test_108b() {
 }
 run_test 108b "migrate from ZFS to ldiskfs"
 
-
 #
 # set number of permanent parameters
 #
@@ -8492,20 +8482,21 @@ test_115() {
        echo "$dbfs_ver" | egrep -w "1.44.3.wc1|1.44.5.wc1|1.45.2.wc1" &&
                skip_env "This version of debugfs doesn't show inode number"
 
-       is_dm_flakey_dev $SINGLEMDS $(mdsdevname 1) &&
-               skip "This test can not be executed on flakey dev"
-
        IMAGESIZE=$((3072 << 30)) # 3072 GiB
 
        stopall
 
+       local saved_flakey=${FLAKEY}
+       stack_trap "FLAKEY=$saved_flakey" EXIT
+       FLAKEY=false
+
        echo "client1: "
        lctl dl
        mount | grep lustre
        echo "mds1: "
-       do_facet mds1 "hostname; ifconfig; lctl dl; mount"
+       do_facet mds1 "hostname; lctl dl; mount"
        echo "ost1: "
-       do_facet ost1 "hostname; ifconfig; lctl dl; mount"
+       do_facet ost1 "hostname; lctl dl; mount"
        # We need MDT size 3072GB, because it is smallest
        # partition that can store 2B inodes
        do_facet $SINGLEMDS "mkdir -p $TMP/$tdir"
@@ -8532,21 +8523,23 @@ test_115() {
 
        mkdir -p $DIR/$tdir || error "mkdir $DIR/$tdir fail"
        goal="/sys/fs/ldiskfs/$(basename $mdsdev)/inode_goal"
-echo goal: $goal
+       echo goal: $goal
        # 2147483648 is 0x80000000
        do_facet $SINGLEMDS "echo 2147483648 >> $goal; grep . $goal"
        touch $DIR/$tdir/$tfile
 
-       # attrs from 1 to 15 go to block, 16th - to inode
-       for i in {1..16}; do
+       # attrs from 1 to 16 go to block, 17th - to inode
+       for i in {1..17}; do
                local nm="trusted.ea$i"
                setfattr -n $nm -v $(printf "xattr%0250d" $i) $DIR/$tdir/$tfile
        done
 
+       do_facet $SINGLEMDS $DEBUGFS -c -R "stat ROOT/$tdir/$tfile" $mdsdev
+
        # inode <2147483649> trusted.ea16 (255)
        local inode_num=$(do_facet $SINGLEMDS \
                        "$DEBUGFS -c -R 'stat ROOT/$tdir/$tfile' $mdsdev" |
-                        awk '/ea16/ { print $2 }' |
+                        awk '/ea17/ { print $2 }' |
                         sed -e 's/>//' -e 's/<//' -e 's/\"//')
        echo "inode num: $inode_num"
        [ $inode_num -ge 2147483648 ] || error "inode $inode_num too small"
@@ -8609,6 +8602,50 @@ test_117() {
 }
 run_test 117 "lctl get_param return errors properly"
 
+test_119() {
+       local had_config
+       local size_mb
+
+       [[ "$MDSCOUNT" -ge 2 ]] || skip "Need more at least 2 MDTs"
+
+       had_config=$(do_facet mds1 "$LCTL get_param debug | grep config")
+       do_facet mds1 "$LCTL set_param debug=+config"
+       do_facet mds1 "$LCTL clear"
+
+       setup
+       do_facet mds2 "$TUNEFS --writeconf $(mdsdevname 2)" &>/dev/null
+       # mount after writeconf will make "add osp" added to mdt0 config:
+       # 53 (224)marker  60 (flags=0x01, v2.5.1.0) lustre-MDT0001  'add osp'
+       # 54 (080)add_uuid  nid=...  0:  1:...
+       # 55 (144)attach    0:lustre-MDT0001-osp-MDT0000  1:osp  2:...
+       # 56 (144)setup     0:lustre-MDT0001-osp-MDT0000  1:...  2:...
+       # 57 (136)modify_mdc_tgts add 0:lustre-MDT0000-mdtlov  1:...  2:1  3:1
+       # duplicate modify_mdc_tgts caused crashes
+
+       debug_size_save
+       # using larger debug_mb size to avoid lctl dk log truncation
+       size_mb=$((DEBUG_SIZE_SAVED * 4))
+       for i in {1..3}; do
+               stop_mdt 2
+               # though config processing stops after failed attach and setup
+               # it will proceed after the failed command after each writeconf
+               # this is the original scenario of the issue
+               do_facet mds2 "$TUNEFS --writeconf $(mdsdevname 2)" &>/dev/null
+               do_facet mds1 "$LCTL set_param debug_mb=$size_mb"
+               start_mdt 2
+
+               wait_update_facet_cond mds1 \
+                       "$LCTL dk | grep -c Processed.log.$FSNAME-MDT0000" \
+                       ">" 1 300
+       done
+       debug_size_restore
+
+       [[ -z "$had_config" ]] && do_facet mds1 lctl set_param debug=-config
+
+       reformat
+}
+run_test 119 "writeconf on slave mdt shouldn't duplicate mdc/osp and crash"
+
 test_120() { # LU-11130
        [ "$MDSCOUNT" -lt 2 ] && skip "mdt count < 2"
        [ "$mds1_FSTYPE" != ldiskfs ] &&
@@ -8634,6 +8671,18 @@ test_120() { # LU-11130
 }
 run_test 120 "cross-target rename should not create bad symlinks"
 
+test_121(){
+       stopall
+       start_mgsmds || error "MGS MDS Start failed"
+       fail mgs
+       stop_mds || error "Stopping MDSes failed"
+       #failback
+       start_mds
+       fail mgs
+       stop_mds || error "Stopping MDSes failed"
+}
+run_test 121 "failover MGS"
+
 test_122a() {
        [ $MDSCOUNT -lt 2 ] && skip "needs >= 2 MDTs"
        [[ "$OST1_VERSION" -ge $(version_code 2.11.53) ]] ||
@@ -8679,9 +8728,10 @@ test_122b() {
 
        # Check the number of inodes available on OST0
        local files=0
-       local ifree=$($LFS df -i $MOUNT | awk '/OST0000/ { print $4 }')
+       local ifree=$($LFS df -i $MOUNT |
+               awk '/OST0000/ { print $4 }'; exit ${PIPESTATUS[0]})
 
-       log "On OST0, $ifree inodes available. Want $num_create."
+       log "On OST0, $ifree inodes available. Want $num_create. rc=$?"
 
        if [ $ifree -lt 10000 ]; then
                files=$(( ifree - 50 ))
@@ -8698,6 +8748,7 @@ test_122b() {
                        error "unlinkmany failed unlink $files files"
        done
        sync
+       touch $DIR/$tdir/$tfile
        do_facet ost1 sync
        #we need a write req during recovery for ofd_seq_load
        replay_barrier ost1
@@ -8817,22 +8868,32 @@ test_123ad() { # LU-11566
 run_test 123ad "llog_print shows all records"
 
 test_123ae() { # LU-11566
+       local max
+       local mgs_arg=""
+       local log
+       local id
+       local orig
+       local new
+       local rpcs
+
        remote_mgs_nodsh && skip "remote MGS with nodsh"
        [ -d $MOUNT/.lustre ] || setupall
 
-       local max=$($LCTL get_param -n osc.*-OST0000-*.max_dirty_mb | head -1)
-       local mgs_arg=""
-
+       max=$($LCTL get_param -n osc.*-OST0000-*.max_dirty_mb | head -1)
+       pgs=$($LCTL get_param -n osc.*-OST0000-*.max_pages_per_rpc | head -1)
        [[ $MGS_VERSION -gt $(version_code 2.13.54) ]] ||
                mgs_arg="--device MGS"
 
        if do_facet mgs "$LCTL help llog_cancel" 2>&1| grep -q -- --log_id; then
                # save one set_param -P record in case none exist
-               do_facet mgs $LCTL set_param -P osc.*.max_dirty_mb=$max
 
-               local log=params
-               local orig=$(do_facet mgs $LCTL $mgs_arg llog_print $log |
-                            tail -1 | awk '{ print $4 }' | tr -d , )
+               do_facet mgs $LCTL set_param -P osc.*.max_pages_per_rpc=$pgs
+               stack_trap "do_facet mgs $LCTL set_param -P -d \
+                               osc.*.max_pages_per_rpc"
+
+               log=params
+               orig=$(do_facet mgs $LCTL $mgs_arg llog_print $log |
+                       tail -1 | awk '{ print $4 }' | tr -d , )
                do_facet mgs $LCTL set_param -P osc.*.max_dirty_mb=$max
                do_facet mgs $LCTL $mgs_arg llog_print $log | tail -1 |
                        grep "parameter: osc.*.max_dirty_mb" ||
@@ -8840,9 +8901,8 @@ test_123ae() { # LU-11566
 
                # - { index: 71, event: set_param, device: general,
                #     param: osc.*.max_dirty_mb, value: 256 }
-               local id=$(do_facet mgs $LCTL $mgs_arg llog_print $log |
-                          tail -1 | awk '{ print $4 }' | tr -d , )
-
+               id=$(do_facet mgs $LCTL $mgs_arg llog_print $log |
+                    tail -1 | awk '{ print $4 }' | tr -d , )
                do_facet mgs $LCTL $mgs_arg llog_cancel $log --log_idx=$id
                local new=$(do_facet mgs $LCTL $mgs_arg llog_print $log |
                            tail -1 | awk '{ print $4 }' | tr -d , )
@@ -8853,18 +8913,25 @@ test_123ae() { # LU-11566
        # test old positional parameters for a while still
        if [ "$MGS_VERSION" -le $(version_code 3.1.53) ]; then
                log=$FSNAME-client
+
+               do_facet mgs $LCTL conf_param \
+                       $FSNAME-OST0000.osc.max_pages_per_rpc=$pgs
+               stack_trap "do_facet mgs $LCTL conf_param -d \
+                               $FSNAME-OST0000.osc.max_pages_per_rpc"
+
                orig=$(do_facet mgs $LCTL --device MGS llog_print $log |
                       tail -1 | awk '{ print $4 }' | tr -d , )
                do_facet mgs $LCTL conf_param $FSNAME-OST0000.osc.max_dirty_mb=$max
                do_facet mgs $LCTL --device MGS llog_print $log |
                        tail -1 | grep "parameter: osc.max_dirty_mb" ||
                        error "old conf_param wasn't stored in params log"
-
+               do_facet mgs $LCTL --device MGS llog_print $log
                # - { index: 71, event: conf_param, device: testfs-OST0000-osc,
                #     param: osc.max_dirty_mb=256 }
                id=$(do_facet mgs $LCTL --device MGS llog_print $log |
                     tail -1 | awk '{ print $4 }' | tr -d , )
                do_facet mgs $LCTL --device MGS llog_cancel $log $id
+               do_facet mgs $LCTL --device MGS llog_print $log
                new=$(do_facet mgs $LCTL --device MGS llog_print $log |
                      tail -1 | awk '{ print $4 }' | tr -d , )
                (( new == orig )) ||
@@ -8922,6 +8989,36 @@ test_123af() { #LU-13609
 }
 run_test 123af "llog_catlist can show all config files correctly"
 
+test_123ag() { # LU-15142
+       local rec
+       local orig_val
+
+       remote_mgs_nodsh && skip "remote MGS with nodsh"
+       (( $MGS_VERSION >= $(version_code 2.14.55) )) ||
+               skip "Need server version least 2.14.55"
+
+       [ -d $MOUNT/.lustre ] || setup
+
+       orig_val=$(do_facet mgs $LCTL get_param jobid_name)
+       stack_trap "do_facet mgs $LCTL set_param -P jobid_name=$orig_val"
+
+       do_facet mgs $LCTL set_param -P jobid_name="TESTNAME1"
+       do_facet mgs $LCTL set_param -P -d jobid_name
+       rec=$(do_facet mgs $LCTL --device MGS llog_print params |
+               grep -c jobid_name)
+       (( rec == 0 )) || error "parameter was not deleted, check #1"
+       do_facet mgs $LCTL set_param -P jobid_name="TESTNAME1"
+       rec=$(do_facet mgs $LCTL --device MGS llog_print params |
+               grep -c jobid_name)
+       (( rec == 1)) || error "parameter is not set"
+       # usage with ordinary set_param format works too
+       do_facet mgs $LCTL set_param -P -d jobid_name="ANY"
+       rec=$(do_facet mgs $LCTL --device MGS llog_print params |
+               grep -c jobid_name)
+       (( rec == 0 )) || error "parameter was not deleted, check #2"
+}
+run_test 123ag "llog_print skips values deleted by set_param -P -d"
+
 test_123F() {
        remote_mgs_nodsh && skip "remote MGS with nodsh"
 
@@ -8944,10 +9041,7 @@ test_123F() {
        echo "Writeconf"
        writeconf_all
        echo "Remounting"
-       mountmgs
-       mountmds
-       mountoss
-       mountcli
+       setup_noconfig
 
        # Reapply the config from before
        echo "Setting configuration parameters"
@@ -9227,6 +9321,104 @@ test_128()
 }
 run_test 128 "Force using remote logs with --nolocallogs"
 
+test_129()
+{
+       stopall
+       start_mds || error "MDS start failed"
+       format_ost 1
+       start ost1 $(ostdevname 1) $OST_MOUNT_OPTS &&
+               error "start ost1 should fail" || true
+       start ost1 $(ostdevname 1) $OST_MOUNT_OPTS &&
+               error "second start ost1 should fail" || true
+       do_facet ost1 "$TUNEFS --writeconf $(ostdevname 1)"
+       start ost1 $(ostdevname 1) $OST_MOUNT_OPTS ||
+               error "start ost1 failed"
+       stop ost1
+       stop_mds
+}
+run_test 129 "attempt to connect an OST with the same index should fail"
+
+test_130()
+{
+       [ $MDSCOUNT -lt 2 ] && skip "needs >= 2 MDTs"
+       setupall
+       stop_mdt 2 || error "mdt2 stop failed"
+       do_facet mds2 "$TUNEFS --writeconf $(mdsdevname 2)"
+       start_mdt 2 || error "mdt2 start failed"
+       do_facet mds2 "$LCTL dl" | grep MDT0001-osp-MDT0001 &&
+               error "Illegal OSP device created" || true
+}
+run_test 130 "re-register an MDT after writeconf"
+
+test_131() {
+       [ "$mds1_FSTYPE" == "ldiskfs" ] || skip "ldiskfs only test"
+       do_facet mds1 $DEBUGFS -R features $(mdsdevname 1) |
+               grep -q project || skip "skip project quota not supported"
+
+       local projid
+
+       setupall
+       test_mkdir -c $MDSCOUNT -p $DIR/$tdir
+       $LFS project -p 1000 $DIR/$tdir || error "set dir project id failed"
+       createmany -o $DIR/$tdir/f 512
+       for ((i = 0; i < 512; ++i)); do
+               $LFS project -p $i $DIR/$tdir/f${i} ||
+                       error "set f${i} project id failed"
+       done
+
+       test_mkdir -c $MDSCOUNT -p $DIR/$tdir.inherit
+       $LFS project -p 1001 -s $DIR/$tdir.inherit
+       createmany -o $DIR/$tdir.inherit/f 128
+       (( $($LFS project $DIR/$tdir.inherit/f* |
+               awk '$1 == 1001 { print }' | wc -l) == 128 )) ||
+                       error "files did not inherit projid 1001"
+
+       stopall
+
+       for i in $(seq $MDSCOUNT); do
+               mds_backup_restore mds$i ||
+                       error "Backup/restore on mds$i failed"
+       done
+
+       setupall
+
+       projid=($($LFS project -d $DIR/$tdir))
+       [ ${projid[0]} == "1000" ] ||
+               error "projid expected 1000 not ${projid[0]}"
+       for ((i = 0; i < 512; ++i)); do
+               projid=($($LFS project $DIR/$tdir/f${i}))
+               [ ${projid[0]} == "$i" ] ||
+                       error "projid expected $i not ${projid[0]}"
+       done
+
+       (( $($LFS project $DIR/$tdir.inherit/f* |
+               awk '$1 == 1001 { print }' | wc -l) == 128 )) ||
+                       error "restore did not copy projid 1001"
+}
+run_test 131 "MDT backup restore with project ID"
+
+test_132() {
+       local err_cnt
+       local err_cnt2
+
+       reformat
+       combined_mgs_mds || start_mgs || error "unable to start MGS"
+       start_mdt 1 || error "unable to start mdt1"
+
+       err_cnt=$(do_facet mds1 dmesg | grep -c "cannot take the layout locks")
+       stop_mdt 1 || error "stop mdt1 failed"
+
+       [ "$mds1_FSTYPE" == zfs ] && import_zpool mds1
+       do_facet mds1 $TUNEFS --param mdt.hsm_control=enabled $(mdsdevname 1) ||
+               error "tunefs failed"
+       start_mdt 1 || error "cannot start mdt1"
+
+       err_cnt2=$(do_facet mds1 dmesg | grep -c "cannot take the layout locks")
+       [ $err_cnt -eq $err_cnt2 ] || error "Can not take the layout lock"
+       stop_mdt 1 || error "stop mdt1 failed"
+}
+run_test 132 "hsm_actions processed after failover"
+
 if ! combined_mgs_mds ; then
        stop mgs
 fi