lustre/tests/parallel-scale-nfs.sh

   1 #!/bin/bash
   2
   3 NFSVERSION=${1:-"3"}
   4
   5 LUSTRE=${LUSTRE:-$(dirname $0)/..}
   6 . $LUSTRE/tests/test-framework.sh
   7 # only call init_test_env if this script is called directly
   8 if [[ -z "$TESTSUITE" || "$TESTSUITE" = "$(basename $0 .sh)" ]]; then
   9         init_test_env "$@"
  10 else
  11         . ${CONFIG:=$LUSTRE/tests/cfg/$NAME.sh}
  12
  13 fi
  14
  15 init_logging
  16
  17 racer=$LUSTRE/tests/racer/racer.sh
  18 . $LUSTRE/tests/setup-nfs.sh
  19
  20 # lustre client used as nfs server (default is mds node)
  21 LUSTRE_CLIENT_NFSSRV=${LUSTRE_CLIENT_NFSSRV:-$(facet_active_host $SINGLEMDS)}
  22 NFS_SRVMNTPT=${NFS_SRVMNTPT:-$MOUNT}
  23 NFS_CLIENTS=${NFS_CLIENTS:-$CLIENTS}
  24 NFS_CLIENTS=$(exclude_items_from_list $NFS_CLIENTS $LUSTRE_CLIENT_NFSSRV)
  25 NFS_CLIMNTPT=${NFS_CLIMNTPT:-$MOUNT}
  26
  27 [ -z "$NFS_CLIENTS" ] &&
  28         skip_env "need at least two nodes: nfs server and nfs client"
  29
  30 [ "$NFSVERSION" = "4" ] && cl_mnt_opt="${MOUNT_OPTS:+$MOUNT_OPTS,}32bitapi" ||
  31         cl_mnt_opt=""
  32
  33 check_and_setup_lustre
  34 $LFS df
  35 TESTDIR=$NFS_CLIMNTPT/d0.$(basename $0 .sh)
  36 mkdir -p $TESTDIR
  37 $LFS setstripe -c -1 $TESTDIR
  38
  39 # first unmount all the lustre clients
  40 cleanup_mount $MOUNT
  41
  42 cleanup_exit () {
  43         trap 0
  44         cleanup
  45         check_and_cleanup_lustre
  46         exit
  47 }
  48
  49 cleanup () {
  50         cleanup_nfs "$LUSTRE_CLIENT_NFSSRV" "$NFS_SRVMNTPT" \
  51                         "$NFS_CLIENTS" "$NFS_CLIMNTPT" || \
  52                 error_noexit false "failed to cleanup nfs"
  53         zconf_umount $LUSTRE_CLIENT_NFSSRV $NFS_SRVMNTPT force ||
  54                 error_noexit false "failed to umount lustre on"\
  55                         "$LUSTRE_CLIENT_NFSSRV"
  56         # restore lustre mount
  57         restore_mount $MOUNT ||
  58                 error_noexit false "failed to mount lustre"
  59 }
  60
  61 trap cleanup_exit EXIT SIGHUP SIGINT
  62
  63 zconf_mount $LUSTRE_CLIENT_NFSSRV $NFS_SRVMNTPT "$cl_mnt_opt" ||
  64         error "mount lustre on $LUSTRE_CLIENT_NFSSRV failed"
  65
  66 # setup the nfs
  67 setup_nfs "$LUSTRE_CLIENT_NFSSRV" "$NFS_SRVMNTPT" "$NFS_CLIENTS" \
  68                 "$NFS_CLIMNTPT" "$NFSVERSION" || \
  69         error false "setup nfs failed!"
  70
  71 NFSCLIENT=true
  72 FAIL_ON_ERROR=false
  73
  74 # common setup
  75 clients=${NFS_CLIENTS:-$HOSTNAME}
  76 generate_machine_file $clients $MACHINEFILE ||
  77         error "Failed to generate machine file"
  78 num_clients=$(get_node_count ${clients//,/ })
  79
  80 # compilbench
  81 # Run short iteration in nfs mode
  82 cbench_IDIRS=${cbench_IDIRS:-2}
  83 cbench_RUNS=${cbench_RUNS:-2}
  84
  85 # metabench
  86 # Run quick in nfs mode
  87 mbench_NFILES=${mbench_NFILES:-10000}
  88
  89 # connectathon
  90 [ "$SLOW" = "no" ] && cnt_NRUN=2
  91
  92 # IOR
  93 ior_DURATION=${ior_DURATION:-30}
  94
  95 # source the common file after all parameters are set to take affect
  96 . $LUSTRE/tests/functions.sh
  97
  98 build_test_filter
  99
 100 get_mpiuser_id $MPI_USER
 101 MPI_RUNAS=${MPI_RUNAS:-"runas -u $MPI_USER_UID -g $MPI_USER_GID"}
 102 $GSS_KRB5 && refresh_krb5_tgt $MPI_USER_UID $MPI_USER_GID $MPI_RUNAS
 103
 104 test_compilebench() {
 105         if [[ "$TESTSUITE" =~ "parallel-scale-nfs" ]]; then
 106                 skip "LU-12957 and LU-13068: compilebench for $TESTSUITE"
 107         fi
 108
 109         run_compilebench $TESTDIR
 110 }
 111 run_test compilebench "compilebench"
 112
 113 test_metabench() {
 114         run_metabench $TESTDIR $NFS_CLIMNTPT
 115 }
 116 run_test metabench "metabench"
 117
 118 test_connectathon() {
 119         run_connectathon $TESTDIR
 120 }
 121 run_test connectathon "connectathon"
 122
 123 test_iorssf() {
 124         run_ior "ssf" $TESTDIR $NFS_SRVMNTPT
 125 }
 126 run_test iorssf "iorssf"
 127
 128 test_iorfpp() {
 129         run_ior "fpp" $TESTDIR $NFS_SRVMNTPT
 130 }
 131 run_test iorfpp "iorfpp"
 132
 133 test_racer_on_nfs() {
 134         local racer_params="MDSCOUNT=$MDSCOUNT OSTCOUNT=$OSTCOUNT LFS=$LFS"
 135
 136         do_nodes $CLIENTS "$racer_params $racer $TESTDIR"
 137 }
 138 run_test racer_on_nfs "racer on NFS client"
 139
 140 complete_test $SECONDS
 141 exit_status