Whamcloud - gitweb
b=20101 lfs ost enhancements
[fs/lustre-release.git] / lustre / doc / lfs.1
1 .TH lfs 1 "2009 Jan 29" Lustre "user utilities"
2 .SH NAME
3 lfs \- Lustre utility to create a file with specific striping pattern, find the striping pattern of existing files
4 .SH SYNOPSIS
5 .br
6 .B lfs
7 .br
8 .B lfs changelog [--follow] <mdtname> [startrec [endrec]]
9 .br
10 .B lfs changelog_clear <mdtname> <id> <endrec>
11 .br
12 .B lfs check <mds|osts|servers>
13 .br
14 .B lfs df [-i] [-h] [--pool|-p <fsname>[.<pool>] [path]
15 .br
16 .B lfs find [[!] --atime|-A [-+]N] [[!] --mtime|-M [-+]N]
17         \fB[[!] --ctime|-C [-+]N] [--maxdepth|-D N] [--name|-n pattern]
18         \fB[--print|-p] \fB[--print0|-P] [[!] --obd|-O <uuid[s]>]
19         \fB[[!] --size|-S [-+]N[kMGTPE]] [--type |-t {bcdflpsD}]
20         \fB[[!] --gid|-g|--group|-G <gname>|<gid>]
21         \fB[[!] --uid|-u|--user|-U <uname>|<uid>]
22         \fB<dirname|filename>\fR
23 .br
24 .B lfs osts
25 .RB [ path ]
26 .br
27 .B lfs getstripe [--obd|-O <uuid>] [--quiet|-q] [--verbose|-v] 
28         \fB[--count | -c ] [--index | -i | --offset | -o ]
29         \fB[--size | -s ] [--pool | -p ] [--directory | -d ]
30         \fB[--recursive|-r] <dirname|filename> ...\fR
31 .br
32 .B lfs setstripe [--size|-s stripe-size] [--count|-c stripe-cnt]
33         \fB[--index|-i|--offset|-o start_ost_index ] [--pool|-p <pool>]
34         \fB<dirname|filename>\fR
35 .br
36 .B lfs setstripe -d <dir>
37 .br
38 .B lfs poollist <filesystem>[.<pool>] | <pathname>
39 .br
40 .B lfs quota [-q] [-v] [-o obd_uuid|-I ost_idx|-i mdt_idx] [-u <uname>| -u <uid>|-g <gname>| -g <gid>] <filesystem>
41 .br
42 .B lfs quota -t <-u|-g> <filesystem>
43 .br
44 .B lfs quotacheck [-ug] <filesystem>
45 .br
46 .B lfs quotachown [-i] <filesystem>
47 .br
48 .B lfs quotaon [-ugf] <filesystem>
49 .br
50 .B lfs quotaoff [-ug] <filesystem>
51 .br
52 .B lfs quotainv [-ug] [-f] <filesystem>
53 .br
54 .B lfs setquota <-u|--user|-g|--group> <uname|uid|gname|gid>
55              \fB[--block-softlimit <block-softlimit>]
56              \fB[--block-hardlimit <block-hardlimit>]
57              \fB[--inode-softlimit <inode-softlimit>]
58              \fB[--inode-hardlimit <inode-hardlimit>]
59              \fB<filesystem>\fR
60 .br
61 .B lfs setquota <-u|--user|-g|--group> <uname|uid|gname|gid>
62              \fB[-b <block-softlimit>] [-B <block-hardlimit>]
63              \fB[-i <inode-softlimit>] [-I <inode-hardlimit>]
64              \fB<filesystem>\fR
65 .br
66 .B lfs setquota -t <-u|-g>
67              \fB[--block-grace <block-grace>]
68              \fB[--inode-grace <inode-grace>]
69              \fB<filesystem>\fR
70 .br
71 .B lfs setquota -t <-u|-g>
72              \fB[-b <block-grace>] [-i <inode-grace>]
73              \fB<filesystem>\fR
74 .br
75 .B lfs help
76 .SH DESCRIPTION
77 .B lfs
78 can be used to create a new file with a specific striping pattern, determine the default striping pattern, gather the extended attributes (object numbers and location) for a specific file. It can be invoked interactively without any arguments or in a non-interactive mode with one of the arguements supported. 
79 .SH OPTIONS
80 The various options supported by lctl are listed and explained below:
81 .TP
82 .B changelog
83 Show the metadata changes on an MDT.  Start and end points are optional.  The --follow option will block on new changes; this option is only valid when run direclty on the MDT node.
84 .TP
85 .B changelog_clear
86 Indicate that changelog records previous to <endrec> are no longer of
87 interest to a particular consumer <id>, potentially allowing the MDT to
88 free up disk space. An <endrec> of 0 indicates the current last record.
89 Changelog consumers must be registered on the MDT node using \fBlctl\fR.
90 .TP
91 .B check 
92 Display the status of MDS or OSTs (as specified in the command) or all the servers (MDS and OSTs)
93 .TP
94 .B df [-i] [-h] [--pool|-p <fsname>[.<pool>] [path]
95 Report filesystem disk space usage or inodes usage (with \fB-i\fR) of each
96 MDT/OST, or a subset of OSTs if a pool is specified with \fB-p\fR.  By default
97 print the usage of all mounted Lustre filesystems, otherwise if \fBpath\fR is
98 specified print only the usage of that filesystem.  If \fB-h\fR is given, the
99 output is printed in \fIh\fRuman readable format, using SI base-2 suffixes
100 for \fBM\fRega-, \fBG\fRiga-, \fBT\fRera-, \fBP\fReta-, or \fBE\fRxabytes.
101 .TP
102 .B find 
103 To search the directory tree rooted at the given dir/file name for the files that match the given parameters: \fB--atime\fR (file was last accessed N*24 hours ago), \fB--ctime\fR (file's status was last changed N*24 hours ago), \fB--mtime\fR (file's data was last modified N*24 hours ago), \fB--obd\fR (file has an object on a specific OST or OSTs), \fB--size\fR (file has size in bytes, or \fBk\fRilo-, \fBM\fRega-, \fBG\fRiga-, \fBT\fRera-, \fBP\fReta-, or \fBE\fRxabytes if a suffix is given), \fB--type\fR (file has the type: \fBb\fRlock, \fBc\fRharacter, \fBd\fRirectory, \fBp\fRipe, \fBf\fRile, sym\fBl\fRink, \fBs\fRocket, or \fBD\fRoor (Solaris)), \fB--uid\fR (file has specific numeric user ID), \fB--user\fR (file owned by specific user, numeric user ID allowed), \fB--gid\fR (file has specific group ID), \fB--group\fR (file belongs to specific group, numeric group ID allowed). The option \fB--maxdepth\fR limits find to decend at most N levels of directory tree. The options \fB--print\fR and \fB--print0\fR print full file name, followed by a newline or NUL character correspondingly.  Using \fB!\fR before an option negates its meaning (\fIfiles NOT matching the parameter\fR).  Using \fB+\fR before a numeric value means \fIfiles with the parameter OR MORE\fR, while \fB-\fR before a numeric value means \fIfiles with the parameter OR LESS\fR.
104 .TP
105 .B osts 
106 .RB [ path ]
107 List all the OSTs for all mounted filesystems. If a \fBpath\fR is provided
108 that is located on a lustre mounted file system then only the OSTs belonging
109 to that filesystem are displayed.
110 .TP
111 .B getstripe [--obd|-O <uuid>] [--quiet|-q] [--verbose|-v] 
112         \fB[--count | -c ] [--index | -i | --offset | -o  ]
113         \fB[--pool | -p ] [--size | -s ] [--directory | -d ]
114         \fB[--recursive|-r] <dirname|filename>\fR
115 .br
116 To list the striping information for a given filename or directory. By default the stripe count, size, and offset will be returned. If you only want specific striping information then the options of \fB--count\fR,\fB--size\fR,\fB--index\fR or \fB--offset\fR plus various combinations of these options can be used to retrieve only what you want. What pools a file belong to can also be obtained with \fB--pool\fR. In the case where you only want details about the files object id information then the \fB--quiet\fR option is used. Additional information available about striping can be displayed with \fB--verbose\fR. The default behavior of lfs getstripe used to retrieve data about a directory is to list all the contents of that directory. If you wish to inquire only about that directory then \fB--directory\fR,can be used to list directory entries instead of its contents in the same manner as ls -d. This can be expanded with \fB--recursive\fR which will recurse into all subdirectories. You can filter the search to return only files that has a object on a specific OST with \fB--obd\fR.
117 .TP
118 .B setstripe [--count|-c stripe_cnt] [--size|-s stripe_size]
119         \fB[--index|-i|--offset|-o start_ost_index] [--pool <pool>]
120         \fB<dirname|filename>\fR
121 .br
122 To create a new file, or set the directory default, with the specified striping parameters.  The
123 .I stripe_count
124 is the number of OSTs to stripe a file over. A
125 .I stripe_count
126 of 0 means to use the filesystem-wide default stripe count (default 1), and a
127 .I stripe_count
128 of -1 means to stripe over all available OSTs.  The
129 .I stripe_size
130 is the number of bytes to store on each OST before moving to the next OST.  A
131 .I stripe_size
132 of 0 means to use the filesystem-wide default stripe size (default 1MB).  The
133 .I start_ost_index
134 is the OST index (starting at 0) on which to start striping for this file.  A
135 .I start_ost_index
136 of -1 allows the MDS to choose the starting index and it is strongly recommended, as this allows space and load balancing to be done by the MDS as needed.  The
137 .I pool
138 is the name of a predefined pool of OSTs (see 
139 .B lctl
140 ) that will be used for striping. The 
141 .I stripe_count, stripe_size, and start_ost_index
142 will be used as well; the 
143 .I start_ost_index
144 must be part of the pool or an error will be returned. 
145 .TP
146 .B setstripe -d
147 Delete the default striping on the specified directory.
148 .TP
149 .B poollist <filesystem>[.<pool>] | <pathname>
150 List the pools in \fBfilesystem\fR or \fBpathname\fR, or the OSTs in \fBfilesystem.pool\fR
151 .TP
152 .B quota [-q] [-v] [-o obd_uuid|-i mdt_idx|-I ost_idx] [-u|-g <uname>|<uid>|<gname>|<gid>] <filesystem>
153 To display disk usage and limits, either for the full filesystem, or for objects on a specific obd. A user or group name or an ID can be specified. If both user and group are omitted quotas for current uid/gid are shown. -v provides more verbose (with per-obd statistics) output. -q disables printing of additional descriptions (including column titles).
154 .TP
155 .B quota -t <-u|-g> <filesystem>
156 To display block and inode grace times for user (-u) or group (-g) quotas
157 .TP
158 .B quotachown
159 To change files' owner and group on OSTs of the specified filesystem
160 .TP
161 .B quotacheck [-ugf] <filesystem>
162 To scan the specified filesystem for disk usage, and create or update quota files. Options specify quota for users (-u) groups (-g) and force (-f)
163 .TP
164 .B quotaon [-ugf] <filesystem>
165 To turn filesystem quotas on. Options specify quota for users (-u) groups (-g) and force (-f)
166 .TP
167 .B quotaoff [-ugf] <filesystem>
168 To turn filesystem quotas off.  Options specify quota for users (-u) groups (-g) and force (-f)
169 .TP
170 .B quotainv [-ug] [-f] <filesystem>
171 Clear quota files (administrative quota files if used without -f, operational quota files otherwise), all of their quota entries, for (-u) users or (-g) groups; after quotainv one must use quotacheck before using quotas. DO NOT USE THIS COMMAND UNLESS YOU REALLY KNOW WHAT IT DOES. IT IS MAINLY FOR INTERNAL PURPOSES.
172 .TP
173 .B setquota  <-u|-g> <uname>|<uid>|<gname>|<gid> [--block-softlimit <block-softlimit>] [--block-hardlimit <block-hardlimit>] [--inode-softlimit <inode-softlimit>] [--inode-hardlimit <inode-hardlimit>] <filesystem>
174 To set filesystem quotas for users or groups. Limits can be specified with -b, -k, -m, -g, -t, -p suffixes which specify units of 1, 2^10, 2^20, 2^30, 2^40 and 2^50 accordingly. Block limits unit is kilobyte (1024) by default and block limits are always kilobyte-grained (even if specified in bytes), see EXAMPLES
175 .TP
176 .B setquota -t [-u|-g] [--block-grace <block-grace>] [--inode-grace <inode-grace>] <filesystem>
177 To set filesystem quota grace times for users or groups. Grace time is specified in "XXwXXdXXhXXmXXs" format or as an integer seconds value, see EXAMPLES
178 .TP
179 .B help 
180 Provides brief help on the various arguments
181 .TP
182 .B exit/quit 
183 Quit the interactive lfs session
184 .SH EXAMPLES
185 .TP
186 .B $ lfs setstripe -s 128k -c 2 /mnt/lustre/file1
187 This creates a file striped on two OSTs with 128kB on each stripe.
188 .TP
189 .B $ lfs setstripe -d /mnt/lustre/dir
190 This deletes a default stripe pattern on dir. New files will use the default striping pattern created therein.
191 .TP
192 .B $ lfs getstripe -v /mnt/lustre/file1
193 Lists the detailed object allocation of a given file
194 .TP
195 .B $ lfs find /mnt/lustre
196 Efficiently lists all files in a given directory and its subdirectories
197 .TP
198 .B $ lfs find /mnt/lustre -mtime +30 -type f -print
199 Recursively list all regular files in given directory more than 30 days old
200 .TP
201 .B $ lfs find --obd OST2-UUID /mnt/lustre/
202 Recursively list all files in a given directory that have objects on OST2-UUID.
203 .tP
204 .B $ lfs check servers 
205 Check the status of all servers (MDT, OST)
206 .TP
207 .B $ lfs osts
208 List all the OSTs
209 .TP
210 .B $ lfs df -h 
211 Lists space usage per OST and MDT in human readable format.
212 .TP
213 .B $ lfs df -i 
214 Lists inode usage per OST and MDT
215 .TP
216 .B $ lfs df --pool <filesystem>[.<pool>] | <pathname>
217 List space or inode usage for a specific OST pool
218 .TP
219 .B $ lfs quota -u bob /mnt/lustre
220 List quotas of user `bob'
221 .TP
222 .B $ lfs quota -t -u /mnt/lustre
223 Show grace times for user quotas on /mnt/lustre
224 .TP
225 .B $ lfs quotachown -i /mnt/lustre
226 Change file owner and group
227 .TP
228 .B $ lfs quotacheck -ug /mnt/lustre
229 Quotacheck for user and group - will turn on quotas after making the check.
230 .TP
231 .B $ lfs quotaon -ug /mnt/lustre
232 Turn quotas of user and group on
233 .TP
234 .B $ lfs quotaoff -ug /mnt/lustre
235 Turn quotas of user and group off
236 .TP
237 .B $ lfs setquota -u bob --block-softlimit 2000000 --block-hardlimit 1000000 /mnt/lustre
238 Set quotas of user `bob': 1GB block quota hardlimit and 2 GB block quota softlimit
239 .TP
240 .B $ lfs setquota -t -u --block-grace 1000 --inode-grace 1w4d /mnt/lustre
241 Set grace times for user quotas: 1000 seconds for block quotas, 1 week and 4 days for inode quotas
242 .SH BUGS
243 The \fBlfs find\fR command isn't as comprehensive as \fBfind\fR(1).
244 Report bugs using http://bugzilla.lustre.org.
245 .SH AUTHOR
246 The lfs command is part of the Lustre filesystem.  Contact http://www.lustre.org/
247 .SH SEE ALSO
248 .BR lctl (8),
249 .BR lustre (7)