lustre/include/lustre/lustreapi.h

   1 /*
   2  * GPL HEADER START
   3  *
   4  * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
   5  *
   6  * This program is free software; you can redistribute it and/or modify
   7  * it under the terms of the GNU General Public License version 2 only,
   8  * as published by the Free Software Foundation.
   9  *
  10  * This program is distributed in the hope that it will be useful, but
  11  * WITHOUT ANY WARRANTY; without even the implied warranty of
  12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13  * General Public License version 2 for more details (a copy is included
  14  * in the LICENSE file that accompanied this code).
  15  *
  16  * You should have received a copy of the GNU General Public License
  17  * version 2 along with this program; If not, see
  18  * http://www.gnu.org/licenses/gpl-2.0.html
  19  *
  20  * GPL HEADER END
  21  */
  22 /*
  23  * Copyright (c) 2004, 2010, Oracle and/or its affiliates. All rights reserved.
  24  * Use is subject to license terms.
  25  *
  26  * Copyright (c) 2011, 2016, Intel Corporation.
  27  */
  28 /*
  29  * This file is part of Lustre, http://www.lustre.org/
  30  * Lustre is a trademark of Sun Microsystems, Inc.
  31  */
  32
  33 #ifndef _LUSTREAPI_H_
  34 #define _LUSTREAPI_H_
  35
  36 /** \defgroup llapi llapi
  37  *
  38  * @{
  39  */
  40
  41 #include <stdarg.h>
  42 #include <stdint.h>
  43 #include <linux/lustre/lustre_user.h>
  44
  45 #if defined(__cplusplus)
  46 extern "C" {
  47 #endif
  48
  49 #ifndef LL_MAXQUOTAS
  50 #define LL_MAXQUOTAS 3
  51 #endif
  52
  53 #ifndef ARRAY_SIZE
  54 #define ARRAY_SIZE(a) ((sizeof(a)) / (sizeof((a)[0])))
  55 #endif
  56
  57 #define lustre_fid struct lu_fid
  58
  59 extern bool liblustreapi_initialized;
  60
  61
  62 typedef void (*llapi_cb_t)(char *obd_type_name, char *obd_name, char *obd_uuid,
  63                            void *args);
  64
  65 /* lustreapi message severity level */
  66 enum llapi_message_level {
  67         LLAPI_MSG_OFF    = 0,
  68         LLAPI_MSG_FATAL  = 1,
  69         LLAPI_MSG_ERROR  = 2,
  70         LLAPI_MSG_WARN   = 3,
  71         LLAPI_MSG_NORMAL = 4,
  72         LLAPI_MSG_INFO   = 5,
  73         LLAPI_MSG_DEBUG  = 6,
  74         LLAPI_MSG_MAX
  75 };
  76
  77 typedef void (*llapi_log_callback_t)(enum llapi_message_level level, int err,
  78                                      const char *fmt, va_list ap);
  79
  80
  81 /* the bottom three bits reserved for llapi_message_level */
  82 #define LLAPI_MSG_MASK          0x00000007
  83 #define LLAPI_MSG_NO_ERRNO      0x00000010
  84
  85 static inline const char *llapi_msg_level2str(enum llapi_message_level level)
  86 {
  87         static const char *levels[LLAPI_MSG_MAX] = {"OFF", "FATAL", "ERROR",
  88                                                     "WARNING", "NORMAL",
  89                                                     "INFO", "DEBUG"};
  90
  91         if (level >= LLAPI_MSG_MAX)
  92                 return NULL;
  93
  94         return levels[level];
  95 }
  96
  97 void llapi_msg_set_level(int level);
  98 int llapi_msg_get_level(void);
  99 llapi_log_callback_t llapi_error_callback_set(llapi_log_callback_t cb);
 100 llapi_log_callback_t llapi_info_callback_set(llapi_log_callback_t cb);
 101
 102 void llapi_error(enum llapi_message_level level, int err, const char *fmt, ...)
 103         __attribute__((__format__(__printf__, 3, 4)));
 104 #define llapi_err_noerrno(level, fmt, a...)                     \
 105         llapi_error((level) | LLAPI_MSG_NO_ERRNO, 0, fmt, ## a)
 106 void llapi_printf(enum llapi_message_level level, const char *fmt, ...)
 107         __attribute__((__format__(__printf__, 2, 3)));
 108
 109 struct llapi_stripe_param {
 110         unsigned long long      lsp_stripe_size;
 111         char                    *lsp_pool;
 112         int                     lsp_stripe_offset;
 113         int                     lsp_stripe_pattern;
 114         /* Number of stripes. Size of lsp_osts[] if lsp_specific is true.*/
 115         int                     lsp_stripe_count;
 116         bool                    lsp_is_specific;
 117         __u32                   lsp_osts[0];
 118 };
 119
 120 int llapi_file_open_param(const char *name, int flags, mode_t mode,
 121                           const struct llapi_stripe_param *param);
 122 int llapi_file_create(const char *name, unsigned long long stripe_size,
 123                       int stripe_offset, int stripe_count, int stripe_pattern);
 124 int llapi_file_open(const char *name, int flags, int mode,
 125                     unsigned long long stripe_size, int stripe_offset,
 126                     int stripe_count, int stripe_pattern);
 127 int llapi_file_create_pool(const char *name, unsigned long long stripe_size,
 128                            int stripe_offset, int stripe_count,
 129                            int stripe_pattern, char *pool_name);
 130 int llapi_file_open_pool(const char *name, int flags, int mode,
 131                          unsigned long long stripe_size, int stripe_offset,
 132                          int stripe_count, int stripe_pattern, char *pool_name);
 133 int llapi_poollist(const char *name);
 134 int llapi_get_poollist(const char *name, char **poollist, int list_size,
 135                        char *buffer, int buffer_size);
 136 int llapi_get_poolmembers(const char *poolname, char **members, int list_size,
 137                           char *buffer, int buffer_size);
 138 int llapi_file_get_stripe(const char *path, struct lov_user_md *lum);
 139 int llapi_file_lookup(int dirfd, const char *name);
 140
 141 #define VERBOSE_COUNT              0x1
 142 #define VERBOSE_SIZE               0x2
 143 #define VERBOSE_OFFSET             0x4
 144 #define VERBOSE_POOL               0x8
 145 #define VERBOSE_DETAIL            0x10
 146 #define VERBOSE_OBJID             0x20
 147 #define VERBOSE_GENERATION        0x40
 148 #define VERBOSE_MDTINDEX          0x80
 149 #define VERBOSE_LAYOUT           0x100
 150 #define VERBOSE_COMP_COUNT       0x200
 151 #define VERBOSE_COMP_FLAGS       0x400
 152 #define VERBOSE_COMP_START       0x800
 153 #define VERBOSE_COMP_END        0x1000
 154 #define VERBOSE_COMP_ID         0x2000
 155 #define VERBOSE_DFID            0x4000
 156 #define VERBOSE_HASH_TYPE       0x8000
 157 #define VERBOSE_MIRROR_COUNT    0x10000
 158 #define VERBOSE_DEFAULT         (VERBOSE_COUNT | VERBOSE_SIZE | \
 159                                  VERBOSE_OFFSET | VERBOSE_POOL | \
 160                                  VERBOSE_OBJID | VERBOSE_GENERATION | \
 161                                  VERBOSE_LAYOUT | VERBOSE_HASH_TYPE | \
 162                                  VERBOSE_COMP_COUNT | VERBOSE_COMP_FLAGS | \
 163                                  VERBOSE_COMP_START | VERBOSE_COMP_END | \
 164                                  VERBOSE_COMP_ID | VERBOSE_MIRROR_COUNT)
 165
 166 struct find_param {
 167         unsigned int             fp_max_depth;
 168         dev_t                    fp_dev;
 169         mode_t                   fp_type; /* S_IFIFO,... */
 170         uid_t                    fp_uid;
 171         gid_t                    fp_gid;
 172         time_t                   fp_atime;
 173         time_t                   fp_mtime;
 174         time_t                   fp_ctime;
 175         /* {a,m,c}sign cannot be bitfields due to using pointers to
 176          * access them during argument parsing. */
 177         int                      fp_asign;
 178         int                      fp_msign;
 179         int                      fp_csign;
 180         /* these need to be signed values */
 181         int                      fp_size_sign:2,
 182                                  fp_stripe_size_sign:2,
 183                                  fp_stripe_count_sign:2,
 184                                  fp_comp_start_sign:2,
 185                                  fp_comp_end_sign:2,
 186                                  fp_comp_count_sign:2,
 187                                  fp_mdt_count_sign:2;
 188         unsigned long long       fp_size;
 189         unsigned long long       fp_size_units;
 190
 191         unsigned long long       fp_zero_end:1,
 192                                  fp_recursive:1,
 193                                  fp_exclude_pattern:1,
 194                                  fp_exclude_type:1,
 195                                  fp_exclude_obd:1,
 196                                  fp_exclude_mdt:1,
 197                                  fp_exclude_gid:1,
 198                                  fp_exclude_uid:1,
 199                                  fp_check_gid:1,
 200                                  fp_check_uid:1,
 201                                  fp_check_pool:1,       /* LOV pool name */
 202                                  fp_check_size:1,       /* file size */
 203                                  fp_exclude_pool:1,
 204                                  fp_exclude_size:1,
 205                                  fp_exclude_atime:1,
 206                                  fp_exclude_mtime:1,
 207                                  fp_exclude_ctime:1,
 208                                  fp_get_lmv:1,  /* get MDT list from LMV */
 209                                  fp_raw:1,      /* do not fill in defaults */
 210                                  fp_check_stripe_size:1, /* LOV stripe size */
 211                                  fp_exclude_stripe_size:1,
 212                                  fp_check_stripe_count:1, /* LOV stripe count */
 213                                  fp_exclude_stripe_count:1,
 214                                  fp_check_layout:1,
 215                                  fp_exclude_layout:1,
 216                                  fp_get_default_lmv:1, /* Get default LMV */
 217                                  fp_migrate:1,
 218                                  fp_check_projid:1,
 219                                  fp_exclude_projid:1,
 220                                  fp_check_comp_count:1,
 221                                  fp_exclude_comp_count:1,
 222                                  fp_check_comp_flags:1,
 223                                  fp_exclude_comp_flags:1,
 224                                  fp_check_comp_start:1,
 225                                  fp_exclude_comp_start:1,
 226                                  fp_check_comp_end:1,
 227                                  fp_exclude_comp_end:1,
 228                                  fp_check_comp_id:1,
 229                                  fp_exclude_comp_id:1,
 230                                  fp_check_mdt_count:1,
 231                                  fp_exclude_mdt_count:1,
 232                                  fp_check_hash_type:1,
 233                                  fp_exclude_hash_type:1,
 234                                  fp_yaml:1;     /* output layout in YAML */
 235
 236         int                      fp_verbose;
 237         int                      fp_quiet;
 238
 239         /* regular expression */
 240         char                    *fp_pattern;
 241
 242         struct  obd_uuid        *fp_obd_uuid;
 243         int                      fp_num_obds;
 244         int                      fp_num_alloc_obds;
 245         int                      fp_obd_index;
 246         int                     *fp_obd_indexes;
 247
 248         struct  obd_uuid        *fp_mdt_uuid;
 249         int                      fp_num_mdts;
 250         int                      fp_num_alloc_mdts;
 251         int                      fp_mdt_index;
 252         int                     *fp_mdt_indexes;
 253         int                      fp_file_mdt_index;
 254
 255         size_t                   fp_lum_size;
 256         struct  lov_user_mds_data *fp_lmd;
 257
 258         char                     fp_poolname[LOV_MAXPOOLNAME + 1];
 259
 260         __u32                    fp_lmv_stripe_count;
 261         struct lmv_user_md      *fp_lmv_md;
 262
 263         unsigned long long       fp_stripe_size;
 264         unsigned long long       fp_stripe_size_units;
 265         unsigned long long       fp_stripe_count;
 266         __u32                    fp_layout;
 267
 268         __u32                    fp_comp_count;
 269         __u32                    fp_comp_flags;
 270         __u32                    fp_comp_id;
 271         unsigned long long       fp_comp_start;
 272         unsigned long long       fp_comp_start_units;
 273         unsigned long long       fp_comp_end;
 274         unsigned long long       fp_comp_end_units;
 275         unsigned long long       fp_mdt_count;
 276         unsigned                 fp_projid;
 277
 278         /* In-process parameters. */
 279         unsigned long            fp_got_uuids:1,
 280                                  fp_obds_printed:1;
 281         unsigned int             fp_depth;
 282         unsigned int             fp_hash_type;
 283 };
 284
 285 int llapi_ostlist(char *path, struct find_param *param);
 286 int llapi_uuid_match(char *real_uuid, char *search_uuid);
 287 int llapi_getstripe(char *path, struct find_param *param);
 288 int llapi_find(char *path, struct find_param *param);
 289
 290 int llapi_file_fget_mdtidx(int fd, int *mdtidx);
 291 int llapi_dir_set_default_lmv_stripe(const char *name, int stripe_offset,
 292                                      int stripe_count, int stripe_pattern,
 293                                      const char *pool_name);
 294 int llapi_dir_create_pool(const char *name, int flags, int stripe_offset,
 295                           int stripe_count, int stripe_pattern,
 296                           const char *poolname);
 297 int llapi_direntry_remove(char *dname);
 298
 299 int llapi_obd_fstatfs(int fd, __u32 type, __u32 index,
 300                       struct obd_statfs *stat_buf, struct obd_uuid *uuid_buf);
 301 int llapi_obd_statfs(char *path, __u32 type, __u32 index,
 302                      struct obd_statfs *stat_buf, struct obd_uuid *uuid_buf);
 303 int llapi_ping(char *obd_type, char *obd_name);
 304 int llapi_target_check(int num_types, char **obd_types, char *dir);
 305 int llapi_file_get_lov_uuid(const char *path, struct obd_uuid *lov_uuid);
 306 int llapi_file_get_lmv_uuid(const char *path, struct obd_uuid *lmv_uuid);
 307 int llapi_file_fget_lov_uuid(int fd, struct obd_uuid *lov_uuid);
 308 int llapi_lov_get_uuids(int fd, struct obd_uuid *uuidp, int *ost_count);
 309 int llapi_lmv_get_uuids(int fd, struct obd_uuid *uuidp, int *mdt_count);
 310 int llapi_is_lustre_mnttype(const char *type);
 311 int llapi_search_ost(char *fsname, char *poolname, char *ostname);
 312 int llapi_get_obd_count(char *mnt, int *count, int is_mdt);
 313 int llapi_parse_size(const char *optarg, unsigned long long *size,
 314                      unsigned long long *size_units, int bytes_spec);
 315 int llapi_search_mounts(const char *pathname, int index, char *mntdir,
 316                         char *fsname);
 317 int llapi_search_fsname(const char *pathname, char *fsname);
 318 int llapi_getname(const char *path, char *buf, size_t size);
 319 int llapi_search_fileset(const char *pathname, char *fileset);
 320
 321 int llapi_search_rootpath(char *pathname, const char *fsname);
 322 int llapi_nodemap_exists(const char *name);
 323 int llapi_migrate_mdt(char *path, struct find_param *param);
 324 int llapi_mv(char *path, struct find_param *param);
 325
 326 struct mntent;
 327
 328 #define HAVE_LLAPI_IS_LUSTRE_MNT
 329 int llapi_is_lustre_mnt(struct mntent *mnt);
 330 int llapi_quotactl(char *mnt, struct if_quotactl *qctl);
 331 int llapi_target_iterate(int type_num, char **obd_type, void *args,
 332                          llapi_cb_t cb);
 333 int llapi_get_connect_flags(const char *mnt, __u64 *flags);
 334 int llapi_cp(int argc, char *argv[]);
 335 int llapi_ls(int argc, char *argv[]);
 336 int llapi_fid2path(const char *device, const char *fidstr, char *path,
 337                    int pathlen, long long *recno, int *linkno);
 338 int llapi_path2fid(const char *path, struct lu_fid *fid);
 339 int llapi_get_mdt_index_by_fid(int fd, const struct lu_fid *fid,
 340                                int *mdt_index);
 341 int llapi_fd2fid(int fd, struct lu_fid *fid);
 342 /* get FID of parent dir + the related name of entry in this parent dir */
 343 int llapi_path2parent(const char *path, unsigned int linkno,
 344                       struct lu_fid *parent_fid, char *name, size_t name_size);
 345 int llapi_fd2parent(int fd, unsigned int linkno, struct lu_fid *parent_fid,
 346                     char *name, size_t name_size);
 347 int llapi_chomp_string(char *buf);
 348 int llapi_open_by_fid(const char *dir, const struct lu_fid *fid,
 349                       int open_flags);
 350 int llapi_get_version_string(char *version, unsigned int version_size);
 351 /* llapi_get_version() is deprecated, use llapi_get_version_string() instead */
 352 int llapi_get_version(char *buffer, int buffer_size, char **version)
 353         __attribute__((deprecated));
 354 int llapi_get_data_version(int fd, __u64 *data_version, __u64 flags);
 355 extern int llapi_get_ost_layout_version(int fd, __u32 *layout_version);
 356 int llapi_hsm_state_get_fd(int fd, struct hsm_user_state *hus);
 357 int llapi_hsm_state_get(const char *path, struct hsm_user_state *hus);
 358 int llapi_hsm_state_set_fd(int fd, __u64 setmask, __u64 clearmask,
 359                            __u32 archive_id);
 360 int llapi_hsm_state_set(const char *path, __u64 setmask, __u64 clearmask,
 361                         __u32 archive_id);
 362 int llapi_hsm_register_event_fifo(const char *path);
 363 int llapi_hsm_unregister_event_fifo(const char *path);
 364 void llapi_hsm_log_error(enum llapi_message_level level, int _rc,
 365                          const char *fmt, va_list args);
 366
 367 int llapi_get_agent_uuid(char *path, char *buf, size_t bufsize);
 368 int llapi_create_volatile_idx(char *directory, int idx, int mode);
 369
 370 static inline int llapi_create_volatile(char *directory, int mode)
 371 {
 372         return llapi_create_volatile_idx(directory, -1, mode);
 373 }
 374
 375
 376 int llapi_fswap_layouts_grouplock(int fd1, int fd2, __u64 dv1, __u64 dv2,
 377                                   int gid, __u64 flags);
 378 int llapi_fswap_layouts(int fd1, int fd2, __u64 dv1, __u64 dv2, __u64 flags);
 379 int llapi_swap_layouts(const char *path1, const char *path2, __u64 dv1,
 380                        __u64 dv2, __u64 flags);
 381
 382 /* Changelog interface.  priv is private state, managed internally by these
 383  * functions */
 384
 385 /* Records received are in extended format now, though most of them are still
 386  * written in disk in changelog_rec format (to save space and time), it's
 387  * converted to extended format in the lustre api to ease changelog analysis. */
 388 #define HAVE_CHANGELOG_EXTEND_REC 1
 389
 390 int llapi_changelog_start(void **priv, enum changelog_send_flag flags,
 391                           const char *mdtname, long long startrec);
 392 int llapi_changelog_fini(void **priv);
 393 int llapi_changelog_recv(void *priv, struct changelog_rec **rech);
 394 int llapi_changelog_free(struct changelog_rec **rech);
 395 int llapi_changelog_get_fd(void *priv);
 396 /* Allow records up to endrec to be destroyed; requires registered id. */
 397 int llapi_changelog_clear(const char *mdtname, const char *idstr,
 398                           long long endrec);
 399 extern int llapi_changelog_set_xflags(void *priv,
 400                                     enum changelog_send_extra_flag extra_flags);
 401
 402 /* HSM copytool interface.
 403  * priv is private state, managed internally by these functions
 404  */
 405 struct hsm_copytool_private;
 406 struct hsm_copyaction_private;
 407
 408 int llapi_hsm_copytool_register(struct hsm_copytool_private **priv,
 409                                 const char *mnt, int archive_count,
 410                                 int *archives, int rfd_flags);
 411 int llapi_hsm_copytool_unregister(struct hsm_copytool_private **priv);
 412 int llapi_hsm_copytool_get_fd(struct hsm_copytool_private *ct);
 413 int llapi_hsm_copytool_recv(struct hsm_copytool_private *priv,
 414                             struct hsm_action_list **hal, int *msgsize);
 415 int llapi_hsm_action_begin(struct hsm_copyaction_private **phcp,
 416                            const struct hsm_copytool_private *ct,
 417                            const struct hsm_action_item *hai,
 418                            int restore_mdt_index, int restore_open_flags,
 419                            bool is_error);
 420 int llapi_hsm_action_end(struct hsm_copyaction_private **phcp,
 421                          const struct hsm_extent *he, int hp_flags, int errval);
 422 int llapi_hsm_action_progress(struct hsm_copyaction_private *hcp,
 423                               const struct hsm_extent *he, __u64 total,
 424                               int hp_flags);
 425 int llapi_hsm_action_get_dfid(const struct hsm_copyaction_private *hcp,
 426                               struct lu_fid *fid);
 427 int llapi_hsm_action_get_fd(const struct hsm_copyaction_private *hcp);
 428 int llapi_hsm_import(const char *dst, int archive, const struct stat *st,
 429                      unsigned long long stripe_size, int stripe_offset,
 430                      int stripe_count, int stripe_pattern, char *pool_name,
 431                      struct lu_fid *newfid);
 432
 433 /* HSM user interface */
 434 struct hsm_user_request *llapi_hsm_user_request_alloc(int itemcount,
 435                                                       int data_len);
 436 int llapi_hsm_request(const char *path, const struct hsm_user_request *request);
 437 int llapi_hsm_current_action(const char *path, struct hsm_current_action *hca);
 438
 439 /* JSON handling */
 440 int llapi_json_init_list(struct llapi_json_item_list **item_list);
 441 int llapi_json_destroy_list(struct llapi_json_item_list **item_list);
 442 int llapi_json_add_item(struct llapi_json_item_list **item_list, char *key,
 443                         __u32 type, void *val);
 444 int llapi_json_write_list(struct llapi_json_item_list **item_list, FILE *fp);
 445
 446 /* File lease */
 447 int llapi_lease_get(int fd, int mode);
 448 int llapi_lease_check(int fd);
 449 int llapi_lease_put(int fd);
 450 extern int llapi_lease_get_ext(int fd, struct ll_ioc_lease *data);
 451
 452 /* Group lock */
 453 int llapi_group_lock(int fd, int gid);
 454 int llapi_group_unlock(int fd, int gid);
 455
 456 /* Ladvise */
 457 int llapi_ladvise(int fd, unsigned long long flags, int num_advise,
 458                   struct llapi_lu_ladvise *ladvise);
 459 /** @} llapi */
 460
 461 /* llapi_layout user interface */
 462
 463 static inline const char *lcm_flags_string(__u16 flags)
 464 {
 465         switch (flags & LCM_FL_FLR_MASK) {
 466         case LCM_FL_NOT_FLR:
 467                 return "not_flr";
 468         case LCM_FL_RDONLY:
 469                 return "ro";
 470         case LCM_FL_WRITE_PENDING:
 471                 return "wp";
 472         case LCM_FL_SYNC_PENDING:
 473                 return "sp";
 474         default:
 475                 return "";
 476         }
 477 }
 478
 479 /**
 480  * An array element storing component info to be resynced during mirror
 481  * resynchronization.
 482  */
 483 struct llapi_resync_comp {
 484         uint64_t lrc_start;
 485         uint64_t lrc_end;
 486         uint32_t lrc_mirror_id;
 487         uint32_t lrc_id;        /* component id */
 488         bool lrc_synced;
 489 };
 490
 491 /** Opaque data type abstracting the layout of a Lustre file. */
 492 struct llapi_layout;
 493
 494 int llapi_mirror_find_stale(struct llapi_layout *layout,
 495                 struct llapi_resync_comp *comp, size_t comp_size,
 496                 __u16 *mirror_ids, int ids_nr);
 497 ssize_t llapi_mirror_resync_one(int fd, struct llapi_layout *layout,
 498                                 uint32_t dst, uint64_t start, uint64_t end);
 499 /*
 500  * Flags to control how layouts are retrieved.
 501  */
 502
 503 /* Replace non-specified values with expected inherited values. */
 504 #define LAYOUT_GET_EXPECTED 0x1
 505
 506 /**
 507  * Return a pointer to a newly-allocated opaque data structure containing
 508  * the layout for the file at \a path.  The pointer should be freed with
 509  * llapi_layout_free() when it is no longer needed. Failure is indicated
 510  * by a NULL return value and an appropriate error code stored in errno.
 511  */
 512 struct llapi_layout *llapi_layout_get_by_path(const char *path, uint32_t flags);
 513
 514 /**
 515  * Return a pointer to a newly-allocated opaque data type containing the
 516  * layout for the file referenced by open file descriptor \a fd.  The
 517  * pointer should be freed with llapi_layout_free() when it is no longer
 518  * needed. Failure is indicated by a NULL return value and an
 519  * appropriate error code stored in errno.
 520  */
 521 struct llapi_layout *llapi_layout_get_by_fd(int fd, uint32_t flags);
 522
 523 /**
 524  * Return a pointer to a newly-allocated opaque data type containing the
 525  * layout for the file associated with Lustre file identifier string
 526  * \a fidstr.  The string \a path must name a path within the
 527  * filesystem that contains the file being looked up, such as the
 528  * filesystem root.  The returned pointer should be freed with
 529  * llapi_layout_free() when it is no longer needed.  Failure is
 530  * indicated with a NULL return value and an appropriate error code
 531  * stored in errno.
 532  */
 533 struct llapi_layout *llapi_layout_get_by_fid(const char *path,
 534                                              const struct lu_fid *fid,
 535                                              uint32_t flags);
 536
 537 /**
 538  * Allocate a new layout. Use this when creating a new file with
 539  * llapi_layout_file_create().
 540  */
 541 struct llapi_layout *llapi_layout_alloc(void);
 542
 543 /**
 544  * Free memory allocated for \a layout.
 545  */
 546 void llapi_layout_free(struct llapi_layout *layout);
 547
 548 /**
 549  * llapi_layout_merge() - Merge a composite layout into another one.
 550  * @dst_layout: Destination composite layout.
 551  * @src_layout: Source composite layout.
 552  *
 553  * This function copies all of the components from @src_layout and
 554  * appends them to @dst_layout.
 555  *
 556  * Return: 0 on success or -1 on failure.
 557  */
 558 int llapi_layout_merge(struct llapi_layout **dst_layout,
 559                        const struct llapi_layout *src_layout);
 560
 561 /** Not a valid stripe size, offset, or RAID pattern. */
 562 #define LLAPI_LAYOUT_INVALID    0x1000000000000001ULL
 563
 564 /**
 565  * When specified or returned as the value for stripe count,
 566  * stripe size, offset, or RAID pattern, the filesystem-wide
 567  * default behavior will apply.
 568  */
 569 #define LLAPI_LAYOUT_DEFAULT    (LLAPI_LAYOUT_INVALID + 1)
 570
 571 /**
 572  * When specified or returned as the value for stripe count, all
 573  * available OSTs will be used.
 574  */
 575 #define LLAPI_LAYOUT_WIDE       (LLAPI_LAYOUT_INVALID + 2)
 576
 577 /**
 578  * When specified as the value for layout pattern, file objects will be
 579  * stored using RAID0.  That is, data will be split evenly and without
 580  * redundancy across all OSTs in the layout.
 581  */
 582 #define LLAPI_LAYOUT_RAID0      0ULL
 583 #define LLAPI_LAYOUT_MDT        2ULL
 584
 585 /**
 586 * The layout includes a specific set of OSTs on which to allocate.
 587 */
 588 #define LLAPI_LAYOUT_SPECIFIC   0x2000000000000000ULL
 589
 590 /**
 591  * A valid ost index should be less than maximum valid OST index (UINT_MAX).
 592  */
 593 #define LLAPI_LAYOUT_IDX_MAX    0x00000000FFFFFFFFULL
 594
 595 /**
 596  * Flags to modify how layouts are retrieved.
 597  */
 598 /******************** Stripe Count ********************/
 599
 600 /**
 601  * Store the stripe count of \a layout in \a count.
 602  *
 603  * \retval  0 Success
 604  * \retval -1 Error with status code in errno.
 605  */
 606 int llapi_layout_stripe_count_get(const struct llapi_layout *layout,
 607                                   uint64_t *count);
 608
 609 /**
 610  * Set the stripe count of \a layout to \a count.
 611  *
 612  * \retval  0 Success.
 613  * \retval -1 Invalid argument, errno set to EINVAL.
 614  */
 615 int llapi_layout_stripe_count_set(struct llapi_layout *layout, uint64_t count);
 616
 617 /******************** Stripe Size ********************/
 618
 619 /**
 620  * Store the stripe size of \a layout in \a size.
 621  *
 622  * \retval  0 Success.
 623  * \retval -1 Invalid argument, errno set to EINVAL.
 624  */
 625 int llapi_layout_stripe_size_get(const struct llapi_layout *layout,
 626                                  uint64_t *size);
 627
 628 /**
 629  * Set the stripe size of \a layout to \a stripe_size.
 630  *
 631  * \retval  0 Success.
 632  * \retval -1 Invalid argument, errno set to EINVAL.
 633  */
 634 int llapi_layout_stripe_size_set(struct llapi_layout *layout, uint64_t size);
 635
 636 /******************** Stripe Pattern ********************/
 637
 638 /**
 639  * Store the stripe pattern of \a layout in \a pattern.
 640  *
 641  * \retval 0  Success.
 642  * \retval -1 Error with status code in errno.
 643  */
 644 int llapi_layout_pattern_get(const struct llapi_layout *layout,
 645                              uint64_t *pattern);
 646
 647 /**
 648  * Set the stripe pattern of \a layout to \a pattern.
 649  *
 650  * \retval  0 Success.
 651  * \retval -1 Invalid argument, errno set to EINVAL.
 652  */
 653 int llapi_layout_pattern_set(struct llapi_layout *layout, uint64_t pattern);
 654
 655 /******************** OST Index ********************/
 656
 657 /**
 658  * Store the index of the OST where stripe number \a stripe_number is stored
 659  * in \a index.
 660  *
 661  * An error return value will result from a NULL layout, if \a
 662  * stripe_number is out of range, or if \a layout was not initialized
 663  * with llapi_layout_lookup_by{path,fd,fid}().
 664  *
 665  * \retval  0 Success
 666  * \retval -1 Invalid argument, errno set to EINVAL.
 667  */
 668 int llapi_layout_ost_index_get(const struct llapi_layout *layout,
 669                                uint64_t stripe_number, uint64_t *index);
 670
 671 /**
 672  * Set the OST index associated with stripe number \a stripe_number to
 673  * \a ost_index.
 674  * NB: This is currently supported only for \a stripe_number = 0 and
 675  * other usage will return ENOTSUPP in errno.  A NULL \a layout or
 676  * out-of-range \a stripe_number will return EINVAL in errno.
 677  *
 678  * \retval  0 Success.
 679  * \retval -1 Error with errno set to non-zero value.
 680  */
 681 int llapi_layout_ost_index_set(struct llapi_layout *layout, int stripe_number,
 682                                uint64_t index);
 683
 684 /******************** Pool Name ********************/
 685
 686 /**
 687  * Store up to \a pool_name_len characters of the name of the pool of
 688  * OSTs associated with \a layout into the buffer pointed to by
 689  * \a pool_name.
 690  *
 691  * The correct calling form is:
 692  *
 693  *   llapi_layout_pool_name_get(layout, pool_name, sizeof(pool_name));
 694  *
 695  * A pool defines a set of OSTs from which file objects may be
 696  * allocated for a file using \a layout.
 697  *
 698  * On success, the number of bytes stored is returned, excluding the
 699  * terminating '\0' character (zero indicates that \a layout does not
 700  * have an associated OST pool).  On error, -1 is returned and errno is
 701  * set appropriately. Possible sources of error include a NULL pointer
 702  * argument or insufficient space in \a dest to store the pool name,
 703  * in which cases errno will be set to EINVAL.
 704  *
 705  * \retval 0+           The number of bytes stored in \a dest.
 706  * \retval -1           Invalid argument, errno set to EINVAL.
 707  */
 708 int llapi_layout_pool_name_get(const struct llapi_layout *layout,
 709                               char *pool_name, size_t pool_name_len);
 710
 711 /**
 712  * Set the name of the pool of OSTs from which file objects will be
 713  * allocated to \a pool_name.
 714  *
 715  * If the pool name uses "fsname.pool" notation to qualify the pool name
 716  * with a filesystem name, the "fsname." portion will be silently
 717  * discarded before storing the value. No validation that \a pool_name
 718  * is an existing non-empty pool in filesystem \a fsname will be
 719  * performed.  Such validation can be performed by the application if
 720  * desired using the llapi_search_ost() function.  The maximum length of
 721  * the stored value is defined by the constant LOV_MAXPOOLNAME.
 722  *
 723  * \retval  0   Success.
 724  * \retval -1   Invalid argument, errno set to EINVAL.
 725  */
 726 int llapi_layout_pool_name_set(struct llapi_layout *layout,
 727                               const char *pool_name);
 728
 729 /******************** File Creation ********************/
 730
 731 /**
 732  * Open an existing file at \a path, or create it with the specified
 733  * \a layout and \a mode.
 734  *
 735  * One access mode and zero or more file creation flags and file status
 736  * flags May be bitwise-or'd in \a open_flags (see open(2)).  Return an
 737  * open file descriptor for the file.  If \a layout is non-NULL and
 738  * \a path is not on a Lustre filesystem this function will fail and set
 739  * errno to ENOTTY.
 740  *
 741  * An already existing file may be opened with this function, but
 742  * \a layout and \a mode will not be applied to it.  Callers requiring a
 743  * guarantee that the opened file is created with the specified
 744  * \a layout and \a mode should use llapi_layout_file_create().
 745  *
 746  * A NULL \a layout may be specified, in which case the standard Lustre
 747  * behavior for assigning layouts to newly-created files will apply.
 748  *
 749  * \retval 0+ An open file descriptor.
 750  * \retval -1 Error with status code in errno.
 751  */
 752 int llapi_layout_file_open(const char *path, int open_flags, mode_t mode,
 753                            const struct llapi_layout *layout);
 754
 755 /**
 756  * Create a new file at \a path with the specified \a layout and \a mode.
 757  *
 758  * One access mode and zero or more file creation flags and file status
 759  * flags May be bitwise-or'd in \a open_flags (see open(2)).  Return an
 760  * open file descriptor for the file.  If \a layout is non-NULL and
 761  * \a path is not on a Lustre filesystem this function will fail and set
 762  * errno to ENOTTY.
 763  *
 764  * The function call
 765  *
 766  *   llapi_layout_file_create(path, open_flags, mode, layout)
 767  *
 768  * shall be equivalent to:
 769  *
 770  *   llapi_layout_file_open(path, open_flags|O_CREAT|O_EXCL, mode, layout)
 771  *
 772  * It is an error if \a path specifies an existing file.
 773  *
 774  * A NULL \a layout may be specified, in which the standard Lustre
 775  * behavior for assigning layouts to newly-created files will apply.
 776  *
 777  * \retval 0+ An open file descriptor.
 778  * \retval -1 Error with status code in errno.
 779  */
 780 int llapi_layout_file_create(const char *path, int open_flags, int mode,
 781                              const struct llapi_layout *layout);
 782
 783 /**
 784  * Set flags to the header of component layout.
 785  */
 786 int llapi_layout_flags_set(struct llapi_layout *layout, uint32_t flags);
 787 int llapi_layout_flags_get(struct llapi_layout *layout, uint32_t *flags);
 788
 789 /**
 790  * llapi_layout_mirror_count_get() - Get mirror count from the header of
 791  *                                   a layout.
 792  * @layout: Layout to get mirror count from.
 793  * @count:  Returned mirror count value.
 794  *
 795  * This function gets mirror count from the header of a layout.
 796  *
 797  * Return: 0 on success or -1 on failure.
 798  */
 799 int llapi_layout_mirror_count_get(struct llapi_layout *layout,
 800                                   uint16_t *count);
 801
 802 /**
 803  * llapi_layout_mirror_count_set() - Set mirror count to the header of a layout.
 804  * @layout: Layout to set mirror count in.
 805  * @count:  Mirror count value to be set.
 806  *
 807  * This function sets mirror count to the header of a layout.
 808  *
 809  * Return: 0 on success or -1 on failure.
 810  */
 811 int llapi_layout_mirror_count_set(struct llapi_layout *layout,
 812                                   uint16_t count);
 813
 814 /**
 815  * Fetch the start and end offset of the current layout component.
 816  */
 817 int llapi_layout_comp_extent_get(const struct llapi_layout *layout,
 818                                  uint64_t *start, uint64_t *end);
 819 /**
 820  * Set the extent of current layout component.
 821  */
 822 int llapi_layout_comp_extent_set(struct llapi_layout *layout,
 823                                  uint64_t start, uint64_t end);
 824
 825 /* PFL component flags table */
 826 static const struct comp_flag_name {
 827         enum lov_comp_md_entry_flags cfn_flag;
 828         const char *cfn_name;
 829 } comp_flags_table[] = {
 830         { LCME_FL_INIT,         "init" },
 831         { LCME_FL_PRIMARY,      "primary" },
 832         { LCME_FL_STALE,        "stale" },
 833         { LCME_FL_OFFLINE,      "offline" },
 834         { LCME_FL_PREFERRED,    "preferred" }
 835 };
 836
 837 /**
 838  * Gets the attribute flags of the current component.
 839  */
 840 int llapi_layout_comp_flags_get(const struct llapi_layout *layout,
 841                                 uint32_t *flags);
 842 /**
 843  * Sets the specified flags of the current component leaving other flags as-is.
 844  */
 845 int llapi_layout_comp_flags_set(struct llapi_layout *layout, uint32_t flags);
 846 /**
 847  * Clears the flags specified in the flags leaving other flags as-is.
 848  */
 849 int llapi_layout_comp_flags_clear(struct llapi_layout *layout, uint32_t flags);
 850 /**
 851  * Fetches the file-unique component ID of the current layout component.
 852  */
 853 int llapi_layout_comp_id_get(const struct llapi_layout *layout, uint32_t *id);
 854 /**
 855  * Fetches the mirror ID of the current layout component.
 856  */
 857 int llapi_layout_mirror_id_get(const struct llapi_layout *layout, uint32_t *id);
 858 /**
 859  * Adds one component to the existing composite or plain layout.
 860  */
 861 int llapi_layout_comp_add(struct llapi_layout *layout);
 862 /**
 863  * Deletes the current layout component from the composite layout.
 864  */
 865 int llapi_layout_comp_del(struct llapi_layout *layout);
 866
 867 enum llapi_layout_comp_use {
 868         LLAPI_LAYOUT_COMP_USE_FIRST = 1,
 869         LLAPI_LAYOUT_COMP_USE_LAST = 2,
 870         LLAPI_LAYOUT_COMP_USE_NEXT = 3,
 871         LLAPI_LAYOUT_COMP_USE_PREV = 4,
 872 };
 873
 874 /**
 875  * Set the currently active component to the specified component ID.
 876  */
 877 int llapi_layout_comp_use_id(struct llapi_layout *layout, uint32_t id);
 878 /**
 879  * Select the currently active component at the specified position.
 880  */
 881 int llapi_layout_comp_use(struct llapi_layout *layout, uint32_t pos);
 882 /**
 883  * Add layout components to an existing file.
 884  */
 885 int llapi_layout_file_comp_add(const char *path,
 886                                const struct llapi_layout *layout);
 887 /**
 888  * Delete component(s) by the specified component id or flags.
 889  */
 890 int llapi_layout_file_comp_del(const char *path, uint32_t id, uint32_t flags);
 891 /**
 892  * Change flags or other parameters of the component(s) by component ID of an
 893  * existing file. The component to be modified is specified by the
 894  * comp->lcme_id value, which must be an unique component ID. The new
 895  * attributes are passed in by @comp and @valid is used to specify which
 896  * attributes in the component are going to be changed.
 897  */
 898 int llapi_layout_file_comp_set(const char *path,
 899                                const struct llapi_layout *comp,
 900                                uint32_t valid);
 901 /**
 902  * Check if the file layout is composite.
 903  */
 904 bool llapi_layout_is_composite(struct llapi_layout *layout);
 905
 906 /**
 907  * FLR: mirror operation APIs
 908  */
 909 int llapi_mirror_set(int fd, unsigned int id);
 910 int llapi_mirror_clear(int fd);
 911 ssize_t llapi_mirror_read(int fd, unsigned int id,
 912                            void *buf, size_t count, off_t pos);
 913 ssize_t llapi_mirror_copy_many(int fd, unsigned int src,
 914                                 unsigned int *dst, size_t count);
 915 int llapi_mirror_copy(int fd, unsigned int src, unsigned int dst,
 916                        off_t pos, size_t count);
 917
 918 /** @} llapi */
 919
 920 #if defined(__cplusplus)
 921 }
 922 #endif
 923
 924 #endif