lustre/ofd/ofd_objects.c

   1 /*
   2  * GPL HEADER START
   3  *
   4  * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
   5  *
   6  * This program is free software; you can redistribute it and/or modify
   7  * it under the terms of the GNU General Public License version 2 only,
   8  * as published by the Free Software Foundation.
   9  *
  10  * This program is distributed in the hope that it will be useful, but
  11  * WITHOUT ANY WARRANTY; without even the implied warranty of
  12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13  * General Public License version 2 for more details (a copy is included
  14  * in the LICENSE file that accompanied this code).
  15  *
  16  * You should have received a copy of the GNU General Public License
  17  * version 2 along with this program; If not, see
  18  * http://www.sun.com/software/products/lustre/docs/GPLv2.pdf
  19  *
  20  * Please contact Sun Microsystems, Inc., 4150 Network Circle, Santa Clara,
  21  * CA 95054 USA or visit www.sun.com if you need additional information or
  22  * have any questions.
  23  *
  24  * GPL HEADER END
  25  */
  26 /*
  27  * Copyright (c) 2009, 2010, Oracle and/or its affiliates. All rights reserved.
  28  * Use is subject to license terms.
  29  *
  30  * Copyright (c) 2012, 2013, Intel Corporation.
  31  */
  32 /*
  33  * This file is part of Lustre, http://www.lustre.org/
  34  * Lustre is a trademark of Sun Microsystems, Inc.
  35  *
  36  * lustre/ofd/ofd_objects.c
  37  *
  38  * Author: Alex Zhuravlev <bzzz@whamcloud.com>
  39  * Author: Mikhail Pershin <tappro@whamcloud.com>
  40  */
  41
  42 #define DEBUG_SUBSYSTEM S_FILTER
  43
  44 #include <dt_object.h>
  45 #include <lustre/lustre_idl.h>
  46
  47 #include "ofd_internal.h"
  48
  49 int ofd_version_get_check(struct ofd_thread_info *info,
  50                           struct ofd_object *fo)
  51 {
  52         dt_obj_version_t curr_version;
  53
  54         LASSERT(ofd_object_exists(fo));
  55         LASSERT(info->fti_exp);
  56
  57         curr_version = dt_version_get(info->fti_env, ofd_object_child(fo));
  58         if ((__s64)curr_version == -EOPNOTSUPP)
  59                 RETURN(0);
  60         /* VBR: version is checked always because costs nothing */
  61         if (info->fti_pre_version != 0 &&
  62             info->fti_pre_version != curr_version) {
  63                 CDEBUG(D_INODE, "Version mismatch "LPX64" != "LPX64"\n",
  64                        info->fti_pre_version, curr_version);
  65                 spin_lock(&info->fti_exp->exp_lock);
  66                 info->fti_exp->exp_vbr_failed = 1;
  67                 spin_unlock(&info->fti_exp->exp_lock);
  68                 RETURN (-EOVERFLOW);
  69         }
  70         info->fti_pre_version = curr_version;
  71         RETURN(0);
  72 }
  73
  74 struct ofd_object *ofd_object_find(const struct lu_env *env,
  75                                    struct ofd_device *ofd,
  76                                    const struct lu_fid *fid)
  77 {
  78         struct ofd_object *fo;
  79         struct lu_object  *o;
  80
  81         ENTRY;
  82
  83         o = lu_object_find(env, &ofd->ofd_dt_dev.dd_lu_dev, fid, NULL);
  84         if (likely(!IS_ERR(o)))
  85                 fo = ofd_obj(o);
  86         else
  87                 fo = ERR_CAST(o); /* return error */
  88
  89         RETURN(fo);
  90 }
  91
  92 struct ofd_object *ofd_object_find_or_create(const struct lu_env *env,
  93                                              struct ofd_device *ofd,
  94                                              const struct lu_fid *fid,
  95                                              struct lu_attr *attr)
  96 {
  97         struct ofd_thread_info  *info = ofd_info(env);
  98         struct lu_object        *fo_obj;
  99         struct dt_object        *dto;
 100
 101         ENTRY;
 102
 103         info->fti_dof.dof_type = dt_mode_to_dft(S_IFREG);
 104
 105         dto = dt_find_or_create(env, ofd->ofd_osd, fid, &info->fti_dof, attr);
 106         if (IS_ERR(dto))
 107                 RETURN(ERR_CAST(dto));
 108
 109         fo_obj = lu_object_locate(dto->do_lu.lo_header,
 110                                   ofd->ofd_dt_dev.dd_lu_dev.ld_type);
 111         RETURN(ofd_obj(fo_obj));
 112 }
 113
 114 int ofd_object_ff_check(const struct lu_env *env, struct ofd_object *fo)
 115 {
 116         int rc = 0;
 117
 118         ENTRY;
 119
 120         if (!fo->ofo_ff_exists) {
 121                 /*
 122                  * This actually means that we don't know whether the object
 123                  * has the "fid" EA or not.
 124                  */
 125                 rc = dt_xattr_get(env, ofd_object_child(fo), &LU_BUF_NULL,
 126                                   XATTR_NAME_FID, BYPASS_CAPA);
 127                 if (rc >= 0 || rc == -ENODATA) {
 128                         /*
 129                          * Here we assume that, if the object doesn't have the
 130                          * "fid" EA, the caller will add one, unless a fatal
 131                          * error (e.g., a memory or disk failure) prevents it
 132                          * from doing so.
 133                          */
 134                         fo->ofo_ff_exists = 1;
 135                 }
 136                 if (rc > 0)
 137                         rc = 0;
 138         }
 139         RETURN(rc);
 140 }
 141
 142 void ofd_object_put(const struct lu_env *env, struct ofd_object *fo)
 143 {
 144         lu_object_put(env, &fo->ofo_obj.do_lu);
 145 }
 146
 147 int ofd_precreate_objects(const struct lu_env *env, struct ofd_device *ofd,
 148                           obd_id id, struct ofd_seq *oseq, int nr, int sync)
 149 {
 150         struct ofd_thread_info  *info = ofd_info(env);
 151         struct ofd_object       *fo = NULL;
 152         struct dt_object        *next;
 153         struct thandle          *th;
 154         struct ofd_object       **batch;
 155         struct lu_fid           *fid = &info->fti_fid;
 156         obd_id                   tmp;
 157         int                      rc;
 158         int                      i;
 159         int                      objects = 0;
 160         int                      nr_saved = nr;
 161
 162         ENTRY;
 163
 164         /* Don't create objects beyond the valid range for this SEQ */
 165         if (unlikely(fid_seq_is_mdt0(ostid_seq(&oseq->os_oi)) &&
 166                      (id + nr) >= IDIF_MAX_OID)) {
 167                 CERROR("%s:"DOSTID" hit the IDIF_MAX_OID (1<<48)!\n",
 168                        ofd_name(ofd), id, ostid_seq(&oseq->os_oi));
 169                 RETURN(rc = -ENOSPC);
 170         } else if (unlikely(!fid_seq_is_mdt0(ostid_seq(&oseq->os_oi)) &&
 171                             (id + nr) >= OBIF_MAX_OID)) {
 172                 CERROR("%s:"DOSTID" hit the OBIF_MAX_OID (1<<32)!\n",
 173                        ofd_name(ofd), id, ostid_seq(&oseq->os_oi));
 174                 RETURN(rc = -ENOSPC);
 175         }
 176
 177         OBD_ALLOC(batch, nr_saved * sizeof(struct ofd_object *));
 178         if (batch == NULL)
 179                 RETURN(-ENOMEM);
 180
 181         info->fti_attr.la_valid = LA_TYPE | LA_MODE;
 182         /*
 183          * We mark object SUID+SGID to flag it for accepting UID+GID from
 184          * client on first write.  Currently the permission bits on the OST are
 185          * never used, so this is OK.
 186          */
 187         info->fti_attr.la_mode = S_IFREG | S_ISUID | S_ISGID | 0666;
 188         info->fti_dof.dof_type = dt_mode_to_dft(S_IFREG);
 189
 190         /* Initialize a/c/m time so any client timestamp will always
 191          * be newer and update the inode. ctime = 0 is also handled
 192          * specially in osd_inode_setattr(). See LU-221, LU-1042 */
 193         info->fti_attr.la_valid |= LA_ATIME | LA_MTIME | LA_CTIME;
 194         info->fti_attr.la_atime = 0;
 195         info->fti_attr.la_mtime = 0;
 196         info->fti_attr.la_ctime = 0;
 197
 198         LASSERT(id != 0);
 199
 200         /* prepare objects */
 201         *fid = *lu_object_fid(&oseq->os_lastid_obj->do_lu);
 202         for (i = 0; i < nr; i++) {
 203                 rc = fid_set_id(fid, id + i);
 204                 if (rc != 0) {
 205                         if (i == 0)
 206                                 GOTO(out, rc);
 207
 208                         nr = i;
 209                         break;
 210                 }
 211
 212                 fo = ofd_object_find(env, ofd, fid);
 213                 if (IS_ERR(fo)) {
 214                         if (i == 0)
 215                                 GOTO(out, rc = PTR_ERR(fo));
 216
 217                         nr = i;
 218                         break;
 219                 }
 220
 221                 ofd_write_lock(env, fo);
 222                 batch[i] = fo;
 223         }
 224         info->fti_buf.lb_buf = &tmp;
 225         info->fti_buf.lb_len = sizeof(tmp);
 226         info->fti_off = 0;
 227
 228         th = ofd_trans_create(env, ofd);
 229         if (IS_ERR(th))
 230                 GOTO(out, rc = PTR_ERR(th));
 231
 232         th->th_sync |= sync;
 233
 234         rc = dt_declare_record_write(env, oseq->os_lastid_obj, sizeof(tmp),
 235                                      info->fti_off, th);
 236         if (rc)
 237                 GOTO(trans_stop, rc);
 238
 239         for (i = 0; i < nr; i++) {
 240                 fo = batch[i];
 241                 LASSERT(fo);
 242
 243                 if (unlikely(ofd_object_exists(fo))) {
 244                         /* object may exist being re-created by write replay */
 245                         CDEBUG(D_INODE, "object "LPX64"/"LPX64" exists: "
 246                                DFID"\n", ostid_seq(&oseq->os_oi), id,
 247                                PFID(lu_object_fid(&fo->ofo_obj.do_lu)));
 248                         continue;
 249                 }
 250
 251                 next = ofd_object_child(fo);
 252                 LASSERT(next != NULL);
 253
 254                 rc = dt_declare_create(env, next, &info->fti_attr, NULL,
 255                                        &info->fti_dof, th);
 256                 if (rc) {
 257                         nr = i;
 258                         break;
 259                 }
 260         }
 261
 262         rc = dt_trans_start_local(env, ofd->ofd_osd, th);
 263         if (rc)
 264                 GOTO(trans_stop, rc);
 265
 266         CDEBUG(D_OTHER, "%s: create new object "DFID" nr %d\n",
 267                ofd_name(ofd), PFID(fid), nr);
 268
 269         for (i = 0; i < nr; i++) {
 270                 fo = batch[i];
 271                 LASSERT(fo);
 272
 273                 if (likely(!ofd_object_exists(fo))) {
 274                         next = ofd_object_child(fo);
 275                         LASSERT(next != NULL);
 276
 277                         rc = dt_create(env, next, &info->fti_attr, NULL,
 278                                        &info->fti_dof, th);
 279                         if (rc)
 280                                 break;
 281                         LASSERT(ofd_object_exists(fo));
 282                 }
 283                 ofd_seq_last_oid_set(oseq, id + i);
 284         }
 285
 286         objects = i;
 287         if (objects > 0) {
 288                 tmp = cpu_to_le64(ofd_seq_last_oid(oseq));
 289                 rc = dt_record_write(env, oseq->os_lastid_obj,
 290                                      &info->fti_buf, &info->fti_off, th);
 291         }
 292 trans_stop:
 293         ofd_trans_stop(env, ofd, th, rc);
 294 out:
 295         for (i = 0; i < nr_saved; i++) {
 296                 fo = batch[i];
 297                 if (fo) {
 298                         ofd_write_unlock(env, fo);
 299                         ofd_object_put(env, fo);
 300                 }
 301         }
 302         OBD_FREE(batch, nr_saved * sizeof(struct ofd_object *));
 303
 304         CDEBUG((objects == 0 && rc == 0) ? D_ERROR : D_OTHER,
 305                "created %d/%d objects: %d\n", objects, nr_saved, rc);
 306
 307         LASSERT(ergo(objects == 0, rc < 0));
 308         RETURN(objects > 0 ? objects : rc);
 309 }
 310
 311 /*
 312  * If the object still has SUID+SGID bits set (see ofd_precreate_object()) then
 313  * we will accept the UID+GID if sent by the client for initializing the
 314  * ownership of this object.  We only allow this to happen once (so clear these
 315  * bits) and later only allow setattr.
 316  */
 317 int ofd_attr_handle_ugid(const struct lu_env *env, struct ofd_object *fo,
 318                          struct lu_attr *la, int is_setattr)
 319 {
 320         struct ofd_thread_info  *info = ofd_info(env);
 321         struct lu_attr          *ln = &info->fti_attr2;
 322         __u32                    mask = 0;
 323         int                      rc;
 324
 325         ENTRY;
 326
 327         if (!(la->la_valid & LA_UID) && !(la->la_valid & LA_GID))
 328                 RETURN(0);
 329
 330         rc = dt_attr_get(env, ofd_object_child(fo), ln, BYPASS_CAPA);
 331         if (rc != 0)
 332                 RETURN(rc);
 333
 334         LASSERT(ln->la_valid & LA_MODE);
 335
 336         if (!is_setattr) {
 337                 if (!(ln->la_mode & S_ISUID))
 338                         la->la_valid &= ~LA_UID;
 339                 if (!(ln->la_mode & S_ISGID))
 340                         la->la_valid &= ~LA_GID;
 341         }
 342
 343         if ((la->la_valid & LA_UID) && (ln->la_mode & S_ISUID))
 344                 mask |= S_ISUID;
 345         if ((la->la_valid & LA_GID) && (ln->la_mode & S_ISGID))
 346                 mask |= S_ISGID;
 347         if (mask != 0) {
 348                 if (!(la->la_valid & LA_MODE) || !is_setattr) {
 349                         la->la_mode = ln->la_mode;
 350                         la->la_valid |= LA_MODE;
 351                 }
 352                 la->la_mode &= ~mask;
 353         }
 354
 355         RETURN(0);
 356 }
 357
 358 int ofd_attr_set(const struct lu_env *env, struct ofd_object *fo,
 359                  struct lu_attr *la, struct filter_fid *ff)
 360 {
 361         struct ofd_thread_info  *info = ofd_info(env);
 362         struct ofd_device       *ofd = ofd_obj2dev(fo);
 363         struct thandle          *th;
 364         struct ofd_mod_data     *fmd;
 365         int                      ff_needed = 0;
 366         int                      rc;
 367         ENTRY;
 368
 369         ofd_write_lock(env, fo);
 370         if (!ofd_object_exists(fo))
 371                 GOTO(unlock, rc = -ENOENT);
 372
 373         if (la->la_valid & (LA_ATIME | LA_MTIME | LA_CTIME)) {
 374                 fmd = ofd_fmd_get(info->fti_exp, &fo->ofo_header.loh_fid);
 375                 if (fmd && fmd->fmd_mactime_xid < info->fti_xid)
 376                         fmd->fmd_mactime_xid = info->fti_xid;
 377                 ofd_fmd_put(info->fti_exp, fmd);
 378         }
 379
 380         /* VBR: version recovery check */
 381         rc = ofd_version_get_check(info, fo);
 382         if (rc)
 383                 GOTO(unlock, rc);
 384
 385         rc = ofd_attr_handle_ugid(env, fo, la, 1 /* is_setattr */);
 386         if (rc != 0)
 387                 GOTO(unlock, rc);
 388
 389         if (ff != NULL) {
 390                 rc = ofd_object_ff_check(env, fo);
 391                 if (rc == -ENODATA)
 392                         ff_needed = 1;
 393                 else if (rc < 0)
 394                         GOTO(unlock, rc);
 395         }
 396
 397         th = ofd_trans_create(env, ofd);
 398         if (IS_ERR(th))
 399                 GOTO(unlock, rc = PTR_ERR(th));
 400
 401         rc = dt_declare_attr_set(env, ofd_object_child(fo), la, th);
 402         if (rc)
 403                 GOTO(stop, rc);
 404
 405         if (ff_needed) {
 406                 info->fti_buf.lb_buf = ff;
 407                 info->fti_buf.lb_len = sizeof(*ff);
 408                 rc = dt_declare_xattr_set(env, ofd_object_child(fo),
 409                                           &info->fti_buf, XATTR_NAME_FID, 0,
 410                                           th);
 411                 if (rc)
 412                         GOTO(stop, rc);
 413         }
 414
 415         rc = ofd_trans_start(env, ofd, la->la_valid & LA_SIZE ? fo : NULL, th);
 416         if (rc)
 417                 GOTO(stop, rc);
 418
 419         rc = dt_attr_set(env, ofd_object_child(fo), la, th,
 420                          ofd_object_capa(env, fo));
 421         if (rc)
 422                 GOTO(stop, rc);
 423
 424         if (ff_needed)
 425                 rc = dt_xattr_set(env, ofd_object_child(fo), &info->fti_buf,
 426                                   XATTR_NAME_FID, 0, th, BYPASS_CAPA);
 427
 428 stop:
 429         ofd_trans_stop(env, ofd, th, rc);
 430 unlock:
 431         ofd_write_unlock(env, fo);
 432         RETURN(rc);
 433 }
 434
 435 int ofd_object_punch(const struct lu_env *env, struct ofd_object *fo,
 436                      __u64 start, __u64 end, struct lu_attr *la,
 437                      struct filter_fid *ff)
 438 {
 439         struct ofd_thread_info  *info = ofd_info(env);
 440         struct ofd_device       *ofd = ofd_obj2dev(fo);
 441         struct ofd_mod_data     *fmd;
 442         struct dt_object        *dob = ofd_object_child(fo);
 443         struct thandle          *th;
 444         int                      ff_needed = 0;
 445         int                      rc;
 446
 447         ENTRY;
 448
 449         /* we support truncate, not punch yet */
 450         LASSERT(end == OBD_OBJECT_EOF);
 451
 452         fmd = ofd_fmd_get(info->fti_exp, &fo->ofo_header.loh_fid);
 453         if (fmd && fmd->fmd_mactime_xid < info->fti_xid)
 454                 fmd->fmd_mactime_xid = info->fti_xid;
 455         ofd_fmd_put(info->fti_exp, fmd);
 456
 457         ofd_write_lock(env, fo);
 458         if (!ofd_object_exists(fo))
 459                 GOTO(unlock, rc = -ENOENT);
 460
 461         /* VBR: version recovery check */
 462         rc = ofd_version_get_check(info, fo);
 463         if (rc)
 464                 GOTO(unlock, rc);
 465
 466         rc = ofd_attr_handle_ugid(env, fo, la, 0 /* !is_setattr */);
 467         if (rc != 0)
 468                 GOTO(unlock, rc);
 469
 470         if (ff != NULL) {
 471                 rc = ofd_object_ff_check(env, fo);
 472                 if (rc == -ENODATA)
 473                         ff_needed = 1;
 474                 else if (rc < 0)
 475                         GOTO(unlock, rc);
 476         }
 477
 478         th = ofd_trans_create(env, ofd);
 479         if (IS_ERR(th))
 480                 GOTO(unlock, rc = PTR_ERR(th));
 481
 482         rc = dt_declare_attr_set(env, dob, la, th);
 483         if (rc)
 484                 GOTO(stop, rc);
 485
 486         rc = dt_declare_punch(env, dob, start, OBD_OBJECT_EOF, th);
 487         if (rc)
 488                 GOTO(stop, rc);
 489
 490         if (ff_needed) {
 491                 info->fti_buf.lb_buf = ff;
 492                 info->fti_buf.lb_len = sizeof(*ff);
 493                 rc = dt_declare_xattr_set(env, ofd_object_child(fo),
 494                                           &info->fti_buf, XATTR_NAME_FID, 0,
 495                                           th);
 496                 if (rc)
 497                         GOTO(stop, rc);
 498         }
 499
 500         rc = ofd_trans_start(env, ofd, fo, th);
 501         if (rc)
 502                 GOTO(stop, rc);
 503
 504         rc = dt_punch(env, dob, start, OBD_OBJECT_EOF, th,
 505                       ofd_object_capa(env, fo));
 506         if (rc)
 507                 GOTO(stop, rc);
 508
 509         rc = dt_attr_set(env, dob, la, th, ofd_object_capa(env, fo));
 510         if (rc)
 511                 GOTO(stop, rc);
 512
 513         if (ff_needed)
 514                 rc = dt_xattr_set(env, ofd_object_child(fo), &info->fti_buf,
 515                                   XATTR_NAME_FID, 0, th, BYPASS_CAPA);
 516
 517 stop:
 518         ofd_trans_stop(env, ofd, th, rc);
 519 unlock:
 520         ofd_write_unlock(env, fo);
 521         RETURN(rc);
 522 }
 523
 524 int ofd_object_destroy(const struct lu_env *env, struct ofd_object *fo,
 525                        int orphan)
 526 {
 527         struct ofd_device       *ofd = ofd_obj2dev(fo);
 528         struct thandle          *th;
 529         int                      rc = 0;
 530
 531         ENTRY;
 532
 533         ofd_write_lock(env, fo);
 534         if (!ofd_object_exists(fo))
 535                 GOTO(unlock, rc = -ENOENT);
 536
 537         th = ofd_trans_create(env, ofd);
 538         if (IS_ERR(th))
 539                 GOTO(unlock, rc = PTR_ERR(th));
 540
 541         dt_declare_ref_del(env, ofd_object_child(fo), th);
 542         dt_declare_destroy(env, ofd_object_child(fo), th);
 543         if (orphan)
 544                 rc = dt_trans_start_local(env, ofd->ofd_osd, th);
 545         else
 546                 rc = ofd_trans_start(env, ofd, NULL, th);
 547         if (rc)
 548                 GOTO(stop, rc);
 549
 550         ofd_fmd_drop(ofd_info(env)->fti_exp, &fo->ofo_header.loh_fid);
 551
 552         dt_ref_del(env, ofd_object_child(fo), th);
 553         dt_destroy(env, ofd_object_child(fo), th);
 554 stop:
 555         ofd_trans_stop(env, ofd, th, rc);
 556 unlock:
 557         ofd_write_unlock(env, fo);
 558         RETURN(rc);
 559 }
 560
 561 int ofd_attr_get(const struct lu_env *env, struct ofd_object *fo,
 562                  struct lu_attr *la)
 563 {
 564         int rc = 0;
 565
 566         ENTRY;
 567
 568         if (ofd_object_exists(fo)) {
 569                 rc = dt_attr_get(env, ofd_object_child(fo), la,
 570                                  ofd_object_capa(env, fo));
 571
 572 #if LUSTRE_VERSION_CODE < OBD_OCD_VERSION(2, 7, 50, 0)
 573                 /* Try to correct for a bug in 2.1.0 (LU-221) that caused
 574                  * negative timestamps to appear to be in the far future,
 575                  * due old timestamp being stored on disk as an unsigned value.
 576                  * This fixes up any bad values stored on disk before
 577                  * returning them to the client, and ensures any timestamp
 578                  * updates are correct.  LU-1042 */
 579                 if (unlikely(la->la_atime == LU221_BAD_TIME))
 580                         la->la_atime = 0;
 581                 if (unlikely(la->la_mtime == LU221_BAD_TIME))
 582                         la->la_mtime = 0;
 583                 if (unlikely(la->la_ctime == LU221_BAD_TIME))
 584                         la->la_ctime = 0;
 585 #else
 586 #warning "remove old LU-221/LU-1042 workaround code"
 587 #endif
 588         } else {
 589                 rc = -ENOENT;
 590         }
 591         RETURN(rc);
 592 }