lustre/llite/dcache.c

   1 /*
   2  * GPL HEADER START
   3  *
   4  * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
   5  *
   6  * This program is free software; you can redistribute it and/or modify
   7  * it under the terms of the GNU General Public License version 2 only,
   8  * as published by the Free Software Foundation.
   9  *
  10  * This program is distributed in the hope that it will be useful, but
  11  * WITHOUT ANY WARRANTY; without even the implied warranty of
  12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13  * General Public License version 2 for more details (a copy is included
  14  * in the LICENSE file that accompanied this code).
  15  *
  16  * You should have received a copy of the GNU General Public License
  17  * version 2 along with this program; If not, see
  18  * http://www.sun.com/software/products/lustre/docs/GPLv2.pdf
  19  *
  20  * Please contact Sun Microsystems, Inc., 4150 Network Circle, Santa Clara,
  21  * CA 95054 USA or visit www.sun.com if you need additional information or
  22  * have any questions.
  23  *
  24  * GPL HEADER END
  25  */
  26 /*
  27  * Copyright (c) 2002, 2010, Oracle and/or its affiliates. All rights reserved.
  28  * Use is subject to license terms.
  29  *
  30  * Copyright (c) 2011, 2013, Intel Corporation.
  31  */
  32 /*
  33  * This file is part of Lustre, http://www.lustre.org/
  34  * Lustre is a trademark of Sun Microsystems, Inc.
  35  */
  36
  37 #include <linux/fs.h>
  38 #include <linux/sched.h>
  39 #include <linux/quotaops.h>
  40 #include <linux/kernel.h>
  41
  42 #define DEBUG_SUBSYSTEM S_LLITE
  43
  44 #include <obd_support.h>
  45 #include <lustre/lustre_idl.h>
  46 #include <lustre_dlm.h>
  47
  48 #include "llite_internal.h"
  49
  50 static void free_dentry_data(struct rcu_head *head)
  51 {
  52         struct ll_dentry_data *lld;
  53
  54         lld = container_of(head, struct ll_dentry_data, lld_rcu_head);
  55         OBD_FREE_PTR(lld);
  56 }
  57
  58 /* should NOT be called with the dcache lock, see fs/dcache.c */
  59 static void ll_release(struct dentry *de)
  60 {
  61         struct ll_dentry_data *lld;
  62         ENTRY;
  63         LASSERT(de != NULL);
  64         lld = ll_d2d(de);
  65         if (lld == NULL) /* NFS copies the de->d_op methods (bug 4655) */
  66                 RETURN_EXIT;
  67
  68         if (lld->lld_it) {
  69                 ll_intent_release(lld->lld_it);
  70                 OBD_FREE(lld->lld_it, sizeof(*lld->lld_it));
  71         }
  72
  73         de->d_fsdata = NULL;
  74         call_rcu(&lld->lld_rcu_head, free_dentry_data);
  75
  76         EXIT;
  77 }
  78
  79 /* Compare if two dentries are the same.  Don't match if the existing dentry
  80  * is marked invalid.  Returns 1 if different, 0 if the same.
  81  *
  82  * This avoids a race where ll_lookup_it() instantiates a dentry, but we get
  83  * an AST before calling d_revalidate_it().  The dentry still exists (marked
  84  * INVALID) so d_lookup() matches it, but we have no lock on it (so
  85  * lock_match() fails) and we spin around real_lookup(). */
  86 #ifdef HAVE_D_COMPARE_7ARGS
  87 static int ll_dcompare(const struct dentry *parent, const struct inode *pinode,
  88                        const struct dentry *dentry, const struct inode *inode,
  89                        unsigned int len, const char *str,
  90                        const struct qstr *name)
  91 #elif defined(HAVE_D_COMPARE_5ARGS)
  92 static int ll_dcompare(const struct dentry *parent, const struct dentry *dentry,
  93                        unsigned int len, const char *str,
  94                        const struct qstr *name)
  95 #else
  96 static int ll_dcompare(struct dentry *parent, struct qstr *d_name,
  97                        struct qstr *name)
  98 #endif
  99 {
 100 #if !defined(HAVE_D_COMPARE_7ARGS) && !defined(HAVE_D_COMPARE_5ARGS)
 101         /* XXX: (ugh !) d_name must be in-dentry structure */
 102         struct dentry *dentry = container_of(d_name, struct dentry, d_name);
 103         unsigned int len = d_name->len;
 104         const char *str = d_name->name;
 105 #endif
 106         ENTRY;
 107
 108         if (len != name->len)
 109                 RETURN(1);
 110
 111         if (memcmp(str, name->name, len))
 112                 RETURN(1);
 113
 114         CDEBUG(D_DENTRY, "found name %.*s(%p) flags %#x refc %d\n",
 115                name->len, name->name, dentry, dentry->d_flags,
 116                ll_d_count(dentry));
 117
 118         /* mountpoint is always valid */
 119         if (d_mountpoint((struct dentry *)dentry))
 120                 RETURN(0);
 121
 122         if (d_lustre_invalid(dentry))
 123                 RETURN(1);
 124
 125         RETURN(0);
 126 }
 127
 128 static inline int return_if_equal(struct ldlm_lock *lock, void *data)
 129 {
 130         return (ldlm_is_canceling(lock) && ldlm_is_discard_data(lock)) ?
 131                 LDLM_ITER_CONTINUE : LDLM_ITER_STOP;
 132 }
 133
 134 /* find any ldlm lock of the inode in mdc and lov
 135  * return 0    not find
 136  *        1    find one
 137  *      < 0    error */
 138 static int find_cbdata(struct inode *inode)
 139 {
 140         struct ll_sb_info *sbi = ll_i2sbi(inode);
 141         struct lov_stripe_md *lsm;
 142         int rc = 0;
 143         ENTRY;
 144
 145         LASSERT(inode);
 146         rc = md_find_cbdata(sbi->ll_md_exp, ll_inode2fid(inode),
 147                             return_if_equal, NULL);
 148         if (rc != 0)
 149                 RETURN(rc);
 150
 151         lsm = ccc_inode_lsm_get(inode);
 152         if (lsm == NULL)
 153                 RETURN(rc);
 154
 155         rc = obd_find_cbdata(sbi->ll_dt_exp, lsm, return_if_equal, NULL);
 156         ccc_inode_lsm_put(inode, lsm);
 157
 158         RETURN(rc);
 159 }
 160
 161 /**
 162  * Called when last reference to a dentry is dropped and dcache wants to know
 163  * whether or not it should cache it:
 164  * - return 1 to delete the dentry immediately
 165  * - return 0 to cache the dentry
 166  * Should NOT be called with the dcache lock, see fs/dcache.c
 167  */
 168 static int ll_ddelete(HAVE_D_DELETE_CONST struct dentry *de)
 169 {
 170         ENTRY;
 171         LASSERT(de);
 172
 173         CDEBUG(D_DENTRY, "%s dentry %.*s (%p, parent %p, inode %p) %s%s\n",
 174                d_lustre_invalid((struct dentry *)de) ? "deleting" : "keeping",
 175                de->d_name.len, de->d_name.name, de, de->d_parent, de->d_inode,
 176                d_unhashed((struct dentry *)de) ? "" : "hashed,",
 177                list_empty(&de->d_subdirs) ? "" : "subdirs");
 178
 179 #ifdef HAVE_DCACHE_LOCK
 180         LASSERT(ll_d_count(de) == 0);
 181 #else
 182         /* kernel >= 2.6.38 last refcount is decreased after this function. */
 183         LASSERT(ll_d_count(de) == 1);
 184 #endif
 185
 186         /* Disable this piece of code temproarily because this is called
 187          * inside dcache_lock so it's not appropriate to do lots of work
 188          * here. ATTENTION: Before this piece of code enabling, LU-2487 must be
 189          * resolved. */
 190 #if 0
 191         /* if not ldlm lock for this inode, set i_nlink to 0 so that
 192          * this inode can be recycled later b=20433 */
 193         if (de->d_inode && !find_cbdata(de->d_inode))
 194                 clear_nlink(de->d_inode);
 195 #endif
 196
 197         if (d_lustre_invalid((struct dentry *)de))
 198                 RETURN(1);
 199         RETURN(0);
 200 }
 201
 202 int ll_d_init(struct dentry *de)
 203 {
 204         ENTRY;
 205         LASSERT(de != NULL);
 206
 207         CDEBUG(D_DENTRY, "ldd on dentry %.*s (%p) parent %p inode %p refc %d\n",
 208                 de->d_name.len, de->d_name.name, de, de->d_parent, de->d_inode,
 209                 ll_d_count(de));
 210
 211         if (de->d_fsdata == NULL) {
 212                 struct ll_dentry_data *lld;
 213
 214                 OBD_ALLOC_PTR(lld);
 215                 if (likely(lld != NULL)) {
 216                         spin_lock(&de->d_lock);
 217                         if (likely(de->d_fsdata == NULL)) {
 218                                 de->d_fsdata = lld;
 219                                 __d_lustre_invalidate(de);
 220 #ifdef HAVE_DCACHE_LOCK
 221                                 /* kernel >= 2.6.38 d_op is set in d_alloc() */
 222                                 de->d_op = &ll_d_ops;
 223 #endif
 224                         } else {
 225                                 OBD_FREE_PTR(lld);
 226                         }
 227                         spin_unlock(&de->d_lock);
 228                 } else {
 229                         RETURN(-ENOMEM);
 230                 }
 231         }
 232         LASSERT(de->d_op == &ll_d_ops);
 233
 234         RETURN(0);
 235 }
 236
 237 void ll_intent_drop_lock(struct lookup_intent *it)
 238 {
 239         if (it->it_op && it->d.lustre.it_lock_mode) {
 240                 struct lustre_handle handle;
 241
 242                 handle.cookie = it->d.lustre.it_lock_handle;
 243
 244                 CDEBUG(D_DLMTRACE, "releasing lock with cookie "LPX64
 245                        " from it %p\n", handle.cookie, it);
 246                 ldlm_lock_decref(&handle, it->d.lustre.it_lock_mode);
 247
 248                 /* bug 494: intent_release may be called multiple times, from
 249                  * this thread and we don't want to double-decref this lock */
 250                 it->d.lustre.it_lock_mode = 0;
 251                 if (it->d.lustre.it_remote_lock_mode != 0) {
 252                         handle.cookie = it->d.lustre.it_remote_lock_handle;
 253
 254                         CDEBUG(D_DLMTRACE, "releasing remote lock with cookie"
 255                                LPX64" from it %p\n", handle.cookie, it);
 256                         ldlm_lock_decref(&handle,
 257                                          it->d.lustre.it_remote_lock_mode);
 258                         it->d.lustre.it_remote_lock_mode = 0;
 259                 }
 260         }
 261 }
 262
 263 void ll_intent_release(struct lookup_intent *it)
 264 {
 265         ENTRY;
 266
 267         CDEBUG(D_INFO, "intent %p released\n", it);
 268         ll_intent_drop_lock(it);
 269         /* We are still holding extra reference on a request, need to free it */
 270         if (it_disposition(it, DISP_ENQ_OPEN_REF))
 271                 ptlrpc_req_finished(it->d.lustre.it_data); /* ll_file_open */
 272
 273         if (it_disposition(it, DISP_ENQ_CREATE_REF)) /* create rec */
 274                 ptlrpc_req_finished(it->d.lustre.it_data);
 275
 276         it->d.lustre.it_disposition = 0;
 277         it->d.lustre.it_data = NULL;
 278         EXIT;
 279 }
 280
 281 void ll_invalidate_aliases(struct inode *inode)
 282 {
 283         struct dentry *dentry;
 284         DECLARE_LL_D_HLIST_NODE_PTR(p);
 285         ENTRY;
 286
 287         LASSERT(inode != NULL);
 288
 289         CDEBUG(D_INODE, "marking dentries for inode "DFID"(%p) invalid\n",
 290                PFID(ll_inode2fid(inode)), inode);
 291
 292         ll_lock_dcache(inode);
 293         ll_d_hlist_for_each_entry(dentry, p, &inode->i_dentry, d_alias) {
 294                 CDEBUG(D_DENTRY, "dentry in drop %.*s (%p) parent %p "
 295                        "inode %p flags %d\n", dentry->d_name.len,
 296                        dentry->d_name.name, dentry, dentry->d_parent,
 297                        dentry->d_inode, dentry->d_flags);
 298
 299                 if (unlikely(dentry == dentry->d_sb->s_root)) {
 300                         CERROR("%s: called on root dentry=%p, fid="DFID"\n",
 301                                ll_get_fsname(dentry->d_sb, NULL, 0),
 302                                dentry, PFID(ll_inode2fid(inode)));
 303                         lustre_dump_dentry(dentry, 1);
 304                         libcfs_debug_dumpstack(NULL);
 305                 }
 306
 307                 d_lustre_invalidate(dentry, 0);
 308         }
 309         ll_unlock_dcache(inode);
 310
 311         EXIT;
 312 }
 313
 314 int ll_revalidate_it_finish(struct ptlrpc_request *request,
 315                             struct lookup_intent *it,
 316                             struct dentry *de)
 317 {
 318         int rc = 0;
 319         ENTRY;
 320
 321         if (!request)
 322                 RETURN(0);
 323
 324         if (it_disposition(it, DISP_LOOKUP_NEG))
 325                 RETURN(-ENOENT);
 326
 327         rc = ll_prep_inode(&de->d_inode, request, NULL, it);
 328
 329         RETURN(rc);
 330 }
 331
 332 void ll_lookup_finish_locks(struct lookup_intent *it, struct dentry *dentry)
 333 {
 334         LASSERT(it != NULL);
 335         LASSERT(dentry != NULL);
 336
 337         if (it->d.lustre.it_lock_mode && dentry->d_inode != NULL) {
 338                 struct inode *inode = dentry->d_inode;
 339                 struct ll_sb_info *sbi = ll_i2sbi(dentry->d_inode);
 340
 341                 CDEBUG(D_DLMTRACE, "setting l_data to inode "DFID"(%p)\n",
 342                        PFID(ll_inode2fid(inode)), inode);
 343                 ll_set_lock_data(sbi->ll_md_exp, inode, it, NULL);
 344         }
 345
 346         /* drop lookup or getattr locks immediately */
 347         if (it->it_op == IT_LOOKUP || it->it_op == IT_GETATTR) {
 348                 /* on 2.6 there are situation when several lookups and
 349                  * revalidations may be requested during single operation.
 350                  * therefore, we don't release intent here -bzzz */
 351                 ll_intent_drop_lock(it);
 352         }
 353 }
 354
 355 static int ll_revalidate_dentry(struct dentry *dentry,
 356                                 unsigned int lookup_flags)
 357 {
 358         struct inode *dir = dentry->d_parent->d_inode;
 359
 360         /* If this is intermediate component path lookup and we were able to get
 361          * to this dentry, then its lock has not been revoked and the
 362          * path component is valid. */
 363         if (lookup_flags & (LOOKUP_CONTINUE | LOOKUP_PARENT))
 364                 return 1;
 365
 366         /* Symlink - always valid as long as the dentry was found */
 367         if (dentry->d_inode && dentry->d_inode->i_op->follow_link)
 368                 return 1;
 369
 370         /* Last path component lookup for open or create - we always
 371          * return 0 here to go through re-lookup and properly signal
 372          * MDS whenever we do or do not want an open-cache to be engaged.
 373          * For create we also ensure the entry is really created no matter
 374          * what races might have happened.
 375          * LU-4367 */
 376         if (lookup_flags & (LOOKUP_OPEN | LOOKUP_CREATE))
 377                 return 0;
 378
 379         if (!dentry_need_statahead(dir, dentry))
 380                 return 1;
 381
 382 #ifndef HAVE_DCACHE_LOCK
 383         if (lookup_flags & LOOKUP_RCU)
 384                 return -ECHILD;
 385 #endif
 386
 387         do_statahead_enter(dir, &dentry, dentry->d_inode == NULL);
 388         ll_statahead_mark(dir, dentry);
 389         return 1;
 390 }
 391
 392 /*
 393  * Always trust cached dentries. Update statahead window if necessary.
 394  */
 395 #ifdef HAVE_IOP_ATOMIC_OPEN
 396 static int ll_revalidate_nd(struct dentry *dentry, unsigned int flags)
 397 {
 398         int rc;
 399         ENTRY;
 400
 401         CDEBUG(D_VFSTRACE, "VFS Op:name=%s, flags=%u\n",
 402                dentry->d_name.name, flags);
 403
 404         rc = ll_revalidate_dentry(dentry, flags);
 405         RETURN(rc);
 406 }
 407 #else
 408 static int ll_revalidate_nd(struct dentry *dentry, struct nameidata *nd)
 409 {
 410         int rc;
 411         ENTRY;
 412
 413         /*
 414          * this is normally called from NFS export, and we don't know whether
 415          * this is the last component.
 416          */
 417         if (nd == NULL)
 418                 RETURN(1);
 419
 420         CDEBUG(D_VFSTRACE, "VFS Op:name=%s, flags=%u\n",
 421                dentry->d_name.name, nd->flags);
 422
 423         rc = ll_revalidate_dentry(dentry, nd->flags);
 424         RETURN(rc);
 425 }
 426 #endif
 427
 428 static void ll_d_iput(struct dentry *de, struct inode *inode)
 429 {
 430         LASSERT(inode);
 431         if (!find_cbdata(inode))
 432                 clear_nlink(inode);
 433         iput(inode);
 434 }
 435
 436 const struct dentry_operations ll_d_ops = {
 437         .d_revalidate = ll_revalidate_nd,
 438         .d_release = ll_release,
 439         .d_delete  = ll_ddelete,
 440         .d_iput    = ll_d_iput,
 441         .d_compare = ll_dcompare,
 442 };