Whamcloud - gitweb
3f06572b329c32c155f53b8495c124bbb082b079
[fs/lustre-release.git] / lustre / mdc / mdc_lib.c
1 /*
2  * GPL HEADER START
3  *
4  * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
5  *
6  * This program is free software; you can redistribute it and/or modify
7  * it under the terms of the GNU General Public License version 2 only,
8  * as published by the Free Software Foundation.
9  *
10  * This program is distributed in the hope that it will be useful, but
11  * WITHOUT ANY WARRANTY; without even the implied warranty of
12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13  * General Public License version 2 for more details (a copy is included
14  * in the LICENSE file that accompanied this code).
15  *
16  * You should have received a copy of the GNU General Public License
17  * version 2 along with this program; If not, see
18  * http://www.sun.com/software/products/lustre/docs/GPLv2.pdf
19  *
20  * Please contact Sun Microsystems, Inc., 4150 Network Circle, Santa Clara,
21  * CA 95054 USA or visit www.sun.com if you need additional information or
22  * have any questions.
23  *
24  * GPL HEADER END
25  */
26 /*
27  * Copyright (c) 2003, 2010, Oracle and/or its affiliates. All rights reserved.
28  * Use is subject to license terms.
29  *
30  * Copyright (c) 2011, 2012, Intel Corporation.
31  */
32 /*
33  * This file is part of Lustre, http://www.lustre.org/
34  * Lustre is a trademark of Sun Microsystems, Inc.
35  */
36
37 #define DEBUG_SUBSYSTEM S_MDC
38 #ifndef __KERNEL__
39 # include <fcntl.h>
40 # include <liblustre.h>
41 #endif
42 #include <lustre_net.h>
43 #include <lustre/lustre_idl.h>
44 #include "mdc_internal.h"
45
46 #ifndef __KERNEL__
47 /* some liblustre hackings here */
48 #ifndef O_DIRECTORY
49 #define O_DIRECTORY     0
50 #endif
51 #endif
52
53 static void __mdc_pack_body(struct mdt_body *b, __u32 suppgid)
54 {
55         LASSERT (b != NULL);
56
57         b->suppgid = suppgid;
58         b->uid = cfs_curproc_uid();
59         b->gid = cfs_curproc_gid();
60         b->fsuid = cfs_curproc_fsuid();
61         b->fsgid = cfs_curproc_fsgid();
62         b->capability = cfs_curproc_cap_pack();
63 }
64
65 void mdc_pack_capa(struct ptlrpc_request *req, const struct req_msg_field *field,
66                    struct obd_capa *oc)
67 {
68         struct req_capsule *pill = &req->rq_pill;
69         struct lustre_capa *c;
70
71         if (oc == NULL) {
72                 LASSERT(req_capsule_get_size(pill, field, RCL_CLIENT) == 0);
73                 return;
74         }
75
76         c = req_capsule_client_get(pill, field);
77         LASSERT(c != NULL);
78         capa_cpy(c, oc);
79         DEBUG_CAPA(D_SEC, c, "pack");
80 }
81
82 void mdc_is_subdir_pack(struct ptlrpc_request *req, const struct lu_fid *pfid,
83                         const struct lu_fid *cfid, int flags)
84 {
85         struct mdt_body *b = req_capsule_client_get(&req->rq_pill,
86                                                     &RMF_MDT_BODY);
87
88         if (pfid) {
89                 b->fid1 = *pfid;
90                 b->valid = OBD_MD_FLID;
91         }
92         if (cfid)
93                 b->fid2 = *cfid;
94         b->flags = flags;
95 }
96
97 void mdc_pack_body(struct ptlrpc_request *req,
98                    const struct lu_fid *fid, struct obd_capa *oc,
99                    __u64 valid, int ea_size, __u32 suppgid, int flags)
100 {
101         struct mdt_body *b = req_capsule_client_get(&req->rq_pill,
102                                                     &RMF_MDT_BODY);
103         LASSERT(b != NULL);
104         b->valid = valid;
105         b->eadatasize = ea_size;
106         b->flags = flags;
107         __mdc_pack_body(b, suppgid);
108         if (fid) {
109                 b->fid1 = *fid;
110                 b->valid |= OBD_MD_FLID;
111                 mdc_pack_capa(req, &RMF_CAPA1, oc);
112         }
113 }
114
115 void mdc_readdir_pack(struct ptlrpc_request *req, __u64 pgoff,
116                       __u32 size, const struct lu_fid *fid, struct obd_capa *oc)
117 {
118         struct mdt_body *b = req_capsule_client_get(&req->rq_pill,
119                                                     &RMF_MDT_BODY);
120         b->fid1 = *fid;
121         b->valid |= OBD_MD_FLID;
122         b->size = pgoff;                       /* !! */
123         b->nlink = size;                        /* !! */
124         __mdc_pack_body(b, -1);
125         b->mode = LUDA_FID | LUDA_TYPE;
126
127         mdc_pack_capa(req, &RMF_CAPA1, oc);
128 }
129
130 /* packing of MDS records */
131 void mdc_create_pack(struct ptlrpc_request *req, struct md_op_data *op_data,
132                      const void *data, int datalen, __u32 mode,
133                      __u32 uid, __u32 gid, cfs_cap_t cap_effective, __u64 rdev)
134 {
135         struct mdt_rec_create *rec;
136         char                  *tmp;
137
138         CLASSERT(sizeof(struct mdt_rec_reint) == sizeof(struct mdt_rec_create));
139         rec = req_capsule_client_get(&req->rq_pill, &RMF_REC_REINT);
140
141
142         rec->cr_opcode   = REINT_CREATE;
143         rec->cr_fsuid    = uid;
144         rec->cr_fsgid    = gid;
145         rec->cr_cap      = cap_effective;
146         rec->cr_fid1     = op_data->op_fid1;
147         rec->cr_fid2     = op_data->op_fid2;
148         rec->cr_mode     = mode;
149         rec->cr_rdev     = rdev;
150         rec->cr_time     = op_data->op_mod_time;
151         rec->cr_suppgid1 = op_data->op_suppgids[0];
152         rec->cr_suppgid2 = op_data->op_suppgids[1];
153         set_mrc_cr_flags(rec, op_data->op_flags & MF_SOM_LOCAL_FLAGS);
154         rec->cr_bias     = op_data->op_bias;
155         rec->cr_umask    = cfs_curproc_umask();
156
157         mdc_pack_capa(req, &RMF_CAPA1, op_data->op_capa1);
158
159         tmp = req_capsule_client_get(&req->rq_pill, &RMF_NAME);
160         LOGL0(op_data->op_name, op_data->op_namelen, tmp);
161
162         if (data) {
163                 tmp = req_capsule_client_get(&req->rq_pill, &RMF_EADATA);
164                 memcpy(tmp, data, datalen);
165         }
166 }
167
168 static __u64 mds_pack_open_flags(__u32 flags, __u32 mode)
169 {
170         __u64 cr_flags = (flags & (FMODE_READ | FMODE_WRITE |
171                                    MDS_OPEN_HAS_EA | MDS_OPEN_HAS_OBJS |
172                                    MDS_OPEN_OWNEROVERRIDE | MDS_OPEN_LOCK |
173                                    MDS_OPEN_BY_FID));
174         if (flags & O_CREAT)
175                 cr_flags |= MDS_OPEN_CREAT;
176         if (flags & O_EXCL)
177                 cr_flags |= MDS_OPEN_EXCL;
178         if (flags & O_TRUNC)
179                 cr_flags |= MDS_OPEN_TRUNC;
180         if (flags & O_APPEND)
181                 cr_flags |= MDS_OPEN_APPEND;
182         if (flags & O_SYNC)
183                 cr_flags |= MDS_OPEN_SYNC;
184         if (flags & O_DIRECTORY)
185                 cr_flags |= MDS_OPEN_DIRECTORY;
186 #ifdef FMODE_EXEC
187         if (flags & FMODE_EXEC)
188                 cr_flags |= MDS_FMODE_EXEC;
189 #endif
190         if (flags & O_LOV_DELAY_CREATE)
191                 cr_flags |= MDS_OPEN_DELAY_CREATE;
192
193         if ((flags & O_NOACCESS) || (flags & O_NONBLOCK))
194                 cr_flags |= MDS_OPEN_NORESTORE;
195
196         return cr_flags;
197 }
198
199 /* packing of MDS records */
200 void mdc_open_pack(struct ptlrpc_request *req, struct md_op_data *op_data,
201                    __u32 mode, __u64 rdev, __u32 flags, const void *lmm,
202                    int lmmlen)
203 {
204         struct mdt_rec_create *rec;
205         char *tmp;
206         __u64 cr_flags;
207
208         CLASSERT(sizeof(struct mdt_rec_reint) == sizeof(struct mdt_rec_create));
209         rec = req_capsule_client_get(&req->rq_pill, &RMF_REC_REINT);
210
211         /* XXX do something about time, uid, gid */
212         rec->cr_opcode   = REINT_OPEN;
213         rec->cr_fsuid   = cfs_curproc_fsuid();
214         rec->cr_fsgid   = cfs_curproc_fsgid();
215         rec->cr_cap      = cfs_curproc_cap_pack();
216         if (op_data != NULL) {
217                 rec->cr_fid1 = op_data->op_fid1;
218                 rec->cr_fid2 = op_data->op_fid2;
219         }
220         rec->cr_mode     = mode;
221         cr_flags = mds_pack_open_flags(flags, mode);
222         rec->cr_rdev     = rdev;
223         rec->cr_time     = op_data->op_mod_time;
224         rec->cr_suppgid1 = op_data->op_suppgids[0];
225         rec->cr_suppgid2 = op_data->op_suppgids[1];
226         rec->cr_bias     = op_data->op_bias;
227         rec->cr_umask    = cfs_curproc_umask();
228
229         mdc_pack_capa(req, &RMF_CAPA1, op_data->op_capa1);
230         /* the next buffer is child capa, which is used for replay,
231          * will be packed from the data in reply message. */
232
233         if (op_data->op_name) {
234                 tmp = req_capsule_client_get(&req->rq_pill, &RMF_NAME);
235                 LOGL0(op_data->op_name, op_data->op_namelen, tmp);
236         }
237
238         if (lmm) {
239                 cr_flags |= MDS_OPEN_HAS_EA;
240 #ifndef __KERNEL__
241                 /*XXX a hack for liblustre to set EA (LL_IOC_LOV_SETSTRIPE) */
242                 rec->cr_fid2 = op_data->op_fid2;
243 #endif
244                 tmp = req_capsule_client_get(&req->rq_pill, &RMF_EADATA);
245                 memcpy (tmp, lmm, lmmlen);
246         }
247         set_mrc_cr_flags(rec, cr_flags);
248 }
249
250 static inline __u64 attr_pack(unsigned int ia_valid) {
251         __u64 sa_valid = 0;
252
253         if (ia_valid & ATTR_MODE)
254                 sa_valid |= MDS_ATTR_MODE;
255         if (ia_valid & ATTR_UID)
256                 sa_valid |= MDS_ATTR_UID;
257         if (ia_valid & ATTR_GID)
258                 sa_valid |= MDS_ATTR_GID;
259         if (ia_valid & ATTR_SIZE)
260                 sa_valid |= MDS_ATTR_SIZE;
261         if (ia_valid & ATTR_ATIME)
262                 sa_valid |= MDS_ATTR_ATIME;
263         if (ia_valid & ATTR_MTIME)
264                 sa_valid |= MDS_ATTR_MTIME;
265         if (ia_valid & ATTR_CTIME)
266                 sa_valid |= MDS_ATTR_CTIME;
267         if (ia_valid & ATTR_ATIME_SET)
268                 sa_valid |= MDS_ATTR_ATIME_SET;
269         if (ia_valid & ATTR_MTIME_SET)
270                 sa_valid |= MDS_ATTR_MTIME_SET;
271         if (ia_valid & ATTR_FORCE)
272                 sa_valid |= MDS_ATTR_FORCE;
273         if (ia_valid & ATTR_ATTR_FLAG)
274                 sa_valid |= MDS_ATTR_ATTR_FLAG;
275         if (ia_valid & ATTR_KILL_SUID)
276                 sa_valid |=  MDS_ATTR_KILL_SUID;
277         if (ia_valid & ATTR_KILL_SGID)
278                 sa_valid |= MDS_ATTR_KILL_SGID;
279         if (ia_valid & ATTR_CTIME_SET)
280                 sa_valid |= MDS_ATTR_CTIME_SET;
281         if (ia_valid & ATTR_FROM_OPEN)
282                 sa_valid |= MDS_ATTR_FROM_OPEN;
283         if (ia_valid & ATTR_BLOCKS)
284                 sa_valid |= MDS_ATTR_BLOCKS;
285         if (ia_valid & MDS_OPEN_OWNEROVERRIDE)
286                 /* NFSD hack (see bug 5781) */
287                 sa_valid |= MDS_OPEN_OWNEROVERRIDE;
288         return sa_valid;
289 }
290
291 static void mdc_setattr_pack_rec(struct mdt_rec_setattr *rec,
292                                  struct md_op_data *op_data)
293 {
294         rec->sa_opcode  = REINT_SETATTR;
295         rec->sa_fsuid   = cfs_curproc_fsuid();
296         rec->sa_fsgid   = cfs_curproc_fsgid();
297         rec->sa_cap     = cfs_curproc_cap_pack();
298         rec->sa_suppgid = -1;
299
300         rec->sa_fid    = op_data->op_fid1;
301         rec->sa_valid  = attr_pack(op_data->op_attr.ia_valid);
302         rec->sa_mode   = op_data->op_attr.ia_mode;
303         rec->sa_uid    = op_data->op_attr.ia_uid;
304         rec->sa_gid    = op_data->op_attr.ia_gid;
305         rec->sa_size   = op_data->op_attr.ia_size;
306         rec->sa_blocks = op_data->op_attr_blocks;
307         rec->sa_atime  = LTIME_S(op_data->op_attr.ia_atime);
308         rec->sa_mtime  = LTIME_S(op_data->op_attr.ia_mtime);
309         rec->sa_ctime  = LTIME_S(op_data->op_attr.ia_ctime);
310         rec->sa_attr_flags = ((struct ll_iattr *)&op_data->op_attr)->ia_attr_flags;
311         if ((op_data->op_attr.ia_valid & ATTR_GID) &&
312             cfs_curproc_is_in_groups(op_data->op_attr.ia_gid))
313                 rec->sa_suppgid = op_data->op_attr.ia_gid;
314         else
315                 rec->sa_suppgid = op_data->op_suppgids[0];
316 }
317
318 static void mdc_ioepoch_pack(struct mdt_ioepoch *epoch,
319                              struct md_op_data *op_data)
320 {
321         memcpy(&epoch->handle, &op_data->op_handle, sizeof(epoch->handle));
322         epoch->ioepoch = op_data->op_ioepoch;
323         epoch->flags = op_data->op_flags & MF_SOM_LOCAL_FLAGS;
324 }
325
326 void mdc_setattr_pack(struct ptlrpc_request *req, struct md_op_data *op_data,
327                       void *ea, int ealen, void *ea2, int ea2len)
328 {
329         struct mdt_rec_setattr *rec;
330         struct mdt_ioepoch *epoch;
331         struct lov_user_md *lum = NULL;
332
333         CLASSERT(sizeof(struct mdt_rec_reint) ==sizeof(struct mdt_rec_setattr));
334         rec = req_capsule_client_get(&req->rq_pill, &RMF_REC_REINT);
335         mdc_setattr_pack_rec(rec, op_data);
336
337         mdc_pack_capa(req, &RMF_CAPA1, op_data->op_capa1);
338
339         if (op_data->op_flags & (MF_SOM_CHANGE | MF_EPOCH_OPEN)) {
340                 epoch = req_capsule_client_get(&req->rq_pill, &RMF_MDT_EPOCH);
341                 mdc_ioepoch_pack(epoch, op_data);
342         }
343
344         if (ealen == 0)
345                 return;
346
347         lum = req_capsule_client_get(&req->rq_pill, &RMF_EADATA);
348         if (ea == NULL) { /* Remove LOV EA */
349                 lum->lmm_magic = LOV_USER_MAGIC_V1;
350                 lum->lmm_stripe_size = 0;
351                 lum->lmm_stripe_count = 0;
352                 lum->lmm_stripe_offset = (typeof(lum->lmm_stripe_offset))(-1);
353         } else {
354                 memcpy(lum, ea, ealen);
355         }
356
357         if (ea2len == 0)
358                 return;
359
360         memcpy(req_capsule_client_get(&req->rq_pill, &RMF_LOGCOOKIES), ea2,
361                ea2len);
362 }
363
364 void mdc_unlink_pack(struct ptlrpc_request *req, struct md_op_data *op_data)
365 {
366         struct mdt_rec_unlink *rec;
367         char *tmp;
368  
369         CLASSERT(sizeof(struct mdt_rec_reint) == sizeof(struct mdt_rec_unlink));
370         rec = req_capsule_client_get(&req->rq_pill, &RMF_REC_REINT);
371         LASSERT (rec != NULL);
372
373         rec->ul_opcode  = REINT_UNLINK;
374         rec->ul_fsuid   = op_data->op_fsuid;
375         rec->ul_fsgid   = op_data->op_fsgid;
376         rec->ul_cap     = op_data->op_cap;
377         rec->ul_mode    = op_data->op_mode;
378         rec->ul_suppgid1= op_data->op_suppgids[0];
379         rec->ul_suppgid2= -1;
380         rec->ul_fid1    = op_data->op_fid1;
381         rec->ul_fid2    = op_data->op_fid2;
382         rec->ul_time    = op_data->op_mod_time;
383         rec->ul_bias    = op_data->op_bias;
384
385         mdc_pack_capa(req, &RMF_CAPA1, op_data->op_capa1);
386
387         tmp = req_capsule_client_get(&req->rq_pill, &RMF_NAME);
388         LASSERT(tmp != NULL);
389         LOGL0(op_data->op_name, op_data->op_namelen, tmp);
390 }
391
392 void mdc_link_pack(struct ptlrpc_request *req, struct md_op_data *op_data)
393 {
394         struct mdt_rec_link *rec;
395         char *tmp;
396
397         CLASSERT(sizeof(struct mdt_rec_reint) == sizeof(struct mdt_rec_link));
398         rec = req_capsule_client_get(&req->rq_pill, &RMF_REC_REINT);
399         LASSERT (rec != NULL);
400
401         rec->lk_opcode   = REINT_LINK;
402         rec->lk_fsuid    = op_data->op_fsuid;//current->fsuid;
403         rec->lk_fsgid    = op_data->op_fsgid;//current->fsgid;
404         rec->lk_cap      = op_data->op_cap;//current->cap_effective;
405         rec->lk_suppgid1 = op_data->op_suppgids[0];
406         rec->lk_suppgid2 = op_data->op_suppgids[1];
407         rec->lk_fid1     = op_data->op_fid1;
408         rec->lk_fid2     = op_data->op_fid2;
409         rec->lk_time     = op_data->op_mod_time;
410         rec->lk_bias     = op_data->op_bias;
411
412         mdc_pack_capa(req, &RMF_CAPA1, op_data->op_capa1);
413         mdc_pack_capa(req, &RMF_CAPA2, op_data->op_capa2);
414
415         tmp = req_capsule_client_get(&req->rq_pill, &RMF_NAME);
416         LOGL0(op_data->op_name, op_data->op_namelen, tmp);
417 }
418
419 void mdc_rename_pack(struct ptlrpc_request *req, struct md_op_data *op_data,
420                      const char *old, int oldlen, const char *new, int newlen)
421 {
422         struct mdt_rec_rename *rec;
423         char *tmp;
424
425         CLASSERT(sizeof(struct mdt_rec_reint) == sizeof(struct mdt_rec_rename));
426         rec = req_capsule_client_get(&req->rq_pill, &RMF_REC_REINT);
427
428         /* XXX do something about time, uid, gid */
429         rec->rn_opcode   = REINT_RENAME;
430         rec->rn_fsuid    = op_data->op_fsuid;
431         rec->rn_fsgid    = op_data->op_fsgid;
432         rec->rn_cap      = op_data->op_cap;
433         rec->rn_suppgid1 = op_data->op_suppgids[0];
434         rec->rn_suppgid2 = op_data->op_suppgids[1];
435         rec->rn_fid1     = op_data->op_fid1;
436         rec->rn_fid2     = op_data->op_fid2;
437         rec->rn_time     = op_data->op_mod_time;
438         rec->rn_mode     = op_data->op_mode;
439         rec->rn_bias     = op_data->op_bias;
440
441         mdc_pack_capa(req, &RMF_CAPA1, op_data->op_capa1);
442         mdc_pack_capa(req, &RMF_CAPA2, op_data->op_capa2);
443
444         tmp = req_capsule_client_get(&req->rq_pill, &RMF_NAME);
445         LOGL0(old, oldlen, tmp);
446
447         if (new) {
448                 tmp = req_capsule_client_get(&req->rq_pill, &RMF_SYMTGT);
449                 LOGL0(new, newlen, tmp);
450         }
451 }
452
453 void mdc_getattr_pack(struct ptlrpc_request *req, __u64 valid, int flags,
454                       struct md_op_data *op_data, int ea_size)
455 {
456         struct mdt_body *b = req_capsule_client_get(&req->rq_pill,
457                                                     &RMF_MDT_BODY);
458
459         b->valid = valid;
460         if (op_data->op_bias & MDS_CHECK_SPLIT)
461                 b->valid |= OBD_MD_FLCKSPLIT;
462         if (op_data->op_bias & MDS_CROSS_REF)
463                 b->valid |= OBD_MD_FLCROSSREF;
464         b->eadatasize = ea_size;
465         b->flags = flags;
466         __mdc_pack_body(b, op_data->op_suppgids[0]);
467
468         b->fid1 = op_data->op_fid1;
469         b->fid2 = op_data->op_fid2;
470         b->valid |= OBD_MD_FLID;
471
472         mdc_pack_capa(req, &RMF_CAPA1, op_data->op_capa1);
473
474         if (op_data->op_name) {
475                 char *tmp = req_capsule_client_get(&req->rq_pill, &RMF_NAME);
476                 LOGL0(op_data->op_name, op_data->op_namelen, tmp);
477
478         }
479 }
480
481 void mdc_close_pack(struct ptlrpc_request *req, struct md_op_data *op_data)
482 {
483         struct mdt_ioepoch *epoch;
484         struct mdt_rec_setattr *rec;
485
486         epoch = req_capsule_client_get(&req->rq_pill, &RMF_MDT_EPOCH);
487         rec = req_capsule_client_get(&req->rq_pill, &RMF_REC_REINT);
488
489         mdc_setattr_pack_rec(rec, op_data);
490         mdc_pack_capa(req, &RMF_CAPA1, op_data->op_capa1);
491         mdc_ioepoch_pack(epoch, op_data);
492 }
493
494 static int mdc_req_avail(struct client_obd *cli, struct mdc_cache_waiter *mcw)
495 {
496         int rc;
497         ENTRY;
498         client_obd_list_lock(&cli->cl_loi_list_lock);
499         rc = cfs_list_empty(&mcw->mcw_entry);
500         client_obd_list_unlock(&cli->cl_loi_list_lock);
501         RETURN(rc);
502 };
503
504 /* We record requests in flight in cli->cl_r_in_flight here.
505  * There is only one write rpc possible in mdc anyway. If this to change
506  * in the future - the code may need to be revisited. */
507 int mdc_enter_request(struct client_obd *cli)
508 {
509         int rc = 0;
510         struct mdc_cache_waiter mcw;
511         struct l_wait_info lwi = LWI_INTR(LWI_ON_SIGNAL_NOOP, NULL);
512
513         client_obd_list_lock(&cli->cl_loi_list_lock);
514         if (cli->cl_r_in_flight >= cli->cl_max_rpcs_in_flight) {
515                 cfs_list_add_tail(&mcw.mcw_entry, &cli->cl_cache_waiters);
516                 cfs_waitq_init(&mcw.mcw_waitq);
517                 client_obd_list_unlock(&cli->cl_loi_list_lock);
518                 rc = l_wait_event(mcw.mcw_waitq, mdc_req_avail(cli, &mcw), &lwi);
519                 if (rc) {
520                         client_obd_list_lock(&cli->cl_loi_list_lock);
521                         if (cfs_list_empty(&mcw.mcw_entry))
522                                 cli->cl_r_in_flight--;
523                         cfs_list_del_init(&mcw.mcw_entry);
524                         client_obd_list_unlock(&cli->cl_loi_list_lock);
525                 }
526         } else {
527                 cli->cl_r_in_flight++;
528                 client_obd_list_unlock(&cli->cl_loi_list_lock);
529         }
530         return rc;
531 }
532
533 void mdc_exit_request(struct client_obd *cli)
534 {
535         cfs_list_t *l, *tmp;
536         struct mdc_cache_waiter *mcw;
537
538         client_obd_list_lock(&cli->cl_loi_list_lock);
539         cli->cl_r_in_flight--;
540         cfs_list_for_each_safe(l, tmp, &cli->cl_cache_waiters) {
541                 if (cli->cl_r_in_flight >= cli->cl_max_rpcs_in_flight) {
542                         /* No free request slots anymore */
543                         break;
544                 }
545
546                 mcw = cfs_list_entry(l, struct mdc_cache_waiter, mcw_entry);
547                 cfs_list_del_init(&mcw->mcw_entry);
548                 cli->cl_r_in_flight++;
549                 cfs_waitq_signal(&mcw->mcw_waitq);
550         }
551         /* Empty waiting list? Decrease reqs in-flight number */
552
553         client_obd_list_unlock(&cli->cl_loi_list_lock);
554 }