Whamcloud - gitweb
LU-9727 lustre: Add an additional set of 64 changelog flags.
[fs/lustre-release.git] / lustre / mdc / mdc_changelog.c
1 /*
2  * GPL HEADER START
3  *
4  * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
5  *
6  * This program is free software; you can redistribute it and/or modify
7  * it under the terms of the GNU General Public License version 2 only,
8  * as published by the Free Software Foundation.
9  *
10  * This program is distributed in the hope that it will be useful, but
11  * WITHOUT ANY WARRANTY; without even the implied warranty of
12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13  * General Public License version 2 for more details (a copy is included
14  * in the LICENSE file that accompanied this code).
15  *
16  * You should have received a copy of the GNU General Public License
17  * version 2 along with this program; If not, see
18  * http://www.gnu.org/licenses/gpl-2.0.html
19  *
20  * GPL HEADER END
21  */
22 /*
23  * Copyright (c) 2017, Commissariat a l'Energie Atomique et aux Energies
24  *                     Alternatives.
25  *
26  * Author: Henri Doreau <henri.doreau@cea.fr>
27  */
28
29 #define DEBUG_SUBSYSTEM S_MDC
30
31 #include <linux/init.h>
32 #include <linux/kthread.h>
33 #include <linux/poll.h>
34 #include <linux/miscdevice.h>
35
36 #include <lustre_log.h>
37
38 #include "mdc_internal.h"
39
40
41 /*
42  * -- Changelog delivery through character device --
43  */
44
45 /**
46  * Mutex to protect chlg_registered_devices below
47  */
48 static DEFINE_MUTEX(chlg_registered_dev_lock);
49
50 /**
51  * Global linked list of all registered devices (one per MDT).
52  */
53 static LIST_HEAD(chlg_registered_devices);
54
55
56 struct chlg_registered_dev {
57         /* Device name of the form "changelog-{MDTNAME}" */
58         char                    ced_name[32];
59         /* Misc device descriptor */
60         struct miscdevice       ced_misc;
61         /* OBDs referencing this device (multiple mount point) */
62         struct list_head        ced_obds;
63         /* Reference counter for proper deregistration */
64         struct kref             ced_refs;
65         /* Link within the global chlg_registered_devices */
66         struct list_head        ced_link;
67 };
68
69 struct chlg_reader_state {
70         /* Shortcut to the corresponding OBD device */
71         struct obd_device       *crs_obd;
72         /* Producer thread (if any) */
73         struct task_struct      *crs_prod_task;
74         /* An error occurred that prevents from reading further */
75         int                      crs_err;
76         /* EOF, no more records available */
77         bool                     crs_eof;
78         /* Desired start position */
79         __u64                    crs_start_offset;
80         /* Wait queue for the catalog processing thread */
81         wait_queue_head_t        crs_waitq_prod;
82         /* Wait queue for the record copy threads */
83         wait_queue_head_t        crs_waitq_cons;
84         /* Mutex protecting crs_rec_count and crs_rec_queue */
85         struct mutex             crs_lock;
86         /* Number of item in the list */
87         __u64                    crs_rec_count;
88         /* List of prefetched enqueued_record::enq_linkage_items */
89         struct list_head         crs_rec_queue;
90 };
91
92 struct chlg_rec_entry {
93         /* Link within the chlg_reader_state::crs_rec_queue list */
94         struct list_head        enq_linkage;
95         /* Data (enq_record) field length */
96         __u64                   enq_length;
97         /* Copy of a changelog record (see struct llog_changelog_rec) */
98         struct changelog_rec    enq_record[];
99 };
100
101 enum {
102         /* Number of records to prefetch locally. */
103         CDEV_CHLG_MAX_PREFETCH = 1024,
104 };
105
106 /**
107  * ChangeLog catalog processing callback invoked on each record.
108  * If the current record is eligible to userland delivery, push
109  * it into the crs_rec_queue where the consumer code will fetch it.
110  *
111  * @param[in]     env  (unused)
112  * @param[in]     llh  Client-side handle used to identify the llog
113  * @param[in]     hdr  Header of the current llog record
114  * @param[in,out] data chlg_reader_state passed from caller
115  *
116  * @return 0 or LLOG_PROC_* control code on success, negated error on failure.
117  */
118 static int chlg_read_cat_process_cb(const struct lu_env *env,
119                                     struct llog_handle *llh,
120                                     struct llog_rec_hdr *hdr, void *data)
121 {
122         struct llog_changelog_rec *rec;
123         struct chlg_reader_state *crs = data;
124         struct chlg_rec_entry *enq;
125         size_t len;
126         int rc;
127         ENTRY;
128
129         LASSERT(crs != NULL);
130         LASSERT(hdr != NULL);
131
132         rec = container_of(hdr, struct llog_changelog_rec, cr_hdr);
133
134         if (rec->cr_hdr.lrh_type != CHANGELOG_REC) {
135                 rc = -EINVAL;
136                 CERROR("%s: not a changelog rec %x/%d in llog "DFID" rc = %d\n",
137                        crs->crs_obd->obd_name, rec->cr_hdr.lrh_type,
138                        rec->cr.cr_type,
139                        PFID(lu_object_fid(&llh->lgh_obj->do_lu)), rc);
140                 RETURN(rc);
141         }
142
143         /* Skip undesired records */
144         if (rec->cr.cr_index < crs->crs_start_offset)
145                 RETURN(0);
146
147         CDEBUG(D_HSM, "%llu %02d%-5s %llu 0x%x t="DFID" p="DFID" %.*s\n",
148                rec->cr.cr_index, rec->cr.cr_type,
149                changelog_type2str(rec->cr.cr_type), rec->cr.cr_time,
150                rec->cr.cr_flags & CLF_FLAGMASK,
151                PFID(&rec->cr.cr_tfid), PFID(&rec->cr.cr_pfid),
152                rec->cr.cr_namelen, changelog_rec_name(&rec->cr));
153
154         wait_event_interruptible(crs->crs_waitq_prod,
155                                  crs->crs_rec_count < CDEV_CHLG_MAX_PREFETCH ||
156                                  kthread_should_stop());
157
158         if (kthread_should_stop())
159                 RETURN(LLOG_PROC_BREAK);
160
161         len = changelog_rec_size(&rec->cr) + rec->cr.cr_namelen;
162         OBD_ALLOC(enq, sizeof(*enq) + len);
163         if (enq == NULL)
164                 RETURN(-ENOMEM);
165
166         INIT_LIST_HEAD(&enq->enq_linkage);
167         enq->enq_length = len;
168         memcpy(enq->enq_record, &rec->cr, len);
169
170         mutex_lock(&crs->crs_lock);
171         list_add_tail(&enq->enq_linkage, &crs->crs_rec_queue);
172         crs->crs_rec_count++;
173         mutex_unlock(&crs->crs_lock);
174
175         wake_up_all(&crs->crs_waitq_cons);
176
177         RETURN(0);
178 }
179
180 /**
181  * Remove record from the list it is attached to and free it.
182  */
183 static void enq_record_delete(struct chlg_rec_entry *rec)
184 {
185         list_del(&rec->enq_linkage);
186         OBD_FREE(rec, sizeof(*rec) + rec->enq_length);
187 }
188
189 /**
190  * Record prefetch thread entry point. Opens the changelog catalog and starts
191  * reading records.
192  *
193  * @param[in,out]  args  chlg_reader_state passed from caller.
194  * @return 0 on success, negated error code on failure.
195  */
196 static int chlg_load(void *args)
197 {
198         struct chlg_reader_state *crs = args;
199         struct obd_device *obd = crs->crs_obd;
200         struct llog_ctxt *ctx = NULL;
201         struct llog_handle *llh = NULL;
202         int rc;
203         ENTRY;
204
205         ctx = llog_get_context(obd, LLOG_CHANGELOG_REPL_CTXT);
206         if (ctx == NULL)
207                 GOTO(err_out, rc = -ENOENT);
208
209         rc = llog_open(NULL, ctx, &llh, NULL, CHANGELOG_CATALOG,
210                        LLOG_OPEN_EXISTS);
211         if (rc) {
212                 CERROR("%s: fail to open changelog catalog: rc = %d\n",
213                        obd->obd_name, rc);
214                 GOTO(err_out, rc);
215         }
216
217         rc = llog_init_handle(NULL, llh,
218                               LLOG_F_IS_CAT |
219                               LLOG_F_EXT_JOBID |
220                               LLOG_F_EXT_EXTRA_FLAGS,
221                               NULL);
222         if (rc) {
223                 CERROR("%s: fail to init llog handle: rc = %d\n",
224                        obd->obd_name, rc);
225                 GOTO(err_out, rc);
226         }
227
228         rc = llog_cat_process(NULL, llh, chlg_read_cat_process_cb, crs, 0, 0);
229         if (rc < 0) {
230                 CERROR("%s: fail to process llog: rc = %d\n", obd->obd_name, rc);
231                 GOTO(err_out, rc);
232         }
233
234         crs->crs_eof = true;
235
236 err_out:
237         if (rc < 0)
238                 crs->crs_err = rc;
239
240         wake_up_all(&crs->crs_waitq_cons);
241
242         if (llh != NULL)
243                 llog_cat_close(NULL, llh);
244
245         if (ctx != NULL)
246                 llog_ctxt_put(ctx);
247
248         wait_event_interruptible(crs->crs_waitq_prod, kthread_should_stop());
249
250         RETURN(rc);
251 }
252
253 /**
254  * Read handler, dequeues records from the chlg_reader_state if any.
255  * No partial records are copied to userland so this function can return less
256  * data than required (short read).
257  *
258  * @param[in]   file   File pointer to the character device.
259  * @param[out]  buff   Userland buffer where to copy the records.
260  * @param[in]   count  Userland buffer size.
261  * @param[out]  ppos   File position, updated with the index number of the next
262  *                     record to read.
263  * @return number of copied bytes on success, negated error code on failure.
264  */
265 static ssize_t chlg_read(struct file *file, char __user *buff, size_t count,
266                          loff_t *ppos)
267 {
268         struct chlg_reader_state *crs = file->private_data;
269         struct chlg_rec_entry *rec;
270         struct chlg_rec_entry *tmp;
271         size_t written_total = 0;
272         ssize_t rc;
273         LIST_HEAD(consumed);
274         ENTRY;
275
276         if (file->f_flags & O_NONBLOCK && crs->crs_rec_count == 0) {
277                 if (crs->crs_err < 0)
278                         RETURN(crs->crs_err);
279                 else if (crs->crs_eof)
280                         RETURN(0);
281                 else
282                         RETURN(-EAGAIN);
283         }
284
285         rc = wait_event_interruptible(crs->crs_waitq_cons,
286                         crs->crs_rec_count > 0 || crs->crs_eof || crs->crs_err);
287
288         mutex_lock(&crs->crs_lock);
289         list_for_each_entry_safe(rec, tmp, &crs->crs_rec_queue, enq_linkage) {
290                 if (written_total + rec->enq_length > count)
291                         break;
292
293                 if (copy_to_user(buff, rec->enq_record, rec->enq_length)) {
294                         rc = -EFAULT;
295                         break;
296                 }
297
298                 buff += rec->enq_length;
299                 written_total += rec->enq_length;
300
301                 crs->crs_rec_count--;
302                 list_move_tail(&rec->enq_linkage, &consumed);
303
304                 crs->crs_start_offset = rec->enq_record->cr_index + 1;
305         }
306         mutex_unlock(&crs->crs_lock);
307
308         if (written_total > 0) {
309                 rc = written_total;
310                 wake_up_all(&crs->crs_waitq_prod);
311         } else if (rc == 0) {
312                 rc = crs->crs_err;
313         }
314
315         list_for_each_entry_safe(rec, tmp, &consumed, enq_linkage)
316                 enq_record_delete(rec);
317
318         *ppos = crs->crs_start_offset;
319
320         RETURN(rc);
321 }
322
323 /**
324  * Jump to a given record index. Helper for chlg_llseek().
325  *
326  * @param[in,out]  crs     Internal reader state.
327  * @param[in]      offset  Desired offset (index record).
328  * @return 0 on success, negated error code on failure.
329  */
330 static int chlg_set_start_offset(struct chlg_reader_state *crs, __u64 offset)
331 {
332         struct chlg_rec_entry *rec;
333         struct chlg_rec_entry *tmp;
334
335         mutex_lock(&crs->crs_lock);
336         if (offset < crs->crs_start_offset) {
337                 mutex_unlock(&crs->crs_lock);
338                 return -ERANGE;
339         }
340
341         crs->crs_start_offset = offset;
342         list_for_each_entry_safe(rec, tmp, &crs->crs_rec_queue, enq_linkage) {
343                 struct changelog_rec *cr = rec->enq_record;
344
345                 if (cr->cr_index >= crs->crs_start_offset)
346                         break;
347
348                 crs->crs_rec_count--;
349                 enq_record_delete(rec);
350         }
351
352         mutex_unlock(&crs->crs_lock);
353         wake_up_all(&crs->crs_waitq_prod);
354         return 0;
355 }
356
357 /**
358  * Move read pointer to a certain record index, encoded as an offset.
359  *
360  * @param[in,out] file   File pointer to the changelog character device
361  * @param[in]     off    Offset to skip, actually a record index, not byte count
362  * @param[in]     whence Relative/Absolute interpretation of the offset
363  * @return the resulting position on success or negated error code on failure.
364  */
365 static loff_t chlg_llseek(struct file *file, loff_t off, int whence)
366 {
367         struct chlg_reader_state *crs = file->private_data;
368         loff_t pos;
369         int rc;
370
371         switch (whence) {
372         case SEEK_SET:
373                 pos = off;
374                 break;
375         case SEEK_CUR:
376                 pos = file->f_pos + off;
377                 break;
378         case SEEK_END:
379         default:
380                 return -EINVAL;
381         }
382
383         /* We cannot go backward */
384         if (pos < file->f_pos)
385                 return -EINVAL;
386
387         rc = chlg_set_start_offset(crs, pos);
388         if (rc != 0)
389                 return rc;
390
391         file->f_pos = pos;
392         return pos;
393 }
394
395 /**
396  * Clear record range for a given changelog reader.
397  *
398  * @param[in]  crs     Current internal state.
399  * @param[in]  reader  Changelog reader ID (cl1, cl2...)
400  * @param[in]  record  Record index up which to clear
401  * @return 0 on success, negated error code on failure.
402  */
403 static int chlg_clear(struct chlg_reader_state *crs, __u32 reader, __u64 record)
404 {
405         struct obd_device *obd = crs->crs_obd;
406         struct changelog_setinfo cs  = {
407                 .cs_recno = record,
408                 .cs_id    = reader
409         };
410
411         return obd_set_info_async(NULL, obd->obd_self_export,
412                                   strlen(KEY_CHANGELOG_CLEAR),
413                                   KEY_CHANGELOG_CLEAR, sizeof(cs), &cs, NULL);
414 }
415
416 /** Maximum changelog control command size */
417 #define CHLG_CONTROL_CMD_MAX    64
418
419 /**
420  * Handle writes() into the changelog character device. Write() can be used
421  * to request special control operations.
422  *
423  * @param[in]  file  File pointer to the changelog character device
424  * @param[in]  buff  User supplied data (written data)
425  * @param[in]  count Number of written bytes
426  * @param[in]  off   (unused)
427  * @return number of written bytes on success, negated error code on failure.
428  */
429 static ssize_t chlg_write(struct file *file, const char __user *buff,
430                           size_t count, loff_t *off)
431 {
432         struct chlg_reader_state *crs = file->private_data;
433         char *kbuf;
434         __u64 record;
435         __u32 reader;
436         int rc = 0;
437         ENTRY;
438
439         if (count > CHLG_CONTROL_CMD_MAX)
440                 RETURN(-EINVAL);
441
442         OBD_ALLOC(kbuf, CHLG_CONTROL_CMD_MAX);
443         if (kbuf == NULL)
444                 RETURN(-ENOMEM);
445
446         if (copy_from_user(kbuf, buff, count))
447                 GOTO(out_kbuf, rc = -EFAULT);
448
449         kbuf[CHLG_CONTROL_CMD_MAX - 1] = '\0';
450
451         if (sscanf(kbuf, "clear:cl%u:%llu", &reader, &record) == 2)
452                 rc = chlg_clear(crs, reader, record);
453         else
454                 rc = -EINVAL;
455
456         EXIT;
457 out_kbuf:
458         OBD_FREE(kbuf, CHLG_CONTROL_CMD_MAX);
459         return rc < 0 ? rc : count;
460 }
461
462 /**
463  * Find the OBD device associated to a changelog character device.
464  * @param[in]  cdev  character device instance descriptor
465  * @return corresponding OBD device or NULL if none was found.
466  */
467 static struct obd_device *chlg_obd_get(dev_t cdev)
468 {
469         int minor = MINOR(cdev);
470         struct obd_device *obd = NULL;
471         struct chlg_registered_dev *curr;
472
473         mutex_lock(&chlg_registered_dev_lock);
474         list_for_each_entry(curr, &chlg_registered_devices, ced_link) {
475                 if (curr->ced_misc.minor == minor) {
476                         /* take the first available OBD device attached */
477                         obd = list_first_entry(&curr->ced_obds,
478                                                struct obd_device,
479                                                u.cli.cl_chg_dev_linkage);
480                         break;
481                 }
482         }
483         mutex_unlock(&chlg_registered_dev_lock);
484         return obd;
485 }
486
487 /**
488  * Open handler, initialize internal CRS state and spawn prefetch thread if
489  * needed.
490  * @param[in]  inode  Inode struct for the open character device.
491  * @param[in]  file   Corresponding file pointer.
492  * @return 0 on success, negated error code on failure.
493  */
494 static int chlg_open(struct inode *inode, struct file *file)
495 {
496         struct chlg_reader_state *crs;
497         struct obd_device *obd = chlg_obd_get(inode->i_rdev);
498         struct task_struct *task;
499         int rc;
500         ENTRY;
501
502         if (!obd)
503                 RETURN(-ENODEV);
504
505         OBD_ALLOC_PTR(crs);
506         if (!crs)
507                 RETURN(-ENOMEM);
508
509         crs->crs_obd = obd;
510         crs->crs_err = false;
511         crs->crs_eof = false;
512
513         mutex_init(&crs->crs_lock);
514         INIT_LIST_HEAD(&crs->crs_rec_queue);
515         init_waitqueue_head(&crs->crs_waitq_prod);
516         init_waitqueue_head(&crs->crs_waitq_cons);
517
518         if (file->f_mode & FMODE_READ) {
519                 task = kthread_run(chlg_load, crs, "chlg_load_thread");
520                 if (IS_ERR(task)) {
521                         rc = PTR_ERR(task);
522                         CERROR("%s: cannot start changelog thread: rc = %d\n",
523                                obd->obd_name, rc);
524                         GOTO(err_crs, rc);
525                 }
526                 crs->crs_prod_task = task;
527         }
528
529         file->private_data = crs;
530         RETURN(0);
531
532 err_crs:
533         OBD_FREE_PTR(crs);
534         return rc;
535 }
536
537 /**
538  * Close handler, release resources.
539  *
540  * @param[in]  inode  Inode struct for the open character device.
541  * @param[in]  file   Corresponding file pointer.
542  * @return 0 on success, negated error code on failure.
543  */
544 static int chlg_release(struct inode *inode, struct file *file)
545 {
546         struct chlg_reader_state *crs = file->private_data;
547         struct chlg_rec_entry *rec;
548         struct chlg_rec_entry *tmp;
549         int rc = 0;
550
551         if (crs->crs_prod_task)
552                 rc = kthread_stop(crs->crs_prod_task);
553
554         list_for_each_entry_safe(rec, tmp, &crs->crs_rec_queue, enq_linkage)
555                 enq_record_delete(rec);
556
557         OBD_FREE_PTR(crs);
558
559         return rc;
560 }
561
562 /**
563  * Poll handler, indicates whether the device is readable (new records) and
564  * writable (always).
565  *
566  * @param[in]  file   Device file pointer.
567  * @param[in]  wait   (opaque)
568  * @return combination of the poll status flags.
569  */
570 static unsigned int chlg_poll(struct file *file, poll_table *wait)
571 {
572         struct chlg_reader_state *crs = file->private_data;
573         unsigned int mask = 0;
574
575         mutex_lock(&crs->crs_lock);
576         poll_wait(file, &crs->crs_waitq_cons, wait);
577         if (crs->crs_rec_count > 0)
578                 mask |= POLLIN | POLLRDNORM;
579         if (crs->crs_err)
580                 mask |= POLLERR;
581         if (crs->crs_eof)
582                 mask |= POLLHUP;
583         mutex_unlock(&crs->crs_lock);
584         return mask;
585 }
586
587 static const struct file_operations chlg_fops = {
588         .owner          = THIS_MODULE,
589         .llseek         = chlg_llseek,
590         .read           = chlg_read,
591         .write          = chlg_write,
592         .open           = chlg_open,
593         .release        = chlg_release,
594         .poll           = chlg_poll,
595 };
596
597 /**
598  * This uses obd_name of the form: "testfs-MDT0000-mdc-ffff88006501600"
599  * and returns a name of the form: "changelog-testfs-MDT0000".
600  */
601 static void get_chlg_name(char *name, size_t name_len, struct obd_device *obd)
602 {
603         int i;
604
605         snprintf(name, name_len, "changelog-%s", obd->obd_name);
606
607         /* Find the 2nd '-' from the end and truncate on it */
608         for (i = 0; i < 2; i++) {
609                 char *p = strrchr(name, '-');
610
611                 if (p == NULL)
612                         return;
613                 *p = '\0';
614         }
615 }
616
617 /**
618  * Find a changelog character device by name.
619  * All devices registered during MDC setup are listed in a global list with
620  * their names attached.
621  */
622 static struct chlg_registered_dev *
623 chlg_registered_dev_find_by_name(const char *name)
624 {
625         struct chlg_registered_dev *dit;
626
627         list_for_each_entry(dit, &chlg_registered_devices, ced_link)
628                 if (strcmp(name, dit->ced_name) == 0)
629                         return dit;
630         return NULL;
631 }
632
633 /**
634  * Find chlg_registered_dev structure for a given OBD device.
635  * This is bad O(n^2) but for each filesystem:
636  *   - N is # of MDTs times # of mount points
637  *   - this only runs at shutdown
638  */
639 static struct chlg_registered_dev *
640 chlg_registered_dev_find_by_obd(const struct obd_device *obd)
641 {
642         struct chlg_registered_dev *dit;
643         struct obd_device *oit;
644
645         list_for_each_entry(dit, &chlg_registered_devices, ced_link)
646                 list_for_each_entry(oit, &dit->ced_obds,
647                                     u.cli.cl_chg_dev_linkage)
648                         if (oit == obd)
649                                 return dit;
650         return NULL;
651 }
652
653 /**
654  * Changelog character device initialization.
655  * Register a misc character device with a dynamic minor number, under a name
656  * of the form: 'changelog-fsname-MDTxxxx'. Reference this OBD device with it.
657  *
658  * @param[in] obd  This MDC obd_device.
659  * @return 0 on success, negated error code on failure.
660  */
661 int mdc_changelog_cdev_init(struct obd_device *obd)
662 {
663         struct chlg_registered_dev *exist;
664         struct chlg_registered_dev *entry;
665         int rc;
666         ENTRY;
667
668         OBD_ALLOC_PTR(entry);
669         if (entry == NULL)
670                 RETURN(-ENOMEM);
671
672         get_chlg_name(entry->ced_name, sizeof(entry->ced_name), obd);
673
674         entry->ced_misc.minor = MISC_DYNAMIC_MINOR;
675         entry->ced_misc.name  = entry->ced_name;
676         entry->ced_misc.fops  = &chlg_fops;
677
678         kref_init(&entry->ced_refs);
679         INIT_LIST_HEAD(&entry->ced_obds);
680         INIT_LIST_HEAD(&entry->ced_link);
681
682         mutex_lock(&chlg_registered_dev_lock);
683         exist = chlg_registered_dev_find_by_name(entry->ced_name);
684         if (exist != NULL) {
685                 kref_get(&exist->ced_refs);
686                 list_add_tail(&obd->u.cli.cl_chg_dev_linkage, &exist->ced_obds);
687                 GOTO(out_unlock, rc = 0);
688         }
689
690         /* Register new character device */
691         rc = misc_register(&entry->ced_misc);
692         if (rc != 0)
693                 GOTO(out_unlock, rc);
694
695         list_add_tail(&obd->u.cli.cl_chg_dev_linkage, &entry->ced_obds);
696         list_add_tail(&entry->ced_link, &chlg_registered_devices);
697
698         entry = NULL;   /* prevent it from being freed below */
699
700 out_unlock:
701         mutex_unlock(&chlg_registered_dev_lock);
702         if (entry)
703                 OBD_FREE_PTR(entry);
704         RETURN(rc);
705 }
706
707 /**
708  * Deregister a changelog character device whose refcount has reached zero.
709  */
710 static void chlg_dev_clear(struct kref *kref)
711 {
712         struct chlg_registered_dev *entry = container_of(kref,
713                                                       struct chlg_registered_dev,
714                                                       ced_refs);
715         ENTRY;
716
717         list_del(&entry->ced_link);
718         misc_deregister(&entry->ced_misc);
719         OBD_FREE_PTR(entry);
720         EXIT;
721 }
722
723 /**
724  * Release OBD, decrease reference count of the corresponding changelog device.
725  */
726 void mdc_changelog_cdev_finish(struct obd_device *obd)
727 {
728         struct chlg_registered_dev *dev = chlg_registered_dev_find_by_obd(obd);
729         ENTRY;
730
731         mutex_lock(&chlg_registered_dev_lock);
732         list_del_init(&obd->u.cli.cl_chg_dev_linkage);
733         kref_put(&dev->ced_refs, chlg_dev_clear);
734         mutex_unlock(&chlg_registered_dev_lock);
735         EXIT;
736 }