drivers/staging/lustre/lustre/include/obd_class.h

   1 /*
   2  * GPL HEADER START
   3  *
   4  * DO NOT ALTER OR REMOVE COPYRIGHT NOTICES OR THIS FILE HEADER.
   5  *
   6  * This program is free software; you can redistribute it and/or modify
   7  * it under the terms of the GNU General Public License version 2 only,
   8  * as published by the Free Software Foundation.
   9  *
  10  * This program is distributed in the hope that it will be useful, but
  11  * WITHOUT ANY WARRANTY; without even the implied warranty of
  12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13  * General Public License version 2 for more details (a copy is included
  14  * in the LICENSE file that accompanied this code).
  15  *
  16  * You should have received a copy of the GNU General Public License
  17  * version 2 along with this program; If not, see
  18  * http://www.sun.com/software/products/lustre/docs/GPLv2.pdf
  19  *
  20  * Please contact Sun Microsystems, Inc., 4150 Network Circle, Santa Clara,
  21  * CA 95054 USA or visit www.sun.com if you need additional information or
  22  * have any questions.
  23  *
  24  * GPL HEADER END
  25  */
  26 /*
  27  * Copyright (c) 2007, 2010, Oracle and/or its affiliates. All rights reserved.
  28  * Use is subject to license terms.
  29  *
  30  * Copyright (c) 2011, 2015, Intel Corporation.
  31  */
  32 /*
  33  * This file is part of Lustre, http://www.lustre.org/
  34  * Lustre is a trademark of Sun Microsystems, Inc.
  35  */
  36 #ifndef __CLASS_OBD_H
  37 #define __CLASS_OBD_H
  38
  39 #include "obd_support.h"
  40 #include "lustre_import.h"
  41 #include "lustre_net.h"
  42 #include "obd.h"
  43 #include "lustre_lib.h"
  44 #include "lustre/lustre_idl.h"
  45 #include "lprocfs_status.h"
  46
  47 #define OBD_STATFS_NODELAY      0x0001  /* requests should be send without delay
  48                                          * and resends for avoid deadlocks
  49                                          */
  50 #define OBD_STATFS_FROM_CACHE   0x0002  /* the statfs callback should not update
  51                                          * obd_osfs_age
  52                                          */
  53 #define OBD_STATFS_PTLRPCD      0x0004  /* requests will be sent via ptlrpcd
  54                                          * instead of a specific set. This
  55                                          * means that we cannot rely on the set
  56                                          * interpret routine to be called.
  57                                          * lov_statfs_fini() must thus be called
  58                                          * by the request interpret routine
  59                                          */
  60 #define OBD_STATFS_FOR_MDT0     0x0008  /* The statfs is only for retrieving
  61                                          * information from MDT0.
  62                                          */
  63 #define OBD_FL_PUNCH        0x00000001  /* To indicate it is punch operation */
  64
  65 /* OBD Device Declarations */
  66 extern struct obd_device *obd_devs[MAX_OBD_DEVICES];
  67 extern rwlock_t obd_dev_lock;
  68
  69 /* OBD Operations Declarations */
  70 struct obd_device *class_exp2obd(struct obd_export *);
  71 int class_handle_ioctl(unsigned int cmd, unsigned long arg);
  72 int lustre_get_jobid(char *jobid);
  73
  74 struct lu_device_type;
  75
  76 /* genops.c */
  77 extern struct list_head obd_types;
  78 struct obd_export *class_conn2export(struct lustre_handle *);
  79 int class_register_type(struct obd_ops *, struct md_ops *,
  80                         const char *nm, struct lu_device_type *ldt);
  81 int class_unregister_type(const char *nm);
  82
  83 struct obd_device *class_newdev(const char *type_name, const char *name);
  84 void class_release_dev(struct obd_device *obd);
  85
  86 int class_name2dev(const char *name);
  87 struct obd_device *class_name2obd(const char *name);
  88 int class_uuid2dev(struct obd_uuid *uuid);
  89 struct obd_device *class_find_client_obd(struct obd_uuid *tgt_uuid,
  90                                          const char *typ_name,
  91                                          struct obd_uuid *grp_uuid);
  92 struct obd_device *class_devices_in_group(struct obd_uuid *grp_uuid,
  93                                           int *next);
  94 struct obd_device *class_num2obd(int num);
  95
  96 int class_notify_sptlrpc_conf(const char *fsname, int namelen);
  97
  98 int obd_connect_flags2str(char *page, int count, __u64 flags, char *sep);
  99
 100 int obd_zombie_impexp_init(void);
 101 void obd_zombie_impexp_stop(void);
 102 void obd_zombie_barrier(void);
 103
 104 struct llog_handle;
 105 struct llog_rec_hdr;
 106 typedef int (*llog_cb_t)(const struct lu_env *, struct llog_handle *,
 107                          struct llog_rec_hdr *, void *);
 108 /* obd_config.c */
 109 int class_process_config(struct lustre_cfg *lcfg);
 110 int class_process_proc_param(char *prefix, struct lprocfs_vars *lvars,
 111                              struct lustre_cfg *lcfg, void *data);
 112 struct obd_device *class_incref(struct obd_device *obd,
 113                                 const char *scope, const void *source);
 114 void class_decref(struct obd_device *obd,
 115                   const char *scope, const void *source);
 116 int class_config_llog_handler(const struct lu_env *env,
 117                               struct llog_handle *handle,
 118                               struct llog_rec_hdr *rec, void *data);
 119 int class_add_uuid(const char *uuid, __u64 nid);
 120
 121 /*obdecho*/
 122 void lprocfs_echo_init_vars(struct lprocfs_static_vars *lvars);
 123
 124 #define CFG_F_START     0x01   /* Set when we start updating from a log */
 125 #define CFG_F_MARKER    0x02   /* We are within a maker */
 126 #define CFG_F_SKIP      0x04   /* We should ignore this cfg command */
 127 #define CFG_F_COMPAT146 0x08   /* Allow old-style logs */
 128 #define CFG_F_EXCLUDE   0x10   /* OST exclusion list */
 129
 130 /* Passed as data param to class_config_parse_llog */
 131 struct config_llog_instance {
 132         char           *cfg_obdname;
 133         void           *cfg_instance;
 134         struct super_block *cfg_sb;
 135         struct obd_uuid     cfg_uuid;
 136         llog_cb_t           cfg_callback;
 137         int              cfg_last_idx; /* for partial llog processing */
 138         int              cfg_flags;
 139 };
 140
 141 int class_config_parse_llog(const struct lu_env *env, struct llog_ctxt *ctxt,
 142                             char *name, struct config_llog_instance *cfg);
 143 enum {
 144         CONFIG_T_CONFIG  = 0,
 145         CONFIG_T_SPTLRPC = 1,
 146         CONFIG_T_RECOVER = 2,
 147         CONFIG_T_PARAMS  = 3,
 148         CONFIG_T_MAX     = 4
 149 };
 150
 151 #define PARAMS_FILENAME "params"
 152 #define LCTL_UPCALL     "lctl"
 153
 154 /* list of active configuration logs  */
 155 struct config_llog_data {
 156         struct ldlm_res_id        cld_resid;
 157         struct config_llog_instance cld_cfg;
 158         struct list_head                  cld_list_chain;
 159         atomic_t                cld_refcount;
 160         struct config_llog_data    *cld_sptlrpc;/* depended sptlrpc log */
 161         struct config_llog_data    *cld_params; /* common parameters log */
 162         struct config_llog_data    *cld_recover;/* imperative recover log */
 163         struct obd_export         *cld_mgcexp;
 164         struct mutex                cld_lock;
 165         int                      cld_type;
 166         unsigned int            cld_stopping:1, /* we were told to stop
 167                                                  * watching
 168                                                  */
 169                                 cld_lostlock:1; /* lock not requeued */
 170         char                    cld_logname[0];
 171 };
 172
 173 struct lustre_profile {
 174         struct list_head       lp_list;
 175         char        *lp_profile;
 176         char        *lp_dt;
 177         char        *lp_md;
 178 };
 179
 180 struct lustre_profile *class_get_profile(const char *prof);
 181 void class_del_profile(const char *prof);
 182 void class_del_profiles(void);
 183
 184 #if LUSTRE_TRACKS_LOCK_EXP_REFS
 185
 186 void __class_export_add_lock_ref(struct obd_export *, struct ldlm_lock *);
 187 void __class_export_del_lock_ref(struct obd_export *, struct ldlm_lock *);
 188 extern void (*class_export_dump_hook)(struct obd_export *);
 189
 190 #else
 191
 192 #define __class_export_add_lock_ref(exp, lock)       do {} while (0)
 193 #define __class_export_del_lock_ref(exp, lock)       do {} while (0)
 194
 195 #endif
 196
 197 /* genops.c */
 198 struct obd_export *class_export_get(struct obd_export *exp);
 199 void class_export_put(struct obd_export *exp);
 200 struct obd_export *class_new_export(struct obd_device *obddev,
 201                                     struct obd_uuid *cluuid);
 202 void class_unlink_export(struct obd_export *exp);
 203
 204 struct obd_import *class_import_get(struct obd_import *);
 205 void class_import_put(struct obd_import *);
 206 struct obd_import *class_new_import(struct obd_device *obd);
 207 void class_destroy_import(struct obd_import *exp);
 208
 209 void class_put_type(struct obd_type *type);
 210 int class_connect(struct lustre_handle *conn, struct obd_device *obd,
 211                   struct obd_uuid *cluuid);
 212 int class_disconnect(struct obd_export *exp);
 213 void class_fail_export(struct obd_export *exp);
 214 int class_manual_cleanup(struct obd_device *obd);
 215
 216 static inline void class_export_rpc_inc(struct obd_export *exp)
 217 {
 218         atomic_inc(&(exp)->exp_rpc_count);
 219         CDEBUG(D_INFO, "RPC GETting export %p : new rpc_count %d\n",
 220                (exp), atomic_read(&(exp)->exp_rpc_count));
 221 }
 222
 223 static inline void class_export_rpc_dec(struct obd_export *exp)
 224 {
 225         LASSERT_ATOMIC_POS(&exp->exp_rpc_count);
 226         atomic_dec(&(exp)->exp_rpc_count);
 227         CDEBUG(D_INFO, "RPC PUTting export %p : new rpc_count %d\n",
 228                (exp), atomic_read(&(exp)->exp_rpc_count));
 229 }
 230
 231 static inline struct obd_export *class_export_lock_get(struct obd_export *exp,
 232                                                        struct ldlm_lock *lock)
 233 {
 234         atomic_inc(&(exp)->exp_locks_count);
 235         __class_export_add_lock_ref(exp, lock);
 236         CDEBUG(D_INFO, "lock GETting export %p : new locks_count %d\n",
 237                (exp), atomic_read(&(exp)->exp_locks_count));
 238         return class_export_get(exp);
 239 }
 240
 241 static inline void class_export_lock_put(struct obd_export *exp,
 242                                          struct ldlm_lock *lock)
 243 {
 244         LASSERT_ATOMIC_POS(&exp->exp_locks_count);
 245         atomic_dec(&(exp)->exp_locks_count);
 246         __class_export_del_lock_ref(exp, lock);
 247         CDEBUG(D_INFO, "lock PUTting export %p : new locks_count %d\n",
 248                (exp), atomic_read(&(exp)->exp_locks_count));
 249         class_export_put(exp);
 250 }
 251
 252 static inline enum obd_option exp_flags_from_obd(struct obd_device *obd)
 253 {
 254         return ((obd->obd_fail ? OBD_OPT_FAILOVER : 0) |
 255                 (obd->obd_force ? OBD_OPT_FORCE : 0) |
 256                 0);
 257 }
 258
 259 static inline int lprocfs_climp_check(struct obd_device *obd)
 260 {
 261         down_read(&(obd)->u.cli.cl_sem);
 262         if (!(obd)->u.cli.cl_import) {
 263                 up_read(&(obd)->u.cli.cl_sem);
 264                 return -ENODEV;
 265         }
 266         return 0;
 267 }
 268
 269 struct inode;
 270 struct lu_attr;
 271 struct obdo;
 272 void obdo_refresh_inode(struct inode *dst, struct obdo *src, u32 valid);
 273
 274 void obdo_to_ioobj(struct obdo *oa, struct obd_ioobj *ioobj);
 275 void md_from_obdo(struct md_op_data *op_data, struct obdo *oa, u32 valid);
 276
 277 #define OBT(dev)        (dev)->obd_type
 278 #define OBP(dev, op)    (dev)->obd_type->typ_dt_ops->op
 279 #define MDP(dev, op)    (dev)->obd_type->typ_md_ops->op
 280 #define CTXTP(ctxt, op) (ctxt)->loc_logops->lop_##op
 281
 282 /* Ensure obd_setup: used for cleanup which must be called
 283  * while obd is stopping
 284  */
 285 static inline int obd_check_dev(struct obd_device *obd)
 286 {
 287         if (!obd) {
 288                 CERROR("NULL device\n");
 289                 return -ENODEV;
 290         }
 291         return 0;
 292 }
 293
 294 /* ensure obd_setup and !obd_stopping */
 295 static inline int obd_check_dev_active(struct obd_device *obd)
 296 {
 297         int rc;
 298
 299         rc = obd_check_dev(obd);
 300         if (rc)
 301                 return rc;
 302         if (!obd->obd_set_up || obd->obd_stopping) {
 303                 CERROR("Device %d not setup\n", obd->obd_minor);
 304                 return -ENODEV;
 305         }
 306         return rc;
 307 }
 308
 309 #define OBD_COUNTER_OFFSET(op)                            \
 310         ((offsetof(struct obd_ops, op) -                  \
 311           offsetof(struct obd_ops, iocontrol))          \
 312          / sizeof(((struct obd_ops *)(0))->iocontrol))
 313
 314 #define OBD_COUNTER_INCREMENT(obdx, op)                    \
 315         if ((obdx)->obd_stats) {                                  \
 316                 unsigned int coffset;                        \
 317                 coffset = (unsigned int)((obdx)->obd_cntr_base) + \
 318                         OBD_COUNTER_OFFSET(op);            \
 319                 LASSERT(coffset < (obdx)->obd_stats->ls_num);     \
 320                 lprocfs_counter_incr((obdx)->obd_stats, coffset); \
 321         }
 322
 323 #define EXP_COUNTER_INCREMENT(export, op)                                   \
 324         if ((export)->exp_obd->obd_stats) {                       \
 325                 unsigned int coffset;                                   \
 326                 coffset = (unsigned int)((export)->exp_obd->obd_cntr_base) + \
 327                         OBD_COUNTER_OFFSET(op);                       \
 328                 LASSERT(coffset < (export)->exp_obd->obd_stats->ls_num);     \
 329                 lprocfs_counter_incr((export)->exp_obd->obd_stats, coffset); \
 330         }
 331
 332 #define MD_COUNTER_OFFSET(op)                              \
 333         ((offsetof(struct md_ops, op) -            \
 334           offsetof(struct md_ops, getstatus))            \
 335          / sizeof(((struct md_ops *)(0))->getstatus))
 336
 337 #define MD_COUNTER_INCREMENT(obdx, op)                     \
 338         if ((obd)->md_stats) {                     \
 339                 unsigned int coffset;                       \
 340                 coffset = (unsigned int)((obdx)->md_cntr_base) + \
 341                         MD_COUNTER_OFFSET(op);             \
 342                 LASSERT(coffset < (obdx)->md_stats->ls_num);     \
 343                 lprocfs_counter_incr((obdx)->md_stats, coffset); \
 344         }
 345
 346 #define EXP_MD_COUNTER_INCREMENT(export, op)                             \
 347         if ((export)->exp_obd->obd_stats) {                               \
 348                 unsigned int coffset;                                   \
 349                 coffset = (unsigned int)((export)->exp_obd->md_cntr_base) +  \
 350                         MD_COUNTER_OFFSET(op);                         \
 351                 LASSERT(coffset < (export)->exp_obd->md_stats->ls_num);      \
 352                 lprocfs_counter_incr((export)->exp_obd->md_stats, coffset);  \
 353                 if ((export)->exp_md_stats)                               \
 354                         lprocfs_counter_incr(                           \
 355                                 (export)->exp_md_stats, coffset);           \
 356         }
 357
 358 #define EXP_CHECK_MD_OP(exp, op)                                \
 359 do {                                                        \
 360         if (!(exp)) {                               \
 361                 CERROR("obd_" #op ": NULL export\n");      \
 362                 return -ENODEV;                         \
 363         }                                                      \
 364         if (!(exp)->exp_obd || !OBT((exp)->exp_obd)) {   \
 365                 CERROR("obd_" #op ": cleaned up obd\n");        \
 366                 return -EOPNOTSUPP;                         \
 367         }                                                      \
 368         if (!OBT((exp)->exp_obd) || !MDP((exp)->exp_obd, op)) { \
 369                 CERROR("obd_" #op ": dev %s/%d no operation\n", \
 370                        (exp)->exp_obd->obd_name,                \
 371                        (exp)->exp_obd->obd_minor);            \
 372                 return -EOPNOTSUPP;                         \
 373         }                                                      \
 374 } while (0)
 375
 376 #define OBD_CHECK_DT_OP(obd, op, err)                      \
 377 do {                                                        \
 378         if (!OBT(obd) || !OBP((obd), op)) {                  \
 379                 if (err)                                        \
 380                         CERROR("obd_" #op ": dev %d no operation\n",    \
 381                                obd->obd_minor);          \
 382                 return err;                                 \
 383         }                                                      \
 384 } while (0)
 385
 386 #define EXP_CHECK_DT_OP(exp, op)                                \
 387 do {                                                        \
 388         if (!(exp)) {                               \
 389                 CERROR("obd_" #op ": NULL export\n");      \
 390                 return -ENODEV;                         \
 391         }                                                      \
 392         if (!(exp)->exp_obd || !OBT((exp)->exp_obd)) {   \
 393                 CERROR("obd_" #op ": cleaned up obd\n");        \
 394                 return -EOPNOTSUPP;                         \
 395         }                                                      \
 396         if (!OBT((exp)->exp_obd) || !OBP((exp)->exp_obd, op)) { \
 397                 CERROR("obd_" #op ": dev %d no operation\n",    \
 398                        (exp)->exp_obd->obd_minor);            \
 399                 return -EOPNOTSUPP;                         \
 400         }                                                      \
 401 } while (0)
 402
 403 #define CTXT_CHECK_OP(ctxt, op, err)                             \
 404 do {                                                             \
 405         if (!OBT(ctxt->loc_obd) || !CTXTP((ctxt), op)) {             \
 406                 if (err)                                             \
 407                         CERROR("lop_" #op ": dev %d no operation\n", \
 408                                ctxt->loc_obd->obd_minor);           \
 409                 return err;                                      \
 410         }                                                           \
 411 } while (0)
 412
 413 static inline int class_devno_max(void)
 414 {
 415         return MAX_OBD_DEVICES;
 416 }
 417
 418 static inline int obd_get_info(const struct lu_env *env,
 419                                struct obd_export *exp, __u32 keylen,
 420                                void *key, __u32 *vallen, void *val,
 421                                struct lov_stripe_md *lsm)
 422 {
 423         int rc;
 424
 425         EXP_CHECK_DT_OP(exp, get_info);
 426         EXP_COUNTER_INCREMENT(exp, get_info);
 427
 428         rc = OBP(exp->exp_obd, get_info)(env, exp, keylen, key, vallen, val,
 429                                          lsm);
 430         return rc;
 431 }
 432
 433 static inline int obd_set_info_async(const struct lu_env *env,
 434                                      struct obd_export *exp, u32 keylen,
 435                                      void *key, u32 vallen, void *val,
 436                                      struct ptlrpc_request_set *set)
 437 {
 438         int rc;
 439
 440         EXP_CHECK_DT_OP(exp, set_info_async);
 441         EXP_COUNTER_INCREMENT(exp, set_info_async);
 442
 443         rc = OBP(exp->exp_obd, set_info_async)(env, exp, keylen, key, vallen,
 444                                                val, set);
 445         return rc;
 446 }
 447
 448 /*
 449  * obd-lu integration.
 450  *
 451  * Functionality is being moved into new lu_device-based layering, but some
 452  * pieces of configuration process are still based on obd devices.
 453  *
 454  * Specifically, lu_device_type_operations::ldto_device_alloc() methods fully
 455  * subsume ->o_setup() methods of obd devices they replace. The same for
 456  * lu_device_operations::ldo_process_config() and ->o_process_config(). As a
 457  * result, obd_setup() and obd_process_config() branch and call one XOR
 458  * another.
 459  *
 460  * Yet neither lu_device_type_operations::ldto_device_fini() nor
 461  * lu_device_type_operations::ldto_device_free() fully implement the
 462  * functionality of ->o_precleanup() and ->o_cleanup() they override. Hence,
 463  * obd_precleanup() and obd_cleanup() call both lu_device and obd operations.
 464  */
 465
 466 #define DECLARE_LU_VARS(ldt, d)          \
 467         struct lu_device_type *ldt;       \
 468         struct lu_device *d
 469
 470 static inline int obd_setup(struct obd_device *obd, struct lustre_cfg *cfg)
 471 {
 472         int rc;
 473         DECLARE_LU_VARS(ldt, d);
 474
 475         ldt = obd->obd_type->typ_lu;
 476         if (ldt) {
 477                 struct lu_context  session_ctx;
 478                 struct lu_env env;
 479
 480                 lu_context_init(&session_ctx, LCT_SESSION | LCT_SERVER_SESSION);
 481                 session_ctx.lc_thread = NULL;
 482                 lu_context_enter(&session_ctx);
 483
 484                 rc = lu_env_init(&env, ldt->ldt_ctx_tags);
 485                 if (rc == 0) {
 486                         env.le_ses = &session_ctx;
 487                         d = ldt->ldt_ops->ldto_device_alloc(&env, ldt, cfg);
 488                         lu_env_fini(&env);
 489                         if (!IS_ERR(d)) {
 490                                 obd->obd_lu_dev = d;
 491                                 d->ld_obd = obd;
 492                                 rc = 0;
 493                         } else {
 494                                 rc = PTR_ERR(d);
 495                         }
 496                 }
 497                 lu_context_exit(&session_ctx);
 498                 lu_context_fini(&session_ctx);
 499
 500         } else {
 501                 OBD_CHECK_DT_OP(obd, setup, -EOPNOTSUPP);
 502                 OBD_COUNTER_INCREMENT(obd, setup);
 503                 rc = OBP(obd, setup)(obd, cfg);
 504         }
 505         return rc;
 506 }
 507
 508 static inline int obd_precleanup(struct obd_device *obd,
 509                                  enum obd_cleanup_stage cleanup_stage)
 510 {
 511         int rc;
 512         DECLARE_LU_VARS(ldt, d);
 513
 514         rc = obd_check_dev(obd);
 515         if (rc)
 516                 return rc;
 517         ldt = obd->obd_type->typ_lu;
 518         d = obd->obd_lu_dev;
 519         if (ldt && d) {
 520                 if (cleanup_stage == OBD_CLEANUP_EXPORTS) {
 521                         struct lu_env env;
 522
 523                         rc = lu_env_init(&env, ldt->ldt_ctx_tags);
 524                         if (rc == 0) {
 525                                 ldt->ldt_ops->ldto_device_fini(&env, d);
 526                                 lu_env_fini(&env);
 527                         }
 528                 }
 529         }
 530         OBD_CHECK_DT_OP(obd, precleanup, 0);
 531         OBD_COUNTER_INCREMENT(obd, precleanup);
 532
 533         rc = OBP(obd, precleanup)(obd, cleanup_stage);
 534         return rc;
 535 }
 536
 537 static inline int obd_cleanup(struct obd_device *obd)
 538 {
 539         int rc;
 540         DECLARE_LU_VARS(ldt, d);
 541
 542         rc = obd_check_dev(obd);
 543         if (rc)
 544                 return rc;
 545
 546         ldt = obd->obd_type->typ_lu;
 547         d = obd->obd_lu_dev;
 548         if (ldt && d) {
 549                 struct lu_env env;
 550
 551                 rc = lu_env_init(&env, ldt->ldt_ctx_tags);
 552                 if (rc == 0) {
 553                         ldt->ldt_ops->ldto_device_free(&env, d);
 554                         lu_env_fini(&env);
 555                         obd->obd_lu_dev = NULL;
 556                 }
 557         }
 558         OBD_CHECK_DT_OP(obd, cleanup, 0);
 559         OBD_COUNTER_INCREMENT(obd, cleanup);
 560
 561         rc = OBP(obd, cleanup)(obd);
 562         return rc;
 563 }
 564
 565 static inline void obd_cleanup_client_import(struct obd_device *obd)
 566 {
 567         /* If we set up but never connected, the
 568          * client import will not have been cleaned.
 569          */
 570         down_write(&obd->u.cli.cl_sem);
 571         if (obd->u.cli.cl_import) {
 572                 struct obd_import *imp;
 573
 574                 imp = obd->u.cli.cl_import;
 575                 CDEBUG(D_CONFIG, "%s: client import never connected\n",
 576                        obd->obd_name);
 577                 ptlrpc_invalidate_import(imp);
 578                 client_destroy_import(imp);
 579                 obd->u.cli.cl_import = NULL;
 580         }
 581         up_write(&obd->u.cli.cl_sem);
 582 }
 583
 584 static inline int
 585 obd_process_config(struct obd_device *obd, int datalen, void *data)
 586 {
 587         int rc;
 588         DECLARE_LU_VARS(ldt, d);
 589
 590         rc = obd_check_dev(obd);
 591         if (rc)
 592                 return rc;
 593
 594         obd->obd_process_conf = 1;
 595         ldt = obd->obd_type->typ_lu;
 596         d = obd->obd_lu_dev;
 597         if (ldt && d) {
 598                 struct lu_env env;
 599
 600                 rc = lu_env_init(&env, ldt->ldt_ctx_tags);
 601                 if (rc == 0) {
 602                         rc = d->ld_ops->ldo_process_config(&env, d, data);
 603                         lu_env_fini(&env);
 604                 }
 605         } else {
 606                 OBD_CHECK_DT_OP(obd, process_config, -EOPNOTSUPP);
 607                 rc = OBP(obd, process_config)(obd, datalen, data);
 608         }
 609         OBD_COUNTER_INCREMENT(obd, process_config);
 610         obd->obd_process_conf = 0;
 611
 612         return rc;
 613 }
 614
 615 /* Pack an in-memory MD struct for storage on disk.
 616  * Returns +ve size of packed MD (0 for free), or -ve error.
 617  *
 618  * If @disk_tgt == NULL, MD size is returned (max size if @mem_src == NULL).
 619  * If @*disk_tgt != NULL and @mem_src == NULL, @*disk_tgt will be freed.
 620  * If @*disk_tgt == NULL, it will be allocated
 621  */
 622 static inline int obd_packmd(struct obd_export *exp,
 623                              struct lov_mds_md **disk_tgt,
 624                              struct lov_stripe_md *mem_src)
 625 {
 626         int rc;
 627
 628         EXP_CHECK_DT_OP(exp, packmd);
 629         EXP_COUNTER_INCREMENT(exp, packmd);
 630
 631         rc = OBP(exp->exp_obd, packmd)(exp, disk_tgt, mem_src);
 632         return rc;
 633 }
 634
 635 static inline int obd_size_diskmd(struct obd_export *exp,
 636                                   struct lov_stripe_md *mem_src)
 637 {
 638         return obd_packmd(exp, NULL, mem_src);
 639 }
 640
 641 static inline int obd_free_diskmd(struct obd_export *exp,
 642                                   struct lov_mds_md **disk_tgt)
 643 {
 644         LASSERT(disk_tgt);
 645         LASSERT(*disk_tgt);
 646         /*
 647          * LU-2590, for caller's convenience, *disk_tgt could be host
 648          * endianness, it needs swab to LE if necessary, while just
 649          * lov_mds_md header needs it for figuring out how much memory
 650          * needs to be freed.
 651          */
 652         if ((cpu_to_le32(LOV_MAGIC) != LOV_MAGIC) &&
 653             (((*disk_tgt)->lmm_magic == LOV_MAGIC_V1) ||
 654              ((*disk_tgt)->lmm_magic == LOV_MAGIC_V3)))
 655                 lustre_swab_lov_mds_md(*disk_tgt);
 656         return obd_packmd(exp, disk_tgt, NULL);
 657 }
 658
 659 /* Unpack an MD struct from disk to in-memory format.
 660  * Returns +ve size of unpacked MD (0 for free), or -ve error.
 661  *
 662  * If @mem_tgt == NULL, MD size is returned (max size if @disk_src == NULL).
 663  * If @*mem_tgt != NULL and @disk_src == NULL, @*mem_tgt will be freed.
 664  * If @*mem_tgt == NULL, it will be allocated
 665  */
 666 static inline int obd_unpackmd(struct obd_export *exp,
 667                                struct lov_stripe_md **mem_tgt,
 668                                struct lov_mds_md *disk_src,
 669                                int disk_len)
 670 {
 671         int rc;
 672
 673         EXP_CHECK_DT_OP(exp, unpackmd);
 674         EXP_COUNTER_INCREMENT(exp, unpackmd);
 675
 676         rc = OBP(exp->exp_obd, unpackmd)(exp, mem_tgt, disk_src, disk_len);
 677         return rc;
 678 }
 679
 680 /* helper functions */
 681 static inline int obd_alloc_memmd(struct obd_export *exp,
 682                                   struct lov_stripe_md **mem_tgt)
 683 {
 684         LASSERT(mem_tgt);
 685         LASSERT(!*mem_tgt);
 686         return obd_unpackmd(exp, mem_tgt, NULL, 0);
 687 }
 688
 689 static inline int obd_free_memmd(struct obd_export *exp,
 690                                  struct lov_stripe_md **mem_tgt)
 691 {
 692         int rc;
 693
 694         LASSERT(mem_tgt);
 695         LASSERT(*mem_tgt);
 696         rc = obd_unpackmd(exp, mem_tgt, NULL, 0);
 697         *mem_tgt = NULL;
 698         return rc;
 699 }
 700
 701 static inline int obd_create(const struct lu_env *env, struct obd_export *exp,
 702                              struct obdo *obdo, struct lov_stripe_md **ea,
 703                              struct obd_trans_info *oti)
 704 {
 705         int rc;
 706
 707         EXP_CHECK_DT_OP(exp, create);
 708         EXP_COUNTER_INCREMENT(exp, create);
 709
 710         rc = OBP(exp->exp_obd, create)(env, exp, obdo, ea, oti);
 711         return rc;
 712 }
 713
 714 static inline int obd_destroy(const struct lu_env *env, struct obd_export *exp,
 715                               struct obdo *obdo, struct lov_stripe_md *ea,
 716                               struct obd_trans_info *oti,
 717                               struct obd_export *md_exp)
 718 {
 719         int rc;
 720
 721         EXP_CHECK_DT_OP(exp, destroy);
 722         EXP_COUNTER_INCREMENT(exp, destroy);
 723
 724         rc = OBP(exp->exp_obd, destroy)(env, exp, obdo, ea, oti, md_exp);
 725         return rc;
 726 }
 727
 728 static inline int obd_getattr(const struct lu_env *env, struct obd_export *exp,
 729                               struct obd_info *oinfo)
 730 {
 731         int rc;
 732
 733         EXP_CHECK_DT_OP(exp, getattr);
 734         EXP_COUNTER_INCREMENT(exp, getattr);
 735
 736         rc = OBP(exp->exp_obd, getattr)(env, exp, oinfo);
 737         return rc;
 738 }
 739
 740 static inline int obd_getattr_async(struct obd_export *exp,
 741                                     struct obd_info *oinfo,
 742                                     struct ptlrpc_request_set *set)
 743 {
 744         int rc;
 745
 746         EXP_CHECK_DT_OP(exp, getattr_async);
 747         EXP_COUNTER_INCREMENT(exp, getattr_async);
 748
 749         rc = OBP(exp->exp_obd, getattr_async)(exp, oinfo, set);
 750         return rc;
 751 }
 752
 753 static inline int obd_setattr(const struct lu_env *env, struct obd_export *exp,
 754                               struct obd_info *oinfo,
 755                               struct obd_trans_info *oti)
 756 {
 757         int rc;
 758
 759         EXP_CHECK_DT_OP(exp, setattr);
 760         EXP_COUNTER_INCREMENT(exp, setattr);
 761
 762         rc = OBP(exp->exp_obd, setattr)(env, exp, oinfo, oti);
 763         return rc;
 764 }
 765
 766 /* This performs all the requests set init/wait/destroy actions. */
 767 static inline int obd_setattr_rqset(struct obd_export *exp,
 768                                     struct obd_info *oinfo,
 769                                     struct obd_trans_info *oti)
 770 {
 771         struct ptlrpc_request_set *set = NULL;
 772         int rc;
 773
 774         EXP_CHECK_DT_OP(exp, setattr_async);
 775         EXP_COUNTER_INCREMENT(exp, setattr_async);
 776
 777         set =  ptlrpc_prep_set();
 778         if (!set)
 779                 return -ENOMEM;
 780
 781         rc = OBP(exp->exp_obd, setattr_async)(exp, oinfo, oti, set);
 782         if (rc == 0)
 783                 rc = ptlrpc_set_wait(set);
 784         ptlrpc_set_destroy(set);
 785         return rc;
 786 }
 787
 788 /* This adds all the requests into @set if @set != NULL, otherwise
 789  * all requests are sent asynchronously without waiting for response.
 790  */
 791 static inline int obd_setattr_async(struct obd_export *exp,
 792                                     struct obd_info *oinfo,
 793                                     struct obd_trans_info *oti,
 794                                     struct ptlrpc_request_set *set)
 795 {
 796         int rc;
 797
 798         EXP_CHECK_DT_OP(exp, setattr_async);
 799         EXP_COUNTER_INCREMENT(exp, setattr_async);
 800
 801         rc = OBP(exp->exp_obd, setattr_async)(exp, oinfo, oti, set);
 802         return rc;
 803 }
 804
 805 static inline int obd_add_conn(struct obd_import *imp, struct obd_uuid *uuid,
 806                                int priority)
 807 {
 808         struct obd_device *obd = imp->imp_obd;
 809         int rc;
 810
 811         rc = obd_check_dev_active(obd);
 812         if (rc)
 813                 return rc;
 814         OBD_CHECK_DT_OP(obd, add_conn, -EOPNOTSUPP);
 815         OBD_COUNTER_INCREMENT(obd, add_conn);
 816
 817         rc = OBP(obd, add_conn)(imp, uuid, priority);
 818         return rc;
 819 }
 820
 821 static inline int obd_del_conn(struct obd_import *imp, struct obd_uuid *uuid)
 822 {
 823         struct obd_device *obd = imp->imp_obd;
 824         int rc;
 825
 826         rc = obd_check_dev_active(obd);
 827         if (rc)
 828                 return rc;
 829         OBD_CHECK_DT_OP(obd, del_conn, -EOPNOTSUPP);
 830         OBD_COUNTER_INCREMENT(obd, del_conn);
 831
 832         rc = OBP(obd, del_conn)(imp, uuid);
 833         return rc;
 834 }
 835
 836 static inline struct obd_uuid *obd_get_uuid(struct obd_export *exp)
 837 {
 838         struct obd_uuid *uuid;
 839
 840         OBD_CHECK_DT_OP(exp->exp_obd, get_uuid, NULL);
 841         EXP_COUNTER_INCREMENT(exp, get_uuid);
 842
 843         uuid = OBP(exp->exp_obd, get_uuid)(exp);
 844         return uuid;
 845 }
 846
 847 /** Create a new /a exp on device /a obd for the uuid /a cluuid
 848  * @param exp New export handle
 849  * @param d Connect data, supported flags are set, flags also understood
 850  *    by obd are returned.
 851  */
 852 static inline int obd_connect(const struct lu_env *env,
 853                               struct obd_export **exp, struct obd_device *obd,
 854                               struct obd_uuid *cluuid,
 855                               struct obd_connect_data *data,
 856                               void *localdata)
 857 {
 858         int rc;
 859         __u64 ocf = data ? data->ocd_connect_flags : 0; /* for post-condition
 860                                                          * check
 861                                                          */
 862
 863         rc = obd_check_dev_active(obd);
 864         if (rc)
 865                 return rc;
 866         OBD_CHECK_DT_OP(obd, connect, -EOPNOTSUPP);
 867         OBD_COUNTER_INCREMENT(obd, connect);
 868
 869         rc = OBP(obd, connect)(env, exp, obd, cluuid, data, localdata);
 870         /* check that only subset is granted */
 871         LASSERT(ergo(data, (data->ocd_connect_flags & ocf) ==
 872                                     data->ocd_connect_flags));
 873         return rc;
 874 }
 875
 876 static inline int obd_reconnect(const struct lu_env *env,
 877                                 struct obd_export *exp,
 878                                 struct obd_device *obd,
 879                                 struct obd_uuid *cluuid,
 880                                 struct obd_connect_data *d,
 881                                 void *localdata)
 882 {
 883         int rc;
 884         __u64 ocf = d ? d->ocd_connect_flags : 0; /* for post-condition check */
 885
 886         rc = obd_check_dev_active(obd);
 887         if (rc)
 888                 return rc;
 889         OBD_CHECK_DT_OP(obd, reconnect, 0);
 890         OBD_COUNTER_INCREMENT(obd, reconnect);
 891
 892         rc = OBP(obd, reconnect)(env, exp, obd, cluuid, d, localdata);
 893         /* check that only subset is granted */
 894         LASSERT(ergo(d, (d->ocd_connect_flags & ocf) == d->ocd_connect_flags));
 895         return rc;
 896 }
 897
 898 static inline int obd_disconnect(struct obd_export *exp)
 899 {
 900         int rc;
 901
 902         EXP_CHECK_DT_OP(exp, disconnect);
 903         EXP_COUNTER_INCREMENT(exp, disconnect);
 904
 905         rc = OBP(exp->exp_obd, disconnect)(exp);
 906         return rc;
 907 }
 908
 909 static inline int obd_fid_init(struct obd_device *obd, struct obd_export *exp,
 910                                enum lu_cli_type type)
 911 {
 912         int rc;
 913
 914         OBD_CHECK_DT_OP(obd, fid_init, 0);
 915         OBD_COUNTER_INCREMENT(obd, fid_init);
 916
 917         rc = OBP(obd, fid_init)(obd, exp, type);
 918         return rc;
 919 }
 920
 921 static inline int obd_fid_fini(struct obd_device *obd)
 922 {
 923         int rc;
 924
 925         OBD_CHECK_DT_OP(obd, fid_fini, 0);
 926         OBD_COUNTER_INCREMENT(obd, fid_fini);
 927
 928         rc = OBP(obd, fid_fini)(obd);
 929         return rc;
 930 }
 931
 932 static inline int obd_fid_alloc(struct obd_export *exp,
 933                                 struct lu_fid *fid,
 934                                 struct md_op_data *op_data)
 935 {
 936         int rc;
 937
 938         EXP_CHECK_DT_OP(exp, fid_alloc);
 939         EXP_COUNTER_INCREMENT(exp, fid_alloc);
 940
 941         rc = OBP(exp->exp_obd, fid_alloc)(exp, fid, op_data);
 942         return rc;
 943 }
 944
 945 static inline int obd_pool_new(struct obd_device *obd, char *poolname)
 946 {
 947         int rc;
 948
 949         OBD_CHECK_DT_OP(obd, pool_new, -EOPNOTSUPP);
 950         OBD_COUNTER_INCREMENT(obd, pool_new);
 951
 952         rc = OBP(obd, pool_new)(obd, poolname);
 953         return rc;
 954 }
 955
 956 static inline int obd_pool_del(struct obd_device *obd, char *poolname)
 957 {
 958         int rc;
 959
 960         OBD_CHECK_DT_OP(obd, pool_del, -EOPNOTSUPP);
 961         OBD_COUNTER_INCREMENT(obd, pool_del);
 962
 963         rc = OBP(obd, pool_del)(obd, poolname);
 964         return rc;
 965 }
 966
 967 static inline int obd_pool_add(struct obd_device *obd, char *poolname, char *ostname)
 968 {
 969         int rc;
 970
 971         OBD_CHECK_DT_OP(obd, pool_add, -EOPNOTSUPP);
 972         OBD_COUNTER_INCREMENT(obd, pool_add);
 973
 974         rc = OBP(obd, pool_add)(obd, poolname, ostname);
 975         return rc;
 976 }
 977
 978 static inline int obd_pool_rem(struct obd_device *obd, char *poolname, char *ostname)
 979 {
 980         int rc;
 981
 982         OBD_CHECK_DT_OP(obd, pool_rem, -EOPNOTSUPP);
 983         OBD_COUNTER_INCREMENT(obd, pool_rem);
 984
 985         rc = OBP(obd, pool_rem)(obd, poolname, ostname);
 986         return rc;
 987 }
 988
 989 static inline void obd_getref(struct obd_device *obd)
 990 {
 991         if (OBT(obd) && OBP(obd, getref)) {
 992                 OBD_COUNTER_INCREMENT(obd, getref);
 993                 OBP(obd, getref)(obd);
 994         }
 995 }
 996
 997 static inline void obd_putref(struct obd_device *obd)
 998 {
 999         if (OBT(obd) && OBP(obd, putref)) {
1000                 OBD_COUNTER_INCREMENT(obd, putref);
1001                 OBP(obd, putref)(obd);
1002         }
1003 }
1004
1005 static inline int obd_init_export(struct obd_export *exp)
1006 {
1007         int rc = 0;
1008
1009         if ((exp)->exp_obd && OBT((exp)->exp_obd) &&
1010             OBP((exp)->exp_obd, init_export))
1011                 rc = OBP(exp->exp_obd, init_export)(exp);
1012         return rc;
1013 }
1014
1015 static inline int obd_destroy_export(struct obd_export *exp)
1016 {
1017         if ((exp)->exp_obd && OBT((exp)->exp_obd) &&
1018             OBP((exp)->exp_obd, destroy_export))
1019                 OBP(exp->exp_obd, destroy_export)(exp);
1020         return 0;
1021 }
1022
1023 /* @max_age is the oldest time in jiffies that we accept using a cached data.
1024  * If the cache is older than @max_age we will get a new value from the
1025  * target.  Use a value of "cfs_time_current() + HZ" to guarantee freshness.
1026  */
1027 static inline int obd_statfs_async(struct obd_export *exp,
1028                                    struct obd_info *oinfo,
1029                                    __u64 max_age,
1030                                    struct ptlrpc_request_set *rqset)
1031 {
1032         int rc = 0;
1033         struct obd_device *obd;
1034
1035         if (!exp || !exp->exp_obd)
1036                 return -EINVAL;
1037
1038         obd = exp->exp_obd;
1039         OBD_CHECK_DT_OP(obd, statfs, -EOPNOTSUPP);
1040         OBD_COUNTER_INCREMENT(obd, statfs);
1041
1042         CDEBUG(D_SUPER, "%s: osfs %p age %llu, max_age %llu\n",
1043                obd->obd_name, &obd->obd_osfs, obd->obd_osfs_age, max_age);
1044         if (cfs_time_before_64(obd->obd_osfs_age, max_age)) {
1045                 rc = OBP(obd, statfs_async)(exp, oinfo, max_age, rqset);
1046         } else {
1047                 CDEBUG(D_SUPER,
1048                        "%s: use %p cache blocks %llu/%llu objects %llu/%llu\n",
1049                        obd->obd_name, &obd->obd_osfs,
1050                        obd->obd_osfs.os_bavail, obd->obd_osfs.os_blocks,
1051                        obd->obd_osfs.os_ffree, obd->obd_osfs.os_files);
1052                 spin_lock(&obd->obd_osfs_lock);
1053                 memcpy(oinfo->oi_osfs, &obd->obd_osfs, sizeof(*oinfo->oi_osfs));
1054                 spin_unlock(&obd->obd_osfs_lock);
1055                 oinfo->oi_flags |= OBD_STATFS_FROM_CACHE;
1056                 if (oinfo->oi_cb_up)
1057                         oinfo->oi_cb_up(oinfo, 0);
1058         }
1059         return rc;
1060 }
1061
1062 static inline int obd_statfs_rqset(struct obd_export *exp,
1063                                    struct obd_statfs *osfs, __u64 max_age,
1064                                    __u32 flags)
1065 {
1066         struct ptlrpc_request_set *set = NULL;
1067         struct obd_info oinfo = { };
1068         int rc = 0;
1069
1070         set =  ptlrpc_prep_set();
1071         if (!set)
1072                 return -ENOMEM;
1073
1074         oinfo.oi_osfs = osfs;
1075         oinfo.oi_flags = flags;
1076         rc = obd_statfs_async(exp, &oinfo, max_age, set);
1077         if (rc == 0)
1078                 rc = ptlrpc_set_wait(set);
1079         ptlrpc_set_destroy(set);
1080         return rc;
1081 }
1082
1083 /* @max_age is the oldest time in jiffies that we accept using a cached data.
1084  * If the cache is older than @max_age we will get a new value from the
1085  * target.  Use a value of "cfs_time_current() + HZ" to guarantee freshness.
1086  */
1087 static inline int obd_statfs(const struct lu_env *env, struct obd_export *exp,
1088                              struct obd_statfs *osfs, __u64 max_age,
1089                              __u32 flags)
1090 {
1091         int rc = 0;
1092         struct obd_device *obd = exp->exp_obd;
1093
1094         if (!obd)
1095                 return -EINVAL;
1096
1097         OBD_CHECK_DT_OP(obd, statfs, -EOPNOTSUPP);
1098         OBD_COUNTER_INCREMENT(obd, statfs);
1099
1100         CDEBUG(D_SUPER, "osfs %llu, max_age %llu\n",
1101                obd->obd_osfs_age, max_age);
1102         if (cfs_time_before_64(obd->obd_osfs_age, max_age)) {
1103                 rc = OBP(obd, statfs)(env, exp, osfs, max_age, flags);
1104                 if (rc == 0) {
1105                         spin_lock(&obd->obd_osfs_lock);
1106                         memcpy(&obd->obd_osfs, osfs, sizeof(obd->obd_osfs));
1107                         obd->obd_osfs_age = cfs_time_current_64();
1108                         spin_unlock(&obd->obd_osfs_lock);
1109                 }
1110         } else {
1111                 CDEBUG(D_SUPER, "%s: use %p cache blocks %llu/%llu objects %llu/%llu\n",
1112                        obd->obd_name, &obd->obd_osfs,
1113                        obd->obd_osfs.os_bavail, obd->obd_osfs.os_blocks,
1114                        obd->obd_osfs.os_ffree, obd->obd_osfs.os_files);
1115                 spin_lock(&obd->obd_osfs_lock);
1116                 memcpy(osfs, &obd->obd_osfs, sizeof(*osfs));
1117                 spin_unlock(&obd->obd_osfs_lock);
1118         }
1119         return rc;
1120 }
1121
1122 static inline int obd_preprw(const struct lu_env *env, int cmd,
1123                              struct obd_export *exp, struct obdo *oa,
1124                              int objcount, struct obd_ioobj *obj,
1125                              struct niobuf_remote *remote, int *pages,
1126                              struct niobuf_local *local,
1127                              struct obd_trans_info *oti)
1128 {
1129         int rc;
1130
1131         EXP_CHECK_DT_OP(exp, preprw);
1132         EXP_COUNTER_INCREMENT(exp, preprw);
1133
1134         rc = OBP(exp->exp_obd, preprw)(env, cmd, exp, oa, objcount, obj, remote,
1135                                        pages, local, oti);
1136         return rc;
1137 }
1138
1139 static inline int obd_commitrw(const struct lu_env *env, int cmd,
1140                                struct obd_export *exp, struct obdo *oa,
1141                                int objcount, struct obd_ioobj *obj,
1142                                struct niobuf_remote *rnb, int pages,
1143                                struct niobuf_local *local,
1144                                struct obd_trans_info *oti, int rc)
1145 {
1146         EXP_CHECK_DT_OP(exp, commitrw);
1147         EXP_COUNTER_INCREMENT(exp, commitrw);
1148
1149         rc = OBP(exp->exp_obd, commitrw)(env, cmd, exp, oa, objcount, obj,
1150                                          rnb, pages, local, oti, rc);
1151         return rc;
1152 }
1153
1154 static inline int obd_adjust_kms(struct obd_export *exp,
1155                                  struct lov_stripe_md *lsm, u64 size,
1156                                  int shrink)
1157 {
1158         int rc;
1159
1160         EXP_CHECK_DT_OP(exp, adjust_kms);
1161         EXP_COUNTER_INCREMENT(exp, adjust_kms);
1162
1163         rc = OBP(exp->exp_obd, adjust_kms)(exp, lsm, size, shrink);
1164         return rc;
1165 }
1166
1167 static inline int obd_iocontrol(unsigned int cmd, struct obd_export *exp,
1168                                 int len, void *karg, void __user *uarg)
1169 {
1170         int rc;
1171
1172         EXP_CHECK_DT_OP(exp, iocontrol);
1173         EXP_COUNTER_INCREMENT(exp, iocontrol);
1174
1175         rc = OBP(exp->exp_obd, iocontrol)(cmd, exp, len, karg, uarg);
1176         return rc;
1177 }
1178
1179 static inline int obd_find_cbdata(struct obd_export *exp,
1180                                   struct lov_stripe_md *lsm,
1181                                   ldlm_iterator_t it, void *data)
1182 {
1183         int rc;
1184
1185         EXP_CHECK_DT_OP(exp, find_cbdata);
1186         EXP_COUNTER_INCREMENT(exp, find_cbdata);
1187
1188         rc = OBP(exp->exp_obd, find_cbdata)(exp, lsm, it, data);
1189         return rc;
1190 }
1191
1192 static inline void obd_import_event(struct obd_device *obd,
1193                                     struct obd_import *imp,
1194                                     enum obd_import_event event)
1195 {
1196         if (!obd) {
1197                 CERROR("NULL device\n");
1198                 return;
1199         }
1200         if (obd->obd_set_up && OBP(obd, import_event)) {
1201                 OBD_COUNTER_INCREMENT(obd, import_event);
1202                 OBP(obd, import_event)(obd, imp, event);
1203         }
1204 }
1205
1206 static inline int obd_notify(struct obd_device *obd,
1207                              struct obd_device *watched,
1208                              enum obd_notify_event ev,
1209                              void *data)
1210 {
1211         int rc;
1212
1213         rc = obd_check_dev(obd);
1214         if (rc)
1215                 return rc;
1216
1217         /* the check for async_recov is a complete hack - I'm hereby
1218          * overloading the meaning to also mean "this was called from
1219          * mds_postsetup".  I know that my mds is able to handle notifies
1220          * by this point, and it needs to get them to execute mds_postrecov.
1221          */
1222         if (!obd->obd_set_up && !obd->obd_async_recov) {
1223                 CDEBUG(D_HA, "obd %s not set up\n", obd->obd_name);
1224                 return -EINVAL;
1225         }
1226
1227         if (!OBP(obd, notify)) {
1228                 CDEBUG(D_HA, "obd %s has no notify handler\n", obd->obd_name);
1229                 return -ENOSYS;
1230         }
1231
1232         OBD_COUNTER_INCREMENT(obd, notify);
1233         rc = OBP(obd, notify)(obd, watched, ev, data);
1234         return rc;
1235 }
1236
1237 static inline int obd_notify_observer(struct obd_device *observer,
1238                                       struct obd_device *observed,
1239                                       enum obd_notify_event ev,
1240                                       void *data)
1241 {
1242         int rc1;
1243         int rc2;
1244
1245         struct obd_notify_upcall *onu;
1246
1247         if (observer->obd_observer)
1248                 rc1 = obd_notify(observer->obd_observer, observed, ev, data);
1249         else
1250                 rc1 = 0;
1251         /*
1252          * Also, call non-obd listener, if any
1253          */
1254         onu = &observer->obd_upcall;
1255         if (onu->onu_upcall)
1256                 rc2 = onu->onu_upcall(observer, observed, ev,
1257                                       onu->onu_owner, NULL);
1258         else
1259                 rc2 = 0;
1260
1261         return rc1 ? rc1 : rc2;
1262 }
1263
1264 static inline int obd_quotacheck(struct obd_export *exp,
1265                                  struct obd_quotactl *oqctl)
1266 {
1267         int rc;
1268
1269         EXP_CHECK_DT_OP(exp, quotacheck);
1270         EXP_COUNTER_INCREMENT(exp, quotacheck);
1271
1272         rc = OBP(exp->exp_obd, quotacheck)(exp->exp_obd, exp, oqctl);
1273         return rc;
1274 }
1275
1276 static inline int obd_quotactl(struct obd_export *exp,
1277                                struct obd_quotactl *oqctl)
1278 {
1279         int rc;
1280
1281         EXP_CHECK_DT_OP(exp, quotactl);
1282         EXP_COUNTER_INCREMENT(exp, quotactl);
1283
1284         rc = OBP(exp->exp_obd, quotactl)(exp->exp_obd, exp, oqctl);
1285         return rc;
1286 }
1287
1288 static inline int obd_health_check(const struct lu_env *env,
1289                                    struct obd_device *obd)
1290 {
1291         /* returns: 0 on healthy
1292          *       >0 on unhealthy + reason code/flag
1293          *          however the only supported reason == 1 right now
1294          *          We'll need to define some better reasons
1295          *          or flags in the future.
1296          *       <0 on error
1297          */
1298         int rc;
1299
1300         /* don't use EXP_CHECK_DT_OP, because NULL method is normal here */
1301         if (!obd || !OBT(obd)) {
1302                 CERROR("cleaned up obd\n");
1303                 return -EOPNOTSUPP;
1304         }
1305         if (!obd->obd_set_up || obd->obd_stopping)
1306                 return 0;
1307         if (!OBP(obd, health_check))
1308                 return 0;
1309
1310         rc = OBP(obd, health_check)(env, obd);
1311         return rc;
1312 }
1313
1314 static inline int obd_register_observer(struct obd_device *obd,
1315                                         struct obd_device *observer)
1316 {
1317         int rc;
1318
1319         rc = obd_check_dev(obd);
1320         if (rc)
1321                 return rc;
1322         down_write(&obd->obd_observer_link_sem);
1323         if (obd->obd_observer && observer) {
1324                 up_write(&obd->obd_observer_link_sem);
1325                 return -EALREADY;
1326         }
1327         obd->obd_observer = observer;
1328         up_write(&obd->obd_observer_link_sem);
1329         return 0;
1330 }
1331
1332 /* metadata helpers */
1333 static inline int md_getstatus(struct obd_export *exp, struct lu_fid *fid)
1334 {
1335         int rc;
1336
1337         EXP_CHECK_MD_OP(exp, getstatus);
1338         EXP_MD_COUNTER_INCREMENT(exp, getstatus);
1339         rc = MDP(exp->exp_obd, getstatus)(exp, fid);
1340         return rc;
1341 }
1342
1343 static inline int md_getattr(struct obd_export *exp, struct md_op_data *op_data,
1344                              struct ptlrpc_request **request)
1345 {
1346         int rc;
1347
1348         EXP_CHECK_MD_OP(exp, getattr);
1349         EXP_MD_COUNTER_INCREMENT(exp, getattr);
1350         rc = MDP(exp->exp_obd, getattr)(exp, op_data, request);
1351         return rc;
1352 }
1353
1354 static inline int md_null_inode(struct obd_export *exp,
1355                                 const struct lu_fid *fid)
1356 {
1357         int rc;
1358
1359         EXP_CHECK_MD_OP(exp, null_inode);
1360         EXP_MD_COUNTER_INCREMENT(exp, null_inode);
1361         rc = MDP(exp->exp_obd, null_inode)(exp, fid);
1362         return rc;
1363 }
1364
1365 static inline int md_find_cbdata(struct obd_export *exp,
1366                                  const struct lu_fid *fid,
1367                                  ldlm_iterator_t it, void *data)
1368 {
1369         int rc;
1370
1371         EXP_CHECK_MD_OP(exp, find_cbdata);
1372         EXP_MD_COUNTER_INCREMENT(exp, find_cbdata);
1373         rc = MDP(exp->exp_obd, find_cbdata)(exp, fid, it, data);
1374         return rc;
1375 }
1376
1377 static inline int md_close(struct obd_export *exp, struct md_op_data *op_data,
1378                            struct md_open_data *mod,
1379                            struct ptlrpc_request **request)
1380 {
1381         int rc;
1382
1383         EXP_CHECK_MD_OP(exp, close);
1384         EXP_MD_COUNTER_INCREMENT(exp, close);
1385         rc = MDP(exp->exp_obd, close)(exp, op_data, mod, request);
1386         return rc;
1387 }
1388
1389 static inline int md_create(struct obd_export *exp, struct md_op_data *op_data,
1390                             const void *data, int datalen, int mode, __u32 uid,
1391                             __u32 gid, cfs_cap_t cap_effective, __u64 rdev,
1392                             struct ptlrpc_request **request)
1393 {
1394         int rc;
1395
1396         EXP_CHECK_MD_OP(exp, create);
1397         EXP_MD_COUNTER_INCREMENT(exp, create);
1398         rc = MDP(exp->exp_obd, create)(exp, op_data, data, datalen, mode,
1399                                        uid, gid, cap_effective, rdev, request);
1400         return rc;
1401 }
1402
1403 static inline int md_done_writing(struct obd_export *exp,
1404                                   struct md_op_data *op_data,
1405                                   struct md_open_data *mod)
1406 {
1407         int rc;
1408
1409         EXP_CHECK_MD_OP(exp, done_writing);
1410         EXP_MD_COUNTER_INCREMENT(exp, done_writing);
1411         rc = MDP(exp->exp_obd, done_writing)(exp, op_data, mod);
1412         return rc;
1413 }
1414
1415 static inline int md_enqueue(struct obd_export *exp,
1416                              struct ldlm_enqueue_info *einfo,
1417                              struct lookup_intent *it,
1418                              struct md_op_data *op_data,
1419                              struct lustre_handle *lockh,
1420                              void *lmm, int lmmsize,
1421                              struct ptlrpc_request **req,
1422                              __u64 extra_lock_flags)
1423 {
1424         int rc;
1425
1426         EXP_CHECK_MD_OP(exp, enqueue);
1427         EXP_MD_COUNTER_INCREMENT(exp, enqueue);
1428         rc = MDP(exp->exp_obd, enqueue)(exp, einfo, it, op_data, lockh,
1429                                         lmm, lmmsize, req, extra_lock_flags);
1430         return rc;
1431 }
1432
1433 static inline int md_getattr_name(struct obd_export *exp,
1434                                   struct md_op_data *op_data,
1435                                   struct ptlrpc_request **request)
1436 {
1437         int rc;
1438
1439         EXP_CHECK_MD_OP(exp, getattr_name);
1440         EXP_MD_COUNTER_INCREMENT(exp, getattr_name);
1441         rc = MDP(exp->exp_obd, getattr_name)(exp, op_data, request);
1442         return rc;
1443 }
1444
1445 static inline int md_intent_lock(struct obd_export *exp,
1446                                  struct md_op_data *op_data, void *lmm,
1447                                  int lmmsize, struct lookup_intent *it,
1448                                  int lookup_flags, struct ptlrpc_request **reqp,
1449                                  ldlm_blocking_callback cb_blocking,
1450                                  __u64 extra_lock_flags)
1451 {
1452         int rc;
1453
1454         EXP_CHECK_MD_OP(exp, intent_lock);
1455         EXP_MD_COUNTER_INCREMENT(exp, intent_lock);
1456         rc = MDP(exp->exp_obd, intent_lock)(exp, op_data, lmm, lmmsize,
1457                                             it, lookup_flags, reqp, cb_blocking,
1458                                             extra_lock_flags);
1459         return rc;
1460 }
1461
1462 static inline int md_link(struct obd_export *exp, struct md_op_data *op_data,
1463                           struct ptlrpc_request **request)
1464 {
1465         int rc;
1466
1467         EXP_CHECK_MD_OP(exp, link);
1468         EXP_MD_COUNTER_INCREMENT(exp, link);
1469         rc = MDP(exp->exp_obd, link)(exp, op_data, request);
1470         return rc;
1471 }
1472
1473 static inline int md_rename(struct obd_export *exp, struct md_op_data *op_data,
1474                             const char *old, int oldlen, const char *new,
1475                             int newlen, struct ptlrpc_request **request)
1476 {
1477         int rc;
1478
1479         EXP_CHECK_MD_OP(exp, rename);
1480         EXP_MD_COUNTER_INCREMENT(exp, rename);
1481         rc = MDP(exp->exp_obd, rename)(exp, op_data, old, oldlen, new,
1482                                        newlen, request);
1483         return rc;
1484 }
1485
1486 static inline int md_is_subdir(struct obd_export *exp,
1487                                const struct lu_fid *pfid,
1488                                const struct lu_fid *cfid,
1489                                struct ptlrpc_request **request)
1490 {
1491         int rc;
1492
1493         EXP_CHECK_MD_OP(exp, is_subdir);
1494         EXP_MD_COUNTER_INCREMENT(exp, is_subdir);
1495         rc = MDP(exp->exp_obd, is_subdir)(exp, pfid, cfid, request);
1496         return rc;
1497 }
1498
1499 static inline int md_setattr(struct obd_export *exp, struct md_op_data *op_data,
1500                              void *ea, int ealen, void *ea2, int ea2len,
1501                              struct ptlrpc_request **request,
1502                              struct md_open_data **mod)
1503 {
1504         int rc;
1505
1506         EXP_CHECK_MD_OP(exp, setattr);
1507         EXP_MD_COUNTER_INCREMENT(exp, setattr);
1508         rc = MDP(exp->exp_obd, setattr)(exp, op_data, ea, ealen,
1509                                         ea2, ea2len, request, mod);
1510         return rc;
1511 }
1512
1513 static inline int md_sync(struct obd_export *exp, const struct lu_fid *fid,
1514                           struct ptlrpc_request **request)
1515 {
1516         int rc;
1517
1518         EXP_CHECK_MD_OP(exp, sync);
1519         EXP_MD_COUNTER_INCREMENT(exp, sync);
1520         rc = MDP(exp->exp_obd, sync)(exp, fid, request);
1521         return rc;
1522 }
1523
1524 static inline int md_readpage(struct obd_export *exp, struct md_op_data *opdata,
1525                               struct page **pages,
1526                               struct ptlrpc_request **request)
1527 {
1528         int rc;
1529
1530         EXP_CHECK_MD_OP(exp, readpage);
1531         EXP_MD_COUNTER_INCREMENT(exp, readpage);
1532         rc = MDP(exp->exp_obd, readpage)(exp, opdata, pages, request);
1533         return rc;
1534 }
1535
1536 static inline int md_unlink(struct obd_export *exp, struct md_op_data *op_data,
1537                             struct ptlrpc_request **request)
1538 {
1539         int rc;
1540
1541         EXP_CHECK_MD_OP(exp, unlink);
1542         EXP_MD_COUNTER_INCREMENT(exp, unlink);
1543         rc = MDP(exp->exp_obd, unlink)(exp, op_data, request);
1544         return rc;
1545 }
1546
1547 static inline int md_get_lustre_md(struct obd_export *exp,
1548                                    struct ptlrpc_request *req,
1549                                    struct obd_export *dt_exp,
1550                                    struct obd_export *md_exp,
1551                                    struct lustre_md *md)
1552 {
1553         EXP_CHECK_MD_OP(exp, get_lustre_md);
1554         EXP_MD_COUNTER_INCREMENT(exp, get_lustre_md);
1555         return MDP(exp->exp_obd, get_lustre_md)(exp, req, dt_exp, md_exp, md);
1556 }
1557
1558 static inline int md_free_lustre_md(struct obd_export *exp,
1559                                     struct lustre_md *md)
1560 {
1561         EXP_CHECK_MD_OP(exp, free_lustre_md);
1562         EXP_MD_COUNTER_INCREMENT(exp, free_lustre_md);
1563         return MDP(exp->exp_obd, free_lustre_md)(exp, md);
1564 }
1565
1566 static inline int md_setxattr(struct obd_export *exp, const struct lu_fid *fid,
1567                               u64 valid, const char *name,
1568                               const char *input, int input_size,
1569                               int output_size, int flags, __u32 suppgid,
1570                               struct ptlrpc_request **request)
1571 {
1572         EXP_CHECK_MD_OP(exp, setxattr);
1573         EXP_MD_COUNTER_INCREMENT(exp, setxattr);
1574         return MDP(exp->exp_obd, setxattr)(exp, fid, valid, name, input,
1575                                            input_size, output_size, flags,
1576                                            suppgid, request);
1577 }
1578
1579 static inline int md_getxattr(struct obd_export *exp, const struct lu_fid *fid,
1580                               u64 valid, const char *name,
1581                               const char *input, int input_size,
1582                               int output_size, int flags,
1583                               struct ptlrpc_request **request)
1584 {
1585         EXP_CHECK_MD_OP(exp, getxattr);
1586         EXP_MD_COUNTER_INCREMENT(exp, getxattr);
1587         return MDP(exp->exp_obd, getxattr)(exp, fid, valid, name, input,
1588                                            input_size, output_size, flags,
1589                                            request);
1590 }
1591
1592 static inline int md_set_open_replay_data(struct obd_export *exp,
1593                                           struct obd_client_handle *och,
1594                                           struct lookup_intent *it)
1595 {
1596         EXP_CHECK_MD_OP(exp, set_open_replay_data);
1597         EXP_MD_COUNTER_INCREMENT(exp, set_open_replay_data);
1598         return MDP(exp->exp_obd, set_open_replay_data)(exp, och, it);
1599 }
1600
1601 static inline int md_clear_open_replay_data(struct obd_export *exp,
1602                                             struct obd_client_handle *och)
1603 {
1604         EXP_CHECK_MD_OP(exp, clear_open_replay_data);
1605         EXP_MD_COUNTER_INCREMENT(exp, clear_open_replay_data);
1606         return MDP(exp->exp_obd, clear_open_replay_data)(exp, och);
1607 }
1608
1609 static inline int md_set_lock_data(struct obd_export *exp,
1610                                    __u64 *lockh, void *data, __u64 *bits)
1611 {
1612         EXP_CHECK_MD_OP(exp, set_lock_data);
1613         EXP_MD_COUNTER_INCREMENT(exp, set_lock_data);
1614         return MDP(exp->exp_obd, set_lock_data)(exp, lockh, data, bits);
1615 }
1616
1617 static inline int md_cancel_unused(struct obd_export *exp,
1618                                    const struct lu_fid *fid,
1619                                    ldlm_policy_data_t *policy,
1620                                    enum ldlm_mode mode,
1621                                    enum ldlm_cancel_flags flags,
1622                                    void *opaque)
1623 {
1624         int rc;
1625
1626         EXP_CHECK_MD_OP(exp, cancel_unused);
1627         EXP_MD_COUNTER_INCREMENT(exp, cancel_unused);
1628
1629         rc = MDP(exp->exp_obd, cancel_unused)(exp, fid, policy, mode,
1630                                               flags, opaque);
1631         return rc;
1632 }
1633
1634 static inline enum ldlm_mode md_lock_match(struct obd_export *exp, __u64 flags,
1635                                            const struct lu_fid *fid,
1636                                            enum ldlm_type type,
1637                                            ldlm_policy_data_t *policy,
1638                                            enum ldlm_mode mode,
1639                                            struct lustre_handle *lockh)
1640 {
1641         EXP_CHECK_MD_OP(exp, lock_match);
1642         EXP_MD_COUNTER_INCREMENT(exp, lock_match);
1643         return MDP(exp->exp_obd, lock_match)(exp, flags, fid, type,
1644                                              policy, mode, lockh);
1645 }
1646
1647 static inline int md_init_ea_size(struct obd_export *exp, int easize,
1648                                   int def_asize, int cookiesize,
1649                                   int def_cookiesize)
1650 {
1651         EXP_CHECK_MD_OP(exp, init_ea_size);
1652         EXP_MD_COUNTER_INCREMENT(exp, init_ea_size);
1653         return MDP(exp->exp_obd, init_ea_size)(exp, easize, def_asize,
1654                                                cookiesize, def_cookiesize);
1655 }
1656
1657 static inline int md_get_remote_perm(struct obd_export *exp,
1658                                      const struct lu_fid *fid, __u32 suppgid,
1659                                      struct ptlrpc_request **request)
1660 {
1661         EXP_CHECK_MD_OP(exp, get_remote_perm);
1662         EXP_MD_COUNTER_INCREMENT(exp, get_remote_perm);
1663         return MDP(exp->exp_obd, get_remote_perm)(exp, fid, suppgid,
1664                                                   request);
1665 }
1666
1667 static inline int md_intent_getattr_async(struct obd_export *exp,
1668                                           struct md_enqueue_info *minfo,
1669                                           struct ldlm_enqueue_info *einfo)
1670 {
1671         int rc;
1672
1673         EXP_CHECK_MD_OP(exp, intent_getattr_async);
1674         EXP_MD_COUNTER_INCREMENT(exp, intent_getattr_async);
1675         rc = MDP(exp->exp_obd, intent_getattr_async)(exp, minfo, einfo);
1676         return rc;
1677 }
1678
1679 static inline int md_revalidate_lock(struct obd_export *exp,
1680                                      struct lookup_intent *it,
1681                                      struct lu_fid *fid, __u64 *bits)
1682 {
1683         int rc;
1684
1685         EXP_CHECK_MD_OP(exp, revalidate_lock);
1686         EXP_MD_COUNTER_INCREMENT(exp, revalidate_lock);
1687         rc = MDP(exp->exp_obd, revalidate_lock)(exp, it, fid, bits);
1688         return rc;
1689 }
1690
1691 /* OBD Metadata Support */
1692
1693 int obd_init_caches(void);
1694 void obd_cleanup_caches(void);
1695
1696 /* support routines */
1697 extern struct kmem_cache *obdo_cachep;
1698
1699 static inline void obdo2fid(struct obdo *oa, struct lu_fid *fid)
1700 {
1701         /* something here */
1702 }
1703
1704 static inline void fid2obdo(struct lu_fid *fid, struct obdo *oa)
1705 {
1706         /* something here */
1707 }
1708
1709 typedef int (*register_lwp_cb)(void *data);
1710
1711 struct lwp_register_item {
1712         struct obd_export **lri_exp;
1713         register_lwp_cb     lri_cb_func;
1714         void               *lri_cb_data;
1715         struct list_head            lri_list;
1716         char                lri_name[MTI_NAME_MAXLEN];
1717 };
1718
1719 /* I'm as embarrassed about this as you are.
1720  *
1721  * <shaver> // XXX do not look into _superhack with remaining eye
1722  * <shaver> // XXX if this were any uglier, I'd get my own show on MTV
1723  */
1724 extern int (*ptlrpc_put_connection_superhack)(struct ptlrpc_connection *c);
1725
1726 /* obd_mount.c */
1727
1728 /* sysctl.c */
1729 int obd_sysctl_init(void);
1730
1731 /* uuid.c  */
1732 typedef __u8 class_uuid_t[16];
1733 void class_uuid_unparse(class_uuid_t in, struct obd_uuid *out);
1734
1735 /* lustre_peer.c    */
1736 int lustre_uuid_to_peer(const char *uuid, lnet_nid_t *peer_nid, int index);
1737 int class_add_uuid(const char *uuid, __u64 nid);
1738 int class_del_uuid(const char *uuid);
1739 int class_check_uuid(struct obd_uuid *uuid, __u64 nid);
1740 void class_init_uuidlist(void);
1741 void class_exit_uuidlist(void);
1742
1743 /* class_obd.c */
1744 extern char obd_jobid_node[];
1745 extern struct miscdevice obd_psdev;
1746 extern spinlock_t obd_types_lock;
1747
1748 /* prng.c */
1749 #define ll_generate_random_uuid(uuid_out) cfs_get_random_bytes(uuid_out, sizeof(class_uuid_t))
1750
1751 #endif /* __LINUX_OBD_CLASS_H */