Fix read-only pool hang on unmount
[zfs.git] / module / zfs / zfs_vfsops.c
index a602c5d..9ae7ab5 100644 (file)
@@ -38,6 +38,7 @@
 #include <sys/cmn_err.h>
 #include "fs/fs_subr.h"
 #include <sys/zfs_znode.h>
+#include <sys/zfs_vnops.h>
 #include <sys/zfs_dir.h>
 #include <sys/zil.h>
 #include <sys/fs/zfs.h>
@@ -48,6 +49,7 @@
 #include <sys/spa.h>
 #include <sys/zap.h>
 #include <sys/sa.h>
+#include <sys/sa_impl.h>
 #include <sys/varargs.h>
 #include <sys/policy.h>
 #include <sys/atomic.h>
 #include <sys/dnlc.h>
 #include <sys/dmu_objset.h>
 #include <sys/spa_boot.h>
-#include <sys/sa.h>
+#include <sys/zpl.h>
 #include "zfs_comutil.h"
 
-#ifdef HAVE_ZPL
 
 /*ARGSUSED*/
 int
-zfs_sync(vfs_t *vfsp, short flag, cred_t *cr)
+zfs_sync(struct super_block *sb, int wait, cred_t *cr)
 {
+       zfs_sb_t *zsb = sb->s_fs_info;
+
        /*
         * Data integrity is job one.  We don't want a compromised kernel
         * writing to the storage pool, so we never sync during panic.
         */
-       if (panicstr)
+       if (unlikely(oops_in_progress))
+               return (0);
+
+       /*
+        * Semantically, the only requirement is that the sync be initiated.
+        * The DMU syncs out txgs frequently, so there's nothing to do.
+        */
+       if (!wait)
                return (0);
 
-       if (vfsp != NULL) {
+       if (zsb != NULL) {
                /*
                 * Sync a specific filesystem.
                 */
-               zfsvfs_t *zfsvfs = vfsp->vfs_data;
                dsl_pool_t *dp;
 
-               ZFS_ENTER(zfsvfs);
-               dp = dmu_objset_pool(zfsvfs->z_os);
+               ZFS_ENTER(zsb);
+               dp = dmu_objset_pool(zsb->z_os);
 
-#ifdef HAVE_SHUTDOWN
                /*
                 * If the system is shutting down, then skip any
                 * filesystems which may exist on a suspended pool.
-                *
-                * XXX: This can be implemented using the Linux reboot
-                *      notifiers: {un}register_reboot_notifier().
                 */
-               if (sys_shutdown && spa_suspended(dp->dp_spa)) {
-                       ZFS_EXIT(zfsvfs);
+               if (spa_suspended(dp->dp_spa)) {
+                       ZFS_EXIT(zsb);
                        return (0);
                }
-#endif /* HAVE_SHUTDOWN */
 
-               if (zfsvfs->z_log != NULL)
-                       zil_commit(zfsvfs->z_log, 0);
+               if (zsb->z_log != NULL)
+                       zil_commit(zsb->z_log, 0);
 
-               ZFS_EXIT(zfsvfs);
+               ZFS_EXIT(zsb);
        } else {
                /*
                 * Sync all ZFS filesystems.  This is what happens when you
@@ -119,262 +123,121 @@ zfs_sync(vfs_t *vfsp, short flag, cred_t *cr)
 }
 EXPORT_SYMBOL(zfs_sync);
 
+boolean_t
+zfs_is_readonly(zfs_sb_t *zsb)
+{
+       return (!!(zsb->z_sb->s_flags & MS_RDONLY));
+}
+EXPORT_SYMBOL(zfs_is_readonly);
+
 static void
 atime_changed_cb(void *arg, uint64_t newval)
 {
-       zfsvfs_t *zfsvfs = arg;
-
-       if (newval == TRUE) {
-               zfsvfs->z_atime = TRUE;
-               vfs_clearmntopt(zfsvfs->z_vfs, MNTOPT_NOATIME);
-               vfs_setmntopt(zfsvfs->z_vfs, MNTOPT_ATIME, NULL, 0);
-       } else {
-               zfsvfs->z_atime = FALSE;
-               vfs_clearmntopt(zfsvfs->z_vfs, MNTOPT_ATIME);
-               vfs_setmntopt(zfsvfs->z_vfs, MNTOPT_NOATIME, NULL, 0);
-       }
+       ((zfs_sb_t *)arg)->z_atime = newval;
 }
 
 static void
 xattr_changed_cb(void *arg, uint64_t newval)
 {
-       zfsvfs_t *zfsvfs = arg;
+       zfs_sb_t *zsb = arg;
 
-       if (newval == TRUE) {
-               /* XXX locking on vfs_flag? */
-               zfsvfs->z_vfs->vfs_flag |= VFS_XATTR;
-               vfs_clearmntopt(zfsvfs->z_vfs, MNTOPT_NOXATTR);
-               vfs_setmntopt(zfsvfs->z_vfs, MNTOPT_XATTR, NULL, 0);
+       if (newval == ZFS_XATTR_OFF) {
+               zsb->z_flags &= ~ZSB_XATTR;
        } else {
-               /* XXX locking on vfs_flag? */
-               zfsvfs->z_vfs->vfs_flag &= ~VFS_XATTR;
-               vfs_clearmntopt(zfsvfs->z_vfs, MNTOPT_XATTR);
-               vfs_setmntopt(zfsvfs->z_vfs, MNTOPT_NOXATTR, NULL, 0);
+               zsb->z_flags |= ZSB_XATTR;
+
+               if (newval == ZFS_XATTR_SA)
+                       zsb->z_xattr_sa = B_TRUE;
+               else
+                       zsb->z_xattr_sa = B_FALSE;
        }
 }
 
 static void
 blksz_changed_cb(void *arg, uint64_t newval)
 {
-       zfsvfs_t *zfsvfs = arg;
+       zfs_sb_t *zsb = arg;
 
        if (newval < SPA_MINBLOCKSIZE ||
            newval > SPA_MAXBLOCKSIZE || !ISP2(newval))
                newval = SPA_MAXBLOCKSIZE;
 
-       zfsvfs->z_max_blksz = newval;
-       zfsvfs->z_vfs->vfs_bsize = newval;
+       zsb->z_max_blksz = newval;
 }
 
 static void
 readonly_changed_cb(void *arg, uint64_t newval)
 {
-       zfsvfs_t *zfsvfs = arg;
+       zfs_sb_t *zsb = arg;
+       struct super_block *sb = zsb->z_sb;
 
-       if (newval) {
-               /* XXX locking on vfs_flag? */
-               zfsvfs->z_vfs->vfs_flag |= VFS_RDONLY;
-               vfs_clearmntopt(zfsvfs->z_vfs, MNTOPT_RW);
-               vfs_setmntopt(zfsvfs->z_vfs, MNTOPT_RO, NULL, 0);
-       } else {
-               /* XXX locking on vfs_flag? */
-               zfsvfs->z_vfs->vfs_flag &= ~VFS_RDONLY;
-               vfs_clearmntopt(zfsvfs->z_vfs, MNTOPT_RO);
-               vfs_setmntopt(zfsvfs->z_vfs, MNTOPT_RW, NULL, 0);
-       }
+       if (sb == NULL)
+               return;
+
+       if (newval)
+               sb->s_flags |= MS_RDONLY;
+       else
+               sb->s_flags &= ~MS_RDONLY;
 }
 
 static void
 devices_changed_cb(void *arg, uint64_t newval)
 {
-       zfsvfs_t *zfsvfs = arg;
-
-       if (newval == FALSE) {
-               zfsvfs->z_vfs->vfs_flag |= VFS_NODEVICES;
-               vfs_clearmntopt(zfsvfs->z_vfs, MNTOPT_DEVICES);
-               vfs_setmntopt(zfsvfs->z_vfs, MNTOPT_NODEVICES, NULL, 0);
-       } else {
-               zfsvfs->z_vfs->vfs_flag &= ~VFS_NODEVICES;
-               vfs_clearmntopt(zfsvfs->z_vfs, MNTOPT_NODEVICES);
-               vfs_setmntopt(zfsvfs->z_vfs, MNTOPT_DEVICES, NULL, 0);
-       }
 }
 
 static void
 setuid_changed_cb(void *arg, uint64_t newval)
 {
-       zfsvfs_t *zfsvfs = arg;
-
-       if (newval == FALSE) {
-               zfsvfs->z_vfs->vfs_flag |= VFS_NOSETUID;
-               vfs_clearmntopt(zfsvfs->z_vfs, MNTOPT_SETUID);
-               vfs_setmntopt(zfsvfs->z_vfs, MNTOPT_NOSETUID, NULL, 0);
-       } else {
-               zfsvfs->z_vfs->vfs_flag &= ~VFS_NOSETUID;
-               vfs_clearmntopt(zfsvfs->z_vfs, MNTOPT_NOSETUID);
-               vfs_setmntopt(zfsvfs->z_vfs, MNTOPT_SETUID, NULL, 0);
-       }
 }
 
 static void
 exec_changed_cb(void *arg, uint64_t newval)
 {
-       zfsvfs_t *zfsvfs = arg;
-
-       if (newval == FALSE) {
-               zfsvfs->z_vfs->vfs_flag |= VFS_NOEXEC;
-               vfs_clearmntopt(zfsvfs->z_vfs, MNTOPT_EXEC);
-               vfs_setmntopt(zfsvfs->z_vfs, MNTOPT_NOEXEC, NULL, 0);
-       } else {
-               zfsvfs->z_vfs->vfs_flag &= ~VFS_NOEXEC;
-               vfs_clearmntopt(zfsvfs->z_vfs, MNTOPT_NOEXEC);
-               vfs_setmntopt(zfsvfs->z_vfs, MNTOPT_EXEC, NULL, 0);
-       }
 }
 
-/*
- * The nbmand mount option can be changed at mount time.
- * We can't allow it to be toggled on live file systems or incorrect
- * behavior may be seen from cifs clients
- *
- * This property isn't registered via dsl_prop_register(), but this callback
- * will be called when a file system is first mounted
- */
 static void
 nbmand_changed_cb(void *arg, uint64_t newval)
 {
-       zfsvfs_t *zfsvfs = arg;
-       if (newval == FALSE) {
-               vfs_clearmntopt(zfsvfs->z_vfs, MNTOPT_NBMAND);
-               vfs_setmntopt(zfsvfs->z_vfs, MNTOPT_NONBMAND, NULL, 0);
-       } else {
-               vfs_clearmntopt(zfsvfs->z_vfs, MNTOPT_NONBMAND);
-               vfs_setmntopt(zfsvfs->z_vfs, MNTOPT_NBMAND, NULL, 0);
-       }
+       zfs_sb_t *zsb = arg;
+       struct super_block *sb = zsb->z_sb;
+
+       if (sb == NULL)
+               return;
+
+       if (newval == TRUE)
+               sb->s_flags |= MS_MANDLOCK;
+       else
+               sb->s_flags &= ~MS_MANDLOCK;
 }
 
 static void
 snapdir_changed_cb(void *arg, uint64_t newval)
 {
-       zfsvfs_t *zfsvfs = arg;
-
-       zfsvfs->z_show_ctldir = newval;
+       ((zfs_sb_t *)arg)->z_show_ctldir = newval;
 }
 
 static void
 vscan_changed_cb(void *arg, uint64_t newval)
 {
-       zfsvfs_t *zfsvfs = arg;
-
-       zfsvfs->z_vscan = newval;
+       ((zfs_sb_t *)arg)->z_vscan = newval;
 }
 
 static void
 acl_inherit_changed_cb(void *arg, uint64_t newval)
 {
-       zfsvfs_t *zfsvfs = arg;
-
-       zfsvfs->z_acl_inherit = newval;
+       ((zfs_sb_t *)arg)->z_acl_inherit = newval;
 }
 
 int
-zfs_register_callbacks(vfs_t *vfsp)
+zfs_register_callbacks(zfs_sb_t *zsb)
 {
        struct dsl_dataset *ds = NULL;
-       objset_t *os = NULL;
-       zfsvfs_t *zfsvfs = NULL;
-       uint64_t nbmand;
-       int readonly, do_readonly = B_FALSE;
-       int setuid, do_setuid = B_FALSE;
-       int exec, do_exec = B_FALSE;
-       int devices, do_devices = B_FALSE;
-       int xattr, do_xattr = B_FALSE;
-       int atime, do_atime = B_FALSE;
+       objset_t *os = zsb->z_os;
+       boolean_t do_readonly = B_FALSE;
        int error = 0;
 
-       ASSERT(vfsp);
-       zfsvfs = vfsp->vfs_data;
-       ASSERT(zfsvfs);
-       os = zfsvfs->z_os;
-
-       /*
-        * The act of registering our callbacks will destroy any mount
-        * options we may have.  In order to enable temporary overrides
-        * of mount options, we stash away the current values and
-        * restore them after we register the callbacks.
-        */
-       if (vfs_optionisset(vfsp, MNTOPT_RO, NULL) ||
-           !spa_writeable(dmu_objset_spa(os))) {
-               readonly = B_TRUE;
-               do_readonly = B_TRUE;
-       } else if (vfs_optionisset(vfsp, MNTOPT_RW, NULL)) {
-               readonly = B_FALSE;
+       if (zfs_is_readonly(zsb) || !spa_writeable(dmu_objset_spa(os)))
                do_readonly = B_TRUE;
-       }
-       if (vfs_optionisset(vfsp, MNTOPT_NOSUID, NULL)) {
-               devices = B_FALSE;
-               setuid = B_FALSE;
-               do_devices = B_TRUE;
-               do_setuid = B_TRUE;
-       } else {
-               if (vfs_optionisset(vfsp, MNTOPT_NODEVICES, NULL)) {
-                       devices = B_FALSE;
-                       do_devices = B_TRUE;
-               } else if (vfs_optionisset(vfsp, MNTOPT_DEVICES, NULL)) {
-                       devices = B_TRUE;
-                       do_devices = B_TRUE;
-               }
-
-               if (vfs_optionisset(vfsp, MNTOPT_NOSETUID, NULL)) {
-                       setuid = B_FALSE;
-                       do_setuid = B_TRUE;
-               } else if (vfs_optionisset(vfsp, MNTOPT_SETUID, NULL)) {
-                       setuid = B_TRUE;
-                       do_setuid = B_TRUE;
-               }
-       }
-       if (vfs_optionisset(vfsp, MNTOPT_NOEXEC, NULL)) {
-               exec = B_FALSE;
-               do_exec = B_TRUE;
-       } else if (vfs_optionisset(vfsp, MNTOPT_EXEC, NULL)) {
-               exec = B_TRUE;
-               do_exec = B_TRUE;
-       }
-       if (vfs_optionisset(vfsp, MNTOPT_NOXATTR, NULL)) {
-               xattr = B_FALSE;
-               do_xattr = B_TRUE;
-       } else if (vfs_optionisset(vfsp, MNTOPT_XATTR, NULL)) {
-               xattr = B_TRUE;
-               do_xattr = B_TRUE;
-       }
-       if (vfs_optionisset(vfsp, MNTOPT_NOATIME, NULL)) {
-               atime = B_FALSE;
-               do_atime = B_TRUE;
-       } else if (vfs_optionisset(vfsp, MNTOPT_ATIME, NULL)) {
-               atime = B_TRUE;
-               do_atime = B_TRUE;
-       }
-
-       /*
-        * nbmand is a special property.  It can only be changed at
-        * mount time.
-        *
-        * This is weird, but it is documented to only be changeable
-        * at mount time.
-        */
-       if (vfs_optionisset(vfsp, MNTOPT_NONBMAND, NULL)) {
-               nbmand = B_FALSE;
-       } else if (vfs_optionisset(vfsp, MNTOPT_NBMAND, NULL)) {
-               nbmand = B_TRUE;
-       } else {
-               char osname[MAXNAMELEN];
-
-               dmu_objset_name(os, osname);
-               if ((error = dsl_prop_get_integer(osname, "nbmand", &nbmand,
-                   NULL))) {
-                       return (error);
-               }
-       }
 
        /*
         * Register property callbacks.
@@ -384,45 +247,33 @@ zfs_register_callbacks(vfs_t *vfsp)
         * overboard...
         */
        ds = dmu_objset_ds(os);
-       error = dsl_prop_register(ds, "atime", atime_changed_cb, zfsvfs);
+       error = dsl_prop_register(ds,
+           "atime", atime_changed_cb, zsb);
+       error = error ? error : dsl_prop_register(ds,
+           "xattr", xattr_changed_cb, zsb);
        error = error ? error : dsl_prop_register(ds,
-           "xattr", xattr_changed_cb, zfsvfs);
+           "recordsize", blksz_changed_cb, zsb);
        error = error ? error : dsl_prop_register(ds,
-           "recordsize", blksz_changed_cb, zfsvfs);
+           "readonly", readonly_changed_cb, zsb);
        error = error ? error : dsl_prop_register(ds,
-           "readonly", readonly_changed_cb, zfsvfs);
+           "devices", devices_changed_cb, zsb);
        error = error ? error : dsl_prop_register(ds,
-           "devices", devices_changed_cb, zfsvfs);
+           "setuid", setuid_changed_cb, zsb);
        error = error ? error : dsl_prop_register(ds,
-           "setuid", setuid_changed_cb, zfsvfs);
+           "exec", exec_changed_cb, zsb);
        error = error ? error : dsl_prop_register(ds,
-           "exec", exec_changed_cb, zfsvfs);
+           "snapdir", snapdir_changed_cb, zsb);
        error = error ? error : dsl_prop_register(ds,
-           "snapdir", snapdir_changed_cb, zfsvfs);
+           "aclinherit", acl_inherit_changed_cb, zsb);
        error = error ? error : dsl_prop_register(ds,
-           "aclinherit", acl_inherit_changed_cb, zfsvfs);
+           "vscan", vscan_changed_cb, zsb);
        error = error ? error : dsl_prop_register(ds,
-           "vscan", vscan_changed_cb, zfsvfs);
+           "nbmand", nbmand_changed_cb, zsb);
        if (error)
                goto unregister;
 
-       /*
-        * Invoke our callbacks to restore temporary mount options.
-        */
        if (do_readonly)
-               readonly_changed_cb(zfsvfs, readonly);
-       if (do_setuid)
-               setuid_changed_cb(zfsvfs, setuid);
-       if (do_exec)
-               exec_changed_cb(zfsvfs, exec);
-       if (do_devices)
-               devices_changed_cb(zfsvfs, devices);
-       if (do_xattr)
-               xattr_changed_cb(zfsvfs, xattr);
-       if (do_atime)
-               atime_changed_cb(zfsvfs, atime);
-
-       nbmand_changed_cb(zfsvfs, nbmand);
+               readonly_changed_cb(zsb, B_TRUE);
 
        return (0);
 
@@ -432,28 +283,27 @@ unregister:
         * registered, but this is OK; it will simply return ENOMSG,
         * which we will ignore.
         */
-       (void) dsl_prop_unregister(ds, "atime", atime_changed_cb, zfsvfs);
-       (void) dsl_prop_unregister(ds, "xattr", xattr_changed_cb, zfsvfs);
-       (void) dsl_prop_unregister(ds, "recordsize", blksz_changed_cb, zfsvfs);
-       (void) dsl_prop_unregister(ds, "readonly", readonly_changed_cb, zfsvfs);
-       (void) dsl_prop_unregister(ds, "devices", devices_changed_cb, zfsvfs);
-       (void) dsl_prop_unregister(ds, "setuid", setuid_changed_cb, zfsvfs);
-       (void) dsl_prop_unregister(ds, "exec", exec_changed_cb, zfsvfs);
-       (void) dsl_prop_unregister(ds, "snapdir", snapdir_changed_cb, zfsvfs);
+       (void) dsl_prop_unregister(ds, "atime", atime_changed_cb, zsb);
+       (void) dsl_prop_unregister(ds, "xattr", xattr_changed_cb, zsb);
+       (void) dsl_prop_unregister(ds, "recordsize", blksz_changed_cb, zsb);
+       (void) dsl_prop_unregister(ds, "readonly", readonly_changed_cb, zsb);
+       (void) dsl_prop_unregister(ds, "devices", devices_changed_cb, zsb);
+       (void) dsl_prop_unregister(ds, "setuid", setuid_changed_cb, zsb);
+       (void) dsl_prop_unregister(ds, "exec", exec_changed_cb, zsb);
+       (void) dsl_prop_unregister(ds, "snapdir", snapdir_changed_cb, zsb);
        (void) dsl_prop_unregister(ds, "aclinherit", acl_inherit_changed_cb,
-           zfsvfs);
-       (void) dsl_prop_unregister(ds, "vscan", vscan_changed_cb, zfsvfs);
-       return (error);
+           zsb);
+       (void) dsl_prop_unregister(ds, "vscan", vscan_changed_cb, zsb);
+       (void) dsl_prop_unregister(ds, "nbmand", nbmand_changed_cb, zsb);
 
+       return (error);
 }
 EXPORT_SYMBOL(zfs_register_callbacks);
-#endif /* HAVE_ZPL */
 
 static int
 zfs_space_delta_cb(dmu_object_type_t bonustype, void *data,
     uint64_t *userp, uint64_t *groupp)
 {
-       znode_phys_t *znp = data;
        int error = 0;
 
        /*
@@ -472,20 +322,18 @@ zfs_space_delta_cb(dmu_object_type_t bonustype, void *data,
                return (EEXIST);
 
        if (bonustype == DMU_OT_ZNODE) {
+               znode_phys_t *znp = data;
                *userp = znp->zp_uid;
                *groupp = znp->zp_gid;
        } else {
                int hdrsize;
+               sa_hdr_phys_t *sap = data;
+               sa_hdr_phys_t sa = *sap;
+               boolean_t swap = B_FALSE;
 
                ASSERT(bonustype == DMU_OT_SA);
-               hdrsize = sa_hdrsize(data);
 
-               if (hdrsize != 0) {
-                       *userp = *((uint64_t *)((uintptr_t)data + hdrsize +
-                           SA_UID_OFFSET));
-                       *groupp = *((uint64_t *)((uintptr_t)data + hdrsize +
-                           SA_GID_OFFSET));
-               } else {
+               if (sa.sa_magic == 0) {
                        /*
                         * This should only happen for newly created
                         * files that haven't had the znode data filled
@@ -493,14 +341,32 @@ zfs_space_delta_cb(dmu_object_type_t bonustype, void *data,
                         */
                        *userp = 0;
                        *groupp = 0;
+                       return (0);
+               }
+               if (sa.sa_magic == BSWAP_32(SA_MAGIC)) {
+                       sa.sa_magic = SA_MAGIC;
+                       sa.sa_layout_info = BSWAP_16(sa.sa_layout_info);
+                       swap = B_TRUE;
+               } else {
+                       VERIFY3U(sa.sa_magic, ==, SA_MAGIC);
+               }
+
+               hdrsize = sa_hdrsize(&sa);
+               VERIFY3U(hdrsize, >=, sizeof (sa_hdr_phys_t));
+               *userp = *((uint64_t *)((uintptr_t)data + hdrsize +
+                   SA_UID_OFFSET));
+               *groupp = *((uint64_t *)((uintptr_t)data + hdrsize +
+                   SA_GID_OFFSET));
+               if (swap) {
+                       *userp = BSWAP_64(*userp);
+                       *groupp = BSWAP_64(*groupp);
                }
        }
        return (error);
 }
 
-#ifdef HAVE_ZPL
 static void
-fuidstr_to_sid(zfsvfs_t *zfsvfs, const char *fuidstr,
+fuidstr_to_sid(zfs_sb_t *zsb, const char *fuidstr,
     char *domainbuf, int buflen, uid_t *ridp)
 {
        uint64_t fuid;
@@ -508,7 +374,7 @@ fuidstr_to_sid(zfsvfs_t *zfsvfs, const char *fuidstr,
 
        fuid = strtonum(fuidstr, NULL);
 
-       domain = zfs_fuid_find_by_idx(zfsvfs, FUID_INDEX(fuid));
+       domain = zfs_fuid_find_by_idx(zsb, FUID_INDEX(fuid));
        if (domain)
                (void) strlcpy(domainbuf, domain, buflen);
        else
@@ -517,7 +383,7 @@ fuidstr_to_sid(zfsvfs_t *zfsvfs, const char *fuidstr,
 }
 
 static uint64_t
-zfs_userquota_prop_to_obj(zfsvfs_t *zfsvfs, zfs_userquota_prop_t type)
+zfs_userquota_prop_to_obj(zfs_sb_t *zsb, zfs_userquota_prop_t type)
 {
        switch (type) {
        case ZFS_PROP_USERUSED:
@@ -525,9 +391,9 @@ zfs_userquota_prop_to_obj(zfsvfs_t *zfsvfs, zfs_userquota_prop_t type)
        case ZFS_PROP_GROUPUSED:
                return (DMU_GROUPUSED_OBJECT);
        case ZFS_PROP_USERQUOTA:
-               return (zfsvfs->z_userquota_obj);
+               return (zsb->z_userquota_obj);
        case ZFS_PROP_GROUPQUOTA:
-               return (zfsvfs->z_groupquota_obj);
+               return (zsb->z_groupquota_obj);
        default:
                return (ENOTSUP);
        }
@@ -535,7 +401,7 @@ zfs_userquota_prop_to_obj(zfsvfs_t *zfsvfs, zfs_userquota_prop_t type)
 }
 
 int
-zfs_userspace_many(zfsvfs_t *zfsvfs, zfs_userquota_prop_t type,
+zfs_userspace_many(zfs_sb_t *zsb, zfs_userquota_prop_t type,
     uint64_t *cookiep, void *vbuf, uint64_t *bufsizep)
 {
        int error;
@@ -544,23 +410,23 @@ zfs_userspace_many(zfsvfs_t *zfsvfs, zfs_userquota_prop_t type,
        zfs_useracct_t *buf = vbuf;
        uint64_t obj;
 
-       if (!dmu_objset_userspace_present(zfsvfs->z_os))
+       if (!dmu_objset_userspace_present(zsb->z_os))
                return (ENOTSUP);
 
-       obj = zfs_userquota_prop_to_obj(zfsvfs, type);
+       obj = zfs_userquota_prop_to_obj(zsb, type);
        if (obj == 0) {
                *bufsizep = 0;
                return (0);
        }
 
-       for (zap_cursor_init_serialized(&zc, zfsvfs->z_os, obj, *cookiep);
+       for (zap_cursor_init_serialized(&zc, zsb->z_os, obj, *cookiep);
            (error = zap_cursor_retrieve(&zc, &za)) == 0;
            zap_cursor_advance(&zc)) {
                if ((uintptr_t)buf - (uintptr_t)vbuf + sizeof (zfs_useracct_t) >
                    *bufsizep)
                        break;
 
-               fuidstr_to_sid(zfsvfs, za.za_name,
+               fuidstr_to_sid(zsb, za.za_name,
                    buf->zu_domain, sizeof (buf->zu_domain), &buf->zu_rid);
 
                buf->zu_space = za.za_first_integer;
@@ -581,14 +447,14 @@ EXPORT_SYMBOL(zfs_userspace_many);
  * buf must be big enough (eg, 32 bytes)
  */
 static int
-id_to_fuidstr(zfsvfs_t *zfsvfs, const char *domain, uid_t rid,
+id_to_fuidstr(zfs_sb_t *zsb, const char *domain, uid_t rid,
     char *buf, boolean_t addok)
 {
        uint64_t fuid;
        int domainid = 0;
 
        if (domain && domain[0]) {
-               domainid = zfs_fuid_find_by_domain(zfsvfs, domain, NULL, addok);
+               domainid = zfs_fuid_find_by_domain(zsb, domain, NULL, addok);
                if (domainid == -1)
                        return (ENOENT);
        }
@@ -598,7 +464,7 @@ id_to_fuidstr(zfsvfs_t *zfsvfs, const char *domain, uid_t rid,
 }
 
 int
-zfs_userspace_one(zfsvfs_t *zfsvfs, zfs_userquota_prop_t type,
+zfs_userspace_one(zfs_sb_t *zsb, zfs_userquota_prop_t type,
     const char *domain, uint64_t rid, uint64_t *valp)
 {
        char buf[32];
@@ -607,18 +473,18 @@ zfs_userspace_one(zfsvfs_t *zfsvfs, zfs_userquota_prop_t type,
 
        *valp = 0;
 
-       if (!dmu_objset_userspace_present(zfsvfs->z_os))
+       if (!dmu_objset_userspace_present(zsb->z_os))
                return (ENOTSUP);
 
-       obj = zfs_userquota_prop_to_obj(zfsvfs, type);
+       obj = zfs_userquota_prop_to_obj(zsb, type);
        if (obj == 0)
                return (0);
 
-       err = id_to_fuidstr(zfsvfs, domain, rid, buf, B_FALSE);
+       err = id_to_fuidstr(zsb, domain, rid, buf, B_FALSE);
        if (err)
                return (err);
 
-       err = zap_lookup(zfsvfs->z_os, obj, buf, 8, 1, valp);
+       err = zap_lookup(zsb->z_os, obj, buf, 8, 1, valp);
        if (err == ENOENT)
                err = 0;
        return (err);
@@ -626,7 +492,7 @@ zfs_userspace_one(zfsvfs_t *zfsvfs, zfs_userquota_prop_t type,
 EXPORT_SYMBOL(zfs_userspace_one);
 
 int
-zfs_set_userquota(zfsvfs_t *zfsvfs, zfs_userquota_prop_t type,
+zfs_set_userquota(zfs_sb_t *zsb, zfs_userquota_prop_t type,
     const char *domain, uint64_t rid, uint64_t quota)
 {
        char buf[32];
@@ -638,74 +504,74 @@ zfs_set_userquota(zfsvfs_t *zfsvfs, zfs_userquota_prop_t type,
        if (type != ZFS_PROP_USERQUOTA && type != ZFS_PROP_GROUPQUOTA)
                return (EINVAL);
 
-       if (zfsvfs->z_version < ZPL_VERSION_USERSPACE)
+       if (zsb->z_version < ZPL_VERSION_USERSPACE)
                return (ENOTSUP);
 
-       objp = (type == ZFS_PROP_USERQUOTA) ? &zfsvfs->z_userquota_obj :
-           &zfsvfs->z_groupquota_obj;
+       objp = (type == ZFS_PROP_USERQUOTA) ? &zsb->z_userquota_obj :
+           &zsb->z_groupquota_obj;
 
-       err = id_to_fuidstr(zfsvfs, domain, rid, buf, B_TRUE);
+       err = id_to_fuidstr(zsb, domain, rid, buf, B_TRUE);
        if (err)
                return (err);
-       fuid_dirtied = zfsvfs->z_fuid_dirty;
+       fuid_dirtied = zsb->z_fuid_dirty;
 
-       tx = dmu_tx_create(zfsvfs->z_os);
+       tx = dmu_tx_create(zsb->z_os);
        dmu_tx_hold_zap(tx, *objp ? *objp : DMU_NEW_OBJECT, B_TRUE, NULL);
        if (*objp == 0) {
                dmu_tx_hold_zap(tx, MASTER_NODE_OBJ, B_TRUE,
                    zfs_userquota_prop_prefixes[type]);
        }
        if (fuid_dirtied)
-               zfs_fuid_txhold(zfsvfs, tx);
+               zfs_fuid_txhold(zsb, tx);
        err = dmu_tx_assign(tx, TXG_WAIT);
        if (err) {
                dmu_tx_abort(tx);
                return (err);
        }
 
-       mutex_enter(&zfsvfs->z_lock);
+       mutex_enter(&zsb->z_lock);
        if (*objp == 0) {
-               *objp = zap_create(zfsvfs->z_os, DMU_OT_USERGROUP_QUOTA,
+               *objp = zap_create(zsb->z_os, DMU_OT_USERGROUP_QUOTA,
                    DMU_OT_NONE, 0, tx);
-               VERIFY(0 == zap_add(zfsvfs->z_os, MASTER_NODE_OBJ,
+               VERIFY(0 == zap_add(zsb->z_os, MASTER_NODE_OBJ,
                    zfs_userquota_prop_prefixes[type], 8, 1, objp, tx));
        }
-       mutex_exit(&zfsvfs->z_lock);
+       mutex_exit(&zsb->z_lock);
 
        if (quota == 0) {
-               err = zap_remove(zfsvfs->z_os, *objp, buf, tx);
+               err = zap_remove(zsb->z_os, *objp, buf, tx);
                if (err == ENOENT)
                        err = 0;
        } else {
-               err = zap_update(zfsvfs->z_os, *objp, buf, 8, 1, &quota, tx);
+               err = zap_update(zsb->z_os, *objp, buf, 8, 1, &quota, tx);
        }
        ASSERT(err == 0);
        if (fuid_dirtied)
-               zfs_fuid_sync(zfsvfs, tx);
+               zfs_fuid_sync(zsb, tx);
        dmu_tx_commit(tx);
        return (err);
 }
 EXPORT_SYMBOL(zfs_set_userquota);
 
 boolean_t
-zfs_fuid_overquota(zfsvfs_t *zfsvfs, boolean_t isgroup, uint64_t fuid)
+zfs_fuid_overquota(zfs_sb_t *zsb, boolean_t isgroup, uint64_t fuid)
 {
        char buf[32];
        uint64_t used, quota, usedobj, quotaobj;
        int err;
 
        usedobj = isgroup ? DMU_GROUPUSED_OBJECT : DMU_USERUSED_OBJECT;
-       quotaobj = isgroup ? zfsvfs->z_groupquota_obj : zfsvfs->z_userquota_obj;
+       quotaobj = isgroup ? zsb->z_groupquota_obj : zsb->z_userquota_obj;
 
-       if (quotaobj == 0 || zfsvfs->z_replay)
+       if (quotaobj == 0 || zsb->z_replay)
                return (B_FALSE);
 
        (void) sprintf(buf, "%llx", (longlong_t)fuid);
-       err = zap_lookup(zfsvfs->z_os, quotaobj, buf, 8, 1, &quota);
+       err = zap_lookup(zsb->z_os, quotaobj, buf, 8, 1, &quota);
        if (err != 0)
                return (B_FALSE);
 
-       err = zap_lookup(zfsvfs->z_os, usedobj, buf, 8, 1, &used);
+       err = zap_lookup(zsb->z_os, usedobj, buf, 8, 1, &used);
        if (err != 0)
                return (B_FALSE);
        return (used >= quota);
@@ -713,40 +579,40 @@ zfs_fuid_overquota(zfsvfs_t *zfsvfs, boolean_t isgroup, uint64_t fuid)
 EXPORT_SYMBOL(zfs_fuid_overquota);
 
 boolean_t
-zfs_owner_overquota(zfsvfs_t *zfsvfs, znode_t *zp, boolean_t isgroup)
+zfs_owner_overquota(zfs_sb_t *zsb, znode_t *zp, boolean_t isgroup)
 {
        uint64_t fuid;
        uint64_t quotaobj;
 
-       quotaobj = isgroup ? zfsvfs->z_groupquota_obj : zfsvfs->z_userquota_obj;
+       quotaobj = isgroup ? zsb->z_groupquota_obj : zsb->z_userquota_obj;
 
        fuid = isgroup ? zp->z_gid : zp->z_uid;
 
-       if (quotaobj == 0 || zfsvfs->z_replay)
+       if (quotaobj == 0 || zsb->z_replay)
                return (B_FALSE);
 
-       return (zfs_fuid_overquota(zfsvfs, isgroup, fuid));
+       return (zfs_fuid_overquota(zsb, isgroup, fuid));
 }
 EXPORT_SYMBOL(zfs_owner_overquota);
 
 int
-zfsvfs_create(const char *osname, zfsvfs_t **zfvp)
+zfs_sb_create(const char *osname, zfs_sb_t **zsbp)
 {
        objset_t *os;
-       zfsvfs_t *zfsvfs;
+       zfs_sb_t *zsb;
        uint64_t zval;
        int i, error;
        uint64_t sa_obj;
 
-       zfsvfs = kmem_zalloc(sizeof (zfsvfs_t), KM_SLEEP);
+       zsb = kmem_zalloc(sizeof (zfs_sb_t), KM_SLEEP | KM_NODEBUG);
 
        /*
         * We claim to always be readonly so we can open snapshots;
         * other ZPL code will prevent us from writing to snapshots.
         */
-       error = dmu_objset_own(osname, DMU_OST_ZFS, B_TRUE, zfsvfs, &os);
+       error = dmu_objset_own(osname, DMU_OST_ZFS, B_TRUE, zsb, &os);
        if (error) {
-               kmem_free(zfsvfs, sizeof (zfsvfs_t));
+               kmem_free(zsb, sizeof (zfs_sb_t));
                return (error);
        }
 
@@ -755,53 +621,57 @@ zfsvfs_create(const char *osname, zfsvfs_t **zfvp)
         * Should probably make this a kmem cache, shuffle fields,
         * and just bzero up to z_hold_mtx[].
         */
-       zfsvfs->z_vfs = NULL;
-       zfsvfs->z_parent = zfsvfs;
-       zfsvfs->z_max_blksz = SPA_MAXBLOCKSIZE;
-       zfsvfs->z_show_ctldir = ZFS_SNAPDIR_VISIBLE;
-       zfsvfs->z_os = os;
+       zsb->z_sb = NULL;
+       zsb->z_parent = zsb;
+       zsb->z_max_blksz = SPA_MAXBLOCKSIZE;
+       zsb->z_show_ctldir = ZFS_SNAPDIR_VISIBLE;
+       zsb->z_os = os;
 
-       error = zfs_get_zplprop(os, ZFS_PROP_VERSION, &zfsvfs->z_version);
+       error = zfs_get_zplprop(os, ZFS_PROP_VERSION, &zsb->z_version);
        if (error) {
                goto out;
-       } else if (zfsvfs->z_version >
+       } else if (zsb->z_version >
            zfs_zpl_version_map(spa_version(dmu_objset_spa(os)))) {
                (void) printk("Can't mount a version %lld file system "
                    "on a version %lld pool\n. Pool must be upgraded to mount "
-                   "this file system.", (u_longlong_t)zfsvfs->z_version,
+                   "this file system.", (u_longlong_t)zsb->z_version,
                    (u_longlong_t)spa_version(dmu_objset_spa(os)));
                error = ENOTSUP;
                goto out;
        }
        if ((error = zfs_get_zplprop(os, ZFS_PROP_NORMALIZE, &zval)) != 0)
                goto out;
-       zfsvfs->z_norm = (int)zval;
+       zsb->z_norm = (int)zval;
 
        if ((error = zfs_get_zplprop(os, ZFS_PROP_UTF8ONLY, &zval)) != 0)
                goto out;
-       zfsvfs->z_utf8 = (zval != 0);
+       zsb->z_utf8 = (zval != 0);
 
        if ((error = zfs_get_zplprop(os, ZFS_PROP_CASE, &zval)) != 0)
                goto out;
-       zfsvfs->z_case = (uint_t)zval;
+       zsb->z_case = (uint_t)zval;
 
        /*
         * Fold case on file systems that are always or sometimes case
         * insensitive.
         */
-       if (zfsvfs->z_case == ZFS_CASE_INSENSITIVE ||
-           zfsvfs->z_case == ZFS_CASE_MIXED)
-               zfsvfs->z_norm |= U8_TEXTPREP_TOUPPER;
+       if (zsb->z_case == ZFS_CASE_INSENSITIVE ||
+           zsb->z_case == ZFS_CASE_MIXED)
+               zsb->z_norm |= U8_TEXTPREP_TOUPPER;
 
-       zfsvfs->z_use_fuids = USE_FUIDS(zfsvfs->z_version, zfsvfs->z_os);
-       zfsvfs->z_use_sa = USE_SA(zfsvfs->z_version, zfsvfs->z_os);
+       zsb->z_use_fuids = USE_FUIDS(zsb->z_version, zsb->z_os);
+       zsb->z_use_sa = USE_SA(zsb->z_version, zsb->z_os);
 
-       if (zfsvfs->z_use_sa) {
+       if (zsb->z_use_sa) {
                /* should either have both of these objects or none */
                error = zap_lookup(os, MASTER_NODE_OBJ, ZFS_SA_ATTRS, 8, 1,
                    &sa_obj);
                if (error)
-                       return (error);
+                       goto out;
+
+               error = zfs_get_zplprop(os, ZFS_PROP_XATTR, &zval);
+               if ((error == 0) && (zval == ZFS_XATTR_SA))
+                       zsb->z_xattr_sa = B_TRUE;
        } else {
                /*
                 * Pre SA versions file systems should never touch
@@ -811,83 +681,88 @@ zfsvfs_create(const char *osname, zfsvfs_t **zfvp)
        }
 
        error = sa_setup(os, sa_obj, zfs_attr_table, ZPL_END,
-           &zfsvfs->z_attr_table);
+           &zsb->z_attr_table);
        if (error)
                goto out;
 
-       if (zfsvfs->z_version >= ZPL_VERSION_SA)
+       if (zsb->z_version >= ZPL_VERSION_SA)
                sa_register_update_callback(os, zfs_sa_upgrade);
 
        error = zap_lookup(os, MASTER_NODE_OBJ, ZFS_ROOT_OBJ, 8, 1,
-           &zfsvfs->z_root);
+           &zsb->z_root);
        if (error)
                goto out;
-       ASSERT(zfsvfs->z_root != 0);
+       ASSERT(zsb->z_root != 0);
 
        error = zap_lookup(os, MASTER_NODE_OBJ, ZFS_UNLINKED_SET, 8, 1,
-           &zfsvfs->z_unlinkedobj);
+           &zsb->z_unlinkedobj);
        if (error)
                goto out;
 
        error = zap_lookup(os, MASTER_NODE_OBJ,
            zfs_userquota_prop_prefixes[ZFS_PROP_USERQUOTA],
-           8, 1, &zfsvfs->z_userquota_obj);
+           8, 1, &zsb->z_userquota_obj);
        if (error && error != ENOENT)
                goto out;
 
        error = zap_lookup(os, MASTER_NODE_OBJ,
            zfs_userquota_prop_prefixes[ZFS_PROP_GROUPQUOTA],
-           8, 1, &zfsvfs->z_groupquota_obj);
+           8, 1, &zsb->z_groupquota_obj);
        if (error && error != ENOENT)
                goto out;
 
        error = zap_lookup(os, MASTER_NODE_OBJ, ZFS_FUID_TABLES, 8, 1,
-           &zfsvfs->z_fuid_obj);
+           &zsb->z_fuid_obj);
        if (error && error != ENOENT)
                goto out;
 
        error = zap_lookup(os, MASTER_NODE_OBJ, ZFS_SHARES_DIR, 8, 1,
-           &zfsvfs->z_shares_dir);
+           &zsb->z_shares_dir);
        if (error && error != ENOENT)
                goto out;
 
-       mutex_init(&zfsvfs->z_znodes_lock, NULL, MUTEX_DEFAULT, NULL);
-       mutex_init(&zfsvfs->z_lock, NULL, MUTEX_DEFAULT, NULL);
-       list_create(&zfsvfs->z_all_znodes, sizeof (znode_t),
+       mutex_init(&zsb->z_znodes_lock, NULL, MUTEX_DEFAULT, NULL);
+       mutex_init(&zsb->z_lock, NULL, MUTEX_DEFAULT, NULL);
+       list_create(&zsb->z_all_znodes, sizeof (znode_t),
            offsetof(znode_t, z_link_node));
-       rrw_init(&zfsvfs->z_teardown_lock);
-       rw_init(&zfsvfs->z_teardown_inactive_lock, NULL, RW_DEFAULT, NULL);
-       rw_init(&zfsvfs->z_fuid_lock, NULL, RW_DEFAULT, NULL);
+       rrw_init(&zsb->z_teardown_lock);
+       rw_init(&zsb->z_teardown_inactive_lock, NULL, RW_DEFAULT, NULL);
+       rw_init(&zsb->z_fuid_lock, NULL, RW_DEFAULT, NULL);
        for (i = 0; i != ZFS_OBJ_MTX_SZ; i++)
-               mutex_init(&zfsvfs->z_hold_mtx[i], NULL, MUTEX_DEFAULT, NULL);
+               mutex_init(&zsb->z_hold_mtx[i], NULL, MUTEX_DEFAULT, NULL);
+
+       avl_create(&zsb->z_ctldir_snaps, snapentry_compare,
+           sizeof (zfs_snapentry_t), offsetof(zfs_snapentry_t, se_node));
+       mutex_init(&zsb->z_ctldir_lock, NULL, MUTEX_DEFAULT, NULL);
 
-       *zfvp = zfsvfs;
+       *zsbp = zsb;
        return (0);
 
 out:
-       dmu_objset_disown(os, zfsvfs);
-       *zfvp = NULL;
-       kmem_free(zfsvfs, sizeof (zfsvfs_t));
+       dmu_objset_disown(os, zsb);
+       *zsbp = NULL;
+       kmem_free(zsb, sizeof (zfs_sb_t));
        return (error);
 }
+EXPORT_SYMBOL(zfs_sb_create);
 
-static int
-zfsvfs_setup(zfsvfs_t *zfsvfs, boolean_t mounting)
+int
+zfs_sb_setup(zfs_sb_t *zsb, boolean_t mounting)
 {
        int error;
 
-       error = zfs_register_callbacks(zfsvfs->z_vfs);
+       error = zfs_register_callbacks(zsb);
        if (error)
                return (error);
 
        /*
-        * Set the objset user_ptr to track its zfsvfs.
+        * Set the objset user_ptr to track its zsb.
         */
-       mutex_enter(&zfsvfs->z_os->os_user_ptr_lock);
-       dmu_objset_set_user(zfsvfs->z_os, zfsvfs);
-       mutex_exit(&zfsvfs->z_os->os_user_ptr_lock);
+       mutex_enter(&zsb->z_os->os_user_ptr_lock);
+       dmu_objset_set_user(zsb->z_os, zsb);
+       mutex_exit(&zsb->z_os->os_user_ptr_lock);
 
-       zfsvfs->z_log = zil_open(zfsvfs->z_os, zfs_get_data);
+       zsb->z_log = zil_open(zsb->z_os, zfs_get_data);
 
        /*
         * If we are not mounting (ie: online recv), then we don't
@@ -901,11 +776,11 @@ zfsvfs_setup(zfsvfs_t *zfsvfs, boolean_t mounting)
                 * During replay we remove the read only flag to
                 * allow replays to succeed.
                 */
-               readonly = zfsvfs->z_vfs->vfs_flag & VFS_RDONLY;
+               readonly = zfs_is_readonly(zsb);
                if (readonly != 0)
-                       zfsvfs->z_vfs->vfs_flag &= ~VFS_RDONLY;
+                       readonly_changed_cb(zsb, B_FALSE);
                else
-                       zfs_unlinked_drain(zfsvfs);
+                       zfs_unlinked_drain(zsb);
 
                /*
                 * Parse and replay the intent log.
@@ -934,153 +809,58 @@ zfsvfs_setup(zfsvfs_t *zfsvfs, boolean_t mounting)
                 * allocated and in the unlinked set, and there is an
                 * intent log record saying to allocate it.
                 */
-               if (spa_writeable(dmu_objset_spa(zfsvfs->z_os))) {
+               if (spa_writeable(dmu_objset_spa(zsb->z_os))) {
                        if (zil_replay_disable) {
-                               zil_destroy(zfsvfs->z_log, B_FALSE);
+                               zil_destroy(zsb->z_log, B_FALSE);
                        } else {
-                               zfsvfs->z_replay = B_TRUE;
-                               zil_replay(zfsvfs->z_os, zfsvfs,
+                               zsb->z_replay = B_TRUE;
+                               zil_replay(zsb->z_os, zsb,
                                    zfs_replay_vector);
-                               zfsvfs->z_replay = B_FALSE;
+                               zsb->z_replay = B_FALSE;
                        }
                }
-               zfsvfs->z_vfs->vfs_flag |= readonly; /* restore readonly bit */
+
+               /* restore readonly bit */
+               if (readonly != 0)
+                       readonly_changed_cb(zsb, B_TRUE);
        }
 
        return (0);
 }
+EXPORT_SYMBOL(zfs_sb_setup);
 
 void
-zfsvfs_free(zfsvfs_t *zfsvfs)
+zfs_sb_free(zfs_sb_t *zsb)
 {
        int i;
-       extern krwlock_t zfsvfs_lock; /* in zfs_znode.c */
-
-       /*
-        * This is a barrier to prevent the filesystem from going away in
-        * zfs_znode_move() until we can safely ensure that the filesystem is
-        * not unmounted. We consider the filesystem valid before the barrier
-        * and invalid after the barrier.
-        */
-       rw_enter(&zfsvfs_lock, RW_READER);
-       rw_exit(&zfsvfs_lock);
 
-       zfs_fuid_destroy(zfsvfs);
+       zfs_fuid_destroy(zsb);
 
-       mutex_destroy(&zfsvfs->z_znodes_lock);
-       mutex_destroy(&zfsvfs->z_lock);
-       list_destroy(&zfsvfs->z_all_znodes);
-       rrw_destroy(&zfsvfs->z_teardown_lock);
-       rw_destroy(&zfsvfs->z_teardown_inactive_lock);
-       rw_destroy(&zfsvfs->z_fuid_lock);
+       mutex_destroy(&zsb->z_znodes_lock);
+       mutex_destroy(&zsb->z_lock);
+       list_destroy(&zsb->z_all_znodes);
+       rrw_destroy(&zsb->z_teardown_lock);
+       rw_destroy(&zsb->z_teardown_inactive_lock);
+       rw_destroy(&zsb->z_fuid_lock);
        for (i = 0; i != ZFS_OBJ_MTX_SZ; i++)
-               mutex_destroy(&zfsvfs->z_hold_mtx[i]);
-       kmem_free(zfsvfs, sizeof (zfsvfs_t));
+               mutex_destroy(&zsb->z_hold_mtx[i]);
+       mutex_destroy(&zsb->z_ctldir_lock);
+       avl_destroy(&zsb->z_ctldir_snaps);
+       kmem_free(zsb, sizeof (zfs_sb_t));
 }
+EXPORT_SYMBOL(zfs_sb_free);
 
 static void
-zfs_set_fuid_feature(zfsvfs_t *zfsvfs)
+zfs_set_fuid_feature(zfs_sb_t *zsb)
 {
-       zfsvfs->z_use_fuids = USE_FUIDS(zfsvfs->z_version, zfsvfs->z_os);
-       if (zfsvfs->z_use_fuids && zfsvfs->z_vfs) {
-               vfs_set_feature(zfsvfs->z_vfs, VFSFT_XVATTR);
-               vfs_set_feature(zfsvfs->z_vfs, VFSFT_SYSATTR_VIEWS);
-               vfs_set_feature(zfsvfs->z_vfs, VFSFT_ACEMASKONACCESS);
-               vfs_set_feature(zfsvfs->z_vfs, VFSFT_ACLONCREATE);
-               vfs_set_feature(zfsvfs->z_vfs, VFSFT_ACCESS_FILTER);
-               vfs_set_feature(zfsvfs->z_vfs, VFSFT_REPARSE);
-       }
-       zfsvfs->z_use_sa = USE_SA(zfsvfs->z_version, zfsvfs->z_os);
-}
-
-int
-zfs_domount(vfs_t *vfsp, char *osname)
-{
-       uint64_t recordsize, fsid_guid;
-       int error = 0;
-       zfsvfs_t *zfsvfs;
-
-       ASSERT(vfsp);
-       ASSERT(osname);
-
-       error = zfsvfs_create(osname, &zfsvfs);
-       if (error)
-               return (error);
-       zfsvfs->z_vfs = vfsp;
-
-       /* Initialize the generic filesystem structure. */
-       vfsp->vfs_bcount = 0;
-       vfsp->vfs_data = NULL;
-
-       if ((error = dsl_prop_get_integer(osname, "recordsize",
-           &recordsize, NULL)))
-               goto out;
-
-       vfsp->vfs_bsize = recordsize;
-       vfsp->vfs_flag |= VFS_NOTRUNC;
-       vfsp->vfs_data = zfsvfs;
-
-       /*
-        * The fsid is 64 bits, composed of an 8-bit fs type, which
-        * separates our fsid from any other filesystem types, and a
-        * 56-bit objset unique ID.  The objset unique ID is unique to
-        * all objsets open on this system, provided by unique_create().
-        * The 8-bit fs type must be put in the low bits of fsid[1]
-        * because that's where other Solaris filesystems put it.
-        */
-       fsid_guid = dmu_objset_fsid_guid(zfsvfs->z_os);
-       ASSERT((fsid_guid & ~((1ULL<<56)-1)) == 0);
-       vfsp->vfs_fsid.val[0] = fsid_guid;
-       vfsp->vfs_fsid.val[1] = ((fsid_guid>>32) << 8);
-
-       /*
-        * Set features for file system.
-        */
-       zfs_set_fuid_feature(zfsvfs);
-       if (zfsvfs->z_case == ZFS_CASE_INSENSITIVE) {
-               vfs_set_feature(vfsp, VFSFT_DIRENTFLAGS);
-               vfs_set_feature(vfsp, VFSFT_CASEINSENSITIVE);
-               vfs_set_feature(vfsp, VFSFT_NOCASESENSITIVE);
-       } else if (zfsvfs->z_case == ZFS_CASE_MIXED) {
-               vfs_set_feature(vfsp, VFSFT_DIRENTFLAGS);
-               vfs_set_feature(vfsp, VFSFT_CASEINSENSITIVE);
-       }
-       vfs_set_feature(vfsp, VFSFT_ZEROCOPY_SUPPORTED);
-
-       if (dmu_objset_is_snapshot(zfsvfs->z_os)) {
-               uint64_t pval;
-
-               atime_changed_cb(zfsvfs, B_FALSE);
-               readonly_changed_cb(zfsvfs, B_TRUE);
-               if ((error = dsl_prop_get_integer(osname,"xattr",&pval,NULL)))
-                       goto out;
-               xattr_changed_cb(zfsvfs, pval);
-               zfsvfs->z_issnap = B_TRUE;
-               zfsvfs->z_os->os_sync = ZFS_SYNC_DISABLED;
-
-               mutex_enter(&zfsvfs->z_os->os_user_ptr_lock);
-               dmu_objset_set_user(zfsvfs->z_os, zfsvfs);
-               mutex_exit(&zfsvfs->z_os->os_user_ptr_lock);
-       } else {
-               error = zfsvfs_setup(zfsvfs, B_TRUE);
-       }
-
-       if (!zfsvfs->z_issnap)
-               zfsctl_create(zfsvfs);
-out:
-       if (error) {
-               dmu_objset_disown(zfsvfs->z_os, zfsvfs);
-               zfsvfs_free(zfsvfs);
-       }
-
-       return (error);
+       zsb->z_use_fuids = USE_FUIDS(zsb->z_version, zsb->z_os);
+       zsb->z_use_sa = USE_SA(zsb->z_version, zsb->z_os);
 }
-EXPORT_SYMBOL(zfs_domount);
 
 void
-zfs_unregister_callbacks(zfsvfs_t *zfsvfs)
+zfs_unregister_callbacks(zfs_sb_t *zsb)
 {
-       objset_t *os = zfsvfs->z_os;
+       objset_t *os = zsb->z_os;
        struct dsl_dataset *ds;
 
        /*
@@ -1089,34 +869,37 @@ zfs_unregister_callbacks(zfsvfs_t *zfsvfs)
        if (!dmu_objset_is_snapshot(os)) {
                ds = dmu_objset_ds(os);
                VERIFY(dsl_prop_unregister(ds, "atime", atime_changed_cb,
-                   zfsvfs) == 0);
+                   zsb) == 0);
 
                VERIFY(dsl_prop_unregister(ds, "xattr", xattr_changed_cb,
-                   zfsvfs) == 0);
+                   zsb) == 0);
 
                VERIFY(dsl_prop_unregister(ds, "recordsize", blksz_changed_cb,
-                   zfsvfs) == 0);
+                   zsb) == 0);
 
                VERIFY(dsl_prop_unregister(ds, "readonly", readonly_changed_cb,
-                   zfsvfs) == 0);
+                   zsb) == 0);
 
                VERIFY(dsl_prop_unregister(ds, "devices", devices_changed_cb,
-                   zfsvfs) == 0);
+                   zsb) == 0);
 
                VERIFY(dsl_prop_unregister(ds, "setuid", setuid_changed_cb,
-                   zfsvfs) == 0);
+                   zsb) == 0);
 
                VERIFY(dsl_prop_unregister(ds, "exec", exec_changed_cb,
-                   zfsvfs) == 0);
+                   zsb) == 0);
 
                VERIFY(dsl_prop_unregister(ds, "snapdir", snapdir_changed_cb,
-                   zfsvfs) == 0);
+                   zsb) == 0);
 
                VERIFY(dsl_prop_unregister(ds, "aclinherit",
-                   acl_inherit_changed_cb, zfsvfs) == 0);
+                   acl_inherit_changed_cb, zsb) == 0);
 
                VERIFY(dsl_prop_unregister(ds, "vscan",
-                   vscan_changed_cb, zfsvfs) == 0);
+                   vscan_changed_cb, zsb) == 0);
+
+               VERIFY(dsl_prop_unregister(ds, "nbmand",
+                   nbmand_changed_cb, zsb) == 0);
        }
 }
 EXPORT_SYMBOL(zfs_unregister_callbacks);
@@ -1149,36 +932,44 @@ zfs_check_global_label(const char *dsname, const char *hexsl)
        }
        return (EACCES);
 }
+EXPORT_SYMBOL(zfs_check_global_label);
 #endif /* HAVE_MLSLABEL */
 
 int
-zfs_statvfs(vfs_t *vfsp, struct statvfs64 *statp)
+zfs_statvfs(struct dentry *dentry, struct kstatfs *statp)
 {
-       zfsvfs_t *zfsvfs = vfsp->vfs_data;
-       dev32_t d32;
+       zfs_sb_t *zsb = dentry->d_sb->s_fs_info;
        uint64_t refdbytes, availbytes, usedobjs, availobjs;
+       uint64_t fsid;
+       uint32_t bshift;
 
-       ZFS_ENTER(zfsvfs);
+       ZFS_ENTER(zsb);
 
-       dmu_objset_space(zfsvfs->z_os,
+       dmu_objset_space(zsb->z_os,
            &refdbytes, &availbytes, &usedobjs, &availobjs);
 
+       fsid = dmu_objset_fsid_guid(zsb->z_os);
        /*
-        * The underlying storage pool actually uses multiple block sizes.
-        * We report the fragsize as the smallest block size we support,
-        * and we report our blocksize as the filesystem's maximum blocksize.
+        * The underlying storage pool actually uses multiple block
+        * size.  Under Solaris frsize (fragment size) is reported as
+        * the smallest block size we support, and bsize (block size)
+        * as the filesystem's maximum block size.  Unfortunately,
+        * under Linux the fragment size and block size are often used
+        * interchangeably.  Thus we are forced to report both of them
+        * as the filesystem's maximum block size.
         */
-       statp->f_frsize = 1UL << SPA_MINBLOCKSHIFT;
-       statp->f_bsize = zfsvfs->z_max_blksz;
+       statp->f_frsize = zsb->z_max_blksz;
+       statp->f_bsize = zsb->z_max_blksz;
+       bshift = fls(statp->f_bsize) - 1;
 
        /*
-        * The following report "total" blocks of various kinds in the
-        * file system, but reported in terms of f_frsize - the
-        * "fragment" size.
+        * The following report "total" blocks of various kinds in
+        * the file system, but reported in terms of f_bsize - the
+        * "preferred" size.
         */
 
-       statp->f_blocks = (refdbytes + availbytes) >> SPA_MINBLOCKSHIFT;
-       statp->f_bfree = availbytes >> SPA_MINBLOCKSHIFT;
+       statp->f_blocks = (refdbytes + availbytes) >> bshift;
+       statp->f_bfree = availbytes >> bshift;
        statp->f_bavail = statp->f_bfree; /* no root reservation */
 
        /*
@@ -1189,208 +980,310 @@ zfs_statvfs(vfs_t *vfsp, struct statvfs64 *statp)
         * For f_ffree, report the smaller of the number of object available
         * and the number of blocks (each object will take at least a block).
         */
-       statp->f_ffree = MIN(availobjs, statp->f_bfree);
-       statp->f_favail = statp->f_ffree;       /* no "root reservation" */
+       statp->f_ffree = MIN(availobjs, availbytes >> DNODE_SHIFT);
        statp->f_files = statp->f_ffree + usedobjs;
-
-       (void) cmpldev(&d32, vfsp->vfs_dev);
-       statp->f_fsid = d32;
+       statp->f_fsid.val[0] = (uint32_t)fsid;
+       statp->f_fsid.val[1] = (uint32_t)(fsid >> 32);
+       statp->f_type = ZFS_SUPER_MAGIC;
+       statp->f_namelen = ZFS_MAXNAMELEN;
 
        /*
-        * We're a zfs filesystem.
-        */
-       (void) strcpy(statp->f_basetype, MNTTYPE_ZFS);
-
-       statp->f_flag = vf_to_stf(vfsp->vfs_flag);
-
-       statp->f_namemax = ZFS_MAXNAMELEN;
-
-       /*
-        * We have all of 32 characters to stuff a string here.
+        * We have all of 40 characters to stuff a string here.
         * Is there anything useful we could/should provide?
         */
-       bzero(statp->f_fstr, sizeof (statp->f_fstr));
+       bzero(statp->f_spare, sizeof (statp->f_spare));
 
-       ZFS_EXIT(zfsvfs);
+       ZFS_EXIT(zsb);
        return (0);
 }
 EXPORT_SYMBOL(zfs_statvfs);
 
 int
-zfs_root(vfs_t *vfsp, vnode_t **vpp)
+zfs_root(zfs_sb_t *zsb, struct inode **ipp)
 {
-       zfsvfs_t *zfsvfs = vfsp->vfs_data;
        znode_t *rootzp;
        int error;
 
-       ZFS_ENTER(zfsvfs);
+       ZFS_ENTER(zsb);
 
-       error = zfs_zget(zfsvfs, zfsvfs->z_root, &rootzp);
+       error = zfs_zget(zsb, zsb->z_root, &rootzp);
        if (error == 0)
-               *vpp = ZTOV(rootzp);
+               *ipp = ZTOI(rootzp);
 
-       ZFS_EXIT(zfsvfs);
+       ZFS_EXIT(zsb);
        return (error);
 }
 EXPORT_SYMBOL(zfs_root);
 
+#ifdef HAVE_SHRINK
+int
+zfs_sb_prune(struct super_block *sb, unsigned long nr_to_scan, int *objects)
+{
+       zfs_sb_t *zsb = sb->s_fs_info;
+       struct shrinker *shrinker = &sb->s_shrink;
+       struct shrink_control sc = {
+               .nr_to_scan = nr_to_scan,
+               .gfp_mask = GFP_KERNEL,
+       };
+
+       ZFS_ENTER(zsb);
+       *objects = (*shrinker->shrink)(shrinker, &sc);
+       ZFS_EXIT(zsb);
+
+       return (0);
+}
+EXPORT_SYMBOL(zfs_sb_prune);
+#endif /* HAVE_SHRINK */
+
 /*
- * Teardown the zfsvfs::z_os.
+ * Teardown the zfs_sb_t.
  *
  * Note, if 'unmounting' if FALSE, we return with the 'z_teardown_lock'
  * and 'z_teardown_inactive_lock' held.
  */
-static int
-zfsvfs_teardown(zfsvfs_t *zfsvfs, boolean_t unmounting)
+int
+zfs_sb_teardown(zfs_sb_t *zsb, boolean_t unmounting)
 {
        znode_t *zp;
 
-       rrw_enter(&zfsvfs->z_teardown_lock, RW_WRITER, FTAG);
+       rrw_enter(&zsb->z_teardown_lock, RW_WRITER, FTAG);
 
        if (!unmounting) {
                /*
-                * We purge the parent filesystem's vfsp as the parent
-                * filesystem and all of its snapshots have their vnode's
-                * v_vfsp set to the parent's filesystem's vfsp.  Note,
-                * 'z_parent' is self referential for non-snapshots.
+                * We purge the parent filesystem's super block as the
+                * parent filesystem and all of its snapshots have their
+                * inode's super block set to the parent's filesystem's
+                * super block.  Note,  'z_parent' is self referential
+                * for non-snapshots.
                 */
-               (void) dnlc_purge_vfsp(zfsvfs->z_parent->z_vfs, 0);
+               shrink_dcache_sb(zsb->z_parent->z_sb);
        }
 
        /*
+        * If someone has not already unmounted this file system,
+        * drain the iput_taskq to ensure all active references to the
+        * zfs_sb_t have been handled only then can it be safely destroyed.
+        */
+       if (zsb->z_os)
+               taskq_wait(dsl_pool_iput_taskq(dmu_objset_pool(zsb->z_os)));
+
+       /*
         * Close the zil. NB: Can't close the zil while zfs_inactive
         * threads are blocked as zil_close can call zfs_inactive.
         */
-       if (zfsvfs->z_log) {
-               zil_close(zfsvfs->z_log);
-               zfsvfs->z_log = NULL;
+       if (zsb->z_log) {
+               zil_close(zsb->z_log);
+               zsb->z_log = NULL;
        }
 
-       rw_enter(&zfsvfs->z_teardown_inactive_lock, RW_WRITER);
+       rw_enter(&zsb->z_teardown_inactive_lock, RW_WRITER);
 
        /*
         * If we are not unmounting (ie: online recv) and someone already
         * unmounted this file system while we were doing the switcheroo,
         * or a reopen of z_os failed then just bail out now.
         */
-       if (!unmounting && (zfsvfs->z_unmounted || zfsvfs->z_os == NULL)) {
-               rw_exit(&zfsvfs->z_teardown_inactive_lock);
-               rrw_exit(&zfsvfs->z_teardown_lock, FTAG);
+       if (!unmounting && (zsb->z_unmounted || zsb->z_os == NULL)) {
+               rw_exit(&zsb->z_teardown_inactive_lock);
+               rrw_exit(&zsb->z_teardown_lock, FTAG);
                return (EIO);
        }
 
        /*
-        * At this point there are no vops active, and any new vops will
-        * fail with EIO since we have z_teardown_lock for writer (only
-        * relavent for forced unmount).
+        * At this point there are no VFS ops active, and any new VFS ops
+        * will fail with EIO since we have z_teardown_lock for writer (only
+        * relevant for forced unmount).
         *
         * Release all holds on dbufs.
         */
-       mutex_enter(&zfsvfs->z_znodes_lock);
-       for (zp = list_head(&zfsvfs->z_all_znodes); zp != NULL;
-           zp = list_next(&zfsvfs->z_all_znodes, zp))
+       mutex_enter(&zsb->z_znodes_lock);
+       for (zp = list_head(&zsb->z_all_znodes); zp != NULL;
+           zp = list_next(&zsb->z_all_znodes, zp)) {
                if (zp->z_sa_hdl) {
-                       ASSERT(ZTOV(zp)->v_count > 0);
+                       ASSERT(atomic_read(&ZTOI(zp)->i_count) > 0);
                        zfs_znode_dmu_fini(zp);
                }
-       mutex_exit(&zfsvfs->z_znodes_lock);
+       }
+       mutex_exit(&zsb->z_znodes_lock);
 
        /*
-        * If we are unmounting, set the unmounted flag and let new vops
+        * If we are unmounting, set the unmounted flag and let new VFS ops
         * unblock.  zfs_inactive will have the unmounted behavior, and all
-        * other vops will fail with EIO.
+        * other VFS ops will fail with EIO.
         */
        if (unmounting) {
-               zfsvfs->z_unmounted = B_TRUE;
-               rrw_exit(&zfsvfs->z_teardown_lock, FTAG);
-               rw_exit(&zfsvfs->z_teardown_inactive_lock);
+               zsb->z_unmounted = B_TRUE;
+               rrw_exit(&zsb->z_teardown_lock, FTAG);
+               rw_exit(&zsb->z_teardown_inactive_lock);
        }
 
        /*
         * z_os will be NULL if there was an error in attempting to reopen
-        * zfsvfs, so just return as the properties had already been
+        * zsb, so just return as the properties had already been
+        *
         * unregistered and cached data had been evicted before.
         */
-       if (zfsvfs->z_os == NULL)
+       if (zsb->z_os == NULL)
                return (0);
 
        /*
         * Unregister properties.
         */
-       zfs_unregister_callbacks(zfsvfs);
+       zfs_unregister_callbacks(zsb);
 
        /*
         * Evict cached data
         */
-       if (dmu_objset_is_dirty_anywhere(zfsvfs->z_os))
-               if (!(zfsvfs->z_vfs->vfs_flag & VFS_RDONLY))
-                       txg_wait_synced(dmu_objset_pool(zfsvfs->z_os), 0);
-       (void) dmu_objset_evict_dbufs(zfsvfs->z_os);
+       if (dsl_dataset_is_dirty(dmu_objset_ds(zsb->z_os)) &&
+           !zfs_is_readonly(zsb))
+               txg_wait_synced(dmu_objset_pool(zsb->z_os), 0);
+       (void) dmu_objset_evict_dbufs(zsb->z_os);
 
        return (0);
 }
+EXPORT_SYMBOL(zfs_sb_teardown);
+
+#if defined(HAVE_BDI) && !defined(HAVE_BDI_SETUP_AND_REGISTER)
+atomic_long_t zfs_bdi_seq = ATOMIC_LONG_INIT(0);
+#endif /* HAVE_BDI && !HAVE_BDI_SETUP_AND_REGISTER */
 
-/*ARGSUSED*/
 int
-zfs_umount(vfs_t *vfsp, int fflag, cred_t *cr)
+zfs_domount(struct super_block *sb, void *data, int silent)
 {
-       zfsvfs_t *zfsvfs = vfsp->vfs_data;
-       objset_t *os;
-       int ret;
+       zpl_mount_data_t *zmd = data;
+       const char *osname = zmd->z_osname;
+       zfs_sb_t *zsb;
+       struct inode *root_inode;
+       uint64_t recordsize;
+       int error;
 
-       ret = secpolicy_fs_unmount(cr, vfsp);
-       if (ret) {
-               if (dsl_deleg_access((char *)refstr_value(vfsp->vfs_resource),
-                   ZFS_DELEG_PERM_MOUNT, cr))
-                       return (ret);
-       }
+       error = zfs_sb_create(osname, &zsb);
+       if (error)
+               return (error);
 
-       /*
-        * We purge the parent filesystem's vfsp as the parent filesystem
-        * and all of its snapshots have their vnode's v_vfsp set to the
-        * parent's filesystem's vfsp.  Note, 'z_parent' is self
-        * referential for non-snapshots.
-        */
-       (void) dnlc_purge_vfsp(zfsvfs->z_parent->z_vfs, 0);
+       if ((error = dsl_prop_get_integer(osname, "recordsize",
+           &recordsize, NULL)))
+               goto out;
+
+       zsb->z_sb = sb;
+       sb->s_fs_info = zsb;
+       sb->s_magic = ZFS_SUPER_MAGIC;
+       sb->s_maxbytes = MAX_LFS_FILESIZE;
+       sb->s_time_gran = 1;
+       sb->s_blocksize = recordsize;
+       sb->s_blocksize_bits = ilog2(recordsize);
 
+#ifdef HAVE_BDI
        /*
-        * Unmount any snapshots mounted under .zfs before unmounting the
-        * dataset itself.
+        * 2.6.32 API change,
+        * Added backing_device_info (BDI) per super block interfaces.  A BDI
+        * must be configured when using a non-device backed filesystem for
+        * proper writeback.  This is not required for older pdflush kernels.
+        *
+        * NOTE: Linux read-ahead is disabled in favor of zfs read-ahead.
         */
-       if (zfsvfs->z_ctldir != NULL &&
-           (ret = zfsctl_umount_snapshots(vfsp, fflag, cr)) != 0) {
-               return (ret);
+       zsb->z_bdi.ra_pages = 0;
+       sb->s_bdi = &zsb->z_bdi;
+
+       error = -bdi_setup_and_register(&zsb->z_bdi, "zfs", BDI_CAP_MAP_COPY);
+       if (error)
+               goto out;
+#endif /* HAVE_BDI */
+
+       /* Set callback operations for the file system. */
+       sb->s_op = &zpl_super_operations;
+       sb->s_xattr = zpl_xattr_handlers;
+       sb->s_export_op = &zpl_export_operations;
+#ifdef HAVE_S_D_OP
+       sb->s_d_op = &zpl_dentry_operations;
+#endif /* HAVE_S_D_OP */
+
+       /* Set features for file system. */
+       zfs_set_fuid_feature(zsb);
+
+       if (dmu_objset_is_snapshot(zsb->z_os)) {
+               uint64_t pval;
+
+               atime_changed_cb(zsb, B_FALSE);
+               readonly_changed_cb(zsb, B_TRUE);
+               if ((error = dsl_prop_get_integer(osname,"xattr",&pval,NULL)))
+                       goto out;
+               xattr_changed_cb(zsb, pval);
+               zsb->z_issnap = B_TRUE;
+               zsb->z_os->os_sync = ZFS_SYNC_DISABLED;
+
+               mutex_enter(&zsb->z_os->os_user_ptr_lock);
+               dmu_objset_set_user(zsb->z_os, zsb);
+               mutex_exit(&zsb->z_os->os_user_ptr_lock);
+       } else {
+               error = zfs_sb_setup(zsb, B_TRUE);
        }
 
-       if (!(fflag & MS_FORCE)) {
-               /*
-                * Check the number of active vnodes in the file system.
-                * Our count is maintained in the vfs structure, but the
-                * number is off by 1 to indicate a hold on the vfs
-                * structure itself.
-                *
-                * The '.zfs' directory maintains a reference of its
-                * own, and any active references underneath are
-                * reflected in the vnode count.
-                */
-               if (zfsvfs->z_ctldir == NULL) {
-                       if (vfsp->vfs_count > 1)
-                               return (EBUSY);
-               } else {
-                       if (vfsp->vfs_count > 2 ||
-                           zfsvfs->z_ctldir->v_count > 1)
-                               return (EBUSY);
-               }
+       /* Allocate a root inode for the filesystem. */
+       error = zfs_root(zsb, &root_inode);
+       if (error) {
+               (void) zfs_umount(sb);
+               goto out;
        }
 
-       vfsp->vfs_flag |= VFS_UNMOUNTED;
+       /* Allocate a root dentry for the filesystem */
+       sb->s_root = d_make_root(root_inode);
+       if (sb->s_root == NULL) {
+               (void) zfs_umount(sb);
+               error = ENOMEM;
+               goto out;
+       }
+
+       if (!zsb->z_issnap)
+               zfsctl_create(zsb);
+out:
+       if (error) {
+               dmu_objset_disown(zsb->z_os, zsb);
+               zfs_sb_free(zsb);
+       }
+
+       return (error);
+}
+EXPORT_SYMBOL(zfs_domount);
+
+/*
+ * Called when an unmount is requested and certain sanity checks have
+ * already passed.  At this point no dentries or inodes have been reclaimed
+ * from their respective caches.  We drop the extra reference on the .zfs
+ * control directory to allow everything to be reclaimed.  All snapshots
+ * must already have been unmounted to reach this point.
+ */
+void
+zfs_preumount(struct super_block *sb)
+{
+       zfs_sb_t *zsb = sb->s_fs_info;
+
+       if (zsb != NULL && zsb->z_ctldir != NULL)
+               zfsctl_destroy(zsb);
+}
+EXPORT_SYMBOL(zfs_preumount);
+
+/*
+ * Called once all other unmount released tear down has occurred.
+ * It is our responsibility to release any remaining infrastructure.
+ */
+/*ARGSUSED*/
+int
+zfs_umount(struct super_block *sb)
+{
+       zfs_sb_t *zsb = sb->s_fs_info;
+       objset_t *os;
+
+       VERIFY(zfs_sb_teardown(zsb, B_TRUE) == 0);
+       os = zsb->z_os;
 
-       VERIFY(zfsvfs_teardown(zfsvfs, B_TRUE) == 0);
-       os = zfsvfs->z_os;
+#ifdef HAVE_BDI
+       bdi_destroy(sb->s_bdi);
+#endif /* HAVE_BDI */
 
        /*
         * z_os will be NULL if there was an error in
-        * attempting to reopen zfsvfs.
+        * attempting to reopen zsb.
         */
        if (os != NULL) {
                /*
@@ -1403,33 +1296,39 @@ zfs_umount(vfs_t *vfsp, int fflag, cred_t *cr)
                /*
                 * Finally release the objset
                 */
-               dmu_objset_disown(os, zfsvfs);
+               dmu_objset_disown(os, zsb);
        }
 
+       zfs_sb_free(zsb);
+       return (0);
+}
+EXPORT_SYMBOL(zfs_umount);
+
+int
+zfs_remount(struct super_block *sb, int *flags, char *data)
+{
        /*
-        * We can now safely destroy the '.zfs' directory node.
+        * All namespace flags (MNT_*) and super block flags (MS_*) will
+        * be handled by the Linux VFS.  Only handle custom options here.
         */
-       if (zfsvfs->z_ctldir != NULL)
-               zfsctl_destroy(zfsvfs);
-
        return (0);
 }
-EXPORT_SYMBOL(zfs_umount);
+EXPORT_SYMBOL(zfs_remount);
 
 int
-zfs_vget(vfs_t *vfsp, vnode_t **vpp, fid_t *fidp)
+zfs_vget(struct super_block *sb, struct inode **ipp, fid_t *fidp)
 {
-       zfsvfs_t        *zfsvfs = vfsp->vfs_data;
+       zfs_sb_t        *zsb = sb->s_fs_info;
        znode_t         *zp;
        uint64_t        object = 0;
        uint64_t        fid_gen = 0;
        uint64_t        gen_mask;
        uint64_t        zp_gen;
-       int             i, err;
+       int             i, err;
 
-       *vpp = NULL;
+       *ipp = NULL;
 
-       ZFS_ENTER(zfsvfs);
+       ZFS_ENTER(zsb);
 
        if (fidp->fid_len == LONG_FID_LEN) {
                zfid_long_t     *zlfid = (zfid_long_t *)fidp;
@@ -1442,12 +1341,13 @@ zfs_vget(vfs_t *vfsp, vnode_t **vpp, fid_t *fidp)
                for (i = 0; i < sizeof (zlfid->zf_setgen); i++)
                        setgen |= ((uint64_t)zlfid->zf_setgen[i]) << (8 * i);
 
-               ZFS_EXIT(zfsvfs);
+               ZFS_EXIT(zsb);
 
-               err = zfsctl_lookup_objset(vfsp, objsetid, &zfsvfs);
+               err = zfsctl_lookup_objset(sb, objsetid, &zsb);
                if (err)
                        return (EINVAL);
-               ZFS_ENTER(zfsvfs);
+
+               ZFS_ENTER(zsb);
        }
 
        if (fidp->fid_len == SHORT_FID_LEN || fidp->fid_len == LONG_FID_LEN) {
@@ -1459,182 +1359,163 @@ zfs_vget(vfs_t *vfsp, vnode_t **vpp, fid_t *fidp)
                for (i = 0; i < sizeof (zfid->zf_gen); i++)
                        fid_gen |= ((uint64_t)zfid->zf_gen[i]) << (8 * i);
        } else {
-               ZFS_EXIT(zfsvfs);
+               ZFS_EXIT(zsb);
                return (EINVAL);
        }
 
        /* A zero fid_gen means we are in the .zfs control directories */
        if (fid_gen == 0 &&
            (object == ZFSCTL_INO_ROOT || object == ZFSCTL_INO_SNAPDIR)) {
-               *vpp = zfsvfs->z_ctldir;
-               ASSERT(*vpp != NULL);
+               *ipp = zsb->z_ctldir;
+               ASSERT(*ipp != NULL);
                if (object == ZFSCTL_INO_SNAPDIR) {
-                       VERIFY(zfsctl_root_lookup(*vpp, "snapshot", vpp, NULL,
-                           0, NULL, NULL, NULL, NULL, NULL) == 0);
+                       VERIFY(zfsctl_root_lookup(*ipp, "snapshot", ipp,
+                           0, kcred, NULL, NULL) == 0);
                } else {
-                       VN_HOLD(*vpp);
+                       igrab(*ipp);
                }
-               ZFS_EXIT(zfsvfs);
+               ZFS_EXIT(zsb);
                return (0);
        }
 
        gen_mask = -1ULL >> (64 - 8 * i);
 
        dprintf("getting %llu [%u mask %llx]\n", object, fid_gen, gen_mask);
-       if ((err = zfs_zget(zfsvfs, object, &zp))) {
-               ZFS_EXIT(zfsvfs);
+       if ((err = zfs_zget(zsb, object, &zp))) {
+               ZFS_EXIT(zsb);
                return (err);
        }
-       (void) sa_lookup(zp->z_sa_hdl, SA_ZPL_GEN(zfsvfs), &zp_gen,
+       (void) sa_lookup(zp->z_sa_hdl, SA_ZPL_GEN(zsb), &zp_gen,
            sizeof (uint64_t));
        zp_gen = zp_gen & gen_mask;
        if (zp_gen == 0)
                zp_gen = 1;
        if (zp->z_unlinked || zp_gen != fid_gen) {
                dprintf("znode gen (%u) != fid gen (%u)\n", zp_gen, fid_gen);
-               VN_RELE(ZTOV(zp));
-               ZFS_EXIT(zfsvfs);
+               iput(ZTOI(zp));
+               ZFS_EXIT(zsb);
                return (EINVAL);
        }
 
-       *vpp = ZTOV(zp);
-       if (*vpp)
-               zfs_inode_update(VTOZ(*vpp));
+       *ipp = ZTOI(zp);
+       if (*ipp)
+               zfs_inode_update(ITOZ(*ipp));
 
-       ZFS_EXIT(zfsvfs);
+       ZFS_EXIT(zsb);
        return (0);
 }
 EXPORT_SYMBOL(zfs_vget);
 
 /*
- * Block out VOPs and close zfsvfs_t::z_os
+ * Block out VFS ops and close zfs_sb_t
  *
  * Note, if successful, then we return with the 'z_teardown_lock' and
  * 'z_teardown_inactive_lock' write held.
  */
 int
-zfs_suspend_fs(zfsvfs_t *zfsvfs)
+zfs_suspend_fs(zfs_sb_t *zsb)
 {
        int error;
 
-       if ((error = zfsvfs_teardown(zfsvfs, B_FALSE)) != 0)
+       if ((error = zfs_sb_teardown(zsb, B_FALSE)) != 0)
                return (error);
-       dmu_objset_disown(zfsvfs->z_os, zfsvfs);
+
+       dmu_objset_disown(zsb->z_os, zsb);
 
        return (0);
 }
 EXPORT_SYMBOL(zfs_suspend_fs);
 
 /*
- * Reopen zfsvfs_t::z_os and release VOPs.
+ * Reopen zfs_sb_t and release VFS ops.
  */
 int
-zfs_resume_fs(zfsvfs_t *zfsvfs, const char *osname)
+zfs_resume_fs(zfs_sb_t *zsb, const char *osname)
 {
        int err, err2;
 
-       ASSERT(RRW_WRITE_HELD(&zfsvfs->z_teardown_lock));
-       ASSERT(RW_WRITE_HELD(&zfsvfs->z_teardown_inactive_lock));
+       ASSERT(RRW_WRITE_HELD(&zsb->z_teardown_lock));
+       ASSERT(RW_WRITE_HELD(&zsb->z_teardown_inactive_lock));
 
-       err = dmu_objset_own(osname, DMU_OST_ZFS, B_FALSE, zfsvfs,
-           &zfsvfs->z_os);
+       err = dmu_objset_own(osname, DMU_OST_ZFS, B_FALSE, zsb, &zsb->z_os);
        if (err) {
-               zfsvfs->z_os = NULL;
+               zsb->z_os = NULL;
        } else {
                znode_t *zp;
                uint64_t sa_obj = 0;
 
-               err2 = zap_lookup(zfsvfs->z_os, MASTER_NODE_OBJ,
+               err2 = zap_lookup(zsb->z_os, MASTER_NODE_OBJ,
                    ZFS_SA_ATTRS, 8, 1, &sa_obj);
 
-               if ((err || err2) && zfsvfs->z_version >= ZPL_VERSION_SA)
+               if ((err || err2) && zsb->z_version >= ZPL_VERSION_SA)
                        goto bail;
 
 
-               if ((err = sa_setup(zfsvfs->z_os, sa_obj,
-                   zfs_attr_table,  ZPL_END, &zfsvfs->z_attr_table)) != 0)
+               if ((err = sa_setup(zsb->z_os, sa_obj,
+                   zfs_attr_table,  ZPL_END, &zsb->z_attr_table)) != 0)
                        goto bail;
 
-               VERIFY(zfsvfs_setup(zfsvfs, B_FALSE) == 0);
+               VERIFY(zfs_sb_setup(zsb, B_FALSE) == 0);
+               zsb->z_rollback_time = jiffies;
 
                /*
-                * Attempt to re-establish all the active znodes with
-                * their dbufs.  If a zfs_rezget() fails, then we'll let
-                * any potential callers discover that via ZFS_ENTER_VERIFY_VP
-                * when they try to use their znode.
+                * Attempt to re-establish all the active inodes with their
+                * dbufs.  If a zfs_rezget() fails, then we unhash the inode
+                * and mark it stale.  This prevents a collision if a new
+                * inode/object is created which must use the same inode
+                * number.  The stale inode will be be released when the
+                * VFS prunes the dentry holding the remaining references
+                * on the stale inode.
                 */
-               mutex_enter(&zfsvfs->z_znodes_lock);
-               for (zp = list_head(&zfsvfs->z_all_znodes); zp;
-                   zp = list_next(&zfsvfs->z_all_znodes, zp)) {
-                       (void) zfs_rezget(zp);
+               mutex_enter(&zsb->z_znodes_lock);
+               for (zp = list_head(&zsb->z_all_znodes); zp;
+                   zp = list_next(&zsb->z_all_znodes, zp)) {
+                       err2 = zfs_rezget(zp);
+                       if (err2) {
+                               remove_inode_hash(ZTOI(zp));
+                               zp->z_is_stale = B_TRUE;
+                       }
                }
-               mutex_exit(&zfsvfs->z_znodes_lock);
-
+               mutex_exit(&zsb->z_znodes_lock);
        }
 
 bail:
-       /* release the VOPs */
-       rw_exit(&zfsvfs->z_teardown_inactive_lock);
-       rrw_exit(&zfsvfs->z_teardown_lock, FTAG);
+       /* release the VFS ops */
+       rw_exit(&zsb->z_teardown_inactive_lock);
+       rrw_exit(&zsb->z_teardown_lock, FTAG);
 
        if (err) {
                /*
-                * Since we couldn't reopen zfsvfs::z_os, force
-                * unmount this file system.
+                * Since we couldn't reopen zfs_sb_t or, setup the
+                * sa framework, force unmount this file system.
                 */
-               if (vn_vfswlock(zfsvfs->z_vfs->vfs_vnodecovered) == 0)
-                       (void) dounmount(zfsvfs->z_vfs, MS_FORCE, CRED());
+               if (zsb->z_os)
+                       (void) zfs_umount(zsb->z_sb);
        }
        return (err);
 }
 EXPORT_SYMBOL(zfs_resume_fs);
 
-static void
-zfs_freevfs(vfs_t *vfsp)
-{
-       zfsvfs_t *zfsvfs = vfsp->vfs_data;
-
-       zfsvfs_free(zfsvfs);
-}
-#endif /* HAVE_ZPL */
-
-void
-zfs_init(void)
-{
-       zfsctl_init();
-       zfs_znode_init();
-
-       dmu_objset_register_type(DMU_OST_ZFS, zfs_space_delta_cb);
-}
-
-void
-zfs_fini(void)
-{
-       zfsctl_fini();
-       zfs_znode_fini();
-}
-
-#ifdef HAVE_ZPL
 int
-zfs_set_version(zfsvfs_t *zfsvfs, uint64_t newvers)
+zfs_set_version(zfs_sb_t *zsb, uint64_t newvers)
 {
        int error;
-       objset_t *os = zfsvfs->z_os;
+       objset_t *os = zsb->z_os;
        dmu_tx_t *tx;
 
        if (newvers < ZPL_VERSION_INITIAL || newvers > ZPL_VERSION)
                return (EINVAL);
 
-       if (newvers < zfsvfs->z_version)
+       if (newvers < zsb->z_version)
                return (EINVAL);
 
        if (zfs_spa_version_map(newvers) >
-           spa_version(dmu_objset_spa(zfsvfs->z_os)))
+           spa_version(dmu_objset_spa(zsb->z_os)))
                return (ENOTSUP);
 
        tx = dmu_tx_create(os);
        dmu_tx_hold_zap(tx, MASTER_NODE_OBJ, B_FALSE, ZPL_VERSION_STR);
-       if (newvers >= ZPL_VERSION_SA && !zfsvfs->z_use_sa) {
+       if (newvers >= ZPL_VERSION_SA && !zsb->z_use_sa) {
                dmu_tx_hold_zap(tx, MASTER_NODE_OBJ, B_TRUE,
                    ZFS_SA_ATTRS);
                dmu_tx_hold_zap(tx, DMU_NEW_OBJECT, FALSE, NULL);
@@ -1653,17 +1534,17 @@ zfs_set_version(zfsvfs_t *zfsvfs, uint64_t newvers)
                return (error);
        }
 
-       if (newvers >= ZPL_VERSION_SA && !zfsvfs->z_use_sa) {
+       if (newvers >= ZPL_VERSION_SA && !zsb->z_use_sa) {
                uint64_t sa_obj;
 
-               ASSERT3U(spa_version(dmu_objset_spa(zfsvfs->z_os)), >=,
+               ASSERT3U(spa_version(dmu_objset_spa(zsb->z_os)), >=,
                    SPA_VERSION_SA);
                sa_obj = zap_create(os, DMU_OT_SA_MASTER_NODE,
                    DMU_OT_NONE, 0, tx);
 
                error = zap_add(os, MASTER_NODE_OBJ,
                    ZFS_SA_ATTRS, 8, 1, &sa_obj, tx);
-               ASSERT3U(error, ==, 0);
+               ASSERT0(error);
 
                VERIFY(0 == sa_set_sa_object(os, sa_obj));
                sa_register_update_callback(os, zfs_sa_upgrade);
@@ -1671,19 +1552,18 @@ zfs_set_version(zfsvfs_t *zfsvfs, uint64_t newvers)
 
        spa_history_log_internal(LOG_DS_UPGRADE,
            dmu_objset_spa(os), tx, "oldver=%llu newver=%llu dataset = %llu",
-           zfsvfs->z_version, newvers, dmu_objset_id(os));
+           zsb->z_version, newvers, dmu_objset_id(os));
 
        dmu_tx_commit(tx);
 
-       zfsvfs->z_version = newvers;
+       zsb->z_version = newvers;
 
-       if (zfsvfs->z_version >= ZPL_VERSION_FUID)
-               zfs_set_fuid_feature(zfsvfs);
+       if (zsb->z_version >= ZPL_VERSION_FUID)
+               zfs_set_fuid_feature(zsb);
 
        return (0);
 }
 EXPORT_SYMBOL(zfs_set_version);
-#endif /* HAVE_ZPL */
 
 /*
  * Read a property stored within the master node.
@@ -1726,3 +1606,22 @@ zfs_get_zplprop(objset_t *os, zfs_prop_t prop, uint64_t *value)
        }
        return (error);
 }
+EXPORT_SYMBOL(zfs_get_zplprop);
+
+void
+zfs_init(void)
+{
+       zfsctl_init();
+       zfs_znode_init();
+       dmu_objset_register_type(DMU_OST_ZFS, zfs_space_delta_cb);
+       register_filesystem(&zpl_fs_type);
+       (void) arc_add_prune_callback(zpl_prune_sbs, NULL);
+}
+
+void
+zfs_fini(void)
+{
+       unregister_filesystem(&zpl_fs_type);
+       zfs_znode_fini();
+       zfsctl_fini();
+}