xfs: detect and fix bad summary counts at mount
authorDarrick J. Wong <darrick.wong@oracle.com>
Thu, 19 Jul 2018 19:29:13 +0000 (12:29 -0700)
committerDarrick J. Wong <darrick.wong@oracle.com>
Mon, 23 Jul 2018 16:08:01 +0000 (09:08 -0700)
Filippo Giunchedi complained that xfs doesn't even perform basic sanity
checks of the fs summary counters at mount time.  Therefore, recalculate
the summary counters from the AGFs after log recovery if the counts were
bad (or we had to recover the fs).  Enhance the recalculation routine to
fail the mount entirely if the new values are also obviously incorrect.

We use a mount state flag to record the "bad summary count" state so
that the (subsequent) online fsck patches can detect subtlely incorrect
counts and set the flag; clear it userspace asks for a repair; or force
a recalculation at the next mount if nobody fixes it by unmount time.

Reported-by: Filippo Giunchedi <fgiunchedi@wikimedia.org>
Signed-off-by: Darrick J. Wong <darrick.wong@oracle.com>
Reviewed-by: Christoph Hellwig <hch@lst.de>
fs/xfs/libxfs/xfs_sb.c
fs/xfs/xfs_mount.c
fs/xfs/xfs_mount.h

index 350119eeaecb29b23b6fde020ee75c2542777013..b3ad1595636651de20c3925dd6b8c62d0ad01987 100644 (file)
@@ -804,6 +804,7 @@ xfs_initialize_perag_data(
        uint64_t        bfree = 0;
        uint64_t        bfreelst = 0;
        uint64_t        btree = 0;
+       uint64_t        fdblocks;
        int             error;
 
        for (index = 0; index < agcount; index++) {
@@ -827,17 +828,31 @@ xfs_initialize_perag_data(
                btree += pag->pagf_btreeblks;
                xfs_perag_put(pag);
        }
+       fdblocks = bfree + bfreelst + btree;
+
+       /*
+        * If the new summary counts are obviously incorrect, fail the
+        * mount operation because that implies the AGFs are also corrupt.
+        * Clear BAD_SUMMARY so that we don't unmount with a dirty log, which
+        * will prevent xfs_repair from fixing anything.
+        */
+       if (fdblocks > sbp->sb_dblocks || ifree > ialloc) {
+               xfs_alert(mp, "AGF corruption. Please run xfs_repair.");
+               error = -EFSCORRUPTED;
+               goto out;
+       }
 
        /* Overwrite incore superblock counters with just-read data */
        spin_lock(&mp->m_sb_lock);
        sbp->sb_ifree = ifree;
        sbp->sb_icount = ialloc;
-       sbp->sb_fdblocks = bfree + bfreelst + btree;
+       sbp->sb_fdblocks = fdblocks;
        spin_unlock(&mp->m_sb_lock);
 
        xfs_reinit_percpu_counters(mp);
-
-       return 0;
+out:
+       mp->m_flags &= ~XFS_MOUNT_BAD_SUMMARY;
+       return error;
 }
 
 /*
index a3378252baa10dad6899e5044ee774a50d9c980e..60462c35ad4bdda7e9d926682f6ba95fdcaccaba 100644 (file)
@@ -606,6 +606,56 @@ xfs_default_resblks(xfs_mount_t *mp)
        return resblks;
 }
 
+/* Ensure the summary counts are correct. */
+STATIC int
+xfs_check_summary_counts(
+       struct xfs_mount        *mp)
+{
+       /*
+        * The AG0 superblock verifier rejects in-progress filesystems,
+        * so we should never see the flag set this far into mounting.
+        */
+       if (mp->m_sb.sb_inprogress) {
+               xfs_err(mp, "sb_inprogress set after log recovery??");
+               WARN_ON(1);
+               return -EFSCORRUPTED;
+       }
+
+       /*
+        * Now the log is mounted, we know if it was an unclean shutdown or
+        * not. If it was, with the first phase of recovery has completed, we
+        * have consistent AG blocks on disk. We have not recovered EFIs yet,
+        * but they are recovered transactionally in the second recovery phase
+        * later.
+        *
+        * If the log was clean when we mounted, we can check the summary
+        * counters.  If any of them are obviously incorrect, we can recompute
+        * them from the AGF headers in the next step.
+        */
+       if (XFS_LAST_UNMOUNT_WAS_CLEAN(mp) &&
+           (mp->m_sb.sb_fdblocks > mp->m_sb.sb_dblocks ||
+            mp->m_sb.sb_ifree > mp->m_sb.sb_icount))
+               mp->m_flags |= XFS_MOUNT_BAD_SUMMARY;
+
+       /*
+        * We can safely re-initialise incore superblock counters from the
+        * per-ag data. These may not be correct if the filesystem was not
+        * cleanly unmounted, so we waited for recovery to finish before doing
+        * this.
+        *
+        * If the filesystem was cleanly unmounted or the previous check did
+        * not flag anything weird, then we can trust the values in the
+        * superblock to be correct and we don't need to do anything here.
+        * Otherwise, recalculate the summary counters.
+        */
+       if ((!xfs_sb_version_haslazysbcount(&mp->m_sb) ||
+            XFS_LAST_UNMOUNT_WAS_CLEAN(mp)) &&
+           !(mp->m_flags & XFS_MOUNT_BAD_SUMMARY))
+               return 0;
+
+       return xfs_initialize_perag_data(mp, mp->m_sb.sb_agcount);
+}
+
 /*
  * This function does the following on an initial mount of a file system:
  *     - reads the superblock from disk and init the mount struct
@@ -831,32 +881,10 @@ xfs_mountfs(
                goto out_fail_wait;
        }
 
-       /*
-        * Now the log is mounted, we know if it was an unclean shutdown or
-        * not. If it was, with the first phase of recovery has completed, we
-        * have consistent AG blocks on disk. We have not recovered EFIs yet,
-        * but they are recovered transactionally in the second recovery phase
-        * later.
-        *
-        * Hence we can safely re-initialise incore superblock counters from
-        * the per-ag data. These may not be correct if the filesystem was not
-        * cleanly unmounted, so we need to wait for recovery to finish before
-        * doing this.
-        *
-        * If the filesystem was cleanly unmounted, then we can trust the
-        * values in the superblock to be correct and we don't need to do
-        * anything here.
-        *
-        * If we are currently making the filesystem, the initialisation will
-        * fail as the perag data is in an undefined state.
-        */
-       if (xfs_sb_version_haslazysbcount(&mp->m_sb) &&
-           !XFS_LAST_UNMOUNT_WAS_CLEAN(mp) &&
-            !mp->m_sb.sb_inprogress) {
-               error = xfs_initialize_perag_data(mp, sbp->sb_agcount);
-               if (error)
-                       goto out_log_dealloc;
-       }
+       /* Make sure the summary counts are ok. */
+       error = xfs_check_summary_counts(mp);
+       if (error)
+               goto out_log_dealloc;
 
        /*
         * Get and sanity-check the root inode.
index 245349d1e23f351d66d08fe137fe77904d8f046d..f08907db9c613ab06d627a939b73c4c060583809 100644 (file)
@@ -202,6 +202,7 @@ typedef struct xfs_mount {
                                                   must be synchronous except
                                                   for space allocations */
 #define XFS_MOUNT_UNMOUNTING   (1ULL << 1)     /* filesystem is unmounting */
+#define XFS_MOUNT_BAD_SUMMARY  (1ULL << 2)     /* summary counters are bad */
 #define XFS_MOUNT_WAS_CLEAN    (1ULL << 3)
 #define XFS_MOUNT_FS_SHUTDOWN  (1ULL << 4)     /* atomic stop of all filesystem
                                                   operations, typically for