Log the creation of an init fork unconditionally.
authorRobert Haas
Thu, 8 Dec 2016 19:09:09 +0000 (14:09 -0500)
committerRobert Haas
Thu, 8 Dec 2016 19:16:47 +0000 (14:16 -0500)
Previously, it was thought that this only needed to be done for the
benefit of possible standbys, so wal_level = minimal skipped it.
But that's not safe, because during crash recovery we might replay
XLOG_DBASE_CREATE or XLOG_TBLSPC_CREATE record which recursively
removes the directory that contains the new init fork.  So log it
always.

The user-visible effect of this bug is that if you create a database
or tablespace, then create an unlogged table, then crash without
checkpointing, then restart, accessing the table will fail, because
the it won't have been properly reset.  This commit fixes that.

Michael Paquier, per a report from Konstantin Knizhnik.  Wording of
the comments per a suggestion from me.

src/backend/access/nbtree/nbtree.c
src/backend/access/spgist/spginsert.c
src/backend/catalog/heap.c

index 229d276d9c1bdc6ed79d9df2a1aea94e940a34f1..404bf31e2d4acd356b09122cd625f011eebfd585 100644 (file)
@@ -216,13 +216,18 @@ btbuildempty(PG_FUNCTION_ARGS)
    metapage = (Page) palloc(BLCKSZ);
    _bt_initmetapage(metapage, P_NONE, 0);
 
-   /* Write the page.  If archiving/streaming, XLOG it. */
+   /*
+    * Write the page and log it.  It might seem that an immediate sync
+    * would be sufficient to guarantee that the file exists on disk, but
+    * recovery itself might remove it while replaying, for example, an
+    * XLOG_DBASE_CREATE or XLOG_TBLSPC_CREATE record.  Therefore, we
+    * need this even when wal_level=minimal.
+    */
    PageSetChecksumInplace(metapage, BTREE_METAPAGE);
    smgrwrite(index->rd_smgr, INIT_FORKNUM, BTREE_METAPAGE,
              (char *) metapage, true);
-   if (XLogIsNeeded())
-       log_newpage(&index->rd_smgr->smgr_rnode.node, INIT_FORKNUM,
-                   BTREE_METAPAGE, metapage);
+   log_newpage(&index->rd_smgr->smgr_rnode.node, INIT_FORKNUM,
+               BTREE_METAPAGE, metapage);
 
    /*
     * An immediate sync is required even if we xlog'd the page, because the
index a354cb8973f9c8fc069b810a0fdf23bbe6d16e53..3ce07c4a37fea3332c4924eb1ace218179156a80 100644 (file)
@@ -163,13 +163,18 @@ spgbuildempty(PG_FUNCTION_ARGS)
    page = (Page) palloc(BLCKSZ);
    SpGistInitMetapage(page);
 
-   /* Write the page.  If archiving/streaming, XLOG it. */
+   /*
+    * Write the page and log it unconditionally.  This is important
+    * particularly for indexes created on tablespaces and databases
+    * whose creation happened after the last redo pointer as recovery
+    * removes any of their existing content when the corresponding
+    * create records are replayed.
+    */
    PageSetChecksumInplace(page, SPGIST_METAPAGE_BLKNO);
    smgrwrite(index->rd_smgr, INIT_FORKNUM, SPGIST_METAPAGE_BLKNO,
              (char *) page, true);
-   if (XLogIsNeeded())
-       log_newpage(&index->rd_smgr->smgr_rnode.node, INIT_FORKNUM,
-                   SPGIST_METAPAGE_BLKNO, page);
+   log_newpage(&index->rd_smgr->smgr_rnode.node, INIT_FORKNUM,
+               SPGIST_METAPAGE_BLKNO, page);
 
    /* Likewise for the root page. */
    SpGistInitPage(page, SPGIST_LEAF);
@@ -177,9 +182,8 @@ spgbuildempty(PG_FUNCTION_ARGS)
    PageSetChecksumInplace(page, SPGIST_ROOT_BLKNO);
    smgrwrite(index->rd_smgr, INIT_FORKNUM, SPGIST_ROOT_BLKNO,
              (char *) page, true);
-   if (XLogIsNeeded())
-       log_newpage(&index->rd_smgr->smgr_rnode.node, INIT_FORKNUM,
-                   SPGIST_ROOT_BLKNO, page);
+   log_newpage(&index->rd_smgr->smgr_rnode.node, INIT_FORKNUM,
+               SPGIST_ROOT_BLKNO, page);
 
    /* Likewise for the null-tuples root page. */
    SpGistInitPage(page, SPGIST_LEAF | SPGIST_NULLS);
@@ -187,9 +191,8 @@ spgbuildempty(PG_FUNCTION_ARGS)
    PageSetChecksumInplace(page, SPGIST_NULL_BLKNO);
    smgrwrite(index->rd_smgr, INIT_FORKNUM, SPGIST_NULL_BLKNO,
              (char *) page, true);
-   if (XLogIsNeeded())
-       log_newpage(&index->rd_smgr->smgr_rnode.node, INIT_FORKNUM,
-                   SPGIST_NULL_BLKNO, page);
+   log_newpage(&index->rd_smgr->smgr_rnode.node, INIT_FORKNUM,
+               SPGIST_NULL_BLKNO, page);
 
    /*
     * An immediate sync is required even if we xlog'd the pages, because the
index 03c1695e45bf4fd38c6f569e22d7462e0c47e4e6..9fbb4132dddbc608899e5b508d74c05c03b689bc 100644 (file)
@@ -1347,18 +1347,19 @@ heap_create_with_catalog(const char *relname,
 
 /*
  * Set up an init fork for an unlogged table so that it can be correctly
- * reinitialized on restart.  Since we're going to do an immediate sync, we
- * only need to xlog this if archiving or streaming is enabled.  And the
- * immediate sync is required, because otherwise there's no guarantee that
- * this will hit the disk before the next checkpoint moves the redo pointer.
+ * reinitialized on restart.  An immediate sync is required even if the
+ * page has been logged, because the write did not go through
+ * shared_buffers and therefore a concurrent checkpoint may have moved
+ * the redo pointer past our xlog record.  Recovery may as well remove it
+ * while replaying, for example, XLOG_DBASE_CREATE or XLOG_TBLSPC_CREATE
+ * record. Therefore, logging is necessary even if wal_level=minimal.
  */
 void
 heap_create_init_fork(Relation rel)
 {
    RelationOpenSmgr(rel);
    smgrcreate(rel->rd_smgr, INIT_FORKNUM, false);
-   if (XLogIsNeeded())
-       log_smgrcreate(&rel->rd_smgr->smgr_rnode.node, INIT_FORKNUM);
+   log_smgrcreate(&rel->rd_smgr->smgr_rnode.node, INIT_FORKNUM);
    smgrimmedsync(rel->rd_smgr, INIT_FORKNUM);
 }