任何一個技術都有其底層的關鍵基礎技術，這些關鍵技術很有可能也是其他技術的關鍵技術，學習這些底層技術，就可以一通百通，讓你很快的掌握其他技術。如何在磁盤上存儲數據，如何使用日志文件保證數據不丟失以及如何落盤，不僅是MySQL等數據庫的關鍵技術，也是MQ消息隊列或者其他中間件的關鍵技術之一。

上圖詳細顯示了InnoDB存儲引擎的體系架構，從圖中可見，InnoDB存儲引擎由內存池，后臺線程和磁盤文件三大部分組成。接下來我們就來簡單了解一下磁盤文件相關的概念和原理。

InnoDB的主要的磁盤文件主要分為三大塊：一是系統表空間，二是用戶表空間，三是redo日志文件和歸檔文件。二進制文件(binlog)等文件是MySQL Server層維護的文件，所以未列入InnoDB的磁盤文件中。

系統表空間和用戶表空間

InnoDB系統表空間包含InnoDB數據字典(元數據以及相關對象)并且doublewrite buffer,change buffer,undo logs的存儲區域。系統表空間也默認包含任何用戶在系統表空間創建的表數據和索引數據。系統表空間是一個共享的表空間因為它是被多個表共享的

系統表空間是由一個或者多個數據文件組成。默認情況下,1個初始大小為10MB，名為ibdata1的系統數據文件在MySQL的data目錄下被創建。用戶可以使用innodb_data_file_path對數據文件的大小和數量進行配置。

innodbdatafile_path的格式如下：

innodb_data_file_path=datafile1[,datafile2]...

用戶可以通過多個文件組成一個表空間，同時制定文件的屬性：

innodb_data_file_path = /db/ibdata1:1000M;/dr2/db/ibdata2:1000M:autoextend

這里講/db/ibdata1和/dr2/db/ibdata2兩個文件組成系統表空間。如果這兩個文件位于不同的磁盤上，磁盤的負載可能被平均，因此可以提高數據庫的整體性能。兩個文件的文件名之后都跟了屬性，表示文件ibdata1的大小為1000MB，文件ibdata2的大小為1000MB，而且用完空間之后可以自動增長(autoextend)。

設置innodbdatafilepath參數之后，所以基于InnoDB存儲引擎的表的數據都會記錄到該系統表空間中，如果設置了參數innodbfilepertable，則用戶可以將每個基于InnoDB存儲引擎的表產生一個獨立的用戶表空間。用戶表空間的命名規則為：表名.ibd。

通過這種方式，用戶不用將所有數據都存放于默認的系統表空間中，但是用戶表空只存儲該表的數據、索引和插入緩沖BITMAP等信息，其余信息還是存放在默認的表空間中。

上圖顯示InnoDB存儲引擎對于文件的存儲方式，其中frm文件是表結構定義文件，記錄每個表的表結構定義。

重做日志文件和歸檔文件

默認情況下，在InnoDB存儲引擎的數據目錄下會有兩個名為iblogfile0和iblogfile1的文件，這就是InnoDB的重做日志文件(redo log file)，它記錄了對于InnoDB存儲引擎的事務日志。 當InnoDB的數據存儲文件發生錯誤時，重做日志文件就能派上用場。InnoDB存儲引擎可以使用重做日志文件將數據恢復為正確狀態，以此來保證數據的正確性和完整性。

每個InnoDB存儲引擎至少有1個重做日志文件組(group)，每個文件組下至少有2個重做日志文件，如默認的iblogfile0和iblogfile1。

為了得到更高的可靠性，用戶可以設置多個鏡像日志組，將不同的文件組放在不同的磁盤上，以此來提高重做日志的高可用性。

在日志組中每個重做日志文件的大小一致，并以循環寫入的方式運行。InnoDB存儲引擎先寫入重做日志文件1，當文件被寫滿時，會切換到重做日志文件2，再當重做日志文件2也被寫滿時，再切換到重做日志文件1。

用戶可以使用innodb_log_file_size來設置重做日志文件的大小，這對InnoDB存儲引擎的性能有著非常大的影響。默認8MB。

如果重做日志文件設置的太大，數據丟失時，恢復時可能需要很長的時間；另一方面，如果設置的太小，重做日志文件太小會導致依據checkpoint的檢查需要頻繁刷新臟頁到磁盤中，導致性能的抖動。

重做日志相關和Checkpoint的機制可以閱讀之前文章的相應章節。

MySQL探秘(三):InnoDB的內存結構和特性

重做日志的落盤機制

InnoDB對于數據文件和日志文件的刷盤遵守WAL(Write ahead redo log) 和Force-log-at-commit兩種規則，二者保證了事務的持久性。WAL要求數據的變更寫入到磁盤前，首先必須將內存中的重做日志寫入到磁盤；Force-log-at-commit要求當一個事務提交時，所有產生的重做日志都必須刷新到磁盤上，如果日志刷新成功后，緩沖池中的數據刷新到磁盤前數據庫發生了宕機，那么重啟時，數據庫可以從重做日志中恢復數據。

如上圖所示，InnoDB在緩沖池中變更數據時，會首先將相關變更寫入重做日志緩沖中，然后再按時或者當事務提交時寫入磁盤，這符合Force-log-at-commit原則；當重做日志寫入磁盤后，緩沖池中的變更數據才會依據checkpoint機制擇時寫入到磁盤中，這符合WAL原則。 在checkpoint擇時機制中，就有重做日志文件寫滿的判斷，所以，如前文所述，如果重做日志文件太小，經常被寫滿，就會頻繁導致checkpoint將更改的數據寫入磁盤，導致性能抖動。

操作系統的文件系統是帶有緩存的，當InnoDB向磁盤寫入數據時，有可能只是寫入到了文件系統的緩存中，沒有真正的“落袋為安”。

InnoDB的innodb_flush_log_at_trx_commit屬性可以控制每次事務提交時InnoDB的行為。當屬性值為0時，事務提交時，不會對重做日志進行寫入操作，而是等待主線程按時寫入；當屬性值為1時，事務提交時，會將重做日志寫入文件系統緩存，并且調用文件系統的fsync，將文件系統緩沖中的數據真正寫入磁盤存儲，確保不會出現數據丟失；當屬性值為2時，事務提交時，也會將日志文件寫入文件系統緩存，但是不會調用fsync，而是讓文件系統自己去判斷何時將緩存寫入磁盤。日志的刷盤機制如下圖所示。

innodb_flush_log_at_trx_commit是InnoDB性能調優的一個基礎參數，涉及InnoDB的寫入效率和數據安全。當參數值為0時，寫入效率最高，但是數據安全最低；參數值為1時，寫入效率最低，但是數據安全最高；參數值為2時，二者都是中等水平。一般建議將該屬性值設置為1，以獲得較高的數據安全性，而且也只有設置為1，才能保證事務的持久性。

與50位技術專家面對面20年技術見證，附贈技術全景圖

總結

以上是生活随笔為你收集整理的MySQL探秘(四):InnoDB的磁盘文件及落盘机制（持久性）的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。