久久精品人人爽,华人av在线,亚洲性视频网站,欧美专区一二三

MySQL日志模塊的簡介

158次閱讀
沒有評論

共計 3199 個字符,預計需要花費 8 分鐘才能閱讀完成。

自動寫代碼機器人,免費開通

這篇文章將為大家詳細講解有關 MySQL 日志模塊的簡介,丸趣 TV 小編覺得挺實用的,因此分享給大家做個參考,希望大家閱讀完這篇文章后可以有所收獲。

目錄

一、簡介

二、redo log

三. binlog

四. 內部工作流程

MySql 學習專欄

1. MySQL 基礎架構詳解

2. MySQL 索引底層數據結構與算法

3. MySQL5.7 開啟 binlog 日志,及數據恢復簡單示例

4. MySQL 日志模塊

一、簡介

MySQL 有兩大重要的日志模塊:redo log(重做日志)和 binlog(歸檔日志)。

redo log 是 InnoDB 存儲引擎層的日志,binlog 是 MySQL Server 層記錄的日志,兩者都是記錄了某些操作的日志,但兩者記錄的格式不同。

二、redo log

redo log: 又稱(重做日志)文件,用于記錄事務操作的變化,記錄的是數據修改之后的值,不管事務是否提交都會記錄下來。

在 media failure 時,redo log 文件就能派上用場,如數據庫掉電,InnoDB 存儲引擎會使用 redo log 恢復到掉電前的時刻,以此來保證數據的完整性。

當有一條記錄需要更新的時候,InnoDB 引擎就會先把記錄寫到 redo log 里面,并更新內存,這個時候更新就算完成了。

InnoDB 引擎會在適當的時候,將這個操作記錄更新到磁盤里面,而這個更新一般是在系統比較空閑的時候完成的,以此來提升更新效率。

這里涉及到 WAL 即 Write-Ahead Logging 技術,他的關鍵點就是 先寫日志,再寫磁盤。

InnoDB 的 redo log 是固定大小的,比如可以配置為一組 4 個文件,每個文件的大小是 1GB,那么總共就可以記錄 4GB 的操作。

redo log 會從頭開始寫,寫到末尾就又回到開頭循環寫,如下圖所示。

MySQL 日志模塊的簡介

write pos 是當前記錄的位置,一邊寫一邊后移,寫到第 3 號文件末尾后就回到 0 號文件開頭。

check point 是當前要擦除的位置,也是往后推移并且循環的,擦除記錄前要把記錄更新到數據文件。

write pos 和 check point 之間的是未使用的部分,可以用來記錄新的操作。

如果 write pos 追上 check point,表示 redo log 記錄滿了,這時候不能再執行新的更新,得停下來先擦掉一些記錄,把 check point 推進一下。

有了 redo log,InnoDB 就可以保證即使數據庫發生異常重啟,之前提交的記錄都不會丟失,這個能力稱為 crash-safe。

為什么要使用 redo log 日志?

假如我們對數據庫進行 DML 操作,直接把執行 SQL 寫入磁盤,當寫入并發較大時,對數據寫入磁盤的壓力會造成一定影響,

當我們插入操作是,發現當前非葉子節點一頁數據量不夠時,要進行分頁算法,效率會比較低;

當我使用 redo log 日志,先把我們 DML 操作寫入日志,通過一個 中轉站 , 空閑時候再通過 check point 寫入磁盤,效率會高很多;

MySQL 日志模塊的簡介

MySQL 設置 Redo Log

寫入日 innodb_log_buffer_size 的大?。海J 8M)

innodb_log_file_size 重做日志文件的大小。

innodb_log_files_in_group 指定重做日志文件組中文件的數量,默認 2

innodb_mirrored_log_groups 指定了日志鏡像文件組的數量,默認 1

innodb_log_group_home_dir 指定日志文件組所在的路徑,默認./, 表示在數據庫的數據目錄下

innodb_flush_log_at_trx_commit 設置 commit 時如何將 log buffer 中日志刷 log file 中(值 0、1、2)默認 1

MySQL 日志模塊的簡介

三. binlog

redo log 是 InnoDB 引擎特有的日志,而 Server 層也有自己的日志,稱為 binlog(歸檔日志)。

為什么會有兩份日志呢?

因為最開始 MySQL 里并沒有 InnoDB 引擎。MySQL 自帶的引擎是 MyISAM,但是 MyISAM 沒有 crash-safe 的能力,binlog 日志只能用于歸檔。

而 InnoDB 是另一個公司以插件形式引入 MySQL 的,既然只依靠 binlog 是沒有 crash-safe 能力的,所以 InnoDB 使用另外一套日志系統——也就是 redo log 來實現 crash-safe 能力。

這兩種日志有以下三點不同。

redo log 是 InnoDB 引擎特有的;binlog 是 MySQL 的 Server 層實現的,所有引擎都可以使用。

redo log 是物理日志,記錄的是 在某個數據頁上做了什么修改;binlog 是邏輯日志,記錄的是這個語句的原始邏輯,比如 給 ID=2 這一行的 c 字段加 1。

redo log 是循環寫的,空間固定會用完;binlog 是可以追加寫入的。追加寫 是指 binlog 文件寫到一定大小后會切換到下一個,并不會覆蓋以前的日志。

四. 內部工作流程

以一個表的更新語句為例,來看一下執行器和 InnoDB 引擎的內部工作流程:

mysql  update T set c=c+1 where ID=2;

如下圖所示,淺色框表示是在 InnoDB 內部執行的,深色框表示是在執行器中執行的:

MySQL 日志模塊的簡介

執行器先找引擎取 ID=2 這一行。ID 是主鍵,引擎直接用樹搜索找到這一行。如果 ID=2 這一行所在的數據頁本來就在內存中,就直接返回給執行器;否則,需要先從磁盤讀入內存,然后再返回。

執行器拿到引擎給的行數據,把這個值加上 1,比如原來是 N,現在就是 N+1,得到新的一行數據,再調用引擎接口寫入這行新數據。

引擎將這行新數據更新到內存中,同時將這個更新操作記錄到 redo log 里面,此時 redo log 處于 prepare 狀態。然后告知執行器執行完成了,隨時可以提交事務。

執行器生成這個操作的 binlog,并把 binlog 寫入磁盤。

執行器調用引擎的提交事務接口,引擎把剛剛寫入的 redo log 改成提交(commit)狀態,更新完成。

最后三步看上去有點“繞”,將 redo log 的寫入拆成了兩個步驟:prepare 和 commit,其實這就是 兩階段提交。

為什么日志需要 兩階段提交?這里可以用反證法來進行解釋。

由于 redo log 和 binlog 是兩個獨立的邏輯,如果不用兩階段提交,要么就是先寫完 redo log 再寫 binlog,或者采用反過來的順序。用前面的 update 語句來做例子,我們看看這兩種方式會有什么問題。

假設當前 ID=2 的行,字段 c 的值是 0,再假設執行 update 語句過程中在寫完第一個日志后,第二個日志還沒有寫完期間發生了 crash,會出現什么情況呢?

1. 先寫 redo log 后寫 binlog。假設在 redo log 寫完,binlog 還沒有寫完的時候,MySQL 進程異常重啟。redo log 寫完之后,系統即使崩潰,仍然能夠把數據恢復回來,所以恢復后這一行 c 的值是 1。

但是由于 binlog 沒寫完就 crash 了,這時候 binlog 里面就沒有記錄這個語句。因此,之后備份日志的時候,存起來的 binlog 里面就沒有這條語句。

然后你會發現,如果需要用這個 binlog 來恢復臨時庫的話,由于這個語句的 binlog 丟失,這個臨時庫就會少了這一次更新,恢復出來的這一行 c 的值就是 0,與原庫的值不同。

2. 先寫 binlog 后寫 redo log。如果在 binlog 寫完之后 crash,由于 redo log 還沒寫,崩潰恢復以后這個事務無效,所以這一行 c 的值是 0。

但是 binlog 里面已經記錄了“把 c 從 0 改成 1”這個日志。所以,在之后用 binlog 來恢復的時候就多了一個事務出來,恢復出來的這一行 c 的值就是 1,與原庫的值不同。

可以看到,如果不使用“兩階段提交”,那么數據庫的狀態就有可能和用它的日志恢復出來的庫的狀態不一致。

關于“MySQL 日志模塊的簡介”這篇文章就分享到這里了,希望以上內容可以對大家有一定的幫助,使各位可以學到更多知識,如果覺得文章不錯,請把它分享出去讓更多的人看到。

向 AI 問一下細節

正文完
 
丸趣
版權聲明:本站原創文章,由 丸趣 2023-12-04發表,共計3199字。
轉載說明:除特殊說明外本站除技術相關以外文章皆由網絡搜集發布,轉載請注明出處。
評論(沒有評論)
主站蜘蛛池模板: 东乌珠穆沁旗| 永嘉县| 灵台县| 建瓯市| 哈巴河县| 卢龙县| 广丰县| 开平市| 朝阳市| 桂平市| 山西省| 永年县| 瑞丽市| 永济市| 龙海市| 余姚市| 康乐县| 嘉荫县| 临潭县| 呼玛县| 抚顺县| 连城县| 合川市| 霍山县| 铁岭县| 额济纳旗| 镇雄县| 从化市| 普陀区| 宁远县| 陆川县| 庆安县| 廉江市| 凌海市| 宁城县| 固阳县| 德昌县| 新和县| 稷山县| 九龙坡区| 永丰县|