這篇文章將為大家詳細講解有關MySQL日志模塊的簡介,小編覺得挺實用的,因此分享給大家做個參考,希望大家閱讀完這篇文章后可以有所收獲。
在成都做網站、成都網站設計過程中,需要針對客戶的行業(yè)特點、產品特性、目標受眾和市場情況進行定位分析,以確定網站的風格、色彩、版式、交互等方面的設計方向。成都創(chuàng)新互聯還需要根據客戶的需求進行功能模塊的開發(fā)和設計,包括內容管理、前臺展示、用戶權限管理、數據統(tǒng)計和安全保護等功能。目錄
一、簡介
二、redo log
三. binlog
四. 內部工作流程
MySql學習專欄
1. MySQL基礎架構詳解
2. MySQL索引底層數據結構與算法
3. MySQL5.7開啟binlog日志,及數據恢復簡單示例
4. MySQL日志模塊
一、簡介
MySQL 有兩大重要的日志模塊:redo log(重做日志)和 binlog(歸檔日志)。
redo log是InnoDB存儲引擎層的日志,binlog是MySQL Server層記錄的日志, 兩者都是記錄了某些操作的日志,但兩者記錄的格式不同。
二、redo log
redo log: 又稱(重做日志)文件,用于記錄事務操作的變化,記錄的是數據修改之后的值,不管事務是否提交都會記錄下來。
在media failure時,redo log文件就能派上用場,如數據庫掉電,InnoDB存儲引擎會使用redo log恢復到掉電前的時刻,以此來保證數據的完整性。
當有一條記錄需要更新的時候,InnoDB 引擎就會先把記錄寫到 redo log 里面,并更新內存,這個時候更新就算完成了。
InnoDB 引擎會在適當的時候,將這個操作記錄更新到磁盤里面,而這個更新一般是在系統(tǒng)比較空閑的時候完成的,以此來提升更新效率。
這里涉及到WAL即Write-Ahead Logging技術,他的關鍵點就是先寫日志,再寫磁盤。
InnoDB 的 redo log 是固定大小的,比如可以配置為一組 4 個文件,每個文件的大小是 1GB,那么總共就可以記錄 4GB 的操作。
redo log會從頭開始寫,寫到末尾就又回到開頭循環(huán)寫,如下圖所示。
write pos 是當前記錄的位置,一邊寫一邊后移,寫到第 3 號文件末尾后就回到 0 號文件開頭。
check point 是當前要擦除的位置,也是往后推移并且循環(huán)的,擦除記錄前要把記錄更新到數據文件。
write pos 和check point 之間的是未使用的部分,可以用來記錄新的操作。
如果write pos 追上 check point,表示redo log記錄滿了,這時候不能再執(zhí)行新的更新,得停下來先擦掉一些記錄,把check point 推進一下。
有了 redo log,InnoDB 就可以保證即使數據庫發(fā)生異常重啟,之前提交的記錄都不會丟失,這個能力稱為crash-safe。
為什么要使用redo log日志?
假如我們對數據庫進行DML操作,直接把執(zhí)行SQL寫入磁盤,當寫入并發(fā)較大時,對數據寫入磁盤的壓力會造成一定影響,
當我們插入操作是,發(fā)現當前非葉子節(jié)點一頁數據量不夠時,要進行分頁算法,效率會比較低;
當我使用redo log日志,先把我們DML操作寫入日志,通過一個"中轉站",空閑時候再通過check point寫入磁盤,效率會高很多;
MySQL設置Redo Log
寫入日innodb_log_buffer_size的大?。海J8M)
innodb_log_file_size 重做日志文件的大小。
innodb_log_files_in_group 指定重做日志文件組中文件的數量,默認2
innodb_mirrored_log_groups 指定了日志鏡像文件組的數量,默認1
innodb_log_group_home_dir 指定日志文件組所在的路徑,默認./,表示在數據庫的數據目錄下
innodb_flush_log_at_trx_commit 設置commit時如何將log buffer中日志刷log file中 (值0、1、2)默認1
三. binlog
redo log 是 InnoDB 引擎特有的日志,而 Server 層也有自己的日志,稱為binlog(歸檔日志)。
為什么會有兩份日志呢?
因為最開始 MySQL 里并沒有 InnoDB 引擎。MySQL 自帶的引擎是 MyISAM,但是 MyISAM 沒有 crash-safe 的能力,binlog 日志只能用于歸檔。
而 InnoDB 是另一個公司以插件形式引入 MySQL 的,既然只依靠 binlog 是沒有 crash-safe 能力的,所以 InnoDB 使用另外一套日志系統(tǒng)——也就是 redo log 來實現crash-safe 能力。
這兩種日志有以下三點不同。
redo log 是 InnoDB 引擎特有的;binlog 是 MySQL 的 Server 層實現的,所有引擎都可以使用。
redo log 是物理日志,記錄的是 "在某個數據頁上做了什么修改" ;binlog 是邏輯日志,記錄的是這個語句的原始邏輯,比如 "給 ID=2 這一行的 c 字段加 1" 。
redo log 是循環(huán)寫的,空間固定會用完;binlog 是可以追加寫入的。 "追加寫" 是指 binlog 文件寫到一定大小后會切換到下一個,并不會覆蓋以前的日志。
四. 內部工作流程
以一個表的更新語句為例,來看一下執(zhí)行器和 InnoDB 引擎的內部工作流程:
mysql> update T set c=c+1 where ID=2;
如下圖所示,淺色框表示是在 InnoDB 內部執(zhí)行的,深色框表示是在執(zhí)行器中執(zhí)行的:
執(zhí)行器先找引擎取 ID=2 這一行。ID 是主鍵,引擎直接用樹搜索找到這一行。如果 ID=2 這一行所在的數據頁本來就在內存中,就直接返回給執(zhí)行器;否則,需要先從磁盤讀入內存,然后再返回。
執(zhí)行器拿到引擎給的行數據,把這個值加上 1,比如原來是 N,現在就是 N+1,得到新的一行數據,再調用引擎接口寫入這行新數據。
引擎將這行新數據更新到內存中,同時將這個更新操作記錄到 redo log 里面,此時 redo log 處于 prepare 狀態(tài)。然后告知執(zhí)行器執(zhí)行完成了,隨時可以提交事務。
執(zhí)行器生成這個操作的 binlog,并把 binlog 寫入磁盤。
執(zhí)行器調用引擎的提交事務接口,引擎把剛剛寫入的 redo log 改成提交(commit)狀態(tài),更新完成。
最后三步看上去有點“繞”,將 redo log 的寫入拆成了兩個步驟:prepare 和 commit,其實這就是 "兩階段提交"。
為什么日志需要 "兩階段提交"?這里可以用反證法來進行解釋。
由于 redo log 和 binlog 是兩個獨立的邏輯,如果不用兩階段提交,要么就是先寫完 redo log 再寫 binlog,或者采用反過來的順序。用前面的 update 語句來做例子,我們看看這兩種方式會有什么問題。
假設當前 ID=2 的行,字段 c 的值是 0,再假設執(zhí)行 update 語句過程中在寫完第一個日志后,第二個日志還沒有寫完期間發(fā)生了 crash,會出現什么情況呢?
1. 先寫 redo log 后寫 binlog。假設在 redo log 寫完,binlog 還沒有寫完的時候,MySQL 進程異常重啟。redo log 寫完之后,系統(tǒng)即使崩潰,仍然能夠把數據恢復回來,所以恢復后這一行 c 的值是 1。
但是由于 binlog 沒寫完就 crash 了,這時候 binlog 里面就沒有記錄這個語句。因此,之后備份日志的時候,存起來的 binlog 里面就沒有這條語句。
然后你會發(fā)現,如果需要用這個 binlog 來恢復臨時庫的話,由于這個語句的 binlog 丟失,這個臨時庫就會少了這一次更新,恢復出來的這一行 c 的值就是 0,與原庫的值不同。
2. 先寫 binlog 后寫 redo log。如果在 binlog 寫完之后 crash,由于 redo log 還沒寫,崩潰恢復以后這個事務無效,所以這一行 c 的值是 0。
但是 binlog 里面已經記錄了“把 c 從 0 改成 1”這個日志。所以,在之后用 binlog 來恢復的時候就多了一個事務出來,恢復出來的這一行 c 的值就是 1,與原庫的值不同。
可以看到,如果不使用“兩階段提交”,那么數據庫的狀態(tài)就有可能和用它的日志恢復出來的庫的狀態(tài)不一致。
關于“MySQL日志模塊的簡介”這篇文章就分享到這里了,希望以上內容可以對大家有一定的幫助,使各位可以學到更多知識,如果覺得文章不錯,請把它分享出去讓更多的人看到。
分享題目:MySQL日志模塊的簡介-創(chuàng)新互聯
網頁路徑:http://jinyejixie.com/article36/dpscpg.html
成都網站建設公司_創(chuàng)新互聯,為您提供網站營銷、外貿網站建設、定制網站、企業(yè)網站制作、品牌網站制作、營銷型網站建設
聲明:本網站發(fā)布的內容(圖片、視頻和文字)以用戶投稿、用戶轉載內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網站立場,如需處理請聯系客服。電話:028-86922220;郵箱:631063699@qq.com。內容未經允許不得轉載,或轉載時需注明來源: 創(chuàng)新互聯