MySQL的rollback(總結分享)

本篇文章給大家帶來了關于mysql的相關知識,其中主要整理了rollback的相關問題,主要介紹了書屋回滾以及回滾機制等內容,下面一起來看一下,希望對大家有幫助。

MySQL的rollback(總結分享)

推薦學習:mysql

經常會遇到操作一張大表,發現操作時間過長或影響在線業務,想要回退大表操作的場景。在停止大表操作之后,等待回滾是一個很漫長的過程,盡管可能對知道一些縮短時間的方法,處于對生產環境數據完整性的敬畏,也會選擇不做介入。

事務回滾

事務是關系型數據庫里的執行單位,可以通過最后階段控制選擇提交或回滾。在各種無法保證完整性的場景下進行回滾操作。mysql里回滾是通過Undo日志完成,Undo日志記錄包含關于如何撤消事務相關的最新更改的信息。Undo日志存在于Undo日志段中,Undo日志段包含在回滾段中。回滾段位于undo表空間和全局Temporary表空間中。
關系如下:

MySQL的rollback(總結分享)

  • undo文件

    MySQL的rollback(總結分享)

mysql > show variables like '%undo%'; +--------------------------+--------------------+ | Variable_name            | Value              | +--------------------------+--------------------+ | innodb_max_undo_log_size | 1073741824         | | innodb_undo_directory    | /opt/data8.0/mysql | | innodb_undo_log_encrypt  | OFF                | | innodb_undo_log_truncate | ON                 | | innodb_undo_tablespaces  | 2                  | +--------------------------+--------------------+ 5 rows in set (0.00 sec)

全局Temporary所指的一個臨時表空間(ibtmp1),用于存儲對用戶創建的臨時表所做更改的回滾段。

MySQL的rollback(總結分享)

mysql > SELECT @@innodb_temp_data_file_path; +-------------------------------+ | @@innodb_temp_data_file_path  | +-------------------------------+ | ibtmp1:128M:autoextend:max:30G | +-------------------------------+

理解了回滾包含的文件都有那些 ,繼續往下看。

回滾機制:

MySQL回滾控制是內部innodb引擎協調解決,不提供人為控制的機制。目前提供的MySQL回滾參數如下:

mysql> SHOW VARIABLES LIKE  '%ROLL%'; +----------------------------+-------+ | Variable_name              | Value | +----------------------------+-------+ | innodb_rollback_on_timeout | OFF   | | innodb_rollback_segments   | 128   | +----------------------------+-------+

innodb_rollback_on_timeout:

InnoDB默認只在事務超時時回滾最后一條語句。如果指定了——InnoDB -rollback-on-timeout,事務超時將導致InnoDB中止并回滾整個事務。默認下是關閉的,一旦指定時間,如回滾失敗。可以想象到數據會存在不一致的問題。這個方式不可取。

Innodb_rollback_segments(1~128):

定義了分配給每個undo表空間的回滾段的數量,以及為生成undo記錄的事務分配的全局臨時表空間的數量。
回滾段支持的事務數量:取決于回滾段中的撤銷slot數量以及每個事務所需的撤銷日志數量

官方提供的回滾段中undo槽的數量根據InnoDB頁面大小有關:

MySQL的rollback(總結分享)

從最新的MySQL8.0.27源碼實現中 storageinnobaseincludetrx0rseg.h:

/* Number of undo log slots in a rollback segment file copy  這里 UNIV_PAGE_SIZE正常頁面的大小  即 1024*/ #define TRX_RSEG_N_SLOTS (UNIV_PAGE_SIZE / 16)  /* Maximum number of transactions supported by a single rollback segment  單個回滾段支持的最大事務數1024/2=512 */ #define TRX_RSEG_MAX_N_TRXS (TRX_RSEG_N_SLOTS / 2)

在默認情況下page中又劃分了1024個slot槽(TRX_RSEG_N_SLOTS),每個slot又對應到一個undo log對象,因此理論上InnoDB可以支持 128 * 512=65536個普通事務。
原理部分參考MySQL · 引擎特性 · InnoDB undo log 漫游
官方提供undbo回滾并發讀寫場景:

MySQL的rollback(總結分享)

從上訴的原理中回到實際應用場景中:
對于回滾段支持的能力,還是可觀的,但往往執行大批量的回滾的時候非常慢。特別是在線處理過程中發現10w行回滾 有可能10分鐘這樣的情況。甚至更長時間。
下面通過sysbench準備5000w的單表數據,在無負載下,大概刪除1分鐘,之后通過kill -9,強制停止方式回滾事務:

MySQL的rollback(總結分享)

明顯重新啟動效果更加。
但kill -9 方式容易把數據頁損壞,存在很大的風險。日常當中數據庫也有負載,可想而知,大事務回滾的代價非常大。

總結

應盡量避免大的回退操作,非常消耗數據庫資源和性能,生產環境下會導致重大生產事故。避免不了大事務回滾,可以采取以下方式:

  • 對于批量操作,可以分批提交 比如1000行 ~5000行之類的
  • undo空間和全局臨時表空間 可以適當的調整。建議4個undo文件,全局ibtmp1初始化1G
  • 高可用環境下,能確數據的一致性下,可以把從提升新主,提供服務,等待大事務回滾。
  • 極端情況下,可以通過 kill -9 重啟操作會因為數據量非常大,導致mysql恢復緩慢,此時需要等待mysql進行崩潰恢復,根據數據量的不同,等待的時間也不同
  • 如重新啟動過程中,存在數據頁損壞或跳過回滾 ,可通過innodb_force_recovery=3(不執行事務回滾操作。)

推薦學習:mysql

? 版權聲明
THE END
喜歡就支持一下吧
點贊14 分享