mysql--binlog相关

mysql--binlog相关

   张吉吉     2021年3月26日 08:42     163    

1.binlog的作用

binlog中记录了所有DDL和DML的操作,除了select和show所做的操作。

DDL: 对数据库中的某些对象进行管理,如Create,Alter和Drop.

DML: 对数据库中的数据进行的操作,如insert,delete,update,select等.

  • MySQL主从复制:Replication在Master端开启binlog,Master把它的二进制日志传递给slaves来达到master-slave数据一致的目的

  • 数据恢复:通过使用 mysqlbinlog工具来使恢复数据,其可以根据pos和时间进行一定数据量的恢复。

  • 增量备份:通过mysqldump做全量备份,然后使用binlog做增量备份,达到数据尽可能多的备份。

2.binlog持久化

sync_binlog是最重要的一个参数,这个参数的作用是规定了binlog写入磁盘的时机,并且其也影响mysql在运行过程中对系统性能的影响。

sync_binlog=0,当事务提交之后,MySQL不做fsync之类的磁盘同步指令刷新binlog_cache中的信息到磁盘,而让Filesystem自行决定什么时候来做同步,或者cache满了之后才同步到磁盘。

sync_binlog=n,当每进行n次事务提交之后,MySQL将进行一次fsync之类的磁盘同步指令来将binlog_cache中的数据强制写入磁盘。

sync_binlog=1,当设置为1的时候,是最安全但是性能损耗最大的设置。因为当设置为1的时候,即使系统Crash,也最多丢失binlog_cache中未完成的一个事务,对实际数据没有任何实质性影响。

show variables like "sync_binlog";

可以查看同步的策略

3.binlog新增

当遇到以下3种情况时,MySQL会重新生成一个新的日志文件,文件序号递增:

  • MySQL服务器停止或重启时

  • 使用 flush logs 命令;

  • 当 binlog 文件大小超过 max_binlog_size 变量的值时,默认值max_binlog_size 1073741824,也就是1G。

4.binlog的格式

binlog日志有三种格式

通过命令show variables like 'binlog_format';可以查看其格式。

STATEMENT:基于SQL语句的复制(statement-based replication, SBR)

ROW:基于行的复制(row-based replication, RBR)

MIXED:混合模式复制(mixed-based replication, MBR)

在 MySQL 5.7.7 之前,默认的格式是 STATEMENT,在 MySQL 5.7.7 及更高版本中,默认值是 ROW。

  • Statement

每一条会修改数据的sql都会记录在binlog中。

优点:不需要记录每一行的变化,减少了binlog日志量,节约了IO,提高性能。

缺点:由于记录的只是执行语句,为了这些语句能在slave上正确运行,因此还必须记录每条语句在执行的时候的一些相关信息,以保证所有语句能在slave得到和在master端执行时候相同 的结果。另外mysql 的复制,像一些特定函数功能,slave可与master上要保持一致会有很多相关问题。

ps:相比row能节约多少性能与日志量,这个取决于应用的SQL情况,正常同一条记录修改或者插入row格式所产生的日志量还小于Statement产生的日志量,但是考虑到如果带条件的update操作,以及整表删除,alter表等操作,ROW格式会产生大量日志,因此在考虑是否使用ROW格式日志时应该跟据应用的实际情况,其所产生的日志量会增加多少,以及带来的IO性能问题。

  • Row

5.1.5版本的MySQL才开始支持row level的复制,它不记录sql语句上下文相关信息,仅保存哪条记录被修改。

优点: binlog中可以不记录执行的sql语句的上下文相关的信息,仅需要记录那一条记录被修改成什么了。所以rowlevel的日志内容会非常清楚的记录下每一行数据修改的细节。而且不会出现某些特定情况下的存储过程,或function,以及trigger的调用和触发无法被正确复制的问题.

缺点:所有的执行的语句当记录到日志中的时候,都将以每行记录的修改来记录,这样可能会产生大量的日志内容。

ps:新版本的MySQL中对row level模式也被做了优化,并不是所有的修改都会以row level来记录,像遇到表结构变更的时候就会以statement模式来记录,如果sql语句确实就是update或者delete等修改数据的语句,那么还是会记录所有行的变更。

  • Mixed

从5.1.8版本开始,MySQL提供了Mixed格式,实际上就是Statement与Row的结合。

在Mixed模式下,一般的语句修改使用statment格式保存binlog,如一些函数,statement无法完成主从复制的操作,则采用row格式保存binlog,MySQL会根据执行的每一条具体的sql语句来区分对待记录的日志形式,也就是在Statement和Row之间选择一种。

参考:https://blog.csdn.net/ouyang111222/article/details/50300851


文章评论

0

其他文章