当前位置: 移动技术网 > IT编程>数据库>Mysql > mysql中binlog_format模式与配置详细分析

mysql中binlog_format模式与配置详细分析

2017年12月07日  | 移动技术网IT编程  | 我要评论

禁忌情人 庭妍,撒旦的微笑bl,中国媳妇第六部

mysql复制主要有三种方式:基于sql语句的复制(statement-based replication, sbr),基于行的复制(row-based replication, rbr),混合模式复制(mixed-based replication, mbr)。对应的,binlog的格式也有三种:statement,row,mixed

① statement模式(sbr)

每一条会修改数据的sql语句会记录到binlog中。优点是并不需要记录每一条sql语句和每一行的数据变化,减少了binlog日志量,节约io,提高性能。缺点是在某些情况下会导致master-slave中的数据不一致(如sleep()函数, last_insert_id(),以及user-defined functions(udf)等会出现问题)

② row模式(rbr)

不记录每条sql语句的上下文信息,仅需记录哪条数据被修改了,修改成什么样了。而且不会出现某些特定情况下的存储过程、或function、或trigger的调用和触发无法被正确复制的问题。缺点是会产生大量的日志,尤其是alter table的时候会让日志暴涨。

③ mixed模式(mbr)

以上两种模式的混合使用,一般的复制使用statement模式保存binlog,对于statement模式无法复制的操作使用row模式保存binlog,mysql会根据执行的sql语句选择日志保存方式。

binlog复制配置

在mysql的配置文件my.cnf中,可以通过一下选项配置binglog相关

binlog_format      = mixed             //binlog日志格式,mysql默认采用statement,建议使用mixed
log-bin         = /data/mysql/mysql-bin.log  //binlog日志文件
expire_logs_days    = 7              //binlog过期清理时间
max_binlog_size     = 100m            //binlog每个日志文件大小
binlog_cache_size    = 4m            //binlog缓存大小
max_binlog_cache_size  = 512m           //最大binlog缓存大小

三 mixed说明

对于执行的sql语句中包含now()这样的时间函数,会在日志中产生对应的unix_timestamp()*1000的时间字符串,slave在完成同步时,取用的是sqlevent发生的时间来保证数据的准确性。另外对于一些功能性函数slave能完成相应的数据同步,而对于上面指定的一些类似于udf函数,导致slave无法知晓的情况,则会采用row格式存储这些binlog,以保证产生的binlog可以供slave完成数据同步。

现在来比较以下 sbr 和 rbr 2中模式各自的优缺点:

sbr 的优点:

历史悠久,技术成熟

binlog文件较小

binlog中包含了所有数据库更改信息,可以据此来审核数据库的安全等情况

binlog可以用于实时的还原,而不仅仅用于复制

主从版本可以不一样,从服务器版本可以比主服务器版本高

sbr 的缺点:

不是所有的update语句都能被复制,尤其是包含不确定操作的时候。

调用具有不确定因素的 udf 时复制也可能出问题

使用以下函数的语句也无法被复制:

* load_file()

* uuid()

* user()

* found_rows()

* sysdate() (除非启动时启用了 --sysdate-is-now 选项)

insert ... select 会产生比 rbr 更多的行级锁

复制需要进行全表扫描(where 语句中没有使用到索引)的 update 时,需要比 rbr 请求更多的行级锁

对于有 auto_increment 字段的 innodb表而言,insert 语句会阻塞其他 insert 语句

对于一些复杂的语句,在从服务器上的耗资源情况会更严重,而 rbr 模式下,只会对那个发生变化的记录产生影响
存储函数(不是存储过程)在被调用的同时也会执行一次 now() 函数,这个可以说是坏事也可能是好事

确定了的 udf 也需要在从服务器上执行

数据表必须几乎和主服务器保持一致才行,否则可能会导致复制出错

执行复杂语句如果出错的话,会消耗更多资源

rbr 的优点:

任何情况都可以被复制,这对复制来说是最安全可靠的

和其他大多数数据库系统的复制技术一样

多数情况下,从服务器上的表如果有主键的话,复制就会快了很多

复制以下几种语句时的行锁更少:

* insert ... select

* 包含 auto_increment 字段的 insert

* 没有附带条件或者并没有修改很多记录的 update 或 delete 语句

执行 insert,update,delete 语句时锁更少

从服务器上采用多线程来执行复制成为可能

rbr 的缺点:

binlog 大了很多

复杂的回滚时 binlog 中会包含大量的数据

主服务器上执行 update 语句时,所有发生变化的记录都会写到 binlog 中,而 sbr 只会写一次,这会导致频繁发生 binlog 的并发写问题

udf 产生的大 blob 值会导致复制变慢

无法从 binlog 中看到都复制了写什么语句

当在非事务表上执行一段堆积的sql语句时,最好采用 sbr 模式,否则很容易导致主从服务器的数据不一致情况发生
另外,针对系统库 mysql 里面的表发生变化时的处理规则如下:

如果是采用 insert,update,delete 直接操作表的情况,则日志格式根据 binlog_format 的设定而记录

如果是采用 grant,revoke,set password 等管理语句来做的话,那么无论如何都采用 sbr 模式记录

注:采用 rbr 模式后,能解决很多原先出现的主键重复问题。

总结

以上就是本文关于mysql中binlog_format模式与配置详细分析的全部内容,希望对大家有所帮助。感兴趣的朋友可以参阅:几个比较重要的mysql变量mysql prepare原理详解mysql 声明变量及存储过程分析等,有什么问题请留言,欢迎大家交流讨论。

如对本文有疑问,请在下面进行留言讨论,广大热心网友会与你互动!! 点击进行留言回复

相关文章:

验证码:
移动技术网