复制的原理其实很简单,仅分为如下三步:mysql
日志文件中记录的究竟是什么呢?mysql支持了两种日志格式,这两种日志格式也体现了各自的复制方式sql
基于语句的复制至关于逻辑复制,即二进制日志记录了操做的语句,经过这些语句在从库进行重放来实现复制。数据库
这种方式简单,二进制日志占用空间少,使得带宽小传输效率较高。可是基于语句的更新依赖于其余因素,好比插入数据时利用时间戳函数调用当前时间做为时间值也会出现问题,由于因为主从之间的延迟致使时间值不一致。存储过程和触发器也可能出现问题。缓存
因此在开发当中咱们应该将逻辑尽可能放在代码层,而不该放到mysql中,不易扩展。安全
基于行的复制至关于物理复制,即二进制日志记录了实际更新数据的每一行。这样致使行复制的压力比较大,由于日志占用空间较大,传输占用带宽也较高。可是比基于语句复制更加精确,能够屏蔽一些因为主库从库之间的差别致使的不一致。如刚才提到的时间戳函数。网络
例如一条更新用户总积分的语句,须要统计用户的全部积分再写入用户表。若是是基于语句复制的话,从库须要再一次统计用户的积分,而基于行复制就直接更新记录,无需再统计用户积分。多线程
由于两种方式各有优缺点,因此mysql在这两种复制模式进行动态的切换。默认是语句。架构
# 若是在双主复制结构中没有设置ID的话就会致使循环同步问题 server_id=1 # 即日志中记录的是语句仍是行更新或者是混合 binlog_format=mixed # 在进行n次事务提交之后,Mysql将执行一次fsync的磁盘同步指令。将缓冲区数据刷新到磁盘。 # 为0的话由Mysql本身控制频率。 sync_binlog=n # 为0的话,log buffer将每秒一次地写入log file中而且刷新到磁盘。 # mysqld进程崩溃会丢失一秒内的全部事务。 # 为1的话,每次事务log buffer会写入log file并刷新到磁盘。(较为安全) # 在崩溃的时候,仅会丢失一个事务。 # 为2的话,每次事务log buffer会写入log file,但一秒一次刷新到磁盘 innodb_flush_logs_at_trx_commit=0 # 阻止从库崩溃后自动启动复制,给一些时间来修复可能的问题, # 崩溃后再自动复制可能会致使更多的问题。而且自己就是不一致的 skip_slave_start=1 # 是否将从库同步的事件也记录到从库自身的bin-log中 # 容许备库将重放的事件也记录到自身的二进制日志中去,能够将备库当作另一台主库的从库 log_slave_update # 日志过时删除时间,延迟严重的话会致使日志文件占用磁盘 expire_logs_days=7
innodb_flush_logs_at_trx_commit的三个参数很容易弄混。如下是详细的解析:并发
mysql先将日志写到log buffer缓冲区当中,再将log buffer缓冲区的数据写到log file日志文件中,此时写入的是内存中的log file,最终仍需操做系统将内存中的数据刷写到磁盘上。 参数0:mysql每秒都会将log buffer的数据写入到log file中而且刷新到磁盘。意味着mysql崩溃的时候将会丢失一秒内的全部事务。 参数1:每次事务提交都会将log buffer写入到log file并刷新到磁盘。意味着在mysql崩溃的时候,仅会丢失一个事务。 参数2:每次事务提交都会将log buffer写入到log file但不一样时写入到磁盘,由mysql自行控制每秒将log file刷写到磁盘上,当mysql崩溃的时候操做系统没崩溃的时候,log_file中仅会丢失一个事务,操做系统仍会将log file刷写到磁盘,而若是操做系统也崩溃或断电的话,则会丢失一秒内的事务。
推荐使用:负载均衡
innodb_flush_logs_at_trx_commit=2 sync_binlog=500
性能会较快
innodb_flush_logs_at_trx_commit=1 sync_binlog=1
较为安全
当主库的TPS并发较高时,因为主库上面是多线程写入的,而从库的SQL线程是单线程的,致使从库SQL可能会跟不上主库的处理速度(生产者比消费者快,致使商品堆积)。
从库配置
sync_binlog=0 innodb_flush_log_at_trx_commit=2 logs-slave-updates=0 增大 innodb_buffer_pool_size
让更多操做在Mysql内存中完成,减小磁盘操做。或者升级Mysql5.7版本使用并行复制。
笔者我的心得,若有错误恳请网友评论指正。
来源:juejin.cn/post/6844903968259178504