MySQL数据库主从同步延迟分析及解决方案

1、MySQL的数据库主从复制原理

MySQL主从复制实际上基于二进制日志，原理能够用一张图来表示：

分为四步走：

1. 主库对全部DDL和DML产生的日志写进binlog；

2. 主库生成一个 log dump 线程，用来给从库I/O线程读取binlog；

3. 从库的I/O Thread去请求主库的binlog，并将获得的binlog日志写到relay log文件中；

4. 从库的SQL Thread会读取relay log文件中的日志解析成具体操做，将主库的DDL和DML操做事件重放。

关于DDL和DML

SQL语言共分为四大类：查询语言DQL，控制语言DCL，操纵语言DML，定义语言DDL。

DQL：能够简单理解为SELECT语句；

DCL：GRANT、ROLLBACK和COMMIT一类语句；

DML：能够理解为CREATE一类的语句；

DDL：INSERT、UPDATE和DELETE语句都是；

2、主从复制存在的问题

1. 主库宕机后，数据可能丢失；

2. 主从同步延迟。

3、MySQL数据库主从同步延迟产生缘由

缘由分析

MySQL的主从复制都是单线程的操做，主库对全部DDL和DML产生的日志写进binlog，因为binlog是顺序写，因此效率很高。Slave的SQL Thread线程将主库的DDL和DML操做事件在slave中重放。DML和DDL的IO操做是随即的，不是顺序的，成本高不少。另外一方面，因为SQL Thread也是单线程的，当主库的并发较高时，产生的DML数量超过slave的SQL Thread所能处理的速度，或者当slave中有大型query语句产生了锁等待那么延时就产生了。

常见缘由：Master负载太高、Slave负载太高、网络延迟、机器性能过低、MySQL配置不合理。

4、主从延时排查方法

经过监控 show slave status 命令输出的Seconds_Behind_Master参数的值来判断：

NULL，表示io_thread或是sql_thread有任何一个发生故障；

0，该值为零，表示主从复制良好；

正值，表示主从已经出现延时，数字越大表示从库延迟越严重。

5、解决方案

解决数据丢失的问题：

1. 半同步复制

从MySQL5.5开始，MySQL已经支持半同步复制了，半同步复制介于异步复制和同步复制之间，主库在执行完事务后不马上返回结果给客户端，须要等待至少一个从库接收到并写到relay log中才返回结果给客户端。相对于异步复制，半同步复制提升了数据的安全性，同时它也形成了一个TCP/IP往返耗时的延迟。

2. 主库配置sync_binlog=1，innodb_flush_log_at_trx_commit=1

sync_binlog的默认值是0，MySQL不会将binlog同步到磁盘，其值表示每写多少binlog同步一次磁盘。

innodb_flush_log_at_trx_commit为1表示每一次事务提交或事务外的指令都须要把日志flush到磁盘。

注意:将以上两个值同时设置为1时，写入性能会受到必定限制，只有对数据安全性要求很高的场景才建议使用，好比涉及到钱的订单支付业务，并且系统I/O能力必须能够支撑！

解决从库复制延迟的问题：

1. 优化网络

2. 升级Slave硬件配置

3. Slave调整参数，关闭binlog，修改innodb_flush_log_at_trx_commit参数值

4. 升级MySQL版本到5.7，使用并行复制