搭建 MySQL 5.7.19 主从复制，以及复制实现细节分析

时间 2019-11-09

标签搭建 mysql 5.7.19 主从复制以及实现细节分析栏目 MySQL 繁體版

原文原文链接

搭建 MySQL 5.7.19 主从复制，以及复制实现细节分析

概念

主从复制可使MySQL数据库主服务器的主数据库，复制到一个或多个MySQL从服务器从数据库，默认状况下，复制异步; 根据配置，能够复制数据库中的全部数据库，选定的数据库或甚至选定的表。html

MySQL中主从复制的优势

横向扩展解决方案 node

在多个从库之间扩展负载以提升性能。在这种环境中，全部写入和更新在主库上进行。可是，读取可能发生在一个或多个从库上。该模型能够提升写入的性能（因为主库专用于更新），同时在多个从库上读取，能够大大提升读取速度。mysql

数据安全性 sql

因为主库数据被复制到从库，从库能够暂停复制过程，能够在从库上运行备份服务，而不会破坏对应的主库数据。数据库

分析 segmentfault

能够在主库上建立实时数据，而信息分析能够在从库上进行，而不会影响主服务器的性能。安全

长距离数据分发服务器

可使用复制建立远程站点使用的数据的本地副本，而无需永久访问主库。网络

1.准备工做

参考 MySQL官网 - 第16章主从复制异步

Mysql版本：MySQL 5.7.19
Master-Server : 192.168.252.123
Slave-Server : 192.168.252.124

关闭防火墙

$ systemctl stop firewalld.service

安装 MySQL

参考 - CentOs7.3 安装 MySQL 5.7.19 二进制版本

首先在两台机器上装上，保证正常启动，可使用

2. Master-Server 配置

修改 my.cnf

配置 Master 以使用基于二进制日志文件位置的复制，必须启用二进制日志记录并创建惟一的服务器ID,不然则没法进行主从复制。

中止MySQL服务。

$ service mysql.server stop

开启binlog ，每台设置不一样的 server-id

$ cat /etc/my.cnf
[mysqld]
log-bin=mysql-bin
server-id=1

启动MySQL服务

$ service mysql.server start

登陆MySQL

$ /usr/local/mysql/bin/mysql -uroot -p

建立用户

每一个从库使用MySQL用户名和密码链接到主库，所以主库上必须有用户账户，从库能够链接。任何账户均可以用于此操做，只要它已被授予 REPLICATION SLAVE权限。能够选择为每一个从库建立不一样的账户，或者每一个从库使用相同账户链接到主库

虽然没必要专门为复制建立账户，但应注意，复制用到的用户名和密码会以纯文本格式存储在主信息存储库文件或表中。所以，须要建立一个单独的账户，该账户只具备复制过程的权限，以尽量减小对其余账户的危害。

登陆MySQL

$ /usr/local/mysql/bin/mysql -uroot -p

mysql> CREATE USER 'replication'@'192.168.252.124' IDENTIFIED BY 'mima';
mysql> GRANT REPLICATION SLAVE ON *.* TO 'replication'@'192.168.252.124';

3.Slave-Server 配置

修改 my.cnf

中止MySQL服务。

$ service mysql.server stop

$ cat /etc/my.cnf
[mysqld]
server-id=2

若是要设置多个从库，则每一个从库的server-id与主库和其余从库设置不一样的惟一值。

启动MySQL服务

$ service mysql.server start

登陆MySQL

$ /usr/local/mysql/bin/mysql -uroot -p

配置主库通讯

查看 Master-Server ， binlog File 文件名称和 Position值位置而且记下来

mysql>  show master status;
+------------------+----------+--------------+------------------+-------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------+----------+--------------+------------------+-------------------+
| mysql-bin.000001 |      629 |              |                  |                   |
+------------------+----------+--------------+------------------+-------------------+
1 row in set (0.00 sec)

要设置从库与主库进行通讯，进行复制，使用必要的链接信息配置从库在从库上执行如下语句
将选项值替换为与系统相关的实际值

参数格式，请勿执行

mysql> CHANGE MASTER TO
    ->     MASTER_HOST='master_host_name',
    ->     MASTER_USER='replication_user_name',
    ->     MASTER_PASSWORD='replication_password',
    ->     MASTER_LOG_FILE='recorded_log_file_name',
    ->     MASTER_LOG_POS=recorded_log_position;

mysql> CHANGE MASTER TO
    -> MASTER_HOST='192.168.252.123',
    -> MASTER_USER='replication',
    -> MASTER_PASSWORD='mima',
    -> MASTER_LOG_FILE='mysql-bin.000001',
    -> MASTER_LOG_POS=629;
Query OK, 0 rows affected, 2 warnings (0.02 sec)

MASTER_LOG_POS=0 写成0 也是能够的

放在一行执行方便

CHANGE MASTER TO MASTER_HOST='192.168.252.123', MASTER_USER='replication', MASTER_PASSWORD='mima', MASTER_LOG_FILE='mysql-bin.000001', MASTER_LOG_POS=629;

启动从服务器复制线程

mysql> START SLAVE;
Query OK, 0 rows affected (0.00 sec)

查看复制状态

mysql>  show slave status\G
*************************** 1. row ***************************
               Slave_IO_State: Waiting for master to send event
                  Master_Host: 192.168.252.123
                  Master_User: replication
                  Master_Port: 3306
                Connect_Retry: 60
              Master_Log_File: mysql-bin.000001
          Read_Master_Log_Pos: 629
               Relay_Log_File: master2-relay-bin.000003
                Relay_Log_Pos: 320
        Relay_Master_Log_File: mysql-bin.000001
             Slave_IO_Running: Yes
            Slave_SQL_Running: Yes
......

检查主从复制通讯状态

Slave_IO_State #从站的当前状态
Slave_IO_Running： Yes #读取主程序二进制日志的I/O线程是否正在运行
Slave_SQL_Running： Yes #执行读取主服务器中二进制日志事件的SQL线程是否正在运行。与I/O线程同样
Seconds_Behind_Master #是否为0，0就是已经同步了

必须都是 Yes

若是不是缘由主要有如下 4 个方面：

一、网络不通
二、密码不对
三、MASTER_LOG_POS 不对 ps
四、mysql 的 auto.cnf server-uuid 同样（可能你是复制的mysql）

$ find / -name 'auto.cnf'
$ cat /var/lib/mysql/auto.cnf
[auto]
server-uuid=6b831bf3-8ae7-11e7-a178-000c29cb5cbc # 按照这个16进制格式，修改server-uuid，重启mysql便可

检查复制状态

4.测试主从复制

启动MySQL服务

$ service mysql.server start

登陆MySQL

$ /usr/local/mysql/bin/mysql -uroot -p

在 Master-Server 建立测试库

mysql> CREATE DATABASE `replication_wwww.ymq.io`;
mysql> use `replication_wwww.ymq.io`;
mysql> CREATE TABLE `sync_test` (`id` int(11) NOT NULL AUTO_INCREMENT, `name` varchar(255) NOT NULL, PRIMARY KEY (`id`) ) ENGINE=InnoDB AUTO_INCREMENT=2 DEFAULT CHARSET=utf8;

在 Slave-Server 查看是否同步过来

mysql> show databases;
+-------------------------+
| Database                |
+-------------------------+
| information_schema      |
| mysql                   |
| performance_schema      |
| replication_wwww.ymq.io |
| sys                     |
+-------------------------+

mysql> use replication_wwww.ymq.io
mysql> show tables;

+-----------------------------------+
| Tables_in_replication_wwww.ymq.io |
+-----------------------------------+
| sync_test                         |
+-----------------------------------+
1 row in set (0.00 sec)

一些命令

查看主服务器的运行状态

mysql> show master status;
+------------------+----------+--------------+------------------+-------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------+----------+--------------+------------------+-------------------+
| mysql-bin.000001 |     1190 |              |                  |                   |
+------------------+----------+--------------+------------------+-------------------+

查看从服务器主机列表

mysql> show slave hosts;
+-----------+------+------+-----------+--------------------------------------+
| Server_id | Host | Port | Master_id | Slave_UUID                           |
+-----------+------+------+-----------+--------------------------------------+
|         2 |      | 3306 |         1 | 6b831bf2-8ae7-11e7-a178-000c29cb5cbc |
+-----------+------+------+-----------+--------------------------------------+

获取binlog文件列表

mysql> show binary logs;
+------------------+-----------+
| Log_name         | File_size |
+------------------+-----------+
| mysql-bin.000001 |      1190 |
+------------------+-----------+

只查看第一个binlog文件的内容

mysql> mysql> show binlog events;
+------------------+-----+----------------+-----------+-------------+-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
| Log_name         | Pos | Event_type     | Server_id | End_log_pos | Info                                                                                                                                                                                                  |
+------------------+-----+----------------+-----------+-------------+-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
| mysql-bin.000001 |   4 | Format_desc    |         1 |         123 | Server ver: 5.7.19-log, Binlog ver: 4                                                                                                                                                                 |
| mysql-bin.000001 | 123 | Previous_gtids |         1 |         154 |                                                                                                                                                                                                       |
| mysql-bin.000001 | 420 | Anonymous_Gtid |         1 |         485 | SET @@SESSION.GTID_NEXT= 'ANONYMOUS'                                                                                                                                                                  |
| mysql-bin.000001 | 485 | Query          |         1 |         629 | GRANT REPLICATION SLAVE ON *.* TO 'replication'@'192.168.252.124'                                                                                                                                     |
| mysql-bin.000001 | 629 | Anonymous_Gtid |         1 |         694 | SET @@SESSION.GTID_NEXT= 'ANONYMOUS'                                                                                                                                                                  |
| mysql-bin.000001 | 694 | Query          |         1 |         847 | CREATE DATABASE `replication_wwww.ymq.io`                                                                                                                                                             |
| mysql-bin.000001 | 847 | Anonymous_Gtid |         1 |         912 | SET @@SESSION.GTID_NEXT= 'ANONYMOUS'                                                                                                                                                                  |
| mysql-bin.000001 | 912 | Query          |         1 |        1190 | use `replication_wwww.ymq.io`; CREATE TABLE `sync_test` (`id` int(11) NOT NULL AUTO_INCREMENT, `name` varchar(255) NOT NULL, PRIMARY KEY (`id`) ) ENGINE=InnoDB AUTO_INCREMENT=2 DEFAULT CHARSET=utf8 |
+------------------+-----+----------------+-----------+-------------+-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+

查看指定binlog文件的内容

mysql> mysql> show binlog events in 'mysql-bin.000001';
+------------------+-----+----------------+-----------+-------------+-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
| Log_name         | Pos | Event_type     | Server_id | End_log_pos | Info                                                                                                                                                                                                  |
+------------------+-----+----------------+-----------+-------------+-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
| mysql-bin.000001 |   4 | Format_desc    |         1 |         123 | Server ver: 5.7.19-log, Binlog ver: 4                                                                                                                                                                 |
| mysql-bin.000001 | 123 | Previous_gtids |         1 |         154 |                                                                                                                                                                                                       |
| mysql-bin.000001 | 420 | Anonymous_Gtid |         1 |         485 | SET @@SESSION.GTID_NEXT= 'ANONYMOUS'                                                                                                                                                                  |
| mysql-bin.000001 | 485 | Query          |         1 |         629 | GRANT REPLICATION SLAVE ON *.* TO 'replication'@'192.168.252.124'                                                                                                                                     |
| mysql-bin.000001 | 629 | Anonymous_Gtid |         1 |         694 | SET @@SESSION.GTID_NEXT= 'ANONYMOUS'                                                                                                                                                                  |
| mysql-bin.000001 | 694 | Query          |         1 |         847 | CREATE DATABASE `replication_wwww.ymq.io`                                                                                                                                                             |
| mysql-bin.000001 | 847 | Anonymous_Gtid |         1 |         912 | SET @@SESSION.GTID_NEXT= 'ANONYMOUS'                                                                                                                                                                  |
| mysql-bin.000001 | 912 | Query          |         1 |        1190 | use `replication_wwww.ymq.io`; CREATE TABLE `sync_test` (`id` int(11) NOT NULL AUTO_INCREMENT, `name` varchar(255) NOT NULL, PRIMARY KEY (`id`) ) ENGINE=InnoDB AUTO_INCREMENT=2 DEFAULT CHARSET=utf8 |
+------------------+-----+----------------+-----------+-------------+-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+

启动从库复制线程

mysql> START SLAVE;
Query OK, 0 rows affected, 1 warning (0.00 sec)

中止从库复制线程

mysql> STOP SLAVE;
Query OK, 0 rows affected (0.00 sec)

5.复制实现细节分析

MySQL主从复制功能使用三个线程实现，一个在主服务器上，两个在从服务器上

1.Binlog转储线程。

当从服务器与主服务器链接时，主服务器会建立一个线程将二进制日志内容发送到从服务器。
该线程可使用语句 SHOW PROCESSLIST(下面有示例介绍) 在服务器 sql 控制台输出中标识为Binlog Dump线程。

二进制日志转储线程获取服务器上二进制日志上的锁，用于读取要发送到从服务器的每一个事件。一旦事件被读取，即便在将事件发送到从服务器以前，锁会被释放。

2.从服务器I/O线程。

当在从服务器sql 控制台发出 START SLAVE语句时，从服务器将建立一个I/O线程，该线程链接到主服务器，并要求它发送记录在主服务器上的二进制更新日志。

从机I/O线程读取主服务器Binlog Dump线程发送的更新（参考上面 Binlog转储线程介绍），并将它们复制到本身的本地文件二进制日志中。

该线程的状态显示详情 Slave_IO_running 在输出端使用命令SHOW SLAVE STATUS

使用\G语句终结符,而不是分号,是为了，易读的垂直布局

这个命令在上面 查看从服务器状态 用到过

mysql> SHOW SLAVE STATUS\G

3.从服务器SQL线程。

从服务器建立一条SQL线程来读取由主服务器I/O线程写入的二级制日志，并执行其中包含的事件。

在前面的描述中，每一个主/从链接有三个线程。主服务器为每一个当前链接的从服务器建立一个二进制日志转储线程，每一个从服务器都有本身的I/O和SQL线程。
从服务器使用两个线程将读取更新与主服务器更新事件，并将其执行为独立任务。所以，若是语句执行缓慢，则读取语句的任务不会减慢。

例如，若是从服务器开始几分钟没有运行，或者即便SQL线程远远落后，它的I/O线程也能够从主服务器创建链接时，快速获取全部二进制日志内容。

若是从服务器在SQL线程执行全部获取的语句以前中止，则I/O线程至少获取已经读取到的内容，以便将语句的安全副本存储在本身的二级制日志文件中，准备下次执行主从服务器创建链接，继续同步。

使用命令 SHOW PROCESSLIST\G 能够查看有关复制的信息

命令 SHOW FULL PROCESSLISTG

在 Master 主服务器执行的数据示例

mysql>  SHOW FULL PROCESSLIST\G
*************************** 1. row ***************************
     Id: 22
   User: repl
   Host: node2:39114
     db: NULL
Command: Binlog Dump
   Time: 4435
  State: Master has sent all binlog to slave; waiting for more updates
   Info: NULL

Id: 22是Binlog Dump服务链接的从站的复制线程
Host: node2:39114 是从服务，主机名级及端口
State: 信息表示全部更新都已同步发送到从服务器，而且主服务器正在等待更多更新发生。
若是Binlog Dump在主服务器上看不到线程，意味着主从复制没有配置成功; 也就是说，没有从服务器链接主服务器。

命令 SHOW PROCESSLISTG

在 Slave 从服务器，查看两个线程的更新状态

mysql> SHOW PROCESSLIST\G
*************************** 1. row ***************************
     Id: 6
   User: system user
   Host: 
     db: NULL
Command: Connect
   Time: 6810
  State: Waiting for master to send event
   Info: NULL
*************************** 2. row ***************************
     Id: 7
   User: system user
   Host: 
     db: NULL
Command: Connect
   Time: 3069
  State: Slave has read all relay log; waiting for more updates
   Info: NULL

Id: 6是与主服务器通讯的I/O线程
Id: 7是正在处理存储在中继日志中的更新的SQL线程

在运行 SHOW PROCESSLIST 命令时，两个线程都空闲，等待进一步更新

若是在主服务器上在设置的超时，时间内 Binlog Dump线程没有活动，则主服务器会和从服务器断开链接。超时取决于的 服务器系统变量 值 net_write_timeout(在停止写入以前等待块写入链接的秒数，默认10秒)和 net_retry_count;(若是通讯端口上的读取或写入中断，请在重试次数，默认10次) 设置服务器系统变量

该SHOW SLAVE STATUS语句提供了有关从服务器上复制处理的附加信息。请参见第16.1.7.1节“检查复制状态”。

6.更多常见主从复制问题：

常见主从复制问题

Contact

做者：鹏磊
出处：http://www.ymq.io
Email：admin@souyunku.com
版权归做者全部，转载请注明出处
Wechat：关注公众号，搜云库，专一于开发技术的研究与知识分享