docker进阶（Mysql主从复制原理及搭建）_mysql 主从复制原理 docker

docker进阶（Mysql主从复制原理及搭建）

此篇主要是记录在docker中搭建mysql主从复制

MySQL主从复制原理

**主要原理：**master将数据保存再二进制日志中，I/O向dump发送同步请求，dump把数据发送给I/O线程，I/O写入本地的中继日志，SQL线程读取本地中继日志数据，同步到自己的数据库中，完成同步。

MySQL支持的复制类型

1. 基于语句的复制：在主服务器上执行的SQL语句，在从服务器上执行同样的语句。MySQL默认采用基于语句的复制，效率比较高。但必须开启二进制日志功能。
2. 基于行进行复制：把改变的内容复制过去，而不是把命令在服务器上执行一遍。
3. 混合类型的复制：默认采用基于语句的复制，一旦发现基于语句无法精确复制时，就会采用基于行的复制。

复制的工作过程

1. 在每个事物更新数据完成之前，Master在二进制日志记录这些变化。写入二进制日志完成后，Master通知存储引擎提交事务；
2. Slave将Master的Binary log（二进制日志）复制到其Relay log（中继日志）。首先Slave开始一个工作进程——I/O线程，I/O线程在Master上打开一个普通的连接，然后就开始Binlog dump process（二进制日志转储过程）。Binlog dump process从Master的二进制日志中读取事件，如果已经跟上Master，他就会睡眠并等待Master产生新的事件。I/O线程将这些事件写入中继日志。
3. SQL slave thread（SQL从线程）处理该过程的最后一步。SQL线程从中继日志中读取事件，并重放其中的事件而更新Slave的数据，使其与Master中的数据一致，只要该线程与I/O线程保存一致，中继日志通常会位于OS的缓存中，所以中继日志的开销很小。

注意：复制过程有个很重要的限制，即复制在Slave上是串行化的，也就是说在Master上的并行操作不能在Slave上并行操作。

安装mysql主从复制

新建主服务器容器实例3307

docker run -p 3307:3306 --name mysql-master \
-v /mydata/mysql-master/log:/var/log/mysql \
-v /mydata/mysql-master/data:/var/lib/mysql \
-v /mydata/mysql-master/conf:/etc/mysql \
-e MYSQL_ROOT_PASSWORD=root \
-d mysql:5.7
1
2
3
4
5
6

创建master配置文件

# 切换到/mydata/mysql-master/conf下
cd /mydata/mysql-master/conf
# 创建文件my.cnf
vim my.cnf
#### my.cnf内容如下
[mysqld]
## 设置server_id，同一局域网中需要唯一
server_id=101
## 指定不需要同步的数据库名称
binlog-ignore-db=mysql
## 开启二进制日志功能
log-bin=mall-mysql-bin
## 设置二进制日志使用内存大小（事务）
binlog_cache_size=1M
## 设置使用的二进制日志格式（mixed，statement，row）
binlog_format=mixed
## 二进制日志过期清理世间。默认值为0，表示不自动清理
expire_logs_days=7
## 跳过主从复制中遇到的所有错误或指定类型的错误，避免slave端复制中断
##如：1062错误是指一些主键重复，1032错误是因为主从数据库数据不一致
slave_skip_errors=1062
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21

修改配置后重启Master实例

docker restart mysql-master
1

进入mysql-master容器

docker exec -it mysql-master /bin/bash
mysql -uroot -proot
1
2

mysql-master容器实例内创建数据同步用户

-- 创建用户
CREATE USER 'slave'@'%' IDENTIFIED BY '123456';
-- 用户授权
GRANT REPLICATION SLAVE,REPLICATION CLIENT ON *.* TO 'slave'@'%';
1
2
3
4

新建从服务器容器实例3308

docker run -p 3308:3306 --name mysql-slave \
-v /mydata/mysql-slave/log:/var/log/mysql \
-v /mydata/mysql-slave/data:/var/lib/mysql \
-v /mydata/mysql-slave/conf:/etc/mysql \
-e MYSQL_ROOT_PASSWORD=root \
-d mysql:5.7
1
2
3
4
5
6

创建slave配置文件

# 切换到/mydata/mysql-slave/conf下
cd /mydata/mysql-slave/conf
# 创建文件my.cnf
vim my.cnf
#### my.cnf内容如下
[mysqld]
## 设置server_id，同一局域网中需要唯一
server_id=102
## 指定不需要同步的数据库名称
binlog-ignore-db=mysql
## 开启二进制日志功能，以备Slave作为其他数据库实例的Master时使用
log-bin=mall-mysql-slave1-bin
## 设置二进制日志使用内存大小（事务）
binlog_cache_size=1M
## 设置使用的二进制日志格式（mixed，statement，row）
binlog_format=mixed
## 二进制日志过期清理世间。默认值为0，表示不自动清理
expire_logs_days=7
## 跳过主从复制中遇到的所有错误或指定类型的错误，避免slave端复制中断
##如：1062错误是指一些主键重复，1032错误是因为主从数据库数据不一致
slave_skip_errors=1062
## relay_log配置中继日志
relay_log=mall-mysql-relay-bin
## log-slave-update表示slave将复制事件写进自己的二进制日志
log_slave_updates=1
## slave设置为只读（具有super权限的用户除外）
read_only=1
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27

修改配置后重启slave实例

docker restart mysql-slave
1

在主数据库中查看主从同步状态

-- 这一步是在主机中的mysql下执行
show master status;
1
2

进入mysql-slave容器

docker exec -it mysql-slave /bin/bash
mysql -uroot -proot
1
2

在从数据库中配置主从复制

- 注意以下操作是在从机中配置
-- master_host：主数据库的IP地址
-- master_port：主数据库的运行端口
-- master_user：在主数据库创建的用于同步数据的用户账号
-- master_password：在主数据库创建的用于同步数据的用户密码
-- master_log_file：指定从数据库要复制数据的日志文件，通过查看主数据的状态，获取File参数
-- master_log_pos：指定从数据库从那个位置开始复制数据，通过查看主数据库的状态，获取Position参数
-- master_connect_retry：连接失败重试的时间间隔，单位为秒
change master to master_host='106.52.224.231',master_user='slave',master_password='123456',master_port=3307,master_log_file='mall-mysql-bin.000001',master_log_pos=617,master_connect_retry=30;
1
2
3
4
5
6
7
8
9

在从数据库中查看主从复制同步状态

show slave status \G;
-- 主要是看Slave_IO_Running和Slave_SQL_Running
1
2

在从数据库中开启主从复制

start slave;
1

查看从数据库状态是否同步

show slave status \G;
1

主从复制测试

-- 主库操作
create database dbTest;
use dbTest;
create table student (id int,name varchar(20));
insert into student values(1,"zhangsan");
select * from student;

-- 从库操作
use dbTest;
select * from student;
1
2
3
4
5
6
7
8
9
10