s

shenlan

V1

2022/04/26阅读:22主题:红绯

MySQL专题系列:MySql主从复制

MySql主从复制

1. 为什么需要主从复制

  • 在业务复杂的系统中,有这么一个情景,有一句sql语句需要锁表,导致暂时不能使用读的服务,那么就很影响运行中的业务,使用主从复制,让主库负责写,从库负责读,这样,即使主库出现了锁表的情景,通过读从库也可以保证业务的正常运作。
  • 做数据的热备,主库宕机后能够及时替换主库,保证业务可用性。
  • 架构的扩展。业务量越来越大,I/O访问频率过高,单击无法满足,此时做多库的存储,降低磁盘I/O访问的频率,提高单个机器I/O性能。

2. 什么是Mysql主从复制

​ MySql主从复制是指数据可以从一个MySql数据库服务器主节点复制到一个或多个从节点。MySql默认采用异步复制的方式,这样从节点不用一致访问主服务器来更新自己的数据,数据的更新可以在远程连接上进行,从节点可以复制主数据库中的所有数据库或者特定的数据库,或者特定的表。

3. 主从复制形式

mysql主从复制 灵活

  • 一主一从
  • 主主复制
  • 一主多从---扩展系统读取的性能,因为读是在从库读取的;
  • 多主一从---5.7开始支持
  • 联级复制---

4. 主从复制必要条件

  • 主库开启binlog日志(设置log-bin参数)
  • 主从server-id不同
  • 从库服务器能连通主库

5. Mysql复制原理

原理:

img
img
  • 从库生成两个线程,一个I/O线程,一个SQL线程;
  • i/o线程去请求主库 的binlog,并将得到的binlog日志写到relay log(中继日志) 文件中;
  • 主库会生成一个 log dump 线程,用来给从库 i/o线程传binlog;
  • SQL 线程,会读取relay log文件中的日志,并解析成具体操作,来实现主从的操作一致,而最终数据一致;

原理说明

MySQL主从复制是一个异步的复制过程,主库发送更新事件到从库,从库读取更新记录,并执行更新记录,使得从库的内容与主库保持一致。

binlog:binary log,主库中保存所有更新事件日志的二进制文件。binlog是数据库服务启动的一刻起,保存数据库所有变更记录(数据库结构和内容)的文件。在主库中,只要有更新事件出现,就会被依次地写入到binlog中,之后会推送到从库中作为从库进行复制的数据源。

binlog输出线程:每当有从库连接到主库的时候,主库都会创建一个线程然后发送binlog内容到从库。 对于每一个即将发送给从库的sql事件,binlog输出线程会将其锁住。一旦该事件被线程读取完之后,该锁会被释放,即使在该事件完全发送到从库的时候,该锁也会被释放。

在从库中,当复制开始时,从库就会创建从库I/O线程和从库的SQL线程进行复制处理。

从库I/O线程:当START SLAVE语句在从库开始执行之后,从库创建一个I/O线程,该线程连接到主库并请求主库发送binlog里面的更新记录到从库上。 从库I/O线程读取主库的binlog输出线程发送的更新并拷贝这些更新到本地文件,其中包括relay log文件。

从库的SQL线程:从库创建一个SQL线程,这个线程读取从库I/O线程写到relay log的更新事件并执行。

综上所述,可知

对于每一个主从复制的连接,都有三个线程。拥有多个从库的主库为每一个连接到主库的从库创建一个binlog输出线程,每一个从库都有它自己的I/O线程和SQL线程。

从库通过创建两个独立的线程,使得在进行复制时,从库的读和写进行了分离。因此,即使负责执行的线程运行较慢,负责读取更新语句的线程并不会因此变得缓慢。比如说,如果从库有一段时间没运行了,当它在此启动的时候,尽管它的SQL线程执行比较慢,它的I/O线程可以快速地从主库里读取所有的binlog内容。这样一来,即使从库在SQL线程执行完所有读取到的语句前停止运行了,I/O线程也至少完全读取了所有的内容,并将其安全地备份在从库本地的relay log,随时准备在从库下一次启动的时候执行语句。

7. MySql 5.7安装(基于cent os 6.5以上)

参考文档《MySQL 5.7 安装》

8. 主从复制搭建

1)在两台服务器的数据库中粉笔创建同一个数据库

# test_syn_db 为数据库名
create database test_syn_db

2) 在主服务器进行如下配置

# 修改配置文件,执行以下命令打开mysql配置文件
vim /etc/my.cnf
# 在mysqld模块中添加如下配置信息
# master-bin 为自定义的二进制文件名称
log-bin=master-bin 
# 设置二进制日志格式
# 二进制格式有三种: ROW、statement、mixed。
# ROW: 把改变的内容复制过去,而不是把命令从服务器上执行一遍
# stastment: 在主服务器上执行的sql语句,在从服务器上执行同样的语句。MySQL默认采用基于语句的复制。
# mixed: 默认采用基于语句的复制,一旦发现基于语句的无法精确的复制时,就会采用基于行的复制
binlog-format=ROW 
# 要求各个服务器的id必须不一样
server-id=1 
# 同步的数据库名称
binlog_do_db=test_syn_db

配置后,执行如下命令重启mysql服务:

service mysqld restart

重启后,登录mysql数据库,查看master状态:

show master status;
image-20211204180253035

3) 配置从服务器登录主服务器的授权

-- 授权操作
set global validate_password_policy=0;
set global validate_password_length=1;
grant replication slave on *.* to 'root'@'%' identified by '123456';
-- 刷新权限
flush privileges;

4) 从服务器的配置

# 修改配置文件,执行以下命令打开mysql配置文件
vim /etc/my.cnf
# 在mysqld模块中添加如下配置信息
# master-bin 为自定义的二进制文件名称
log-bin=master-bin 
binlog-format=ROW 
# 要求各个服务器的id必须不一样
server-id=2

从服务器配置后,同样重启mysql服务,并登录后进行相关配置:

# 重启mysql服务
service mysqld restart
# 登录mysql
mysql -uroot -p
# 连接主服务器 
# master_host: 主服务器IP
# master_user: 主服务器用户
# master_password: 主服务器用户密码
# master_port: 主服务器端口
# master_log_file: 主服务器bin-log日志文件名,即主服务器上执行show master status命令后看到的File字段值
# master_log_pos: 主服务器bin-log日志位置,即主服务器上执行show master status命令后看到的Position字段值
change master to master_host='192.168.145.129', master_user='root', master_password='123456', master_port=3306,master_log_file='master-bin.000002', master_log_pos=154;
# 启动slave
start slave;
# 查看slave状态
show slave status\G # 注意没有分号

show slave status 时,若出现连接不上,先确认master_password是否跟授权密码一致,若不一致,判断两台服务器的访问权限是否开启,可使用telnet命令测试验证,若是防火墙未开,执行如下命令开启防火墙端口即可

# 开启防火墙
firewall-cmd --permanent --zone=public --add-port=3306/tcp
# 让防火墙生效
firewall-cmd --state
firewall-cmd --reload

读写分离

读写分离是依赖于主从复制,而主从复制又是为了读写分离服务的。MySql读写分离是指让master处理写操作,让slave处理读操作,非常适用于读操作量比较大的场景,可减轻master的压力。

6

分类:

后端

标签:

数据库

作者介绍

s
shenlan
V1