devbox
盐析白兔
这个屌丝很懒，什么也没留下！
关注作者
热门标签
热门文章
当前位置:   article > 正文

集群技术，一主一从的部署和原理方式_服务器集群

作者：盐析白兔 | 2024-08-17 23:41:58

赞

踩

服务器集群

集群概述

所谓集群，就是将多台服务器集中在一起，同时处理用户对服务器的请求

比如，我们现在开启的这一台mysql服务器，可以同时处理1000个用户的请求，那么我们开启两个这样的服务器，就可以同时处理2000

数据库集群之间最重要的是数据一致性

Replication

集群图示：

请添加图片描述
类型:

  • M

  • M-S

  • M-S-S…

  • M-M

  • M-M-S-S

    M表示主服务器

    S表示从服务器

    需要从主服务器备份到从服务器，即主从复制

    我们需要通过配置，完成自动的主从复制

原理图示:

图示1
请添加图片描述
概念:

  1. 在主库上把数据更改（DDL DML DCL）记录到二进制日志（Binary Log）中。
  2. 从库和主库连接，此时从库会开启io现成和sql线程
  3. 备库I/O线程将主库上的日志复制到自己的中继日志（Relay Log）中。
  4. 备库SQL线程读取中继日志中的事件，将其重放到备库数据库之上。

集群案例

环境

  • 环境三部曲

    • 1.全新服务器-互相通信
    • 2.全新安装mysql8.0-分别安装
    • 3.配置域名解析

配置静态ip

  • 2台服务器ip分别是

  • 192.168.145.141

  • 192.168.145.142

  • 配置mysql8.0yum源头

    • 下载安装包
    • yum源 几台服务器都有，其中19,29,39,49安装yum源
    • mysql8.0安装包，19,29,39,49安装

  • 141服务器操作如下：

在19服务器下操作：

 wget https://dev.mysql.com/get/mysql80-community-release-el9-1.noarch.rpm
 yum install  mysql80-community-release-el9-1.noarch.rpm

 yum install   mysql-community-server  --downloadonly -y
find / -iname "*mysql*.rpm"  //查找包的位置

cd /var/cache/dnf/mysql80-community-22d3d3ecd3d92106/packages/

scp ./*.rpm 192.168.145.142:~/

141安装mysql
yum install -y *.rpm
启动数据库
systemctl start mysqld


grep 'password' /var/log/mysqld.log
mysqladmin -uroot -p'复制的密码' password "Lixinyi@123"

mysql -uroot -p'Lixinyi@123';
show databases;

其他同理

  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17
  • 18
  • 19
  • 20
  • 21
  • 22
  • 23
  • 24
  • 25

142：

  [root@localhost ~]# ls
  anaconda-ks.cfg                                         mysql-community-common-8.0.38-1.el9.x86_64.rpm
  install_mysql.sh                                        mysql-community-icu-data-files-8.0.38-1.el9.x86_64.rpm
  mysql-community-client-8.0.38-1.el9.x86_64.rpm          mysql-community-libs-8.0.38-1.el9.x86_64.rpm
  mysql-community-client-plugins-8.0.38-1.el9.x86_64.rpm  mysql-community-server-8.0.38-1.el9.x86_64.rpm
  
  [root@localhost ~]# chmod +x install_mysql.sh
  //开始安装
  [root@localhost ~]# ./install_mysql.sh
  
  

  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
一主一从（M-S）(1)

  • 主(master1)

    • 部署一台新mysql服务器。准备好域名解析。

    • 准备数据1（验证主从同步使用）

      • master1

         create database master1db;
 create table master1db.master1tab(name char(50));
 insert into master1db.master1tab values (1111);
 insert into master1db.master1tab values (2222);

        • 1
        • 2
        • 3
        • 4

    • 开启二进制日志

      • master1

         [root@localhost ~]# vim /etc/my.cnf
 log_bin
 server-id=1
 [root@localhost ~]# systemctl restart mysqld
 重启生效
 
 ---------------------------------------------
 log_bin   开启二进制日志
 server-id 集群中二进制的编号 不要重复

        • 1
        • 2
        • 3
        • 4
        • 5
        • 6
        • 7
        • 8
        • 9

    • 创建复制用户

      • master1
创建用户：
mysql> create user  'rep'@'192.168.145.%' identified by 'Lixinyi@123';
 
 授权：
 mysql>grant replication slave, replication client on *.* to 'rep'@'192.168.145.%' ;

  • 1
  • 2
  • 3
  • 4
  • 5
下面是这条命令的详细解释：

grant: 这是SQL的关键字，用于授权用户特定的权限。
replication slave: 这个权限允许用户请求在主服务器复制二进制日志事件到从服务器，这通常用于MySQL的主从复制功能。

replication client: 这个权限允许用户查询主服务器或从服务器的状态，以及执行SHOW SLAVE 
STATUS和SHOW MASTER STATUS等命令。

on *.*: 这表示对所有数据库和所有表进行授权。
to ‘rep’@‘192.168.229.%’: 这表示将权限授予用户名为rep的用户，并且这个用户可以从192.168.229.*这个IP地址范围内的任何主机连接到MySQL服务器。这里的%是一个通配符，表示匹配该IP段内的任何具体IP地址。

简而言之，这条命令的意思是：“为从192.168.229.*这个IP地址范围内的任何主机连接到MySQL服务器的rep用户授予复制从服务器和复制客户端的权限”。这通常用于设置MySQL的主从复制功能，其中rep用户将用于从主服务器复制数据到从服务器。

  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12

备份master数据库的数据

  • master1

    刚才是先添加的数据，然后才开启的二进制日志。二进制日志中没有记录一开始添加数据的记录。

    所以需要我们对之前的数据先进行一个手动备份

    退出mysql登陆页

mysqldump -uroot -p'Lixinyi@123' --all-databases --single-transaction --master-data=2 --flush-logs > `date +"%F-%H"`-mysql-all.sql


# ls
2024-07-15-14-mysql-all.sql 

    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    注释：
--single-transaction  保持服务的可以用性，服务保持开机状态
master-data=2         帮我开启记录 记录二进制节点的位置
--flush-logs          刷新二进制日志  对二进制日志进行分割

    • 1
    • 2
    • 3
    • 4

    发送给另一台主机:

     scp -r ./2024-07-15-14-mysql-all.sql    192.168.145.142:/tmp


    • 1
    • 2

    观察二进制日志分割点:

     vim ./2024-07-15-14-mysql-all.sql

查看第24行：
CHANGE MASTER TO MASTER_LOG_FILE='localhost-bin.000002', MASTER_LOG_POS=157;

    • 1
    • 2
    • 3
    • 4
      • 准备数据2（验证主从同步使用）

      ​ 刚刚备份的是之前开始的数据，我们现在模拟真实的生产环境，在备份后，又产生了新的数据

      • master1

        mysql -uroot -p'Lixinyi@123'

insert into master1db.master1tab values (33333333);
insert into master1db.master1tab values (44444);

        • 1
        • 2
        • 3
        • 4

  • 从(master2)

    • 测试rep用户是否可用

      • master2

        部署数据库应用

        mysql -h master1 -urep -p'Lixinyi@123'

用授权的账号登陆

        • 1
        • 2
        • 3
        • 预防账户问题，防火墙、selinux都要关闭。

    • 启动服务器序号

      [root@localhost ~]#vim /etc/my.cnf
不用在从设备上开启二进制日志，没有人向master2请求日志。

      • 1
      • 2
      server-id=2

服务器ID是必须设置的。

      • 1
      • 2
      • 3
      [root@localhost ~]# systemctl restart mysqld

      • 1
      mysql -uroot -p'Lixinyi@123'
 测试服务器是否修改正确。能否正常登陆。

      • 1
      • 2

    • 手动同步数据

       mysql>  set sql_log_bin=0;
 mysql>  source /tmp/2024-07-15-03-mysql-all.sql

      • 1
      • 2
      注释：
 set sql_log_bin=0;  设置当前数据库服务器的二进制日志临时关闭
 
 source /tmp/2024-07-15-14-mysql-all.sql  根据日志文件还原数据库

      • 1
      • 2
      • 3
      • 4

      验证是否正确完成备份：

       
mysql> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| master1db          |
| mysql              |
| performance_schema |
| sys                |
+--------------------+
5 rows in set (0.00 sec)



mysql> select * from master1db.master1tab;
+------+
| name |
+------+
| 1111 |
| 2222 |
+------+


      • 1
      • 2
      • 3
      • 4
      • 5
      • 6
      • 7
      • 8
      • 9
      • 10
      • 11
      • 12
      • 13
      • 14
      • 15
      • 16
      • 17
      • 18
      • 19
      • 20
      • 21
      • 22
      • 23

    • 设置主服务器

      配置主从关系

mysql> change master to
master_host='192.168.145.142',
master_user='rep',
master_password='Lixinyi@123',
master_log_file='localhost-bin.000002',
master_port=3306,
master_log_pos=157;


ERROR 1064 (42000): You have an error in your SQL syntax; check the manual that corresponds to your MySQL server version for the right syntax to use near 'master to master_host='master1',master_user='rep',master_password='Lixinyi@123' at line 1


  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11

  • 原因：

    在MySQL 8.0中，CHANGE MASTER TO 语句用于配置复制。但是，从MySQL 8.0.14开始，该语句已经被弃用，并建议使用新的语句 CHANGE REPLICATION SOURCE TO

      CHANGE REPLICATION SOURCE TO
    SOURCE_HOST = '192.168.145.142',
    SOURCE_USER = 'rep',
    SOURCE_PASSWORD = 'Lixinyi@123',
    SOURCE_PORT = 3306,
    SOURCE_LOG_FILE = 'localhost-bin.000002',
    SOURCE_LOG_POS = 158;

    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
      change replication source to
    source_host = '192.168.145.142',
    source_user = 'rep',
    source_password = 'Lixinyi@123',
    source_port = 3306,
    source_log_file = 'localhost-bin.000002',
    source_log_pos = 158;

    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
      mysql> change replication source to source_host = '192.168.145.142',source_user = 'rep',source_password = 'Lixinyi@123',source_port = 3306,source_log_file = 'localhost-bin.000002',source_log_pos = 158;
  
注意，二进制日志的位置，应该参照主服务器备份时生成的新位置。



    • 1
    • 2
    • 3
    • 4
    • 5

  • 启动从服务器的复制线程

    mysql> start slave;


    • 1
    • 2

  • 查看启动状态（IO-YES/SQL-YES）

    show slave status\G;

    • 1
    mysql> show slave status\G;
*************************** 1. row ***************************
               Slave_IO_State: Waiting for master to send event
                  Master_Host: master1
                  Master_User: rep
                  Master_Port: 3306
                Connect_Retry: 60
              Master_Log_File: localhost-bin.000003
          Read_Master_Log_Pos: 154
               Relay_Log_File: localhost-relay-bin.000003
                Relay_Log_Pos: 375
        Relay_Master_Log_File: localhost-bin.000003
             Slave_IO_Running: Yes
            Slave_SQL_Running: Yes


    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10
    • 11
    • 12
    • 13
    • 14
    • 15

    请添加图片描述

  • 从服务器查看数据库，看数据是否一致

    mysql> select * from master1db.master1tab;
+----------+
| name     |
+----------+
| 1111     |
| 2222     |
| 33333333 |
| 44444    |
+----------+

3333,4444就是主从集群同步过来的数据


    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10
    • 11
    • 12

  • 返回主服务器（master1）更新数据，在从服务器（master2）观察是否同步。

    master1主服务器添加数据

mysql> insert into master1db.master1tab values (55555);


    • 1
    • 2
    • 3
    • 4
    从master2查看数据：

mysql> select * from master1db.master1tab;
+----------+
| name     |
+----------+
| 1111     |
| 2222     |
| 33333333 |
| 44444    |
| 55555    |
+----------+
已经同步了

    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10
    • 11
    • 12
    • 13

    注意：

    如果从服务器添加了数据，主服务器是不会同步的

    不要这样操作，不要操作

    因为主从复制的原理，就是从服务器来同步主服务器，如果从服务器擅自添加数据，添加的数据就属于脏数据

    了解，不要去实验操作！！！！！

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/盐析白兔/article/detail/994867
推荐阅读
相关标签

Copyright © 2003-2013 www.wpsshop.cn 版权所有，并保留所有权利。

  

闽ICP备14008679号