文章目录

第一章 MySQL主从集群搭建

前言

本⽂主要讲解如何在本地搭建MySQL主从集群，采⽤Docker部署，mysql版本5.7。所以在搭建前可以
先学习⼀下Docker相关知识。

Docker教程参考

一、拉取镜像

# 拉取镜像
docker pull mysql:5.7
# 查看镜像相关信息
docker images
# 查看正在运⾏的镜像
docker ps

二、主库搭建

1.运⾏主库实例镜像

docker run --name mysql-master --privileged=true -v
/usr/local/docker/mysql/master-data:/var/lib/mysql -p 3307:3306 -e
MYSQL_ROOT_PASSWORD=123456 -d mysql:5.7

• /usr/local/docker/mysql路径是我本地挂载mysql⽬录，进⾏映射
• 3307指运行的端口
• MYSQL_ROOT_PASSWORD指运行的密码
• mysql:5.7指我刚刚拉下来的镜像

docker ps
9df6130f9189 mysql:5.7 "docker-entrypoint.s…" 6 hours ago Up About an
hour 33060/tcp, 0.0.0.0:3307->3306/tcp, :::3307->3306/tcp mysql-master

2.mysql配置

2.1 进入容器

# 通过容器id⽅式，这⾥的id就是上⾯docker ps中展示的id
docker exec -it 9df6130f9189 /bin/bash
# 通过容器名称⽅式，这⾥的名称就是创建容器时指定的名称，也就是mysql-master
docker exec -it mysql-master /bin/bash

2.2 下载vim

# 下载vim
apt-get update
apt-get install vim

2.3 修改配置⽂件

cd /etc/mysql
vim mysq.cnf

2.4 添加配置信息

[mysqld]
server-id=3307 ##⾃定义id号，不要重
log-bin=mysql-bin ##开启⼆进制⽇志

2.5 重新启动

service mysql restart
docker start mysql-master

2.6 查看master节点binlog状态

# 进⼊容器
docker exec -it mysql-master /bin/bash
# 连接mysql
mysql -uroot -p123456
# 查看binlog状态
show master status;

2.7 记录File和Position信息

File表示主节点binlog⽇志⽂件的名称，Position表示数据的偏移量，表示从节点需要从mysqlbin.000002⽂件的10238位置开始同步数据。

File：mysql-bin.000002
Position：10238

2.8 创建账号

我们需要在主节点创建⼀个账号⽤来给从库做主从复制，并且赋予权限。

grant replication slave on *.* to 'test'@'%' identified by '123456';
flush privileges;

三、从库搭建

从库搭建跟主库搭建的过程类似，主要区别就是配置⽂件不同以及需要建⽴主从同步连接这个操作。

grant replication slave on *.* to 'test'@'%' identified by '123456';
flush privileges;

1.运⾏从库实例镜像

docker run --name mysql-slave --privileged=true -v
/usr/local/docker/mysql/slave-data:/var/lib/mysql -p 3308:3306 -e
MYSQL_ROOT_PASSWORD=123456 -d mysql:5.7

2.mysql配置

2.1 进⼊容器

docker exec -it mysql-slave /bin/bash

2.2 下载vim

# 下载vim
apt-get update
apt-get install vim

2.3 修改配置⽂件

cd /etc/mysql
vim mysq.cnf

2.4 添加配置信息

[mysqld]
server-id=3308 ##id号，⾃定义，不要重就⾏
log-bin=mysql-slave-bin ##开启⼆进制⽇志功能
relay_log=edu-mysql-relay-bin ##配置中继⽇志

2.5 重新启动

service mysql restart
docker start mysql-master

2.6 配置master的连接

docker exec -it mysql-slave /bin/bash
mysql -u root -p123456
change master to master_host='192.168.3.101', master_user='test',
master_password='123456', master_port=3307, master_log_file='mysql-bin.000002',
master_log_pos=5288, master_connect_retry=30;

master_host是主节点的ip地址，也就是我本机的ip地址；master_user和master_password是主节点创
建的账号密码，⽤来主从复制使⽤；master_port是主节点的端⼝；master_log_file是主节点的binlog⽇
志⽂件名；master_log_pos是主节点binlog⽇志偏移量；master_connect_retry主从同步连接失败多久
重试。

2.7 查看连接状态

# \G是为了换⾏显示
show slave status \G;
# 停⽌主从复制
stop slave
# 开启
start slave;

当Slave_IO_Running和Slave_SQL_Running都是Yes表示主从成功配置完成。

四、验证主从同步

使⽤mysql连接⼯具分别连接主库和从库，在主库中创建⼀个数据库，新建⼀张表，插⼊⼀条数据，然
后在从库中查看是否同步新增数据库、表和数据。

FAQ

⼀、主从同步Slave_IO_Running和Slave_SQL_Running为No.
如果是Slave_IO_Running为No，可以检查⼀下连接主节点的配置信息，ip、端⼝、⽤户名密码、权限、
binlog⽇志⽂件命令和偏移量等。
如果是Slave_SQL_Running为No，可以通过以下命令解决。

stop slave;
SET GLOBAL SQL_SLAVE_SKIP_COUNTER=1;
start slave;

⼆、Docker启动mysql报错。
可以通过以下命令查看镜像命令进⾏排查。

docker logs --since 30m CONTAINER_ID
docker logs -f -t --tail ⾏数 容器名

主mysql开启binlog日志,创建同步用户；从机上配置同步用户并指定同步主机的binlog文件及起始位置即可使用同步用户同步主mysql的binlog日志，配置组成mysql主备集群。

主备集群上主机可以读写，但是从机只能读不能写，因为是单向同步。一般主从集群只会使用主Mysql，从机实际上只起到备份数据的作用，如果有读写分离可以分担一部分读的压力。
下面使用两台机器做一主一从的mysql主从集群搭建示例：
一、先分别安装mysql

## 创建部署目录
sudo mkdir -p /opt/MPP
sudo chown -R mysql:mysql /opt/MPP
sudo chmod -R 751  /opt/MPP


#复制安装包解压
tar -zxvf mysql-5.7.37-linux-glibc2.12-x86_64.tar.gz

## 创建mysql用户及属组
sudo groupadd mysql
sudo useradd -r -g mysql mysql
id mysql

## 创建数据目录并设置权限
#创建mysql数据目录 这里注意如果
sudo mkdir -p /data01/MPP/mysql/data
sudo chown -R mysql: mysql /data01/MPP/mysql
sudo chmod -R 775  /data01/MPP/

cd /opt/MPP/mysql-5.7.37-linux-glibc2.12-x86_64
sudo chmod -R 775  /opt/MPP/mysql-5.7.37-linux-glibc2.12-x86_64
cd /opt/MPP/mysql-5.7.37-linux-glibc2.12-x86_64

## 初始化并记录密码
sudo bin/mysqld --initialize --user=mysql --basedir=/opt/MPP/mysql-5.7.37-linux-glibc2.12-x86_64 --datadir=/data01/MPP/mysql/data

## 开启ssl加密
 sudo bin/mysql_ssl_rsa_setup  --datadir=/data01/MPP/mysql/data

## 编辑配置文件
vi /etc/my.cnf

[mysqld]
datadir = /data01/MPP/mysql/data
port = 3306
skip-name-resolve
bind-address=0.0.0.0
lower_case_table_names=1
sql_mode=STRICT_TRANS_TABLES,NO_ZERO_IN_DATE,NO_ZERO_DATE,ERROR_FOR_DIVISION_BY_ZERO,NO_AUTO_CREATE_USER,NO_ENGINE_SUBSTITUTION
log_timestamps=SYSTEM
max_allowed_packet = 120M
socket =/data01/MPP/mysql/mysql.sock
character-set-server=utf8
default-time_zone = '+8:00'
#主从机的server_id不能相同
server_id=1
#binlog与data放在不同的磁盘,以免binlog写满磁盘导致数据也无法写入
log-bin=/data12/MPP/mysql/arch/mysql-bin
binlog-format=ROW
expire_logs_days=120

relay_log_purge=off
relay-log = /data12/MPP/mysql/relay/relay-bin
relay_log_info_repository = table

log_slave_updates= 1
log-bin-trust-function-creators=1
max_connections=50000
default-storage-engine = InnoDB

[mysqld_safe]
log-error = /tmp/mysql-error.log

[client]
port = 3306
socket=/data01/MPP/mysql/mysql.sock
[mysqld_safe]
pid-file=/data01/MPP/mysql/mysql93.pid

#使用mysql用户启动,若启动失败根据异常日志分析,一般是目录缺少权限
sudo chmod 771 /data01/MPP/mysql
sudo su - mysql
/opt/MPP/mysql-5.7.37-linux-glibc2.12-x86_64/bin/mysqld_safe --defaults-file=/etc/my.cnf &

#首次登陆修改密码
/opt/MPP/mysql-5.7.37-linux-glibc2.12-x86_64/bin/mysql -uroot -p
ALTER USER 'root'@'localhost' IDENTIFIED BY '123456' PASSWORD EXPIRE NEVER;
-- 开启远程访问
use mysql;
update mysql.user set host='%' where user='root';
flush privileges; 
exit;


# 配置成服务
cd /opt/MPP/mysql-5.7.37-linux-glibc2.12-x86_64
sudo cp support-files/mysql.server /etc/init.d/mysql
sudo chown mysql:mysql /etc/init.d/mysql

#测试通过服务查看状态
sudo service mysql status 

二、主从同步配置

1. 主机master配置

# 主库配置,登录主mysql并创建同步用户repl并授权(仅需要REPLICATION权限)
CREATE USER 'repl'@'10.37.62.94' IDENTIFIED BY '123456';
GRANT REPLICATION SLAVE ON *.* TO 'repl'@'10.37.62.94';
FLUSH PRIVILEGES;
# 查看状态,bin-log的文件名和当前位置在从机同步配置中有用
show master status;

2. 从机slave配置

从机的my.cnf配置注意

从mysql和主mysql的配置基本相同,除了以下几个配置:
#从机server-id要和主机不同
server-id=2;
log_slave_updates=1
#开启同步函数
log_bin_trust_function_creators = 1

配置同步

# 从机配置开启同步替换文件名和查询的位置;
#设置主机master同步连接信息
change master to master_host='10.37.62.93', master_user='repl', master_password='123456', master_log_file='mysql-bin.000001', master_log_pos=2920;
#启动同步
start slave;
#查看同步状态
show slave status;

slave_IO_Running和Slave_SQL_Running都是Yes说明同步成功。

测试

从主机建表插入数据，然后进入从机查看数据是否同步。

前言

使用集群是网站解决高并发、海量数据问题的常用手段。当一台服务器的处理能力、存储空间不足时，不要企图去换更强大的服务器，对大型网站而言，不管多么强大的服务器，都满足不了网站持续增长的业务需求。本文主要介绍mysql主从集群搭建通过读写分离解决高并发的场景

一、环境准备

192.168.0.1 ： master
192.168.0.2 ： slave

二、操作步骤

1.环境检查（主从节点执行）

rpm -qa | grep mariadb

若有安装mariadb，先进行卸载，lib可以保留
rpm -e --nodeps mariadb-server-5.5.68-1.el7.x86_64 mariadb-5.5.68-1.el7.x86_64

2.安装部署（主从节点执行）

上传并解压安装包
tar -xvf mysql-8.0.26-el7-x86_64.tar.gz -C /mysql
mv /mysql/mysql-8.0.26-el7-x86_64/ /mysql/mysql

创建mysql用户并赋权
useradd mysql
chown -R mysql:mysql /mysql/mysql/

创建mysql相关目录
test -d /data/mysql |mkdir -p /data/mysql
test -d /data/tmp |mkdir -p /data/tmp
test -d /data/log |mkdir -p /data/log

创建service服务
cp -a /mysql/mysql/support-files/mysql.server /etc/init.d/mysql
chmod +x /etc/init.d/mysql

添加环境变量
echo 'export PATH=$PATH:/mysql/mysql/bin:/mysql/mysql/lib' >> /etc/profile
echo "export PATH" >> /etc/profile
source /etc/profile

上传配置文件并替换
mv /etc/my.cnf /etc/my.cnf.bak
mv /mysql/install/my.cnf /etc/
chown mysql:mysql /etc/my.cnf

my.cnf如图所示

从节点需修改server-id

切换mysql用户
su - mysql  (注意 ‘-’ 的前后有空格)

初始化mysql，并记录生成的临时密码
/mysql/mysql/bin/mysqld  --user=mysql --basedir=/mysql/mysql  --datadir=/data/mysql/ --initialize

启动数据库
service mysql start

3.主节点权限设置（主节点执行）

用之前记录的临时密码登录登录
mysql -uroot -pxxxxxxx
执行sql
ALTER USER 'root'@'localhost' IDENTIFIED WITH mysql_native_password BY '新密码';
update mysql.user set host='%' where user='root';
flush privileges;
create user 'repl'@'%' identified with 'mysql_native_password' by '新密码';
GRANT replication slave ON *.* TO 'repl'@'%';
GRANT replication client ON *.* TO 'repl'@'%';
flush privileges;
show master status

4.从节点同步设置（从节点执行）

用之前记录的临时密码登录登录
mysql -uroot -pxxxxxxx
执行sql
ALTER USER 'root'@'localhost' IDENTIFIED WITH mysql_native_password BY '新密码';
update mysql.user set host='%' where user='root';
flush privileges;
CHANGE MASTER TO
MASTER_HOST='Master节点IP',
MASTER_USER='repl',
MASTER_PASSWORD='Master节点repl用户密码',
MASTER_LOG_FILE='Mster节点show master status命令File值',
MASTER_LOG_POS=Mster节点show master status命令Position值;
start slave;

查看同步情况
show slave status\G;

两项都为yes则为同步成功

5.mysql开机自启动（主从节点执行）

用root用户执行
chmod +x /etc/rc.d/rc.local
echo 'su - mysql -c "service mysql start"' >> /etc/rc.d/rc.local

到这里一个简单的案例基本就分析结束。感谢你的学习。

最后想一起交流技术的可以加我wx: