使用Docker搭建MySQL集群实战

Wed, 03 Jul 2024 11:12:48 +0800

达到三高（高可用、高性能、高负载）需要至少12个节点。

高可用：冗余节点通过订阅的模式与主节点保持数据同步，依赖MySQL自带的master-slave（主从）数据同步模式，主节点开启binlog日志文件记录查询外的所有操作，从节点订阅binlog文件以保持数据一致。如果主节点再订阅从节点，就能双向同步数据，也叫设置双向主从同步，互为主从节点。

高性能：读写分离，根据Web系统读多写少的特点，使用1主2从的方案，主节点负责写入，从节点负责读取。再使用一组1主2从的节点，2组节点的主节点之间设置双向主从同步，这样又达到高可用。

数据切分（据说MySQL数据库单表数据达到2kw表的读写性能便会急剧下降），也称分库分表。假如将20kw条记录切分到20个节点中，可使用主键求余20得到的余数方法决定切分到的记录。数据切分后也要满足三高，即最少分片后为2个分片，每个分片都要满足三高则需要2组1主2从的节点并设置双向同步，因此至少要12个节点。

版本选择：MySQL5主从同步优于MySQL8

使用MyCat中间件进行MySQL集群的管理，因为只需要主从同步和读写分离。

搭建双主四从的MySQL集群

第一组主从: 创建MySQL_1主节点

拉取MySQL5.7镜像docker pull mysql:5.7
创建网段mysql_netdocker network create --subnet=172.18.0.0/18 mysql_net
创建MySQL_1节点--privileged=true给容器读写Linux系统的权限，--lower_case_table_names=1不区分表名的大小写

docker run	-it -d --name mysql_1 -p 7001:3306 \
--net mysql_net --ip 172.18.0.2 \
-m 400m -v /root/mysql_1/data:/var/lib/mysql -v /root/mysql_1/config:/etc/mysql/conf.d \
-e MYSQL_ROOT_PASSWORD=123456 -e TZ=Asia/Shanghai \
--privileged=true \
mysql:5.7 --lower_case_table_names=1

为MySQL_1新建用户sync:123456，服务器权限选择reload/replication slave/super
修改MySQL_1配置文件~/mysql_1/config/my.cnf，先stop容器，修改后再start容器

[mysqld]
# 数据库字符集
character_set_server = utf8
#mysql编号
server_id = 1

#开启binlog日志
log_bin = mysql_bin
#开启relaylog日志
relay_log= relay_bin

#从库的写操作是否写入binlog
log-slave-updates = 1
#采用严格的SQL语句模式
sql_mode = NO_ENGINE_SUBSTITUTION,STRICT_TRANS_TABLES

创建MySQL_2从节点

拉取MySQL5.7镜像docker pull mysql:5.7
创建MySQL_2节点--privileged=true给容器读写Linux系统的权限，--lower_case_table_names=1不区分表名的大小写

docker run	-it -d --name mysql_2 -p 7002:3306 \
--net mysql_net --ip 172.18.0.3 \
-m 400m -v /root/mysql_2/data:/var/lib/mysql -v /root/mysql_2/config:/etc/mysql/conf.d \
-e MYSQL_ROOT_PASSWORD=123456 -e TZ=Asia/Shanghai \
--privileged=true \
mysql:5.7 --lower_case_table_names=1

修改MySQL_2配置文件~/mysql_2/config/my.cnf，先stop容器，修改后再start容器

[mysqld]
# 数据库字符集
character_set_server = utf8
#mysql编号
server_id = 2

#从节点开启binlog日志，为将来挂载更多读节点而准备
log_bin = mysql_bin
#开启relaylog日志
relay_log= relay_bin

# 限制普通用户只能查询
read-only = 1
#采用严格的SQL语句模式
sql_mode = NO_ENGINE_SUBSTITUTION,STRICT_TRANS_TABLES

执行SQL语句让MySQL_2订阅MySQL_1的日志文件

stop slave; #-- 停止数据同步服务

# 设置与mysql_1同步数据
change master to master_host='172.18.0.2',master_port=3306,master_user='sync',master_password='123456';

start slave; #-- 开启数据同步服务

# 查询数据同步服务状态, 显示Slave_IO_Running：Yes； Slave_SQL_Running：Yes表示成功
show slave status;

创建MySQL_3从节点

拉取MySQL5.7镜像docker pull mysql:5.7
创建MySQL_3节点--privileged=true给容器读写Linux系统的权限，--lower_case_table_names=1不区分表名的大小写

docker run	-it -d --name mysql_3 -p 7003:3306 \
--net mysql_net --ip 172.18.0.4 \
-m 400m -v /root/mysql_3/data:/var/lib/mysql -v /root/mysql_3/config:/etc/mysql/conf.d \
-e MYSQL_ROOT_PASSWORD=123456 -e TZ=Asia/Shanghai \
--privileged=true \
mysql:5.7 --lower_case_table_names=1

修改**MySQL_3配置文件~/mysql_3/config/my.cnf，先stop容器，修改后再start容器

[mysqld]
# 数据库字符集
character_set_server = utf8
#mysql编号
server_id = 3

#从节点开启binlog日志，为将来挂载更多读节点而准备
log_bin = mysql_bin
#开启relaylog日志
relay_log= relay_bin

# 限制普通用户只能查询
read-only = 1
#采用严格的SQL语句模式
sql_mode = NO_ENGINE_SUBSTITUTION,STRICT_TRANS_TABLES

执行SQL语句让MySQL_3订阅MySQL_1的日志文件

stop slave; #-- 停止数据同步服务

# 设置与mysql_1同步数据
change master to master_host='172.18.0.2',master_port=3306,master_user='sync',master_password='123456';

start slave; #-- 开启数据同步服务

# 查询数据同步服务状态, 显示Slave_IO_Running：Yes； Slave_SQL_Running：Yes表示成功
show slave status;

第二组主从: 创建MySQL_4主节点

拉取MySQL5.7镜像docker pull mysql:5.7
创建MySQL_4节点--privileged=true给容器读写Linux系统的权限，--lower_case_table_names=1不区分表名的大小写

docker run	-it -d --name mysql_4 -p 7004:3306 \
--net mysql_net --ip 172.18.0.5 \
-m 400m -v /root/mysql_4/data:/var/lib/mysql -v /root/mysql_4/config:/etc/mysql/conf.d \
-e MYSQL_ROOT_PASSWORD=123456 -e TZ=Asia/Shanghai \
--privileged=true \
mysql:5.7 --lower_case_table_names=1

为MySQL_4新建用户sync:123456，服务器权限选择reload/replication slave/super ![[Pasted image 20240304003039.png|300]]
修改MySQL_4配置文件~/mysql_4/config/my.cnf，先stop容器，修改后再start容器

[mysqld]
# 数据库字符集
character_set_server = utf8
#mysql编号
server_id = 4

#开启binlog日志
log_bin = mysql_bin
#开启relaylog日志
relay_log= relay_bin

#从库的写操作是否写入binlog
log-slave-updates = 1
#采用严格的SQL语句模式
sql_mode = NO_ENGINE_SUBSTITUTION,STRICT_TRANS_TABLES

创建MySQL_5从节点

拉取MySQL5.7镜像docker pull mysql:5.7
创建MySQL_5节点--privileged=true给容器读写Linux系统的权限，--lower_case_table_names=1不区分表名的大小写

docker run	-it -d --name mysql_5 -p 7005:3306 \
--net mysql_net --ip 172.18.0.6 \
-m 400m -v /root/mysql_5/data:/var/lib/mysql -v /root/mysql_5/config:/etc/mysql/conf.d \
-e MYSQL_ROOT_PASSWORD=123456 -e TZ=Asia/Shanghai \
--privileged=true \
mysql:5.7 --lower_case_table_names=1

修改MySQL_5配置文件~/mysql_5/config/my.cnf，先stop容器，修改后再start容器

[mysqld]
# 数据库字符集
character_set_server = utf8
#mysql编号
server_id = 5

#从节点开启binlog日志，为将来挂载更多读节点而准备
log_bin = mysql_bin
#开启relaylog日志
relay_log= relay_bin

# 限制普通用户只能查询
read-only = 1
#采用严格的SQL语句模式
sql_mode = NO_ENGINE_SUBSTITUTION,STRICT_TRANS_TABLES

执行SQL语句让MySQL_5订阅MySQL_4的日志文件

stop slave; #-- 停止数据同步服务

# 设置与mysql_4同步数据
change master to master_host='172.18.0.5',master_port=3306,master_user='sync',master_password='123456';

start slave; #-- 开启数据同步服务

# 查询数据同步服务状态, 显示Slave_IO_Running：Yes； Slave_SQL_Running：Yes表示成功
show slave status;

创建MySQL_6从节点

拉取MySQL5.7镜像docker pull mysql:5.7
创建MySQL_6节点--privileged=true给容器读写Linux系统的权限，--lower_case_table_names=1不区分表名的大小写

docker run	-it -d --name mysql_6 -p 7006:3306 \
--net mysql_net --ip 172.18.0.7 \
-m 400m -v /root/mysql_6/data:/var/lib/mysql -v /root/mysql_6/config:/etc/mysql/conf.d \
-e MYSQL_ROOT_PASSWORD=123456 -e TZ=Asia/Shanghai \
--privileged=true \
mysql:5.7 --lower_case_table_names=1

修改MySQL_6配置文件~/mysql_6/config/my.cnf，先stop容器，修改后再start容器

[mysqld]
# 数据库字符集
character_set_server = utf8
#mysql编号
server_id = 6

#从节点开启binlog日志，为将来挂载更多读节点而准备
log_bin = mysql_bin
#开启relaylog日志
relay_log= relay_bin

# 限制普通用户只能查询
read-only = 1
#采用严格的SQL语句模式
sql_mode = NO_ENGINE_SUBSTITUTION,STRICT_TRANS_TABLES

执行SQL语句让MySQL_6订阅MySQL_4的日志文件

stop slave; #-- 停止数据同步服务

# 设置与mysql_4同步数据
change master to master_host='172.18.0.5',master_port=3306,master_user='sync',master_password='123456';

start slave; #-- 开启数据同步服务

# 查询数据同步服务状态, 显示Slave_IO_Running：Yes； Slave_SQL_Running：Yes表示成功
show slave status;

配置MySQL_1和MySQL_4双向主从同步

在MySQL_1中执行SQL

Mysql on 我的绕地飞行记录