docker搭建mysql集群实现主从复制

news/2024/5/20 23:45:35

前言

随着业务的增长，一台数据服务器已经满足不了需求了，负载过重。这个时候就需要减压了，实现负载均衡和读写分离，一主一丛或一主多从。
主服务器只负责写，而从服务器只负责读，从而提高了效率减轻压力。

主从复制方式可以分为：
主从同步：当用户写数据主服务器必须和从服务器同步了才告诉用户写入成功，等待时间比较长。
主从异步：只要用户访问写数据主服务器，立即返回给用户。
主从半同步：当用户访问写数据主服务器写入并同步其中一个从服务器就返回给用户成功。

主从复制的常见架构：一主一从、一主多从、多主多从、双主复制、级联复制（一主+一级从+二级从，一级从复制主库，二级从复制一级从库）

本文以一主三从架构为例，在docker中配置mysql集群，在实际多台服务器中原理基本差不多。


原理和过程

  1. 主库开启 bin-log，主库会生成一个 Log Dump 线程，用来给从库 I/O 线程传 bin-log；
  2. 从库生成两个线程，一个 I/O 线程(Slave_IO)，一个 SQL 线程(Slave_SQL)；
  3. 从库I/O 线程去请求主库的 bin-log，并将得到的 binlog 日志写到 relay-log (中继日志) 文件中；
  4. 从库SQL 线程会读取 relay-log 文件中的日志，并解析成具体操作，来实现主从的操作一致，而最终数据一致。


拉取镜像

docker pull mysql:5.7

创建容器

执行下面的命令分别创建一台主数据库和3台从数据库，端口分别映射到3306-3309，其中mysql5.7为master库，其余为slave库，如果需要修改目录映射请自行修改参数

docker run -d --restart=always --name mysql5.7 -e MYSQL_ROOT_PASSWORD=123456 -p 3306:3306 mysql:5.7
docker run -d --restart=always --name mysql-slave1 -e MYSQL_ROOT_PASSWORD=123456 -p 3307:3306 mysql:5.7
docker run -d --restart=always --name mysql-slave2 -e MYSQL_ROOT_PASSWORD=123456 -p 3308:3306 mysql:5.7
docker run -d --restart=always --name mysql-slave3 -e MYSQL_ROOT_PASSWORD=123456 -p 3309:3306 mysql:5.7

执行docker ps查看容器情况


主库配置

  1. 开启 bin-log

    进入主库，编辑my.cnf文件，在[mysqld]节点下增加下面几行配置开启 bin-log

    # 服务器唯一id
server-id=1
# 设置日志格式，默认值ROW。Statement：只记录 SQL，数据量小，但不能使用mysql函数；ROW：记录被修改的数据，数据量大；MIXED有函数时使用ROW，否则使用Statement
binlog_format=MIXED
# 二进制日志名，默认binlog
log-bin=mysql-bin
# 二进制日志保存时间（天）
expire_logs_days=7
# 设置不需要复制的数据库
binlog-ignore-db=mysql
binlog-ignore-db=infomation_schema
binlog-ignore-db=performance_schema
binlog-ignore-db=sys

    注意注意!!! ：上面的配置一定要在[mysqld]节点下啊，不然会报错mysql: [ERROR] unknown variable 'server-id=1'

    保存后重启主库容器，记得要重启容器啊

  2. 创建同步用户

    同步数据不能使用root用户，我们登陆mysql新建一个

    mysql -u root -p

    输入密码后创建用户slave，密码是123456

    CREATE USER 'slave'@'%';
ALTER USER 'slave'@'%' IDENTIFIED WITH mysql_native_password BY '123456';
GRANT REPLICATION SLAVE ON *.* TO 'slave'@'%';
FLUSH PRIVILEGES;

  3. 查看bin-log状态

    mysql> show master status;
+------------------+----------+--------------+------------------------------------------------+-------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB                               | Executed_Gtid_Set |
+------------------+----------+--------------+------------------------------------------------+-------------------+
| mysql-bin.000001 |      939 |              | mysql,infomation_schema,performance_schema,sys |                   |
+------------------+----------+--------------+------------------------------------------------+-------------------+
1 row in set (0.00 sec)

从库配置

分别进入3个从库，完成下面3个步骤

  1. 开启relay-log

    编辑my.cnf文件，增加下面几行配置开启 relay-log

    # 服务器唯一id,注意每台mysql服务器不要相同
server-id=2
# 中继日志名
relay-log=relay-bin

    注意注意!!! ：上面的配置一定要在[mysqld]节点下啊！

  2. 配置完成保存重启docker从库，然后再重新进入容器进行这一步，一定要重启容器啊

    分别执行下面的命令，注意把注释和->去掉

    mysql> stop slave;
mysql> CHANGE MASTER TO MASTER_HOST='192.168.204.128',	# 这里的ip填主库的ip，docker环境填宿主机ip地址即可-> MASTER_PORT=3306, # 这里的ip填主库的端口-> MASTER_USER='slave', # 用于同步数据的用户，不要用root-> MASTER_PASSWORD='123456',-> MASTER_LOG_FILE='mysql-bin.000001', # 填上一步查看到的主库bin-log文件名-> MASTER_LOG_POS=154;  # 填上一步查看到的主库Position
mysql> start slave;

  3. 查看从库状态

    mysql> show slave status\G;
*************************** 1. row ***************************Slave_IO_State: Waiting for master to send eventMaster_Host: 192.168.204.128Master_User: slaveMaster_Port: 3306Connect_Retry: 60Master_Log_File: mysql-bin.000001Read_Master_Log_Pos: 939Relay_Log_File: relay-bin.000002Relay_Log_Pos: 320Relay_Master_Log_File: mysql-bin.000001Slave_IO_Running: YesSlave_SQL_Running: YesReplicate_Do_DB:.........(后面的信息省略)

    注意：上面的Slave_IO_Running和Slave_SQL_Running这两个就是从库的IO和SQL进程，状态必须为Yes才表示连接主库成功，如果是Connecting，说明链接失败，检查主库ip和mysql账号是不是错了

到这里，主从复制的配置就已经完成了。你在主库的所有操作现在从库应该都能保持同步了，需要注意的是如果你的主库有旧表和数据，那么在主从复制之前，你要把这些表和数据一起复制到从库再开启主从同步，不然SQL进程就会报错挂掉。


http://www.mrgr.cn/p/13477257

相关文章

1-zabbix概述

1-zabbix概述

1.zabbix概述 zabbix支持的监控方式： agent：通过代理程序进行监控，如果被监控对象支持对应的agent，推荐首选这种方式。 ssh/telnet：通过远程控制协议进行通讯，比如ssh或者telnet。 SNMP：通过SNMP协议（简单网络管理协议）与被监控对象进行通讯，用这个方式监控路由器和交…
阅读更多...
6-监控类型_ZBX_JMX_SNMP_IPMI

6-监控类型_ZBX_JMX_SNMP_IPMI

6.监控类型 ZBX JMX SNMP IPMIZBX 监控类型： * 作用：ZBX 监控类型是 Zabbix 自身的一种监控方式，它通过 Zabbix Agent 主动采集被监控设备的性能数据，并将数据发送给 Zabbix 服务器进行分析和显示。 * 特点：ZBX 监控类型能够实时地、高效地监控主机，适用于需要精细控制和…
阅读更多...
百面算法工程师 | 支持向量机面试相关问题——SVM

百面算法工程师 | 支持向量机面试相关问题——SVM

本文给大家带来的百面算法工程师是深度学习支持向量机的面试总结，文章内总结了常见的提问问题，旨在为广大学子模拟出更贴合实际的面试问答场景。在这篇文章中，我们还将介绍一些常见的深度学习算法工程师面试问题，并提供参考的回答…
阅读更多...
Qt QInputDialog详解

Qt QInputDialog详解

1.简介 QInputDialog是一个对话框类，用于从用户那里获取一个单一的值。这个值可以是字符串、数字、或者一个列表中的选项。QInputDialog提供了一个方便的方式来快速创建一个输入对话框，无需自己从头开始构建。 QInputDialog支持多种输入类型&#xff1…
阅读更多...
cluster_网络

cluster_网络

cluster 网络service 网络 当service和endpoint被创建时，kube-proxy会自动创建相应的转发规则，使得访问service的请求被转发到endpoint kube-api-server --service-cluster-ip-range ipNet(Default:10.0.0.0/24)
阅读更多...
js逆向) 某音cookie中的__ac_signature

js逆向) 某音cookie中的__ac_signature

原文链接：https://mp.weixin.qq.com/s/NJjU7dqA1g0-_xFmr1nrIg 前言 上一篇文章测试了多个补环境的框架(多个开源的js补环境框架测试)，这篇来说一下具体怎么补。用__ac_signature做测试，这个相对简单一点。 逆向 先定位cookie生成的位置，清空cookie然后刷新网页，可以看到有…
阅读更多...
开源免费的定时任务管理系统：Gocron

开源免费的定时任务管理系统：Gocron

Gocron：精准调度未来，你的全能定时任务管理工具！- 精选真开源，释放新价值。 概览 Gocron是github上一个开源免费的定时任务管理系统。它使用Go语言开发，是一个轻量级定时任务集中调度和管理系统，用于替代L…
阅读更多...
Outrageously Large Neural Networks The Sparsely-Gated Mixture-of-Experts Layer

Outrageously Large Neural Networks The Sparsely-Gated Mixture-of-Experts Layer

目录概MoE训练Shazeer N., Mirhoseini A., Maziarz K., Davis A., Le Q., Hinton G. and Dean J. Outrageously large neural networks: The sparsely-gated mixture-of-experts layer. ICLR, 2017.概 Mixture-of-Experts (MoE). MoE通过一 gating network 选择不同的 expert: …
阅读更多...
什么样的人能上百度词条

什么样的人能上百度词条

百度百科是一个向所有互联网用户开放的平台，任何人都可以创建或编辑词条。然而，并不是所有的人物或事物都能被收录到百度百科中，它有一定的收录标准和审结的关于哪些人或事物能上百度百科的条件和流程。 百度百科的收录标准 知名度和影响力&…
阅读更多...
PV-PVC

PV-PVC

PV & PVC https://blog.csdn.net/bdkl9998/article/details/106304255PersistentVolume(PV) 是由管理员设置的存储，是集群的一部分，它不属于任何命名空间 PV的生命周期独立于使用它的pod的生命周期 PV更像是一种储备资源，先创建，有PVC需要它时才会被使用 PV可以是多种类…
阅读更多...
emptyDir-gitRepo

emptyDir-gitRepo

emptyDir & gitRepo k8s存储类型分类（卷的类型） 临时存储 emptyDir 用于存储临时数据的简单空目录 gitRepo 通过检出Git仓库的内容来初始化的卷持久存储 hostPath 用于将目录从工作节点的文件系统挂载到pod中 nfs …
阅读更多...
STM32 ADC学习

STM32 ADC学习

ADC Analog-to-Digital Converter，即模拟/数字转换器 常见ADC类型 分辨率和采样速度相互矛盾，分辨率越高，采样速率越低。 ADC的特性参数 分辨率：表示ADC能辨别的最小模拟量，用二进制位数表示，比如8,10…
阅读更多...
中间件集群部署

中间件集群部署

中间件集群部署中间件集群部署 1）反向网关配置 2）运行反向网关和中间件，开启顺序不分先后3）通过反向网关，以指定负载均衡方式访问中间件 本文来自博客园，作者：{咏南中间件}，转载请注明原文链接：https://www.cnblogs.com/hnxxcxg/p/18183673
阅读更多...
机台数据管控怎么做，能够提高效率促进企业快速发展？

机台数据管控怎么做，能够提高效率促进企业快速发展？

机台数据管控是制造企业信息化管理的重要组成部分，它涉及对生产设备（机台）所产生的数据进行有效的收集、存储、处理和应用。良好的机台数据管控能够帮助企业提高生产效率、降低成本、优化资源配置以及保障生产安全。以下是机台数据管控的几个…
阅读更多...
自定义表单工作流的优势介绍

自定义表单工作流的优势介绍

今天，就跟大家一起分享低代码技术平台以及自定义表单工作流的相关知识。当前，应用低代码技术平台可以助力企业提高效率，降低开发成本，实现个性化场景定制，因而越来越得到了客户的信赖与喜爱。很多客户朋友询问自定义表单工作流的优势和特点，为了帮助大家解决这个疑问，今…
阅读更多...
746-便携式8路高频电压电流信号测试仪

746-便携式8路高频电压电流信号测试仪

便携式8路高频电压电流信号测试仪一、平台简介便携式手提8路高频电压电流信号测试仪，以FPGA AD卡和X86主板为基础，构建便携式的手提设备。FPGA AD卡是以Kintex-7XC7K325T PCIeX4的AD卡，支持8路24bit AD采集。北京太速科技，平台默认操作系统为win7 64位系统；具备丰富的外设…
阅读更多...
Unity EventSystem入门

Unity EventSystem入门

概述 相信在学习Unity中，一定有被UI事件困扰的时候把，当添加UICanvas的时候，Unity会为我们自动添加EventSystem，这个是为什么呢，Unity的UI事件是如何处理的呢，在使用各个UI组件的时候，一定有不…
阅读更多...
黑马-Vue前端

黑马-Vue前端

前言 HTML:负责网页的结构（标签：form表单 / table表格 / a /div/span） CSS:负责网页的表现（样式：color/font/background/width/height） JavaScript:负责网页的行为（交互效果） 创建一个文件夹 输入cmd执行 code . 回车，打开VsCodeVue 一款用于构建用户界面的渐进式…
阅读更多...
自动驾驶中常见坐标系极其转换

自动驾驶中常见坐标系极其转换

各个传感器坐标系 相机坐标系统 摄像头的作用是把三维世界中的形状、颜色信息，压缩到一张二维图像上。基于摄像头的感知算法则是从二维图像中提取并还原三维世界中的元素和信息，如车道线，车辆、行人等，并计算他们与自己的相对位置。 感知算法和相机相关的坐标系有图像坐…
阅读更多...
如何判断nat网络？如何内网穿透

如何判断nat网络？如何内网穿透

大家都清楚，如果你想开车，就必须要给车上一个牌照，随着车辆越来越多，为了缓解拥堵，就需要摇号，随着摇号的人数越来越多，车牌对于想开车的人来说已经成为奢望。在如今的IPv4时代，我们…
阅读更多...
推荐文章

Copyright @ 2022~2023