MySQL主从复制与读写分离

MySQL主从复制和读写分离 前言在实际的生产环境中,对数据库的读和写都在同一个数据库服务器中,是不能满足实际需求的。无论是在安全性、高可用性还是高并发等各个方面都是完全不能满足实际需求的。因此,通过主从复制的方式来同步数据,再通过读写分离来提升数据库的并发负载能力。有点类似于rsync,但是不同的是rsync是对磁盘文件做备份,而mysql主从复制是对数据库中的数据、语句做备份。 MySQL 的主从复制和 MySQL 的读写分离两者有着紧密联系,首先要部署主从复制,只有主从复制完成了,才能在此基础上进行数据的读写分离。主MySQL服 阅读详情

文章目录

  • MySQL主从复制与读写分离

MySQL主从复制与读写分离

案例概述

■在企业应用中,成熟的业务通常数据量都比较大

■单台MySQL在安全性、高可用性和高并发方面都无法满足实际的需求

■配置多台主从数据库服务器以实现读写分离

一、读写分离概述

  1. 什么是读写分离?

    读写分离,基本的原理是让主数据库处理事务性增、改、删操作(INSERT、UPDATE、DELETE),而从数据库处理SELECT查询操作。

    数据库复制被用来把事务性操作导致的变更同步到集群中的从数据库。

    2.为什么要读写分离呢?

    因为数据库的“写”(写10000条数据可能要3分钟)操作是比较耗时的。

    但是数据库的“读”(读10000条数据可能只要5秒钟)。

    所以读写分离,解决的是,数据库的写入,影响了查询的效率。

    3.什么时候要读写分离?

    数据库不一定要读写分离,如果程序使用数据库较多时,而更新少,查询多的情况下会考虑使用。

    利用数据库主从同步,再通过读写分离可以分担数据库压力,提高性能。

    4.主从复制与读写分离

    在实际的生产环境中,对数据库的读和写都在同一个数据库服务器中,是不能满足实际需求的。无论是在安全性、高可用性还是高并发等各个方面都是完全不能满足实际需求的。

    因此,通过主从复制的方式来同步数据,再通过读写分离来提升数据库的并发负载能力。

    有点类似于rsync,但是不同的是rsync是对磁盘文件做备份,而mysql主从复制是对数据库中的数据、语句做备份。

    5.mysq支持的复制类型

    (1)STATEMENT:基于语句的复制。在服务器上执行sql语句,在从服务器上执行同样的语句,mysql默认采用基于语句的复制,执行效率高。

    (2)ROW:基于行的复制。把改变的内容复制过去,而不是把命令在从服务器上执行一遍。

    (3)MIXED:混合类型的复制。默认采用基于语句的复制,一旦发现基于语句无法精确复制时,就会采用基于行的复制。

    6.主从复制的工作过程

    (1)Master节点将数据的改变记录成二进制日志(bin log),当Master上的数据发生改变时,则将其改变写入二进制日志中。

    (2)Slave节点会在一定时间间隔内对Master的二进制日志进行探测其是否发生改变,如果发生改变,则开始一个I/O线程请求 Master的二进制事件。

    (3)同时Master节点为每个I/O线程启动一个dump线程,用于向其发送二进制事件,并保存至Slave节点本地的中继日志(Relay log)中,Slave节点将启动SQL线程从中继日志中读取二进制日志,在本地重放,即解析成 sql 语句逐一执行,使得其数据和 Master节点的保持一致,最后I/O线程和SQL线程将进入睡眠状态,等待下一次被唤醒。

注:

中继日志通常会位于 OS 缓存中,所以中继日志的开销很小。

复制过程有一个很重要的限制,即复制在 Slave上是串行化的,也就是说 Master上的并行更新操作不能在 Slave上并行操作。

二、实际操作

2.1配置环境

master服务器: 192.168.35.6
slave1服务器: 192.168.35.7
slave1服务器: 192.168.35.8
Amoeba服务器: 192.168.35.9   
客户端 服务器: 192.168.35.9

2.2初始化环境

#五台服务器上都初始化
systemctl stop firewalld
setenforce 0

2.3搭建mysql主从复制

2.3.1搭建时间同步(主服务器:192.168.35.6)

1.#安装时间同步服务器
yum install ntp -y
 
2.#修改配置文件
vim /etc/ntp.conf  
server 127.127.35.0   #设置本地时钟源(35是自己的网段)
fudge 127.127.35.0 stratum 8  #设置时间层级为8 限制在15 以内
 
3.#开启服务
service ntpd start

4.#同步阿里云时间
ntpdate ntp.aliyun.com

5.改时间格式date -s 12:22:22

2.3.2搭建时间同步(从服务器:192.168.35.7、 192.168.35.8)

1.#安装时间同步服务器、同步服务
yum install ntp -y
yum install ntpdate -y
 
2. #开启服务
service ntpd start
 
3. #执行同步
/usr/sbin/ntpdate 192.168.35.6
或者 ntpdate 192.168.35.6
 
4.#计划定时任务
crontab -e
*/30 * * * *  /usr/sbin/ntpdate 192.168.35.6

5.#重新启动计划任务
systemctl restart crond
###########slave2:192.168.35.8与以上操作相同######

2.3.3配置主服务器(192.168.35.6)

1. #开启二进制日志
vim /etc/my.cnf
 
log-bin=master-bin        #开启二进制日志
binlog_format=MIXED       #二进制日志格式
log-slave-updates=true    #开启从服务器同步
 
2. #重启服务
systemctl restart mysqld.service 
 
3. #登入mysql,给从服务器在网段授权
mysql -uroot -p123123
grant replication slave on *.* to 'myslave'@'192.168.35.%' identified by '123456';
 
#刷新数据库
flush privileges;
 
#查看主服务器二进制文件
show master status;
开启二进制日志

1.开启二进制日志

2.重启服务

3.#登入mysql,给从服务器在网段授权

2.3.4配置从服务器(192.168.35.7、192.168.35.8)

1.#开启中继日志。
vim /etc/my.cnf
server-id = 2 #slave1和slave2的id不能相同,我slave2设置的3
relay-log=relay-log-bin
relay-log-index=slave-relay-bin.index
 
2.#重启服务
systemctl restart mysqld.service 
 
3. #登入mysql,配置同步注意master_log_file和master_log_pos的值要和master查询的一致
mysql -uroot -p123456
change master to master_host='192.168.35.6',master_user='myslave',master_password='123456',master_log_file='master-bin.000001',master_log_pos=603;
 
4.#启动同步,如果报错,执行restart slave试试
start slave;
show slave status\G;
##以下两个必须要是YES
#Slave_IO_Running: Yes
#Slave_SQL_Running: Yes
 
 
#########slave2:192.168.35.8与以上操作相同######

1.开启中继日志

2.重启服务

3.#登入mysql,配置同步注意master_log_file和master_log_pos的值要和master查询的一致

4.#启动同步,如果报错,执行restart slave试试

2.3.5验证主从同步

#在主服务器上创建一个库
create database ky20;
 
#在从服务器上查看
show databases;

2.4搭建Amoeba实现读写分离(192.168.35.9)

2.4.1安装JAVA环境

1.#下载安装包:jdk-6u14-linux-x64.bin、amoeba-mysql-binary-2.2.0.tar.gz 
cd /opt
 
2.#把jdk复制到/usr/local下
cp jdk-6u14-linux-x64.bin /usr/local/
 
3.#赋予jdk权限并执行
chmod +x /usr/local/jdk-6u14-linux-x64.bin
cd /usr/local/
./jdk-6u14-linux-x64.bin  #一路回车到底,最后输入yes 自动安装
 
4.#jdk改个名字
mv jdk1.6.0_14/ jdk1.6
 
5.#配置环境并刷新
vim /etc/profile
export JAVA_HOME=/usr/local/jdk1.6
export CLASSPATH=$CLASSPATH:$JAVA_HOME/lib:$JAVA_HOME/jre/lib
export PATH=$JAVA_HOME/lib:$JAVA_HOME/jre/bin/:$PATH:$HOME/bin
export AMOEBA_HOME=/usr/local/amoeba
export PATH=$PATH:$AMOEBA_HOME/bin
 
source /etc/profile      #刷新配置文件

1.#下载安装包:jdk-6u14-linux-x64.bin、amoeba-mysql-binary-2.2.0.tar.gz

2.#把jdk复制到/usr/local下

3.#赋予jdk权限并执行

4.执行jdk,最后输入yes,接着回车

5…#jdk改个名字

6.#配置环境并刷新

2.4.2配置amoeba

############## 安装amoeba ###########
 
1.#在/usr/local目录下创建amoeba目录
mkdir /usr/local/amoeba
 
2.#切换至opt解压amoeba
cd /opt/
tar zxvf amoeba-mysql-binary-2.2.0.tar.gz -C /usr/local/amoeba
 
cd /usr/local/amoeba 切换至目录查看
 
 
3.#给目录/usr/local/amoeba赋予执行权限
chmod -R 755 /usr/local/amoeba/
 
4.#运行amoeba
/usr/local/amoeba/bin/amoeba
如显示amoeba start|stop 说明安装成功

 
 
###########配置 Amoeba读写分离 ####
5.#先在Master、slave1、slave2的mysql上开放权限给 Amoeba 访问
grant all on *.* to test@'192.168.35.%' identified by '123456';
flush privileges;
 
6.#备份amoeba配置
cd /usr/local/amoeba/conf/
cp amoeba.xml amoeba.xml.bak
cp dbServers.xml dbServers.xml.bak
 
7.#修改amoeba配置
vim amoeba.xml
30 <property name="user">amoeba</property>
#设置登录用户名
32<property name="password">123123</property>
#设置密码
 
115<property name="defaultPool">master</property>
#设置默认池为master
118<property name="writePool">master</property>
#设置写池
119<property name="readPool">slaves</property>
#设置读池
 
vim dbServers.xml 
23 <!-- <property name="schema">test</property> -->
#23行注释
26<property name="user">test</property>
#设置登录用户
28 <!--  mysql password -->
#删除
29<property name="password">123123</property>
#解决28注释,添加密码
 
45<dbServer name="master"  parent="abstractServer">
#服务池名
48<property name="ipAddress">192.168.35.6</property>
#添加地址
 
52<dbServer name="slave1"  parent="abstractServer">
55<property name="ipAddress">192.168.35.7</property>
复制6行 添加另一从节点
59<dbServer name="slave2"  parent="abstractServer">
62<property name="ipAddress">192.168.35.8</property>
 
66<dbServer name="slaves" virtual="true">
#定义池名
72<property name="poolNames">slave1,slave2</property>
#写上从节点名
 
8.#启动amoeba,并测试
amoeba start
netstat -ntap |grep java

1.#在/usr/local目录下创建amoeba目录

2.#切换至opt解压amoeba

3.#给目录/usr/local/amoeba赋予执行权限

4.#运行amoeba

5.#先在Master、slave1、slave2的mysql上开放权限给 Amoeba 访问

2.4.3在客户端测试(192.168.35.9)

1.#安装mariadb
yum install mariadb mariadb-server.x86_64 -y
 
2.#登入并查看数据库
mysql -uamoeba -p123456 -h 192.168.35.9 -P8066
 
 
3.#测试同步
##在主服务器服务器上新建表
use test1;
create table info(id int(10),name char(40));
show tables;
 
##在客户机上,插入数据会同步到所有数据库中
 use test1;
 insert into info values(1,'小明');
 
##在主从服务器上查看
 
4.#测试读写分离
#停止slave1和slave2的slave同步功能
stop slave;
 
#在master、slave1和slave2上插入数据

1.#安装mariadb

2.#登入并查看数据库

3.测试

在主服务器上新建一个表

4.在客户机上,插入的数据也会同步到数据库中

5.在主服务器上查看

6.测试读写分离

7.在master上插入数据

8.在从服务器上插入数据

9.在客户端查看只能看到slave1的数据或者slave2的数据,说明客户端是以轮询的方式查看slave内容的

10.在客户端插入数数据,但是看不到,因为 从服务器上关闭了slave的同步

11.但是可以在主服务器上可以看到数据

12.从服务器上看不到数据

uso-1663206859816)]

视频异常检测 5 大经典数据集实战对比:UCSD Ped2 vs CUHK Avenue vs Street Scene 本文深入对比分析了视频异常检测领域的五大经典数据集,包括UCSD Ped2、CUHK Avenue和Street Scene等,从场景复杂度、异常类型和标注质量等多维度进行实战评估。通过详细的数据集特性解析和计算效率测试,为研究者和工程师提供选型指导,帮助优化算法在智能监控和安防领域的应用效果。 阅读详情

相关推荐

手把手教你用VCS+VERDI搭建数字IC验证环境(附Makefile避坑指南)

本文详细介绍了如何使用VCS编译器和VERDI调试工具搭建数字IC验证环境,涵盖从RTL设计到波形分析的全流程。重点解析了Makefile自动化构建、FSDB波形生成方法及常见问题解决方案,帮助工程师高效完成验证工作。特别提供了VCS编译参数配置和VERDI调试技巧的实用指南。

weixin_33738578的博客 450

主从复制与读写分离

文章目录主从复制一、主从复制定义二、主从复制的作用三、主从复制原理四、主从同步模式五、支持的复制类型/日志格式七、主从复制架构读写分离一、读写分离定义二、读写分离实现方式 主从复制 一、主从复制定义 主从复制,是用来建立一个和主数据库完全一样的数据库环境,称为从数据库;主数据库一般是准实时的业务数据库。 二、主从复制的作用 1、做数据的热备,作为后备数据库,主数据库服务器故障后,可切换到从数据库继续工作,避免数据丢失。 2、架构的扩展。业务量越来越大,I/O访问频率过高,单机无法满足,此时做多库的存储,降低

code_java_zqy 891

条码打印工具-Bartender的使用

文章目录1、安装Bartender1.解压安装包,可获得bartender2021版本和破解文本2. 双击“BarTender_2021_R1_Full_x64.exe”文件运行,勾选协议及软件安装设置3. 选择安装选项,自行选择勾选,点击Browser可更换软件安装路径4. 耐心等待软件安装完成,直接点击完成退出5. 此时会弹出提示需要激活许可证,先点击取消6. 接着将Crack夹中的“BarTend.exe”破解文件复制到软件安装目录中替换7. 再双击“serial.reg”导入注册,点击确定即可8.

暮紫的笔记本 1万+

Mysql主从复制与读写分离

C

彼岸吖的博客 964

RT-2(robotics-transformer2)论文--阅读笔记

谷歌RT-2机器人论文的阅读笔记。

weixin_61255639的博客 1831

图像处理(12)--图像各种噪声及消除方法

文章目录结构1.什么是图像噪声2. 图像噪声来源3. 噪声分类及其消除方法3.1 高斯噪声及其消除方式3.1.1 如何确定一种噪声是高斯噪声3.1.2 高斯滤波消除高斯噪声3.1.3 高斯函数的重要性质3.2 瑞利噪声及其消除方式3.3 伽马(爱尔兰)噪声及其消除方式3.4 指数分布噪声及其消除方式3.5 均匀噪声及其消除方式3.6 脉冲(椒盐)噪声及其消除方式 1.什么是图像噪声 图像噪声是指...

ShaneHolmes 11万+

MySQL数据库的主从复制与读写分离

主从复制,简单理解就是2个日志文件,三个线程。两日志记录数据库变动的信息(语句、变动记录)用于临时存放二进制文件内容。三线程①监听I/O线程请求。②将二进制日志文件更新的数据发送给slave的I/O线程。①监听master主机的二进制文件。②向master的dump线程发出同步请求读取中继日志中的文件,更新到本机的数据库。

一个闲人 1557

从Transformer到蛋白质结构预测:手把手解读ESM系列模型的核心原理与实战价值

本文深入解析了ESM系列模型如何将Transformer架构创新应用于蛋白质结构预测,揭示了其从氨基酸序列到三维结构的高效预测机制。通过掩码语言模型预训练和注意力机制,ESM模型不仅捕捉蛋白质序列的远程相互作用,还在蛋白质工程改造、药物发现等领域展现出巨大实战价值,显著提升了结构预测速度和精度。

weixin_28744423的博客 320

MySQL主从复制及读写分离

(一台主服务器,多台从数据服务器,主服务器开启日志功能,且建立一个允许从数据服务器访问的账号,从数据服务器开启从服务,主服务器所以产生的数据记录在日志文件里保存到本地磁盘,当日志文件发生变化时,从数据服务器通过IO线程同步变化的数据,把变化的二进制文件传到从数据服务器并告知主数据服务数据没有问题然后保存到本地磁盘,从数据服务器和主数据服务有一样的数据,所以当读取数据时通过SQL线程调用从数据服务器,而主服务器只负责写,减轻主数据服务器压力)

z2050025507的博客 319

Maya绑定:人物绑定详细案例(创建骨骼、镜像骨骼、IK创建、IK打组、IK控制器、FK控制器、烘焙动画、导出)

Maya绑定:人物绑定详细案例(创建骨骼、镜像骨骼、IK创建、IK打组、IK控制器、FK控制器、烘焙动画、导出)

m0_45877477的博客 1636

在ROS中使用行为树

在ROS中使用行为树 我提供的工程示例文件: demo链接 文章目录在ROS中使用行为树0、 学习本教程的前提1、 behaviorTree 库安装(ROS使用下的安装方式)2、 处理 behaviortree 库并准备好 service 和 ros action2.1 对ROS 的 service 和 action 进行封装,使其在 behaviortree 上使用更加方便。2.2 创建一个 service 和一个 action2.3 创建与决策树相关的数据类型2.4 修改`package.xml`文件2

qq_37416258的博客 6380

Mysql 主从复制、读写分离

在企业应用中,成熟的业务通常数据量都比较大 单台MySQL在安全性、 高可用性和高并发方面都无法满足实际的需求 配置多台主从数据库服务器以实现读写分离。

2201_75549363的博客 1446

浏览器缓存导致代码不更新?一招解决部署后用户仍看到旧页面的问题

方案效果适用场景文件名哈希永久解决前端工程化项目HTTP缓存头控制精准控制需服务器权限Meta标签部分生效临时补救方案最佳实践:入口HTML禁用缓存,静态资源使用哈希文件名 + 长期缓存,达到「秒级更新」+「高性能」的平衡!

江拥羡橙的博客 813

MySQL的主从复制和读写分离

读写分离,基本的原理是让主数据库处理事务性增、改、删操作(INSERT、UPDATE、DELETE),而从数据库处理SELECT查询操作。数据库复制被用来把事务性操作导致的变更同步到集群中的从数据库。

weixin_58376680的博客 2178

数学建模模型总结

这是本人在两年内准备参加数学建模竞赛搜集到的模型资料,已经经过了本人的筛选和整理,希望能够对准备参加数学建模竞赛的学弟学妹们提供一些帮助!

Outlook Express 6 (OE6) for Win7/Win8/Win10

英文版 Outlook Express6.0, 兼容Win7/Win10/WinXP,解压就可用。

MySQL主从复制与读写分离( 主从复制原理 、读写分离原理 、配置 MySQL 主从复制 、配置 MySQL 读写分离)

文章目录

kimowinter的博客 5542

Statistics and Machine Learning Toolbox

Statistics and Machine Learning Toolbox(带书签),MATLAB统计学习工具

MySQL主从复制与读写分离(图文详解)

文章目录MySQL主从复制与读写分离一、案例概述二、======MySQL 主从复制原理======1、MySQL 支持的复制类型2、MySQL主从复制的工作过程三、======MySQL读写分离原理======1、读写分离存在意义2、常见的 MySQL 读写分离分为两种四、MySQL主从复制和读写分离实验部署案例拓扑图实验思路环境配置 MySQL主从复制与读写分离 一、案例概述 在实际的生产环境中,如果对数据库的读和写都在同一个数据库服务器中操作,无论是在安全性、高可用性还是高并发等各个方面都是完全不能满

愿你成为自己喜欢的模样,不抱怨,不将就,有自由,有光芒! 1855

文档:亲测可用解决vnc灰屏,黑屏,鼠标大黑叉情况

主要解决vnc-viewer灰屏,黑屏,鼠标大黑叉等现象,详细见文档。

MySQL 主从复制与读写分离

MySQL 主从复制是一种数据同步机制,允许数据从一个主数据库(Master)复制到一个或多个从数据库(Slave)。数据冗余与灾备:通过从库提供数据备份,增强容灾能力。负载均衡:将读操作分散到多个从库,减轻主库压力。高可用性:主库故障时,从库可快速切换为主库,减少停机时间。MySQL 读写分离是一种通过分离读操作(SELECT)与写操作(INSERT/UPDATE/DELETE)的数据库架构设计,将写操作集中在主库(Master),读操作分散到从库(Slave),以提升系统性能和并发处理能力。核心作用。

2301_80839375的博客 1764
上一篇: 名震GitHub,字节跳动内部顶级数据结构刷题学习笔记根本停不下来
下一篇: 微服务:剖析一下源码,Nacos的健康检查竟如此简单
java_lujj
博客等级 码龄4年 18粉丝 152原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值