MySQL读写分离原理
- 读写分离就是只在主服务器上写,只在从服务器上读。基本的原理是让主数据库处理事务性操作,而从数据库处理select查询。数据库复制被用来把主数据库上事务性操作导致的变更同步到集群中的从数据库。
目前较为常见的MySQL读写分离分为以下两种:
基于程序代码内部实现
- 在代码中根据 select、insert 进行路由分类,这类方法也是目前生产环境应用最广泛的。
- 优点是性能较好,因为在程序代码中实现,不需要增加额外的设备为硬件开支;缺点是需要开发人员来实现,运维人员无从下手。
- 但是并不是所有的应用都适合在程序代码中实现读写分离,像一些大型复杂的Java应用,如果在程序代码中实现读写分离对代码改动就较大。
基于中间代理层实现
代理一般位于客户端和服务器之间,代理服务器接到客户端请求后通过判断后转发到后端数据库,有以下代表性程序。
- MySQL-Proxy。MysQL-Proxy 为MysQL 开源项目,通过其自带的1ua 脚本进行sQL判断。
- Atlas。是由奇虎360的Web平台部基础架构团队开发维护的一个基于MysQL协议的数据中间层项目。它是在mysql-proxy 0.8.2版本的基础上,对其进行了优化,增加了一些新的功能特性。360内部使用atlas运行的mysql业务,每天承载的读写请求数达几十亿条。支持事物以及存储过程。
- Amoeba。由陈思儒开发,作者曾就职于阿里巴巴。该程序由Java语言进行开发,阿里巴巴将其用于生产环境。但是它不支持事务和存储过程。
- Mycat。是一款流行的基于Java语言编写的数据库中间件,是一个实现了MySq1协议的服务器,其核心功能是分库分表。配合数据库的主从模式还可以实现读写分离。
由于使用MysQL Proxy需要写大量的Lua脚本,这些Lua并不是现成的,而是需要自己去写。这对于并不熟悉MySQLProxy内置变量和MysQL Protocol 的人来说是非常困难的。
PrOt Amoeba是一个非常容易使用、可移植性非常强的软件。因此它在生产环境中被广泛应用于数据库的代理层。
搭建Mysql读写分离
在之前的主从复制上进行配置读写分离
读写分离
master 服务器:192.168.239.20 Mysql5.7
slave1 服务器: 192.168.239.30 Mysql5.7
slave2 服务器: 192.168.239.60 Mysql5.7
amoeba 服务器:192.168.239.50 jdk1.6、amoeba
客户端 服务器:192.168.239.10 mysql
systemctl stop firewalld.service
systemctl disable firewalld.service
setenforce 0
复制代码
Amoeba服务器配置
amoeba 服务器:192.168.239.50
复制代码
安装Java环境 因为Amoeba基于是jdk1.5开发的,所以官方推荐使用jdk1.5或1.6|版本,高版本不建议使用。
cd /opt/
cp jdk-6u14-linux-x64.bin /usr/local/
cd /usr/local/
chmod +x jdk-6u14-linux-x64.bin #给权限
./jdk-6u14-linux-×64.bin #运行(安装)
输入yes,最后按enter
vim /etc/profile
#设置环境变量
export JAVA_HOME=/usr/local/jdk1.6.0_14
export CLASSPATH=.:$JAVA_HOME/lib:$JAVA_HOME/jre/lib
export PATH=$JAVA_HOME/lib:$JAVA_HOME/jre/bin/:$PATH
export AMOEBA HOME=/usr/local/amoeba
export PATH=$PATH:$AMOEBA_HOME/bin
source /etc/profile
java -version #查看版本号
复制代码
安装Amoeba软件
mkdir /usr/local/amoeba
tar zxvf amoeba-mysql-binary-2.2.0.tar.gz -C /usr/local/amoeba/
chmod -R 755 /usr/local/amoeba/
/usr/local/amoeba/bin/amoeba #如显示amoeba startlstop说明安装成功
复制代码
配置Amoeba读写分离,两个slave 读负载均衡
#先在Master、Slave1、slave2的mysql上开放权限给geng用户访问
grant all on *.* to 'geng'@'192.168.239.%' identified by '1999612';
#再回到amoeba服务器配置amoeba服务:
cd/usr/local/amoeba/conf/
vim amoeba.xml
--30行--
<property name="user">geng</property> #设置登录用户名
-32行--
<property name="password">1999612</property> #设置登录密码
-115行-
<property name="defaultPool">master</property> #设置默认池为master
--117-去掉注释-
<property name="writePool">master</property> #设置写池
<property name="readPool">slaves</property> #设置读池
cp dbServers.xml dbServers.xml.bak
vim dbServers.xml
--23行-注释
<!-- <property name="schema">test</property> -->
--26行--
<property name="user">geng</property> #添加登录用户
--28行-注释
<!-- mysql password -->
--30行-
<property name="password">1999612</property> #添加登录密码
--46行-
<dbServer name="master" parent="abstractServer"> #指定写池名
--49行-
<property name="ipAddress">192.168.239.20</property> #指定写池ip地址
--53行-
<dbServer name="slave1" parent="abstractServer"> #指定读池1名
--56行-
<property name="ipAddress">192.168.239.30</property> #指定读池1ip地址
复制53行到58行粘贴到58行下
--59行-
<dbServer name="slave2" parent="abstractServer"> #指定读池2名
--62行-
<property name="ipAddress">192.168.239.60</property> #指定读池2ip地址
--66行-
<dbServer name="slaves" virtual="true"> #指定读池名
--69行-
<property name="loadbalance">1</property> #指定负载均衡调度算法为轮询
--72行-
<property name="poolNames">slave1,slave2</property> #写上从节点名
cd /usr/local/amoeba/bin/
./amoeba start & #后台启动
netstat -natp | grep java
复制代码
客户机配置
客户端 服务器:192.168.239.10
yum install -y mariadb mariadb-server #安装mariadb
systemctl restart mariadb.service #开启服务
测试
mysql -u bo -p1999612 -h 192.168.239.50 -P 8066 #登入并查看数据库
show databases;
use yjx;
show tables;
select * from ky18 ;
测试同步
insert into ky18 values (4,'geng',18); 插入数据记录
insert into ky18 values (5,'bo',18);
select * from ky18;
从服务器查看
select * from ky18;
复制代码
读写分离测试
停掉从服务器同步两台都停
stop slave;
此时在客户机插入数据只有主可以看到数据
insert into ky18 values (6,'gb',18);
select * from ky18;
复制代码
轮询测试
分别在两台从服务器创建不同的数据记录
从1添加
insert into ky18 values (6,'wang',25);
从2添加
insert into ky18 values (7,'xie',26);
客户机查看实现轮询
select * from ky18 ;
此时开启从同步则可以同步gb那条数据记当客户机访问时从服务器添加的数据记录任然还是轮询
start slave;
客户机查看表数据记录
select * from ky18 ;
复制代码
此时客户机查询实现轮询