文章详情

短信预约-IT技能 免费直播动态提醒

请输入下面的图形验证码

提交验证

短信预约提醒成功

冰河,能讲讲Mycat如何实现MySQL的读写分离吗?

2024-12-03 16:08

关注

作者个人研发的在高并发场景下,提供的简单、稳定、可扩展的延迟消息队列框架,具有精准的定时任务和延迟队列处理功能。自开源半年多以来,已成功为十几家中小型企业提供了精准定时调度方案,经受住了生产环境的考验。为使更多童鞋受益,现给出开源框架地址:

https://github.com/sunshinelyz/mykit-delay

写在前面

随着系统业务的不断发展,MySQL数据库中的数据量也在不断攀升,当数据量达到一定量级时,MySQL的主从复制、读写分离、分库分表就成为了一种必然的架构趋势。这不,就有小伙伴问我能不能讲讲Mycat如何实现MySQL的读写分离。于是就安排上了这篇文章。

注:文章已经收录到:

GitHub:https://github.com/sunshinelyz/technology-binghe

Gitee:https://gitee.com/binghe001/technology-binghe

环境说明

这里大家需要注意的是MySQL的主从复制是依赖的MySQL自己的主从复制机制,Mycat不负责MySQL的主从复制,有关MySQL的主从复制配置,大家可以参考博文《MySQL之——主从复制的配置》,好了,我们接下来进入今天的主题内容。

搭建环境操作系统:CentOS-6.5-x86_64-bin-DVD1.iso

JDK版本:jdk1.8

Mycat版本:Mycat-server-1.6.1-RELEASE-20201208215510-linux.tar.gz (下载源码自行编译的)

Mycat节点IP:192.168.209.133 主机名:liuyazhuang133 主机配置:4核CPU、4G内存

MySQL版本:mysql-5.6.32.tar.gz

主节点IP:192.168.209.131 主机名:liuyazhuang131 主机配置:4核CPU、4G内存

从节点IP:192.168.209.132 主机名:liuyazhuang132 主机配置:4核CPU、4G内存

Mycat部署

架构Mycat的读写分离是基于后端MySQL集群的主从同步来实现的,而Mycat提供语句的分发功能。MyCat1.4开始支持MySQL主从复制状态绑定的读写分离机制,让读更加安全可靠。

我们来看看Mycat的整体部署架构图。

 

Mycat的安装设置主机名和IP与主机名的映射

  1. # vim /etc/sysconfig/network 
  2. NETWORKING=yes 
  3. HOSTNAME=liuyazhuang133 
  1. # vim /etc/hosts 
  2. 127.0.0.1 liuyazhuang133 
  3. 192.168.209.131 liuyazhuang131 
  4. 192.168.209.132 liuyazhuang132 
  5. 192.168.209.133 liuyazhuang133 

配置Java环境变量

因为Mycat是用Java开发的,因此Mycat运行需要安装JDK(准确来说是JRE就够了),并且需要JDK1.7或以上版本

  1. # vim /etc/profile 
  2. ## java env 
  3. export JAVA_HOME=/usr/local/java/jdk1.8 
  4. export JRE_HOME=$JAVA_HOME/jre 
  5. export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar:$JRE_HOME/lib/rt.jar 
  6. export PATH=$PATH:$JAVA_HOME/bin:$JRE_HOME/bin 
  7. # source /etc/profile 
  8. # java -version 

上传Mycat安装包

上传Mycat-server-1.6.1-RELEASE-20201208215510-linux.tar.gz 到 MyCat服务器中的/home/mycat目录,并解压并移动到 /usr/local/mycat目录

  1. $ tar -zxvf Mycat-server-1.6.1-RELEASE-20201208215510-linux.tar.gz 
  1. # mv /home/mycat/mycat  /usr/local
  2. # cd /usr/local/mycat/ 
  3. # ll 

 

设置Mycat的环境变量

  1. # vim /etc/profile 
  2. ## mycat env 
  3. export MYCAT_HOME=/usr/local/mycat 
  4. export PATH=$PATH:$MYCAT_HOME/bin 
  5. # source /etc/profile 

配置Mycat

确认MySQL主从复制正常

在配置Mycat前,请确认MySQL的主从复制安装配置已完成并正常运行。MySQL主从数据的同步在MySQL中配置,Mycat不负责数据同步的问题。

补充:

配置schema.xml

schema.xml是Mycat最重要的配置文件之一,用于设置Mycat的逻辑库、表、数据节点、dataHost等内容,

  1. [root@liuyazhuang133 conf]$ cd /usr/local/root/conf/ 
  2. [root@liuyazhuang133 conf]$ vi schema.xml 

文件内容如下所示。

  1. "1.0"?> 
  2. schema SYSTEM "schema.dtd"
  3. schema xmlns:mycat="http://org.opencloudb/"
  4.       <schema name="lyz_schema1" checkSQLschema="false" sqlMaxLimit="100" dataNode="lyz_dn1">schema
  5.       <schema name="lyz_schema2" checkSQLschema="false" sqlMaxLimit="100" dataNode="lyz_dn2">schema
  6.       name="lyz_dn1" dataHost="dtHost2" database="lyzdb1" /> 
  7.       name="lyz_dn2" dataHost="dtHost2" database="lyzdb2" /> 
  8.       name="dtHost2" maxCon="500" minCon="20" balance="1" 
  9.            writeType="0" dbType="mysql" dbDriver="native" switchType="2" slaveThreshold="100"
  10.            show slave status 
  11.            -- can have multi write hosts --> 
  12.            "hostM2" url="192.168.209.131:3306" user="root" password="root" /> 
  13.            "hostS2" url="192.168.209.132:3306" user="root" password="root" /> 
  14.        
  15. schema

Mycat1.4开始支持MySQL主从复制状态绑定的读写分离机制,让读更加安全可靠,配置如下:

Mycat心跳检查语句配置为 show slave status ,dataHost 上定义两个新属性:switchType="2" 与 slaveThreshold="100",此时意味着开启MySQL主从复制状态绑定的读写分离与切换机制,MyCat心跳机制通过检测 show slave status 中的 "Seconds_Behind_Master", "Slave_IO_Running", "Slave_SQL_Running" 三个字段来确定当前主从同步的状态以及Seconds_Behind_Master主从复制时延,当Seconds_Behind_Master 大于slaveThreshold时,读写分离筛选器会过滤掉此Slave机器,防止读到很久之前的旧数据,而当主节点宕机后,切换逻辑会检查Slave上的Seconds_Behind_Master是否为0,为0时则表示主从同步,可以安全切换,否则不会切换。

配置 server.xml

server.xml 主要用于设置系统变量、管理用户、设置用户权限等。

  1. [root@liuyazhuang133 conf]$ vim server.xml 

文件内容如下所示。

  1. "1.0" encoding="UTF-8"?> 
  2. "server.dtd"
  3. "http://org.opencloudb/"
  4.        
  5.   name="defaultSqlParser">druidparser 
  6.   name="charset">utf8mb4 
  7.      
  8.     <user name="lyz"
  9.       name="password">lyz.123 
  10.       name="schemas">lyz_schema1,lyz_schema2 
  11.     user
  12.     <user name="userlyz"
  13.       name="password">lyz.123 
  14.       name="schemas">lyz_schema1,lyz_schema2 
  15.       name="readOnly">true 
  16.     user
  17.  

防火墙中打开8066和9066端口

Mycat的默认数据端口为8066,mycat通过这个端口接收数据库客户端的访问请求。

管理端口为9066,用来接收Mycat监控命令、查询Mycat运行状况、重新加载配置文件等。

  1. [root@liuyazhuang133 mycat]# vim /etc/sysconfig/iptables 

增加:

  1. ## MyCat 
  2. -A INPUT -m state --state NEW -m tcp -p tcp --dport 8066 -j ACCEPT 
  3. -A INPUT -m state --state NEW -m tcp -p tcp --dport 9066 -j ACCEPT 

重启防火墙:

  1. [root@liuyazhuang133 mycat]# service iptables restart 

修改log日志级别为debug

修改log日志级别为debug,以便通过日志确认基于Mycat的MySQL数据库集群读写分离的数据操作状态(可以在正式上生产前改成info级别)

[root@liuyazhuang133 conf]$ vim /usr/local/mycat/conf/log4j.xml

 

启动Mycat

  1. [root@liuyazhuang133 bin]$ cd /usr/local/root/bin/ 

(1) 控制台启动,这种启动方式在控制台关闭后,Nycat服务也将关闭,适合调试使用:

  1. [root@liuyazhuang133 bin]$ ./mycat console 

(2) 可以采用以下后台启动的方式:

  1. [root@liuyazhuang133 bin]$ ./mycat start 
  2. Starting root-server... 

Mycat连接测试(1) 如果本地Windows安装有MySQL,可以使用已有的mysql客户端远程操作Mycat

 

(2) Nativecat连接Mycat


 

 

读写分离测试

(1) 监听Mycat日志

  1. [root@liuyazhuang133 ~]$ cd /usr/local/mycat/logs/ 
  2. [root@liuyazhuang133 logs]$ tail -f mycat.log 

(2) 读测试

  1. $ mysql -uuserlyz -plyz.123 -h192.168.209.233 -P8066 
  2. mysql> show databases; 

  1. mysql> use lyz_schema2; 

 

  1. mysql> show tables; 

  1. mysql> select * from lyz_user_02; 

 

执行上面的查询语句,此时对应的Mycat日志信息如下:

 

多次执行 select * from lyz_user_02 语句,Mycat打印出来的日志信息显示读操作请求都是路由到Slave节点(192.168.209.132)

写测试

  1. mysql> insert into lyz_user_02 (userName, pwd) values('liuyazhuang''lyz。123'); 

 

执行上面的新增插入语句后,此时对应的Mycat日志信息如下:

多次执行以上插入语句,发现新增数据都是从 Master节点(192.168.209.131)插进入的,并且Slave节点通过Binlog同步了Master节点中的数据。

 

 

综上,基于Mycat的读写分离集群配置成功。

本文转载自微信公众号「冰河技术」,可以通过以下二维码关注。转载本文请联系冰河技术公众号。

 

来源: 冰河技术内容投诉

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

软考中级精品资料免费领

  • 历年真题答案解析
  • 备考技巧名师总结
  • 高频考点精准押题
  • 2024年上半年信息系统项目管理师第二批次真题及答案解析(完整版)

    难度     813人已做
    查看
  • 【考后总结】2024年5月26日信息系统项目管理师第2批次考情分析

    难度     354人已做
    查看
  • 【考后总结】2024年5月25日信息系统项目管理师第1批次考情分析

    难度     318人已做
    查看
  • 2024年上半年软考高项第一、二批次真题考点汇总(完整版)

    难度     435人已做
    查看
  • 2024年上半年系统架构设计师考试综合知识真题

    难度     224人已做
    查看

相关文章

发现更多好内容

猜你喜欢

AI推送时光机
位置:首页-资讯-后端开发
咦!没有更多了?去看看其它编程学习网 内容吧
首页课程
资料下载
问答资讯