使用mycat做Mysql读写分离

分类：mycat作者：编程之家用户

本文转载自： https://www.93bok.com

实验环境： Centos6.5 minimal 64位系统
服务器IP：192.168.10.22（mycat）
         192.168.10.27（master）
         192.168.10.29（slave）
         192.168.10.21（测试客户端）

说明：

1.  安装包已经提前下载好，此文档中不再演示下载步骤
2.  根据笔者习惯，所有的源码包都在/a01/apps/apps_src/
3.  所有的服务安装路径都在/a01/apps/xxxxxxx
4.  服务器只安装了MySQL，如果不会安装，请参考之前文章

包版本：

MySQL：      mysql-5.7.19.tar.gz或者mysql-boost-5.7.19.tar.gz
Mycat：      Mycat-server-1.6.5-release-20171117203123-linux.tar
JDK：        jdk-8u151-linux-x64.tar.gz

JDK去oracle官网下载：

http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html

Mycat官网下载：

http://www.mycat.io/

MySQL读写分离的概述

Mysql作为目前世界上使用最广泛的免费数据库，在实际的生产环境中，由单台Mysql作为独立的数据库是完全不能满足实际需求的，无论是在安全性，高可用性以及高并发等各个方面。因此，一般来说都是通过 主从复制（Master-Slave）的方式来同步数据，再通过读写分离来提升数据库的并发负载能力，这样的方案来进行部署与实施的。

读写分离工作原理

基本的原理是让主数据库处理事务性增、改、删操作（INSERT、UPDATE、DELETE），而从数据库处理SELECT查询操作。数据库复制被用来把事务性操作导致的变更同步到集群中的从数据库。

POicyF.png

数据内部交换过程

POiReJ.png

为什么要读写分离

面对越来越大的访问压力，单台的服务器的性能成为瓶颈，需要分担负载

1、主从只负责各自的写和读，极大程度的缓解X锁和S锁争用
2、从库可配置myisam引擎，提升查询性能以及节约系统开销
3、增加冗余，提高可用性

实现读写分离的方式

A．应用程序层实现，网站的程序实现

指的是在应用程序内部及连接器中实现读写分离

POiWw9.png

优点：

1、应用程序内部实现读写分离，安装既可以使用
2、减少一定部署难度
3、访问压力在一定级别以下，性能很好

缺点：

1、架构一旦调整，代码要跟着变
2、难以实现高级应用，如自动分库，分表
3、无法适用大型应用场景
B．中间件层实现

指在外部中间件程序实现读写分离

常见的中间件程序：

POifoR.png

1、Cobar:
阿里巴巴B2B开发的关系型分布式系统，管理将近3000个MySQL实例。 在阿里经受住了考验，后面由于作者的走开的原因cobar没有人维护 了，阿里也开发了tddl替代cobar。

2、MyCAT:
社区爱好者在阿里cobar基础上进行二次开发，解决了cobar当时存 在的一些问题，并且加入了许多新的功能在其中。目前MyCAT社区活 跃度很高，目前已经有一些公司在使用MyCAT。总体来说支持度比 较高，也会一直维护下去，

3、OneProxy:
数据库界大牛，前支付宝数据库团队领导楼总开发，基于mysql官方 的proxy思想利用c进行开发的，OneProxy是一款商业收费的中间件， 楼总舍去了一些功能点，专注在性能和稳定性上。有朋友测试过说在 高并发下很稳定。

4、Vitess:
这个中间件是Youtube生产在使用的，但是架构很复杂。 与以往中间件不同，使用Vitess应用改动比较大要 使用他提供语言的API接口，我们可以借鉴他其中的一些设计思想。

5、Kingshard:
Kingshard是前360Atlas中间件开发团队的陈菲利用业务时间 用go语言开发的，目前参与开发的人员有3个左右， 目前来看还不是成熟可以使用的产品，需要在不断完善。

6、Atlas:
360团队基于mysql proxy 把lua用C改写。原有版本是支持分表， 目前已经放出了分库分表版本。在网上看到一些朋友经常说在高并 发下会经常挂掉，如果大家要使用需要提前做好测试。

7、MaxScale与MySQL Route:
这两个中间件都算是官方的吧，MaxScale是mariadb (MySQL原作者维护的一个版本)研发的，目前版本不支持分库分表。MySQL Route是现在MySQL官方Oracle公司发布出来的一个中间件。

中间件优点：

1、架构设计更灵活
2、可以在程序上实现一些高级控制，如：透明化水平拆分，failover,监控
3、可以依靠些技术手段提高mysql性能，
4、对业务代码的影响小，同时也安全

缺点：

需要一定的开发运维团队的支持

什么是Mycat

1、一个彻底开源的，面向企业应用开发的大数据库集群
2、支持事务、ACID、可以替代MySQL的加强版数据库
3、一个可以视为MySQL集群的企业级数据库，用来替代昂贵的Oracle集群
4、一个融合内存缓存技术、NoSQL技术、HDFS大数据的新型SQL Server
5、结合传统数据库和新型分布式数据仓库的新一代企业级数据库产品
6、一个新颖的数据库中间件产品

POi5Jx.png

Mycat部署

Mycat依赖JDK1.7或者以上版本

mkdir -p /usr/local/java
tar -zxvf jdk-8u151-linux-x64.tar.gz -C /usr/local/java/

配置环境变量：

vim /etc/profile

JAVA_HOME=/usr/local/java/jdk1.8.0_151
PATH=$JAVA_HOME/bin:$PATH
CLASSPATH=$JAVA_HOME/jre/lib/ext:$JAVA_HOME/lib/tools.jar
export PATH JAVA_HOME CLASSPATH

source /etc/profile
java –version

POiTSK.png

开始安装Mycat，这是二进制包，直接解压就能使用

tar -zxvf Mycat-server-1.6.5-release-20171117203123-linux.tar.gz -C /a01/apps/

1、配置环境变量：

vim /etc/profile

MYCAT_HOME=/a01/apps/mycat PATH=$MYCAT_HOME/bin:$PATH

source /etc/profile

2、配置mycat用户账号和授权信息

cp /a01/apps/mycat/conf/server.xml /a01/apps/mycat/conf/server.xml.bak
vim /a01/apps/mycat/conf/server.xml

这部分为登录mycat默认的用户账号授权信息：

POiHyD.png

去修改成成我们的：

        <user name="root" defaultAccount="true">
                <property name="password">123456</property>
                <property name="schemas">nongkaige</property>

                <!-- 表级 DML 权限设置 -->
                <!--            
                <privileges check="false">
                        <schema name="TESTDB" dml="0110" >
                                <table name="tb01" dml="0000"></table>
                                <table name="tb02" dml="1111"></table>
                        </schema>
                </privileges>           
                 -->
        </user>

        <user name="slave">
                <property name="password">123456</property>
                <property name="schemas">nongkaige</property>
                <property name="readOnly">true</property>
        </user>

</mycat:server>

POibOe.png

参数说明：

以上配置中，配置了一个root用户和slave用户提供应用连接到mycat，同时mycat在schema.xml中配置了一个逻辑库nongkaige，配置好逻辑库与用户的映射关系。root用户可读写，slave只读

3、配置mycat逻辑库

Mycat作为一个中间件，实现mysql协议那么对前端应用连接来说就是一个数据库，也就有数据库的配置，mycat的数据库配置是在schema.xml中配置，配置好后映射到server.xml里面的用户就可以了。

cp /a01/apps/mycat/conf/schema.xml /a01/apps/mycat/conf/schema.xml.bak
vim /a01/apps/mycat/conf/schema.xml

POiOwd.png

大家可以看到，mycat的默认配置文件中，有太多的默认配置以及注释信息，太过于杂乱，因为刚刚我已经备份了，所以这里边的内容直接全删了，写上我们自己需要的配置即可。

<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">



<mycat:schema xmlns:mycat="http://io.mycat/">

<!-- 配置逻辑库schema -->
<schema name="nongkaige" checkSQLschema="true" sqlMaxLimit="100" dataNode="dn1">
</schema>

<!-- 配置分片dataNode -->
<dataNode name="dn1" dataHost="mycat1" database="nongkaige"/>

<!-- 配置物理库分片映射dataHost -->
<dataHost name="mycat1" writeType="0" switchType="-1" slaveThreshold="100" balance="1" dbType="mysql" maxCon="10" minCon="1" dbDriver="native">
        <heartbeat>show status like 'wsrep%'</heartbeat>
        <writeHost host="test02centos6.5" url="192.168.10.27:3306" user="root" password="123456" >
        <readHost host="test02centos6.5" url="192.168.10.29:3306" user="root" password="123456" />
        </writeHost>
</dataHost>

</mycat:schema>

POiXTA.png

有两个参数需要注意，balance 和switchType

其中，balance指的负载均衡类型，目前的取值有4种：

1. balance="0", 不开启读写分离机制，所有读操作都发送到当前可用的writeHost上。
2. balance="1"，全部的readHost与stand by writeHost参与select语句的负载均衡，简单的说，当双主双从模式(M1->S1，M2->S2，并且M1与 M2互为主备)，正常情况下，M2,S1,S2都参与select语句的负载均衡。
3. balance="2"，所有读操作都随机的在writeHost、readhost上分发。
4. balance="3"，所有读请求随机的分发到wiriterHost对应的readhost执行，writerHost不负担读压力

switchType指的是切换的模式，目前的取值也有4种：

1. switchType='-1' 表示不自动切换
2. switchType='1' 默认值，表示自动切换
3. switchType='2' 基于MySQL主从同步的状态决定是否切换,心跳语句为 show slave status
4. switchType='3'基于MySQL galary cluster的切换机制（适合集群）（1.4.1），心跳语句为 show status like 'wsrep%'。

4、启动Mycat

mycat start

检查一下是否启动成功：

tail -f /a01/apps/mycat/logs/wrapper.log

POixYt.png

报错了，大概意思是未知的主机名test02centos6.5，域名解析失败，what the mean？添加本机的hosts，然后再来启动Mycat

POFpSf.png

mycat start

POF9l8.png

5、防火墙开启8066和9066端口

vim /etc/sysconfig/iptables

-A INPUT -m state --state NEW -m tcp -p tcp --dport 8066 -j ACCEPT
-A INPUT -m state --state NEW -m tcp -p tcp --dport 9066 -j ACCEPT

service iptables restart

6、为了方便查看效果，修改mycat日志记录模式为debug，默认为info

debug级别下，会输出更多的信息，方便排查问题

vim /a01/apps/mycat/conf/log4j2.xml

POFC6S.png

Mysql主从同步M-S部署

此步省略步骤，可参考之前文章：《Mysql主从同步M-S部署》

注意：

mysql主和从上还要设置授权mycat，否则客户端连接mycat无法获取后端数据库的数据

主和从分别授权：

mysql> grant all on nongkaige.* to root@'%' identified by '123456';
mysql> flush privileges;

测试Mycat读写分离

使用192.168.10.21客户机来测试：

登录mycat
mysql -u root -p123456 -h 192.168.10.22 -P8066
读测试，查看日志：
tail -f /a01/apps/mycat/logs/mycat.log

POFPOg.png

写测试，查看日志：

POFFmQ.png

原文地址：https://www.cnblogs.com/93bok/p/12425372.html

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 dio@foxmail.com 举报，一经查实，本站将立刻删除。

相关推荐

5分钟带你快速了解Mycat是什么？Mycat原理讲解教程
Mycat是什么？MyCat是一个开源的分布式数据库系统，是一个实现了MySQL协议的服务器，前端用户可以把它看作是一个数据库代理，用MySQL客户端工具和命令行访问，而其后端可以用MySQL原生协议与多个MySQL服务器通信，也可以用JDBC协议与大多数主流数据库服务器通信，其核心功能是分表分库，即将一
MyCat数据库中间件入门
转自：https://www.cnblogs.com/ivictor/p/5111495.html参考：https://www.cnblogs.com/damumu/p/7320258.htmlMyCAT是mysql中间件，前身是阿里大名鼎鼎的Cobar，Cobar在开源了一段时间后，不了了之。于是MyCAT扛起了这面大旗，在大数据时代，其重要性愈发彰显。这篇文章主要是MyCAT的入门部署
mycat 的基本搭建
1.在数据库做好主从同步的情况下搭建mycat。下载mycat，解压。修改server.xml文件，修改schema.xml待完善启动mycat。参考文章：https://blog.csdn.net/yelllowcong/article/details/79063546https://www.cnblogs.com/NingKangMing/p/6143834.html
06mycat使用haproxy进行负载均衡
集群的服务器列表在10.11.0.210和10.11.0.216中部署mycat和haproxy(因为实验机器性能有限，实际生产环境中需要单独用服务做haproxy反向代理) 两台机器的Mycat配置和haproxy保持一致即haproxyàmycatàpxc集群àmysql分片 Mycat的相关配置Server.xml[root@node6
详解Mycat核心概念和名词
Mycat是什么？·一个彻底开源的，面向企业应用开发的大数据库集群·支持事务、ACID、可以替代MySQL的加强版数据库·一个可以视为MySQL集群的企业级数据库，用来替代昂贵的Oracle集群·一个融合内存缓存技术、NoSQL技术、HDFS大数据的新型SQLServer·结合传统数据库和新型分布式数
Mycat配置文件server.xml，常用参数说明
<system>配置Mycat系统参数 <system>  <propertyname="serverPort">3306</property><!--mycat服务端口-->  <propertyname="managerPort">9066</property><!--mycat管理端口-->  <propertyname=&q
数据库中间件mycat配置
数据库中间件：mycat逻辑库：即mycat服务上的数据库，并非实际mysql服务上的数据库。逻辑表：与逻辑库同理。数据节点：是mycat逻辑表与mysql物理表的对应关系，mycat服务上某个库中的某个表的数据可能是由不同mysql服务器上数据库中表的数据组成。具体哪个逻辑表对应mysql的哪个实际
MyCat安装及启动
MyCat的官方网站：http://www.mycat.org.cn/下载地址：https://github.com/MyCATApache/Mycat-download第一步：下载wget http://dl.mycat.io/1.6-RELEASE/Mycat-server-1.6-RELEASE-20161028204710-linux.tar.gz 并解压Mycat-server-1.6-RELEASE-20161028204710-linux.tar.gz
MyCat 9066管理端口常用命令
show@@sql;Emptyset(0.01sec)一直查不出数据查看在Mycat中执行过的SQL语句，需要确认server.xml配置文件中的<propertyname="useSqlStat">1</property>刚开始一直出不来数据，最后发现是没开启的原因。。。。。。1. 连接mycat9066管理端口   mysql-h127.0.0.1-
mysql大型分布式集群 mysql分布式部署 Mycat分库分表 mycat读写分离 MySQL集群与优化 高可用数据架构 mysql分布式事务教程
Mysql分布式集群部署mycat分库分表系列（共三套）系列一：《分布式集群+分库分表实战教程》本套课程将通过分布式集群和分库分表两部分内容进行讲解1、主要解决针对大型网站架构中持久化部分中，大量数据存储以及高并发访问所带来是数据读写问题。分布式是将一个业务拆分为多个子业务
windows安装Mycat
1、下载系统安装包选择相应的版本进行下载，地址：http://dl.mycat.io/ 。Mycat数据库分库分表中间件介绍 http://www.mycat.io/2、安装安装mycat前需要保证系统已安装过jdk和mysql，将下载好的mycat安装包解压到某个目录下，然后进入mycat解压目录下的bin目录（打开cmd控制台确保是以管
学会数据库读写分离、分表分库
原文:学会数据库读写分离、分表分库https://www.cnblogs.com/joylee/p/7513038.html系统开发中，数据库是非常重要的一个点。除了程序的本身的优化，如：SQL语句优化、代码优化，数据库的处理本身优化也是非常重要的。主从、热备、分表分库等都是系统发展迟早会遇到的技术问题问题。Mycat
MyCAT简易入门
MyCAT是mysql中间件，前身是阿里大名鼎鼎的Cobar，Cobar在开源了一段时间后，不了了之。于是MyCAT扛起了这面大旗，在大数据时代，其重要性愈发彰显。这篇文章主要是MyCAT的入门部署。  随着互联网应用的广泛普及，海量数据的存储和访问成为了系统设计的瓶颈问题。对于一个大型的互联网应
MyCat 安装配置学习
MyCat安装配置学习1.下载安装tar解压(不多说)2.MyCat命令./mycatstart启动./mycatstop停止./mycatrestart重启配置server.xml添加用户设置配置schema.xml
Mycat入门
1.Mycat入门官网http://www.mycat.io/1.1.什么是Mycat一个彻底开源的，面向企业应用开发的大数据库集群支持事务、ACID、可以替代MySQL的加强版数据库一个可以视为MySQL集群的企业级数据库，用来替代昂贵的Oracle集群一个融合内存缓存技术、NoSQL技术、HDFS大数据的新型SQL
mycat自学整理入门
因为51博客写作格式问题，以后文档都以有道文档连接为主，已整理到有道云笔记，目前笔记有云计算运维大数据运维，应用运维，DBA，测试，小白想学的可以加我qq：936172842,，请注明51学友，无备注一律不加，http:/ote.youdao.comoteshare?id=935db6cec339054c82d8b3f6ac343fa0⊂=DBB78851CCCF486EB26B
分布式数据库中间件 MyCat
MyCat简介前面文章我们提到，如果数据量比较大的话，我们需要对数据进行分库分表，分完之后，原本存在一个数据库中的数据，现在就存在多个数据库中了，就像下面这样：  那么此时MyCat所扮演的角色就是分布式数据库中间件！MyCat是一个开源的分布式数据库中间件，它实现了MySQL协议，在开发
JVM 自定义类加载器在复杂类情况下的运行分析
一、自定义类加载器在复杂类情况下的运行分析1、使用之前创建的类加载器publicclassMyTest16extendsClassLoader{privateStringclassName;//目录privateStringpath;privatefinalStringfileExtension=".class";publicMyTest16(Stringclass
mycat的安装和入门
mycat是一个中间层mycat不存储任何数据，所有数据存储在mysql中mycat对于开发人员来说就是mysql，但mycat不能支持所有mysql语句mycat可以实现对后端数据库的分库分表和读写分离、负载均衡mycat对前端应用隐藏了后端数据库的存储逻辑（比如对后端数据读写分离，如果在程序中实现，则每一个使
mycat入门安装及demo实现
下载：https://github.com/MyCATApache/Mycat-download安装：直接解压运行命令：linux：   ./mycatstart启动   ./mycatstop停止   ./mycatconsole前台运行   ./mycatrestart重启服务   ./mycatpause暂停   ./mycatstatus查看启动状态windows：
pythonJavaScriptjavaHTMLPHPreactjsC#AndroidCSSNode.jssqlrpython-3.xMysqLjQueryc++pandasFlutterangularIOSdjangolinuxswifttypescript路由器JSON路由器设置无线路由器h3c华三华三路由器设置华三路由器电脑软件教程arraysdocker软件图文教程Cvue.jslaravelspring-boot