MyCat——数据库分库分表中间件


一. 概述

Mycat 是数据库中间件。 官网: http://www.mycat.org.cn/

1、数据库中间件

中间件:是一类连接软件组件和应用的计算机软件,以便于软件各部件之间的沟通。

例子:Tomcat( web中间件 ) nginx

数据库中间件:连接java应用程序和数据库

2、为什么要用Mycat?

​ ① Java与数据库紧耦合。

​ ② 高访问量高并发对数据库的压力。

​ ③ 读写请求数据不一致

3、作用

  • Mycat可以实现数据库的读写分离

  • 数据分片

    垂直拆分(分库)、水平拆分(分表)、垂直+水平拆分(分库分表)

  • 多数据源整合

4、原理

​ Mycat 的原理中最重要的一个动词是“拦截”,它拦截了用户发送过来的 SQL 语句,首先对 SQL

语句做了一些特定的分析:如分片分析、路由分析、读写分离分析、缓存分析等,然后将此 SQL 发

往后端的真实数据库,并将返回的结果做适当的处理,最终再返回给用户。

这种方式把数据库的分布式从代码中解耦出来,且察觉不出来后台使用 的Mycat 还是 MySQL。

二. 安装启动

点击下载mycat服务

#下载后将文件拷贝到 linux 下 的/opt目录,并解压缩
cd /opt
tar -zxvf Mycat-server-1.6.7.1-release-20190627191042-linux.tar.gz

#将解压缩的mycat文件夹拷贝到 linux 下的 /usr/local/目录
cp -r mycat /usr/local/

查看mycat文件夹目录

conf文件夹内三个配置文件:

①schema.xml:定义逻辑库,表、分片节点等内容

②rule.xml:定义分片规则

③server.xml:定义用户以及系统相关变量,如端口等

2.1 配置

  • 修改配置文件server.xml

    修改用户信息,与MySQL的root用户区分,如下:

cd /usr/local/mycat/conf
#进入server.xml文件,并按a键进入修改模式
vim server.xml

将此处的root改为mycat:

修改后:

修改完成后按tab键退出编辑模式,并输入:wq 保存修改。

  • 修改配置文件 schema.xml

    需准备两台linux服务器或虚拟机,并且都已安装mysql和都创建了testdb数据库

    读主机:192.168.152.130 root 123456

    写主机:192.168.152.131 root 123456

用同样的方式修改schema.xml,删除< schema >标签间的表信息,< dataNode >标签只留一个,< dataHost>标签只留一个,< writeHost> < readHost>只留一对

修改成如下:

<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://io.mycat/">
 	<schema name="TESTDB" checkSQLschema="false" sqlMaxLimit="100" dataNode="dn1">
 	</schema>
 
    <dataNode name="dn1" dataHost="host1" database="testdb" />
 	<dataHost name="host1" maxCon="1000" minCon="10" balance="0"
 	writeType="0" dbType="mysql" dbDriver="native" switchType="1" 
	slaveThreshold="100">
    <!-- 心跳检测 ,检测mysql集群服务是否宕机-->
 	<heartbeat>select user()</heartbeat>
 <!-- 读主机 -->
 <writeHost host="hostM1" url="192.168.152.130:3306" user="root"
 password="123456">
 <!--写主机 -->
 <readHost host="hostS1" url="192.168.152.131:3306" user="root" 
password="123456" />
 </writeHost>
 </dataHost>
</mycat:schema>
  • 验证数据库访问情况

    启动mycat之前,需要在安装了mycat服务的linux系统内验证是否能远程访问连接的mysql:

    #读主机远程连接写主机
    mysql -uroot -p123456 -h 192.168.152.131 -P 3306
    #读主机远程连接本机
    mysql -uroot -p123456 -h 192.168.152.130 -P 3306
    

2.2 启动

①控制台启动 :去 mycat/bin 目录下执行 ./mycat console

②后台启动 :去 mycat/bin 目录下 ./mycat start

为了能第一时间看到启动日志,方便定位问题,可以选择①控制台启动。

cd /usr/local/mycat/bin
./mycat console 

启动中如出现以下错误时,可以去修改/usr/local/mycat/conf/wrapper.conf文件,

在配置文件内加上wrapper.startup.timeout=300:

启动成功:

2.3 登录mycat

不要关闭正在运行mycat服务的窗口,新开一个窗口登录

  • 登录后台管理窗口 ( 9066端口 ,运维人员访问)

    此登录方式用于管理维护 Mycat

    mysql -umycat -p123456 -P 9066 -h 192.168.152.130
    

    登录之后的界面很像mysql,但是服务版本是mycat。

    查看全部数据库,只有一个testdb, 这是前面在schema.xml文件内配置的数据库;

    show @@help 查看帮助

  • 登录数据窗口 ( 8066端口,开发人员访问 )

    此登录方式用于通过 Mycat 查询数据,一般选择这种方式访问 Mycat

    mysql -umycat -p123456 -P 8066 -h 192.168.152.130
    

三. 搭建读写分离

可以通过 Mycat 和 MySQL 的主从复制配合搭建数据库的读写分离,实现 MySQL 的高可用性。

将搭建:一主一从、双主双从两种读写分离模式。

3.1 搭建一主一从

一个主机用于处理所有写请求,一台从机负责所有读请求,架构图如下:

确定主从关系: 主(192.168.152.130), 从(192.168.152.131)

    1. 主机配置
    #修改配置文件:
    vim /etc/my.cnf
    
    #主服务器唯一ID
    server-id=1
    #启用二进制日志
    log-bin=mysql-bin
    # 设置不要复制的数据库(可设置多个,mysql系统库无需复制)
    binlog-ignore-db=mysql
    binlog-ignore-db=information_schema
    #设置需要复制的数据库(可设置多个)
    binlog-do-db=testdb
    #设置logbin格式
    binlog_format=STATEMENT
    

    1. 从机配置
    #修改配置文件:
    vim /etc/my.cnf
    
    #从服务器唯一ID
    server-id=2
    #启用中继日志
    relay-log=mysql-relay
    

    1. 主机、从机重启 MySQL 服务
    #重启mysql
    systemctl restart mysqld
    #查看mysql状态是否启动
    service mysqld status
    
    1. 主机从机都关闭防火墙
    #查看防火墙状态
    systemctl status firewalld
    #如果防火墙状态是打开的,则关闭防火墙
    systemctl stop firewalld.service
    
    1. 在主机上建立帐户并授权slave,设置只有指定从机才可以读取主机日志
    #在主机MySQL里执行授权命令
    GRANT REPLICATION SLAVE ON *.* TO 'slave'@'%' IDENTIFIED BY '123456';
    #查询master的状态
    show master status;
    

    记录下File和Position的值

    执行完此步骤后不要再操作主服务器MySQL,防止主服务器Position状态值变化

    1. 在从机上配置需要复制的主机
    #如果从机以前搭建过主从关系,则需执行重置操作
    stop slave;
    reset master;
    
    #复制主机的命令
    CHANGE MASTER TO MASTER_HOST='192.168.152.130',
    MASTER_USER='slave',
    MASTER_PASSWORD='123456',
    MASTER_LOG_FILE='mysql-bin.000002',MASTER_LOG_POS=430;
    

    #启动从服务器复制功能
    start slave;
    #查看从服务器状态
    show slave status\G;
    

    当 Slave_IO_Running和Slave_SQL_Running都为yes,则主从复制搭建成功

​ 当其中有为no时,可以查看Last_IO_Errno, Last_SQL_Errno的报错信息

    1. 主机新建库、新建表、执行insert 记录,从机自动复制同步

      主机新建的数据库必须在my.cnf文件内使用 binlog-do-db=dbname配置过,创建时从机才能同步创建。

      先将主机数据库的testdb数据库删除,再在主机创建testdb,并插入数据

      (删除主机的testdb数据库时,从机的testdb数据库也会自动删除)

      查看从机 ( 数据自动同步主机的 ):

      未完.........................................

Mysql调优
MySQL
  • 作者:管理员(联系作者)
  • 发表时间:2020-06-03 04:57
  • 版权声明:自由转载-非商用-非衍生-保持署名(null)
  • undefined
  • 评论