MyCat安装与测试教程 超详细!

MyCat基础知识

一、什么是MYCAT?

1. 一个彻底开源的,面向企业应用开发的大数据库集群 2. 支持事务、ACID、可以替代MySQL的加强版数据库 3. 一个可以视为MySQL集群的企业级数据库,用来替代昂贵的Oracle集群 4. 一个融合内存缓存技术、NoSQL技术、HDFS大数据的新型SQL Server 5. 结合传统数据库和新型分布式数据仓库的新一代企业级数据库产品 6. 一个新颖的数据库中间件产品

从定义和分类来看,它是一个开源的分布式数据库系统,是一个实现了MySQL协议的Server,前端用户可以把它看做是一个数据库代理,用MySQL客户端工具和命令行访问,而其后端可以用MySQL原生(Native)协议与多个MySQL服务器通信,也可以用JDBC协议与大多数主流数据库服务器通信,其核心功能是分库分表,即将一个大表水平分割为N个小表,存储在后端MySQL服务器里或者其他数据库里。

Mycat发展到目前版本,已经不在是一个单纯的MySQL代理了,它的后端可以支持MySQL、SQL Server、Oracle、DB2、PostgreSQL等主流数据库,也支持MongoDB这种新型NOSQL方式的存储,未来还会支持更多类型的存储。而在最终用户看来,无论是那种存储方式,在Mycat里,都是一个传统的数据库表,支持标准的SQL语句进行数据的操作,这样一来,对前端业务系统来说,可以大幅度降低开发难度,提升开发速度,在测试阶段,可以将一表定义为任何一种Mycat支持的存储方式,比如MySQL的MyASM表、内存表、或者MongoDB、LeveIDB以及号称是世界上最快的内存数据库MemSQL上。 试想一下,用户表存放在MemSQL上,大量读频率远超过写频率的数据如订单的快照数据存放于InnoDB中,一些日志数据存放于MongoDB中,而且还能把Oracle的表跟MySQL的表做关联查询,你是否有一种不能呼吸的感觉?而未来,还能通过Mycat自动将一些计算分析后的数据灌入到Hadoop中,并能用Mycat+Storm/Spark Stream引擎做大规模数据分析。

二、关键特性

  • 支持SQL92标准
  • 支持MySQL、Oracle、DB2、SQL Server、PostgreSQL等DB的常见SQL语法
  • 遵守Mysql原生协议,跨语言,跨平台,跨数据库的通用中间件代理。
  • 基于心跳的自动故障切换,支持读写分离,支持MySQL主从,以及galera cluster集群。
  • 支持Galera for MySQL集群,Percona Cluster或者MariaDB cluster
  • 基于Nio实现,有效管理线程,解决高并发问题。
  • 支持数据的多片自动路由与聚合,支持sum,count,max等常用的聚合函数,支持跨库分页。
  • 支持单库内部任意join,支持跨库2表join,甚至基于caltlet的多表join。
  • 支持通过全局表,ER关系的分片策略,实现了高效的多表join查询。
  • 支持多租户方案。
  • 支持分布式事务(弱xa)。
  • 支持XA分布式事务(1.6.5)。
  • 支持全局序列号,解决分布式下的主键生成问题。
  • 分片规则丰富,插件化开发,易于扩展。
  • 强大的web,命令行监控。
  • 支持SQL黑名单、sql注入攻击拦截
  • 支持prepare预编译指令(1.6)
  • 支持非堆内存(Direct Memory)聚合计算(1.6)
  • 支持PostgreSQL的native协议(1.6)
  • 支持mysql和oracle存储过程,out参数、多结果集返回(1.6)
  • 支持zookeeper协调主从切换、zk序列、配置zk化(1.6)
  • 支持库内分表(1.6)
  • 还有一些其他特性 这里就不全部举例。

三、MyCat优势

MyCat基于阿里开源的Cobar产品而研发,Cobar的稳定性、可靠性、优秀的架构和性能以及众多成熟的使用案例使得MYCAT一开始就拥有一个很好的起点,站在巨人的肩膀上,我们能看到更远。

业界优秀的开源项目和创新思路被广泛融入到MYCAT的基因中,使得MYCAT在很多方面都领先于目前其他一些同类的开源项目,甚至超越某些商业产品。MYCAT背后有一支强大的技术团队,其参与者都是5年以上资深软件工程师、架构师、DBA等,优秀的技s术团队保证了MYCAT的产品质量。

MYCAT并不依托于任何一个商业公司,因此不像某些开源项目,将一些重要的特性封闭在其商业产品中,使得开源项目成了一个摆设。

看到这里 想必你已经有对Mycat产生了浓厚的兴趣 上面讲了了一堆概念的东西 是不是已经手痒痒了? 但是在学习MyCat之前 你一定要精通mysql 如果你对自己没信心 博主为大家准备了 MySql高级视频教程

链接:https://pan.baidu.com/s/1pNkhKld 密码:jo79

想要获取更多学习视频 传送门: 1T 软件开发视频资源分享

干货准备!! MyCat安装与测试!!

一、环境准备

本机环境是三台centos6.5

IP

主机名

数据库名

安装软件

192.168.17.4

master

db1

mycat,mysql

192.168.17.5

slave1

db2

mysql

192.168.17.6

slave2

db3

mysql

二、安装mysql

1、安装mysql软件

linux下安装mysql有两种方式:一种是通过下载源码编译安装,一种是通过rpm包安装,如果配置了yum直接用yum安装会更快

编译安装步骤:

  1. ./congfigrue –prefix=安装路径
  2. make
  3. make install

因为编译安装,后面为了使用方便要将服务注册到init服务中比较麻烦,这里介绍最简单的yum安装

2、安装mysql客户端

yum -y install mysql

3、安装mysql服务器端

yum -y install mysql-server 
yum -y install mysql-devel

4、添加mysql用户及权限并配置数据库

三台服务器都安装mysql以后 ,三台机器同样配置数据库

具体步骤如下:

4.1 配置编码格式

vi  /etc/my.cnf

添加

default-character-set=utf8

4.2 添加开机启动项

chkconfig --add mysqld
chkconfig mysqld on

4.3 启动mysql

service mysqld start

4.4 配置root用户并设置密码

mysqladmin -u root password 123456

4.5 创建新用户

首先用root用户登录

mysql -uroot –p

然后输入密码

执行use mysql,进入用户管理库,执行

select user,host from user;

查询当前用户发现有一些user是空的用户,直接删掉,

delete from  user  where  user=''

否则后面会出问题

这里能看到只能本机访问root,可以通过执行语句

update user set host = '%' where user = 'root' andhost='localhost';

来释放root的访问权限,让所有ip都能通过root登录

执行语句

insert into mysql.user(Host,User,Password) values
("%","mycat",password("123456"));

添加新用户

然后是赋权限,我这里是赋了所有权限,可以只赋某个库,或者部分权限,命令自己网上查,执行赋权限语句

grant all privileges on *.* to 'mycat'@'%' identified by '123456';

后一定记得执行

flush privileges;

来刷新权限

登录新建的用户并创建响应的数据库,

mysql –umycat–p
create database db1/db2/db3

根据不同机器数据库名不同

4.6 上述操作在三台机器上一样操作

三、安装mycat

1、安装mycat软件并创建用户

下载解压

tar -zxvf Mycat-server-1.4-release-20151019230038-linux.tar.gz

配置环境变量

export MYCAT_HOME=/opt/sxt/soft/mycat
PATH=$PATH:$MYCAT_HOME/bin

通过配置

sh /opt/sxt/soft/mycat/bin/mycat start

执行开机启动也可以自己写脚本加入init服务

创建一个新的group

groupadd mycat 

创建一个新的用户,并加入group

useradd -g mycat mycat

给新用户设置密码,

passwd mycat

2、配置mycat配置文件

在三台mysql的配置文件
vi /etc/my.cnf
中加入
lower_case_table_names = 1
来忽略大小写

编辑schema文件 先备份一下cp

$MYCAT_HOME/conf/schema.xml
$MYCAT_HOME/conf/schema.xml.tmp
vim $MYCAT_HOME/conf/schema.xml 

将里面mycat:schema节点的东西全部干掉,如下配置

<table name="employee" primaryKey="ID" dataNode="dn1,dn2,dn3"
rule="sharding-by-intfile" />
</schema>
<!--数据节点dn1,对应的主机c1,对应是数据库db1 -->
<dataNode name="dn1" dataHost="master" database="db1" />
<dataNode name="dn2" dataHost="slave1" database="db2" />
<dataNode name="dn3" dataHost="slave2" database="db3" />
<!-- 主机C1-->
<dataHost name="master" maxCon="1000" minCon="10" balance="0"
writeType="0" dbType="mysql" dbDriver="native">
<heartbeat>select user()</heartbeat>
<!--mysql数据库的连接串 -->
<writeHost host="hostM1" url="master:3306" user="mycat"
password="123456">
</writeHost>
</dataHost>
<!-- 主机C2-->
<dataHost name="slave1" maxCon="1000" minCon="10" balance="0"
writeType="0" dbType="mysql" dbDriver="native">
<heartbeat>select user()</heartbeat>
<writeHost host="hostM2" url="slave1:3306" user="mycat"
password="123456">
</writeHost>
</dataHost>
<!-- 主机C3-->
<dataHost name="slave2" maxCon="1000" minCon="10" balance="0"
  writeType="0" dbType="mysql" dbDriver="native">
 <heartbeat>select user()</heartbeat>
 <!--mysql数据库的连接串 -->
 <writeHost host="hostM3" url="slave2:3306" user="mycat"
    password="123456">
 </writeHost>
</dataHost>

在conf目录下配置server.xml ,将目录下没有的用户全部删掉 或者注释掉,添加可用的用户,这里添加了

<user name="mycat">
<property name="password">123456</property>
<property name="schemas">JamesMycatSchema</property>
</user>

修改conf下的partition-hash-int.txt文件 在下面添加10020=2,原本默认的是分两个就是10000和10010, 现在我们三个就要三个分类id了,添加一个即可

四、测试mycat

1、启动mycat

执行

mycat start
tail -100  $MYCAT_HOME/logs/wrapper.log

查看结果如下就表明启动成功了

2、测试mysql表横向分割

在虚拟机外的windows安装Navicatfor MySQL,分别连接到三个mysql数据库,执行建表语句

create table employee (
id int not null primarykey,
name varchar(100),
sharding_id int not null
);

用Navicatfor MySQL连接mycat,mycat默认端口是8066,配置如图:

因为刚才执行了建表语句,这时候连接上了mycat里面也有一个空的employee表

执行如下语句

insert into employee(id,name,sharding_id) values(1, 'I am db1',10000);
insert into employee(id,name,sharding_id) values(2, 'I am db2',10010);
insert into employee(id,name,sharding_id) values(3, 'I am db3',10020);
insert into employee(id,name,sharding_id) values(4, 'I am db1',10000);
insert into employee(id,name,sharding_id) values(5, 'I am db2',10010);
insert into employee(id,name,sharding_id) values(6, 'I am db3',10020);

刷新一下navicat查看mycat连接的库

db1

db2

db3

到这里呢教程就已经结束了 有问题可以在下方留言 博主会尽全力为大家解答

原文发布于微信公众号 - 互扯程序(chat_routine)

原文发表时间:2018-02-12

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏TSW

5201314对程序员意味着什么?

作为年轻人的潮流聚集地,Qzone在每个特殊的日子总会迎来一波猛烈的流量冲击。比如刚过去的520,下图是今年5月20号的流量情况:

2317
来自专栏GopherCoder

专栏:010:SQL VS No SQL

1563
来自专栏码神联盟

NoSQL | Redis、Memcache、MongoDB特点、区别以及应用场景

本篇文章主要介绍Nosql的一些东西,以及Nosql中比较火的三个数据库Redis、Memcache、MongoDB特点、区别以及应用场景。

58714
来自专栏程序你好

一个微服务架构的简单示例

3493
来自专栏即时通讯技术

移动端IM开发需要面对的技术问题

P2P多见于局域网内聊天工具,典型的应用有:飞鸽传书、天网Maze(你懂的)等。这类软件在启动后一般做两件事情:

1311
来自专栏影子

给Ionic写一个cordova(PhoneGap)插件

47410
来自专栏IT大咖说

Sharding-JDBC:分布式微服务数据库访问框架的设计与实现

摘要 当当架构部总监分享分布式微服务数据库访问框架Sharding-JDBC的设计与实现。 ? 互联网领域数据库面临的问题 我们在互联网领域数据库面临的问题主要...

8807
来自专栏风口上的猪的文章

.NET面试题系列[16] - 多线程概念(1)

这篇文章主要是各个百科中的一些摘抄,简述了进程和线程的来源,为什么出现了进程和线程。

1792
来自专栏coding

swoole框架-swoft初体验swoft环境搭建体验http服务体验ws服务初体验

没有swoole之前,php一直被"誉“为世界上最好的语言。swoole横空出世后,php就成了宇宙最好的语言了...

2191
来自专栏张善友的专栏

MongoDB核心贡献者:不是MongoDB不行,而是你不懂!

近期MongoDB在Hack News上是频繁中枪。许多人更是声称恨上了MongoDB,David mytton就在他的博客中揭露了MongoDB许多现存问题。...

23310

扫码关注云+社区

领取腾讯云代金券