Sharding-JDBC—分库分表实例【面试+工作】

Sharding-JDBC—分库分表实例【面试+工作】

学习之前先详细介绍Sharding-JDBC

Sharding-JDBC是一个开源的适用于微服务的分布式数据访问基础类库，它始终以云原生的基础开发套件为目标。

Sharding-JDBC定位为轻量级java框架，使用客户端直连数据库，以jar包形式提供服务，未使用中间层，无需额外部署，无其他依赖，DBA也无需改变原有的运维方式，可理解为增强版的JDBC驱动，旧代码迁移成本几乎为零。

Sharding-JDBC完整的实现了分库分表，读写分离和分布式主键功能，并初步实现了柔性事务。从2016年开源至今，在经历了整体架构的数次精炼以及稳定性打磨后，如今它已积累了足够的底蕴，相信可以成为开发者选择技术组件时的一个参考。

1. 分库分表

• SQL解析功能完善，支持聚合，分组，排序，LIMIT，TOP等查询，并且支持级联表以及笛卡尔积的表查询
• 支持内、外连接查询
• 分片策略灵活，可支持=，BETWEEN，IN等多维度分片，也可支持多分片键共用，以及自定义分片策略
• 基于Hint的强制分库分表路由

2. 读写分离

• 一主多从的读写分离配置，可配合分库分表使用
• 基于Hint的强制主库路由

3. 柔性事务

• 最大努力送达型事务
• TCC型事务(TBD)

4. 分布式主键

• 统一的分布式基于时间序列的ID生成器

5. 兼容性

• 可适用于任何基于java的ORM框架，如：JPA, Hibernate, Mybatis, Spring JDBC Template或直接使用JDBC
• 可基于任何第三方的数据库连接池，如：DBCP, C3P0, BoneCP, Druid等
• 理论上可支持任意实现JDBC规范的数据库。目前支持MySQL，Oracle，SQLServer和PostgreSQL

6. 灵活多样的配置

• Java
• YAML
• Inline表达式
• Spring命名空间
• Spring boot starter

7. 分布式治理能力 (2.0新功能)

• 配置集中化与动态化，可支持数据源、表与分片策略的动态切换(2.0.0.M1)
• 客户端的数据库治理，数据源失效自动切换(2.0.0.M2)
• 基于Open Tracing协议的APM信息输出(2.0.0.M3)

架构图

一、概述

之前，我们介绍了利用Mycat进行分库分表操作，Mycat分表操作是利用分库来进行的，单个库中的分表操作可结合MySQL的分区进行，这也是Mycat官方提倡的方式。那么，如何利用Mycat真正实现数据库的分库分表，可以私信我。今天，我们来看看sharding-jdbc，sharding-jdbc也是一款分库分表的“中间件”，不过，它并不向Mycat那样作为一个真正的中间件，它是一款以jar包的形式整合到业务中的插件，这就决定了它是轻量级的，用法也是十分简单的。

二、分库分表实战

接下来，我们就利用sharding-jdbc进行数据库的分库分表操作。

1、创建数据库

首先我们创建相应的数据库

这样我们就创建了两个数据库sharding_0和sharding_1;

接下来我们在两个库中创建相应的数据表，在两个库中分别进行如下SQL:

这样，我们的数据库就准备好了。

2、创建项目

接下来，我们就创建一个Maven项目，项目结构如下：

3、配置pom.xml

4、创建数据库映射类

这里，我们创建两个数据库映射类：User类和Student类。

4-1、User类

4-2、Student类

5、创建Mapper类

5-1、UserMapper类

5-2、StudentMapper类

6、创建service类

6-1、UserService类

6-2、StudentService类

7、创建service的实现类

7-1、UserServiceImpl类

7-2、StudentServiceImpl类

8、创建分库逻辑

8-1、User分库逻辑UserSingleKeyDatabaseShardingAlgorithm类

8-2、Student分库逻辑StudentSingleKeyDatabaseShardingAlgorithm

9、创建分表逻辑

9-1、User分表逻辑UserSingleKeyTableShardingAlgorithm

9-2、创建Student分表逻辑StudentSingleKeyTableShardingAlgorithm

10、创建Mapper.xml

10-1、创建UserMapper.xml

10-2、创建StudentMapper.xml

11、创建jdbc_dev.properties

12、创建spring配置文件

12-1、spring-database.xml

12-2、spring-sharding.xml

13、创建log4j.xml

14、创建测试类ShardingJdbcMybatisTest

三、测试

我们进行ShardingJdbcMybatisTest类，查看数据表数据，即可看到我们的程序利用sharding-jdbc实现了分库分表操作。