架构组件：基于shard-jdbc中间件,实现数据分库分表

架构组件：基于shard-jdbc中间件，实现数据分库分表

文档修订摘要

目录

架构组件：基于shard-jdbc中间件，实现数据分库分表 (1)

1.1. 水平分割 (3)

1.2. Shard-jdbc 中间件 (4)

1.3. 项目演示 (4)

1.1.水平分割

1、水平分库

1)、概念：

以字段为依据，按照一定策略，将一个库中的数据拆分到多个库中。

2)、结果

每个库的结构都一样；数据都不一样；

所有库的并集是全量数据；

2、水平分表

1)、概念

以字段为依据，按照一定策略，将一个表中的数据拆分到多个表中。

2)、结果

每个表的结构都一样；数据都不一样；

所有表的并集是全量数据；

1.2.Shard-jdbc 中间件

1、架构图

2、特点

1)、Sharding-JDBC直接封装JDBC API，旧代码迁移成本几乎为零。

2)、适用于任何基于Java的ORM框架，如Hibernate、Mybatis等。

3)、可基于任何第三方的数据库连接池，如DBCP、C3P0、BoneCP、Druid等。

4)、以jar包形式提供服务，无proxy代理层，无需额外部署，无其他依赖。

5)、分片策略灵活，可支持等号、between、in等多维度分片，也可支持多分片键。

6)、SQL解析功能完善，支持聚合、分组、排序、limit、or等查询。

1.3.项目演示

1、项目结构

2、数据库配置

3、核心代码块

数据库分库策略

数据表1分表策略

数据表2分表策略

数据源集成配置

/**

* 数据库分库分表配置

*/

@Configuration

public class ShardJdbcConfig {

// 省略了druid 配置，源码中有

/**

* Shard-JDBC 分库配置

*/

@Bean

public DataSource dataSource (@Autowired DruidDataSource dataOneSource,

@Autowired DruidDataSource dataTwoSource,

@Autowired DruidDataSource dataThreeSource) throws Exception {

ShardingRuleConfiguration shardJdbcConfig = new ShardingRuleConfiguration();

shardJdbcConfig.getTableRuleConfigs().add(getTableRule01());

shardJdbcConfig.getTableRuleConfigs().add(getTableRule02());

shardJdbcConfig.setDefaultDataSourceName("ds_0");

Map dataMap = new LinkedHashMap<>() ;

dataMap.put("ds_0",dataOneSource) ;

dataMap.put("ds_2",dataTwoSource) ;

dataMap.put("ds_3",dataThreeSource) ;

Properties prop = new Properties();

return ShardingDataSourceFactory.createDataSource(dataMap, shardJdbcConfig, new HashMap<>(), prop);

}

/**

* Shard-JDBC 分表配置

*/

private static TableRuleConfiguration getTableRule01() {

TableRuleConfiguration result = new TableRuleConfiguration();

result.setLogicTable("table_one");

result.setActualDataNodes("ds_${2..3}.table_one_${1..5}");

result.setDatabaseShardingStrategyConfig(new StandardShardingStrategyConfiguration("phone", new DataSourceAlg()));

result.setTableShardingStrategyConfig(new StandardShardingStrategyConfiguration("phone", new TableOneAlg()));

return result;

}

private static TableRuleConfiguration getTableRule02() {

TableRuleConfiguration result = new TableRuleConfiguration();

测试代码执行流程

}

/**

* 2、生成表table_one 数据

*/

@RequestMapping("/insertOne")

public String insertOne (){

shardService.insertOne();

return "SUCCESS" ;

}

/**

* 3、生成表table_two 数据

*/

@RequestMapping("/insertTwo")

public String insertTwo (){

shardService.insertTwo();

return "SUCCESS" ;

}

/**

* 4、查询表table_one 数据

*/

@RequestMapping("/selectOneByPhone/{phone}")

public TableOne selectOneByPhone (@PathVariable("phone") String phone){