跨库的查询策略

对拆分字段的查询 单值查询 select * from table1 where user_id=‘test1234’ user_id 是分库时的拆分字段,只需要用分库时的路由算法对‘test1234’进行计算,找出这条记录是在哪个分库,然后直接去目标分库取得记录 例如 hash(test1234) = 2398283927 % 1024 = 531 -> 分库3

多值查询

SELECT * FROM table1


WHERE user_id IN 
(‘test1234’,’papa17’,’abcd’)

分别对每个值进行路由计算,看是在哪个分库上,然后去不同分库中查找,最后汇合各分库的查询结果 例如 hash(test1234) = 2398283927 % 1024 = 531 -> 分库3 hash(papa17) = 3339829221 % 1024 = 511 -> 分库3 hash(abcd) = 55239822711 % 1024 = 130 -> 分库1

对非拆分字段的查询

SELECT * FROM table1


WHERE name = ‘dys’

name 字段不是拆分字段,这种情况就比较低效了,需要到各个分库中查询,最后汇合各分库的查询结果

join 连接查询

SELECT *


FROM table1 INNER JOIN table2


ON table1.user_id = table2.name 跨库的join操作没有什么非常高效的办法,需要各个分库迭代查询

伪代码示例 for row in (select * from table1)

{ add

(select * from table2

where table2.name = row.user_id
)

to result }

对于垮库的join,数据库中间件大多只能支持简单的连接操作,在实际应用中,因为性能的问题,很少会使用这种垮库join,例如京东,这类复杂查询是使用搜索服务(如 solr)来完成

原文发布于微信公众号 - 性能与架构(yogoup)

原文发表时间:2016-01-21

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏Netkiller

数据库恢复方案

数据库恢复方案 摘要 这里所谈的内容是对备份数据的恢复,不是对损坏数据表的恢复,或者说灾难恢复。 目录 1. 背景 2. 备份方式分析 3. 恢复方案 3.1....

2975
来自专栏架构师之路

数据库中间件cobar调研笔记

13年底负责数据库中间件设计时的调研笔记,拿出来和大家分享,轻拍。文章很长,可提前收藏,转发。 一,cobar是什么 开源的mysql的中间件服务 使用mysq...

4266
来自专栏沃趣科技

MySQL统计信息相关表介绍

以前给大家介绍过MySQL中的统计信息,相信大家也都了解了。那么统计信息是存放在哪里呢?我们怎么去查看? 在MySQL中提供了两个表记录统计信息的相关内容,分别...

3768
来自专栏逸鹏说道

解决session阻塞的问题

简介 对于数据库运维人员来说创建session或者查询时产生问题是常规情况,下面介绍一种很有效且不借助第三方工具的方式来解决类似问题。 最近开始接触运维...

3556
来自专栏博客园迁移

几种事务的隔离级别,InnoDB如何实现?

隔离性是指,多个用户的并发事务访问同一个数据库时,一个用户的事务不应该被其他用户的事务干扰,多个并发事务之间要相互隔离。

821
来自专栏Netkiller

数据库恢复方案

数据库恢复方案 摘要 这里所谈的内容是对备份数据的恢复,不是对损坏数据表的恢复,或者说灾难恢复。 目录 1. 背景 2. 备份方式分析 3. 恢复方案 3.1....

3875
来自专栏黑白安全

MSSQL手工注入总结

之前搞mssql数据库的注入都是直接跑工具,但是总是有些注入点工具一扫就崩,关键时候还是要手工注入,因此总结学习mssql手工注入,写此文留作笔记。本次主要总结...

4792
来自专栏维C果糖

史上最简单的 MySQL 教程(三十四)「视图(下)」

视图数据操作:虽然我们说视图可以称之为select语句的别名,但实际上,它和别名并不一样,因为视图是可以进行数据写操作的,只不过有很多限制而已。

40312
来自专栏「3306 Pai」社区

关于MySQL 8.0的几个重点,都在这里

在MySQL8.0中重新设计了redo log,主要改进fsync,使得效率更高,减少锁,优化flush机制,不会频繁flush。同时,支持更高用户并发请求。

1270
来自专栏有困难要上,没有困难创造困难也要上!

Oracle12c创建用户

5022

扫码关注云+社区

领取腾讯云代金券