首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

ClickHouse复合主键调优技巧

真实的业务经常会出现查询复合主键其他字段的情况,这个时候有没有什么优化原则呢? 答案是有的,接下来我用一个例子做个测试。...─uniq(a)─┬─uniq(b)─┬──uniq(c)─┐ │ 501 │ 50001 │ 50148092 │ └─────────┴─────────┴──────────┘ 查询复合主键一个字段...查询复合主键第三个字段,需要全扫描 5000w 行数据: select count(1) from test_cardinality where c = '10000'; ┌─count()─┐ │...复合主键 a,b,c ,数据的排序也会按照这个顺序排序,即a先排序,相同的a再按照b排序,相同b再排c。...所以当复合主键的多个字段,基数相差较大时,按基数从小到大的顺序性能最好。 如果复合主键的多个字段,基数相差不大呢?以后有时间再分享給大家。

1.2K10
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    MySQL为什么要给加上主键

    1.一个没加主键,它的数据无序的放置在磁盘存储器上,一行一行的排列的很整齐. 2.一个加了主键,并不能被称之为「」。...如果给上了主键,那么在磁盘上的存储结构就由整齐排列的结构转变成了树状结构,并且是「平衡树」结构,换句话说,就是整个就变成了一个索引。...没错,再说一遍,整个变成了一个索引,也就是所谓的「聚集索引」。...这就是为什么一个只能有一个主键,一个只能有一个「聚集索引」,因为主键的作用就是把「」的数据格式转换成「索引(平衡树)」的格式放置。   ...,下面就是一个主键和三个常规索引的结构 4.通过主键去查,叶子节点就是数据行 5.通过其他索引字段去查,那么叶子节点是主键ID,然后再去根据主键查,聚集索引(主键)是通往真实数据所在的唯一路径 7

    2.5K20

    一个主键信息采集脚本

    一个主键信息采集脚本 今天在做数据库巡检的时候,想到了一个巡检项,就是想看看线上环境目前有哪些没有使用主键,分析这个信息可以发现一些业务在查询的时候的潜在问题,由于这个信息从来没有采集过...这个问题需要拆成好几个子问题来解决: 01 如何查询目前哪些主键?...查询目前哪些主键,可以通过information_schema.key_column_usage来确定哪些列使用了主键约束,这个中包含如下列,每个列的含义如下: CONSTRAINT_CATALOG...02 如何获得当前数据库中没有主键? 要想获得没有主键,需要使用全库的所有去掉包含主键,那么问题就先转化为如何获取全库的所有?...,其中information_schema,mysql以及performance_schema都做了删减,我们用这个结果减掉刚才我们查出来的包含主键约束的,就是剩余的那些没有包含主键

    48910

    MySQL 中非主键列溢出情况监控

    之前踩到过MySQL主键溢出的情况,通过prometheus监控起来了,具体见这篇MySQL主键溢出复盘 这次遇到的坑,更加的隐蔽。 是一个log表里面的一个int signed类型的列写满了。...快速的解决方法当然还是只能切新来救急了,然后搬迁老表的部分历史数据到热表。  亡羊补牢,处理完故障后,赶紧写脚本把生产的其他都捋一遍。...下面是我暂时用的一个检测脚本,还不太完善,凑合用 分2个文件(1个sql文件,1个shell脚本) check.sql 内容如下: SELECT  cast( pow(2, case data_type...')')  from information_schema.COLUMNS where TABLE_SCHEMA NOT IN ('information_schema','sys','test','mysql...NULL" ]]; then     continue    fi    if [ ${ret} -lt 5000000 ] ; then        echo "$line 剩余空间 ${ret}, 该可用水位不足

    2K10

    MySQL 案例:无主键产生的延迟

    本文围绕同步延迟的场景之一:无主键,来看看延迟产生的原因,以及应对的策略。当然,从标题上也能看出来,给建个主键是最好的办法,不过在关于这个问题,其实还有一些其他的方式可以尝试。...显然,在从库上临时先加点索引是一个很好的办法,那么除了索引以外,还有什么其他的办法吗?...一个 MySQL 的参数 MySQL 在这类场景下,有一个专门的参数来调整从库定位数据的方法:slave_rows_search_algorithms 参考官方文档的参数设置: 索引类型/参数值 INDEX_SCAN...测试一下 本次测试环境使用腾讯云数据库 MySQL,配置为 4 核 8GB 内存。测试数据使用 sysbench 生成,单 2000 万行数据,且没有主键和唯一索引。...总结一下 确保每个都有主键是最好的解决办法,如果确实有客观原因,那至少保证 where 条件全部能利用到索引。

    3.2K132

    基于Saas主键生成主键id

    1.主键生成策略方式 ? 主键生成策略 2.基于Saas主键生成主键id流程 由于我们的系统时基于Saas的,因此生成主键时,需要以租户id(TenantId)为基础进行生成。...为了生成的id符合我们的租户的要求,通常都会现将租户建好,然后基于租户中的租户id进行主键id的生成。此时便产生基于租户id生成主键,那么怎样生成主键id呢?可以查看下图: ?...(* com.xtt..*.dao.mapper..*.insert*(..))") public void primaryKeyRule() {} 也就是说在进行主键的生成时,我们拦截好需要生成的主键...拿到租户id后,就可以进行主键id获取了。 private void setPrimaryKey(Object entity, Class<?...return current; } 从而实现主键自增的目的,从而实现基于租户id进行自增的策略。

    1.8K20

    MySQL 案例:无主键引发的同步延迟

    [主从延迟时间的监控] 而只读从库上又没有什么查询的话,有可能就是无主键、索引的引起的主从延迟。...解决办法 推荐方案:趁着业务空闲期间,在主库上为加上主键或者唯一索引,然后再重建受影响的灾备实例,备库,只读实例等。...可以使用如下的语句检查无主键: select table_schema,table_name,TABLE_ROWS from information_schema.tables where...information_schema.columns where COLUMN_KEY='PRI') and table_schema not in ('sys','mysql...问题分析 腾讯云数据库 MySQL 的 binlog 默认使用了 row 模式,binlog 会记录所有的数据变更,这意味着一个 update 或者 delete 语句如果修改了非常多的数据,那么每一行数据的变化都会记录到

    4.7K112

    mysql 联合主键_Mysql 创建联合主键

    char(8), cc date, primary key (aa,bb ) ); aa,bb为联合主键 不知道是不是因为mysql(6.0)的版本问题,还是各版本都是这种情况,mysql中创建联合主键...,联合主键列名之外不可以用单引号括上,否则出现错误,无法创建,报错是该列在中不存在。...COMMENT ‘主键编号’, `IP` … mysql修改联合主键 参考 https://blog.csdn.net/BockSong/article/details/80933477 alter...DROP PRIMARY_KEY 运行上面的SQL能够删除主键:假设不成功能够用 ALTER TABLE TABLENAME DROP C … Oracle 主键、联合主键的查询与创建 –查询某个是否有唯一主键...联合索引 我们都知道在一个中当需要2列以上才能确定记录的唯一性的时候,就需要用到联合主键,当建立联合主键以后,在查询数据的时候性能就会有很大的提升,不过并不是对联合主键的任何列单独查询的时候性能都会提升

    8.3K20

    MySQL中分库分之后,ID主键的处理

    MySQL中分库分之后,ID主键的处理 在大规模的应用系统中,为了应对数据量的增长和提高系统的可扩展性,通常会采用数据库分库分的方案。...分库分是将一个数据库或按照某种规则拆分成多个数据库或,使得数据可以分布在不同的物理节点上,从而提高系统的性能和并发能力。...在分库分中,可以通过使用GUID作为主键来避免ID冲突的问题。...使用全局唯一ID的好处是简单可行,不依赖于数据库的自增机制,可以在分布式环境中保证主键的唯一性。然而,GUID作为主键一个缺点是比较长,会占用较大的存储空间,并且不易于直观地排序。 2....总结 在MySQL的分库分方案中,ID主键的处理是一个重要的问题。本文介绍了几种常见的处理方案,包括使用全局唯一ID、分布式唯一ID生成算法和结合数据库自增ID和分片ID。

    90510

    MySQL复合查询

    前面我们讲解的mysql的查询都是对一张进行查询,在实际开发中这远远不够。...对于CURD之一的查找,他作为最重要的操作,仅仅在一张之中查是不够的,还需要在多表之间进行查询,复合查询就是解决多表查询的问题。...本节我们用一个简单的公司管理系统,有三张EMP,DEPT,SALGRADE来演示如何进行多表查询。 将三个以笛卡尔积的形式合并会得到一个包含三个的全部信息的。...当需要在同一张通过一个字段找另一个字段,再通过另一个字段找到它对应的信息时,就需要进行自连接。...这里要用到数据查询的技巧,把一个子查询当做一个临时使用。即我们无论从什么时候通过条件或者查询所得到的的间接的,都可以看做真正的进行查询,因为,MySQL下一切皆

    20440

    mysql中清空数据,并重置主键为1

    MySQL中清空数据,并重置主键为1 ️ 摘要 在本文中,我将向大家展示如何在 MySQL 数据库中清空的所有数据,并将主键重置为 1。...清空数据 在 MySQL 中,你可以使用 TRUNCATE TABLE 语句来清空一个。这不仅会删除中的所有数据,还会释放用于存储数据的空间。...TRUNCATE TABLE table_name; 例如,如果你有一个名为 users 的,你可以这样清空它: TRUNCATE TABLE users; 重置主键为1 使用 TRUNCATE TABLE...命令的一个额外好处是,它会重置的自增主键为 1。...如果有外键约束,请先确保没有其他依赖于它,或者在清空之前先删除外键约束。 总结 清空 MySQL 数据并重置主键为 1 是一个非常简单但有用的操作,特别是在开发和测试阶段。

    38710

    MySQL复合索引和单列索引的单查询分析

    keys:索引类型,表示MySQL此次查询中使用的索引,多个用逗号分开。 rows:遍历行数,表示MySQL此次查询遍历的行数大小,该值越小,查询速度会越快,是一个估计值,非绝对正确的。...单复合索引的性能分析 ?...MySQL 在进行查询时,会根据索引筛选出复合索引的行,如果存在查询条件不在索引中的列,会进行二次筛选(即根据筛选出来的行进行二次查询),导致遍历的行数增加。 部分查询条件会导致全扫描 ?...特殊注意: 使用MySQL的CONCAT函数拼接条件一样会使用索引。 在使用 in 时,如果只有一个值,则等价于使用 =符号,会触发索引,包含两个或多个值,则索引失效。...总结 在我们使用单列索引和复合索引时,需要注意以下几点: 常用的字段放在第一列,经常和第一列一起使用的字段放在第二列,如用户的电话和姓名,身份证的身份照号和姓名,如果超过两列,则注意其顺序。

    1.4K10
    领券