首页
学习
活动
专区
圈层
工具
发布
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    MySQL 8.0 新特性:快速加列

    可选的解决方案 详细内容请参考专栏的文章: MySQL 5.7新特性:Online DDL MySQL 5.5 与 以前 在 MySQL 5.5 与更老的版本中,对 Alter 操作做了较简单的实现,添加和删除列的操作使用的是...MySQL 5.6 与5.7 在 MySQL 5.6 与 5.7,官方提出 Online DDL 的功能,添加和删除列的操作从 copy 算法变成了 inplcae rebuild 算法,不再阻塞对表的写入...SET 列的定义 变更索引的类型(B 树,哈希) 使用 alter 语法重命名表 使用如下 sql 命令可以查看每个表通过 instant 算法加列前的非 instant 列的数量,如果该表没有添加过...仅支持使用 MySQL 8.0 新表空间格式的表。 不支持临时表。 包含 instant 列的表无法在旧版本的 MySQL 上使用(即物理备份无法恢复)。...总结一下 实际上快速加列的 patch 是腾讯提交给官方,然后由官方自己重新实现的特性,腾讯云数据库 MySQL 自然也集成了这个功能,使用 5.7 版本的实例,简单测试一下: mysql> CREATE

    5.1K121

    MySQL 8.0 之 Online DDL快速加列

    // MySQL 8.0 之 Online DDL快速加列 // 问题描述 前几天同事问了我一个问题:业务A从MySQL迁移到MongoDB的原因是什么?...在实际的MySQL运维过程中,我们经常会遇到业务需要给某张表添加字段的情况,那么常用的MySQL添加字段的方法有哪些呢?...这里我简单列举一下: 1、percona的pt-osc工具 2、github开源项目gh-ost工具 3、MySQL原生Online DDL 01 MySQL Online DDL加列的历史方法 01...Copy方法 MySQL5.5版本及之前的加列方法:Copy 它的执行示意图如下: 我们有一个原表A,只包含1个字段,它包含1、2、4、6这几条记录,当我们使用Copy算法加列时: 1、创建了一个新的表...02 MySQL8.0.12 引入的Instant方法 MySQL8.0.12版本引入了Instant的方法,它让加列变得更加简单。

    3K22

    Redis数据增多了,是该加内存还是加实例?

    我曾遇到过这么一个需求:要用 Redis 保存 5000 万个键值对,每个键值对大约是 512B,为了能快速部署并对外提供服务,我们采用云主机来运行 Redis 实例,那么,该如何选择云主机的内存容量呢...同时,我还采用 RDB 对数据做持久化,以确保 Redis 实例故障后,还能从 RDB 恢复数据。 但是,在使用的过程中,我发现,Redis 的响应有时会非常慢。...这跟 Redis 的持久化机制有关系。在使用 RDB 进行持久化时,Redis 会 fork 子进程来完成,fork 操作的用时和 Redis 的数据量是正相关的,而 fork 在执行时会阻塞主线程。...这个时候,我们注意到了 Redis 的切片集群。虽然组建切片集群比较麻烦,但是它可以保存大量数据,而且对 Redis 主线程的阻塞影响较小。...这就和接下来我要讲的 Redis Cluster 方案有关了。不过,我们要先弄明白切片集群和 Redis Cluster 的联系与区别。

    2K20

    MySQL ORDER BY主键id加LIMIT限制走错索引

    report_product_sales_data_hq_code_orgz_id_index    PRIMARY 4  NULL    7624    Using where 开启优化器跟踪查看MySQL...          {             "reconsidering_access_paths_for_index_ordering": {             //到了order by id这边时,MySQL...          {             "reconsidering_access_paths_for_index_ordering": {             //到了order by id这边时,MySQL...join_execution": {         "select#": 1,         "steps": [         ]       }     }   ] } 现象及修改方案 通过现象可以看到MySQL...对于数据量比较大,而且执行量很高的分页sql,尽可能将所有的查询字段包括在索引中,同时使用索引来消除排序; 多用explain查看是否使用到了最优索引; 利用optimizer trace查看优化器执行过程; 观察mysql

    2.7K10

    Redis:MySQL 算老几?

    张大胖把我 Redis 安排到这个系统中来,那就是为了提升系统的响应速度,我把数据都暂时放到了内存中,每当 Tomcat 需要的时候直接拿走就是了,都不用联系 MySQL。...缓存空值 这一次,MySQL 终于意识到了我的价值,他出了一个主意:“Redis 同学,你把那些不存在的 key 和对应的空值也缓存下来不就行了?...布隆过滤器 MySQL 说:“如果能事先得知这个 key 是不是在数据库存在就好了,可是想知道是否存在,那就得把所有的 key 都放到缓存中,Redis,你能受得了吗?” 我当然受不了。...MySQL 佩服地说:“老弟真是不错,我服了你了,以后你一定要尽可能的把流量都给挡住,别往我这里发了,实在是太可怕了!” Tomcat 补充到:“是啊,这 Redis 缓存太重要了!”...MySQL 说:“啊? 这多吓人,从今天开始,我将时时刻刻为你祈祷,上帝保佑,你千万别挂掉。” 与此同时,张大胖开始着手 Redis 集群了......

    83530

    RocketMQ 顺序消费实战:批量接口加 Redis Pipeline同步数据

    同步结果写Redis,一条一条set,每一条都是一次网络往返。下面按「查、传、写」的顺序,一个一个治。...ids"item="id"open="("separator=","close=")">#{id}有个坑我得先交代:我第一次写这个接口,一股脑把一万个用户ID全塞进IN,MySQL...四、RedisPipeline:别一条条写了RedisPipeline(管道):Redis客户端把一批命令攒在一起,一次网络往返全部发给服务端,再一次性读回所有结果。...另外三个注意点:pipeline期间连接被独占,别在管道里夹其他操作,要同时干别的就单独开一条连接;单批别塞太多,几千上万条会把Redis内存和客户端响应队列顶爆,我习惯1000条一批;命令之间有依赖(...五、三件套串起来:一次用户信息同步的完整链路批量接口、顺序消费、Redis管道不是三个孤立技巧,它们各管一段,拼起来才是完整的一条同步链路。

    21710

    Redis 与 MySQL 集成

    Redis和MySQL都是非常流行的开源数据库,各自有其独特的用途和优点。Redis是一个基于内存的键值存储系统,适用于缓存和高速读取操作。...Redis与MySQL集成Redis和MySQL之间的集成可以通过将Redis用作MySQL查询的缓存来实现。在这种集成中,MySQL仍然是主要的持久性存储,并且数据仍然保存在MySQL中。...但是,Redis可以在查询MySQL之前查找缓存,从而减少查询MySQL的次数并加速查询响应时间。下面是一个简单的示例,演示如何将Redis用作MySQL查询的缓存。...1.首先,我们需要安装和配置Redis和MySQL。我们可以使用适合自己的操作系统和版本。这里我们不再赘述。2.我们还需要一个用于执行MySQL查询的客户端。...我们可以在下次查询MySQL之前,检查Redis中是否有该查询的缓存结果。如果是,则可以从Redis中获取结果,而不需要再次查询MySQL。

    2.1K10

    为 MySQL 加字段,我竟然遇史诗级 Bug?

    某天开发火急火燎找来,说是给表加字段时,出现 ERROR 1062 (23000):Duplicate entry …… key …… 报错,怀疑是 MySQL 出了问题。...我正准备大肆谴责开发,字打完一半才发现逻辑有些不通, 疑点:如果是新增字段,怎么会报数据重复(又不是给字段加唯一索引)?...生产环境能给大家看的就只有这么多了,但相信对各位 “彦祖” 来说足够看出问题了: 这就是个普通的加字段操作 加的字段和报重复值的字段不一样 但对我来说,乍一看就只看到了 duplicate key,第一反应就是看该字段是否有重复值...# 新增字段 mysql> alter table sbtest1 add column home varchar(); # 插入数据 mysql> insert into sbtest1(id,k)...id=76895 本文关键字:#MySQL #DDL #报错

    96100

    MySQL 核心模块揭秘 | 20 期 | 怎么加表锁?

    本文基于 MySQL 8.0.32 源码,存储引擎为 InnoDB。 正文 1. 是否已经加锁? 一个事务,在执行过程中,可能多次操作同一个表。...每次加表锁之前,如果 InnoDB 判断事务已经对这个表加了相同或者更高级别的表锁,就不会执行本次加表锁操作了。 以事务 T1 读取某个表的多条记录,并且需要加行级别的共享锁为例。...每次加表级别的意向共享锁之前,如果 InnoDB 判断事务 T1 已经给这个表加了表级别的意向共享锁、意向排他锁、共享锁、排他锁中的一个,就不会执行本次加表锁操作了。...如果是表锁结构,但是它对应的表不是本次要加表锁的表,不会阻塞本次加表锁操作,也直接忽略,不做任何处理。 否则,判断这个锁结构对应的表锁,和本次要加的表锁相比,级别相同还是更强。...换句话说,也就是要判断是否有其它事务已经获得并持有的表锁,和本次要加的表锁不兼容,从而阻塞本次加表锁。

    83010

    异步查询转同步加redis业务实现的BUG分享

    在最近的性能测试中,某一个查询接口指标不通过,开发做了N次优化,最终的优化方案如下:异步查询然后转同步,再加上redis缓存。此为背景。...原因在于往redis里面放置信息的时机不对,大概是由于写代码太着急,正确的做法应该是在异步转同步以后再去操作redis。...InterruptedException e) { logger.error("异步处理线程异常", e); } } BUG的原因也比较简单,由于第一次查询的时候redis...里面内容时空的,所以走了数据库查询,查询到结果后,放到redis里面,但是在存redis时候,异步的查询任务并没有完成,导致第一次请求得多的响应是对的,但是redis里面存放的却是错误的。

    81930

    gin操作MySQL和Redis

    go这些基础的东西,看起来很舒服,最起码对于写习惯java的人来讲,go真的很舒服,所以近一段时间可能一直连更,gin并没有直接封装操作MySQL的工具类,所以还是使用开源的工具 github.com/...garyburd/redigo v1.6.2 github.com/go-sql-driver/mysql v1.5.0 github.com/jmoiron/sqlx v1.2.0 go操作mysql...确实差一点,但是对比JDBC的话,go可就好太多了 这里的话,新建util.go用于获取数据库连接,将路由、功能、工具区分开 var Db *sqlx.DB func Init() { // 获取 MySQL...链接需要自己导入 _ "github.com/go-sql-driver/mysql" database, err := sqlx.Open("mysql", "root:Root5683@@tcp...的连接显得有些麻烦,不可能每次使用都去连接一次,如果想像操作mysql一样只获取一次,然后直接可以在别得地方调用,那就很舒服,所以,可以借用redis连接池 redis连接池 获取redis连接池,这个我们同样在

    3.2K50
    领券