首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
您找到你想要的搜索结果了吗?
是的
没有找到

MySQL 案例:增列的空洞问题与“小”BUG

前言 在 MySQL 的常见规范里面,每个表都要设置主键,一般来说都会推荐增列作为主键,这和 MySQL 属于聚簇索引表有关,顺序增长的主键比较合适。而增列中比较常遇见的问题就是增列的空洞。...原生的 MySQL 增列也存在一个 BUG,可能会影响到数据一致性,本文也会详细介绍,在自建 MySQL 的时候尽量不要踩到这个坑。...问题的监控 增列的监控,在 5.7 版本(低于 5.7 的还是尽快升级上来吧)是比较方便的,可以在 sys 视图中直接查询视图 mysql> select * from sys.schema_auto_increment_columns...现象是 MySQL 在 5.7 和 5.7 之前,增列的值是保存在内存中的,这就导致了 MySQL 重启之后会丢失这个增列的值,所以每次重启之后,MySQL 会把表的增列的值重置为增列的 MAX...> 可以看到原生的 MySQL 在重启之后增列的值被重置了。

2K100

MySql中InnoDB表为什么要建议用增列做主键

这就要求同一个叶子节点内(大小为一个内存页或磁盘页)的各条数据记录按主键顺序存放,因此每当有一条新的记录插入时,MySQL会根据其主键将其插入适当的节点和位置,如果页面达到装载因子(InnoDB默认为15.../16),则开辟一个新的页(节点) 4、增主键 如果表使用增主键,那么每次插入新的记录,记录就会顺序添加到当前索引节点的后续位置,当一页写满,就会自动开辟一个新的页 5、非增主键 如果使用非增主键...总结 如果InnoDB表的数据写入顺序能和B+树索引的叶子节点顺序一致的话,这时候存取效率是最高的,也就是下面这几种情况的存取效率最高: 1、使用增列(INT/BIGINT类型)做主键,这时候写入顺序是增的...,和B+数叶子节点分裂顺序一致; 2、该表不指定增列做主键,同时也没有可以被选为主键的唯一索引(上面的条件),这时候InnoDB会选择内置的ROWID作为主键,写入顺序和ROWID增长顺序一致; 除此以外...《高性能MySQL》中的原话 ? ?

3.8K20

Mysql连接查询「建议收藏」

连接查询 假想以下场景:某一电商网站想要对站内产品做层级分类,一个类别下面有若干子类,子类下面也会有别的子类。...我们可以在数据库中创建两个字段来存储id和类别名称,使用第三个字段存储类别的子类或者父类的id,最后通过连接去查询想要的结果。...连接查询其实等同于连接查询,需要两张表,只不过它的左表(父表)和右表(子表)都是自己。做连接查询的时候,是自己和自己连接,分别给父表和子表取两个不同的别名,然后附上连接条件。...查询所有分类以及分类的父类:假想有左右两张表(都是tdb_cates),左表是子表,右表是父表;查询子表的id,子表的cate_name,父表的cate_name;连接条件是子表的parent_id等于父表的...查询所有分类以及分类的子类:还是假想有左右两张表(都是tdb_cates),左表是子表,右表是父表;查询子表的id,子表的cate_name,父表的cate_name;连接条件是子表的id等于父表的parent_id

1.4K20

插入InnoDB增列,居然是表锁?

插入InnoDB增列,居然是表锁?...一,案例说明 MySQL,InnoDB,默认的隔离级别(RR),假设有数据表: t(id AUTO_INCREMENT, name); 数据表中有数据: 1, shenjian 2, zhangsan...二,案例分析 InnoDB在RR隔离级别下,能解决幻读问题,上面这个案例中: (1)事务A先执行insert,会得到一条(4, xxx)的记录,由于是增列,故不用显示指定id为4,InnoDB会自动增长...(4)事务A再select: select * from t where id>3; 得到的结果是: 4, xxx 6, xxoo 画外音:不可能查询到5的记录,再RR的隔离级别下,不可能读取到还未提交事务生成的数据...四,假如不是增列 上面的案例,假设不是增列,又会是什么样的情形呢?

72530

通过shell脚本模拟MySQL增列的不一致问题

MySQL增列问题其实很有意思,在重启数据库之后,会按照max(id)+1的方式来计算,这样一个看起来有些别扭的实现方式在早期版本就饱受诟病,在MySQL 5.7都没有解决掉,终于在8.0松口了...而重启会带来自增列一类的潜在问题,而如果不重启其实也有可能会有增列的不一致问题。和两个参数table_definition_cache和table_open_cache还是密切相关的。...,如果表太多而不能全部放在缓存中的话,老的表就会被置换出来,这种被置换出来的表下次再使用的时候,就要重新打开一遍,对增列来说,这个过程就和实例重启类似,需要 select max(id) + 1 算一下增值...生成500个表,然后插入一条数据,修改自增列值,然后查询表里的数据,使得数据能够刷出,稍作等待,查看show create table的结果。...SHOW CREATE TABLE t$i; EOF done 测试完成之后,来查看增列的值情况.

1.4K40

Hive实现增列的两种方法

blog.csdn.net/wzy0623/article/details/53893174 多维数据仓库中的维度表和事实表一般都需要有一个代理键,作为这些表的主键,代理键一般由单列的增数字序列构成...Hive没有关系数据库中的增列,但它也有一些对增序列的支持,通常有两种方法生成代理键:使用row_number()窗口函数或者使用一个名为UDFRowSequence的用户自定义函数(UDF)。....* from tbl_stg cross join (select coalesce(max(sk),0) sk_max from tbl_dim) t2; 上面语句中,先查询维度表中已有记录最大的代理键值...上面的语句先加载JAR包,然后创建一个名为row_sequence()的临时函数作为调用UDF的接口,这样可以为查询的结果集生成一个增伪列。

4.7K20

深度解析auto-increment增列Duliplicate key问题

(3) handler首次open的时候,会查询当前表中最大增列的值,并用最大列的值加1来初始化表的data_dict_t结构体中的autoinc的值。 (4) insert流程。...,并根据当前的auto_increment相关变量的值调整获取的增值;同时设置当前handler要处理的下一个增列的值。        ...handler::set_next_insert_id:设置当前事务中下一个要处理的行的增列的值。 (5) update_row。...复现方法如下: 同时在binlog中,我们也看到有update增列的操作。如图: 不过,由于binlog是ROW格式,我们也无法判断这是内核出问题导致了增列的变化还是用户自己更新所致。...因此我们联系了客户进行确认,结果用户很确定没有进行更新增列的操作。那么这些增列到底是怎么来的呢?

89620

MySQL增列的重复值问题(r12笔记第25天)

如果需要把一台MySQL中的数据定期归档到另外一台MySQL历史库中,那么很可能会发现会有重复值的问题,导致数据导入会失败,而这个问题其实是和增列的重复值有关,我们来简单看看。...这个时候使用show create table查看,定义信息中增列的值为4,即再插入一条记录,id值为4....但是我们不这么做,我们重启MySQL。...+----+------+ | 1 | 2 | | 2 | 2 | +----+------+ 2 rows in set (0.00 sec) 这个时候如果查看表定义信息,就会发现增列目前是...AUTO_INCREMENT=3 DEFAULT CHARSET=latin1 1 row in set (0.00 sec) 这是什么原因呢,如果你试试MyISAM,就不会出现这类问题,而对于InnoDB来说,它的增列的实现在重启之后内存中肯定是没有了

1.2K60

MySQL增id超大问题查询

问题排查 这张表是一个简单的接口服务在使用,每天大数据会统计一大批信息,然后推送给小A,小A将信息更新到数据库中,如果是新数据就插入,旧数据就更新之前的数据,对外接口就只有查询了。...查了资料之后,小A得知,原来,mysql主键增有个参数innodb_autoinc_lock_mode,他有三种可能只0,1,2,mysql5.1之后加入的,默认值是1,之前的版本可以看做都是0。... "test1"),(NULL, 107, "test2"),(3, 108, "test2");   -- 这里的增id是多少呢? ...ON DUPLICATE KEY UPDATE ...语句拆开,先去查询,然后去更新,这样就可以保证主键不会不受控制的增大,但增加了复杂性,原来的一次请求可能变为两次,先查询有没有,然后去更新。...删除表的增主键 删除增主键,让唯一索引来做主键,这样子基本不用做什么变动,只要确定目前的增主键没有实际的用处即可,这样的话,插入删除的时候可能会影响效率,但对于查询多的情况来说,小A比较两种之后更愿意选择后者

4.9K20

⑧【MySQL】数据库查询:内连接、外连接、连接、子查询、多表查询

个人简介:Java领域新星创作者;阿里云技术博主、星级博主、专家博主;正在Java学习的路上摸爬滚打,记录学习的过程~ 个人主页:.29.的博客 学习社区:进去逛一逛~ 内连接、外连接、连接...、子查询、多表查询MySQL数据库查询 1....`id`; 连接 —— JOIN 连接查询 —— 连接: 连接: ①连接查询,可以是内连接查询,也可以是外连接查询 SELECT 字段列表 FROM 表1 别名A JOIN 表1 别名B ON...`age` > 50; 子查询(嵌套查询) 子查询: 子查询:SQL语句中嵌套SELECT语句,称为嵌套查询,又称子查询。...子查询分类(根据子查询结果不同): ①标量子查询(子查询结果为单个值) -- 演示 -- ①标量子查询 -- 1.查询“销售部”的所有员工信息 SELECT * FROM emp WHERE dept_id

37580
领券