转载~ 在互联网技术圈中有一个说法：「MySQL 单表数据量大于 2000 W行，性能会明显下降」。网传这个说法最早由百度传出，真假不得而知。但是却成为了行业内一个默认的标准。...单表超过2000W行数据一定会导致性能下降吗？我认为是不一定的，虽然说建议单表不超过2000W，但是我不接受它的建议可不可以？那必然也是可以的。...一、单表最大到底能存多少数据 先来看看下面这张图，了解一下mysql各个类型的大小 我们知道在MySQL是支持主键自增长的，不考虑其他因素的前提下，理论上只有主键没有用完，表中的数据就可以一直增加。...「主键类型为tinyint时」 主键8位，数据最大为255，Id自增超过255就会报错 「由此可見：MySQL能够存储的数据在一定程度上受限与主键的类型。...但是数据量的大小却跟2000W没啥影响，既然百度大佬推荐单表最大2000W行数据，那肯定不会是空口白话，一定定会有其他影响行数的因素」。
背景 网上看了一篇文章《为什么说MySQL单表行数不要超过2000w》，亲自实践了一下，跟原作者有不同的结论。...首先我们先想想数据库单表行数最大多大？...单表建议值 下面我们就以 3 层，2 分叉（实际中是 M 分叉）的图例来说明一下查找一个行数据的过程。...这不是正好就是文章开头说的最大行数建议值 2000w 嘛！...索引结构不会影响单表最大行数，2kw 也只是推荐值，超过了这个值可能会导致 B + 树层级更高，影响查询性能。
作为在后端圈开车的多年老司机，是不是经常听到过，“mysql 单表最好不要超过 2000w”,“单表超过 2000w 就要考虑数据迁移了”，“你这个表数据都马上要到 2000w 了，难怪查询速度慢” 这些名言民语就和...那下面我们就来看看这个建议值 2kw 是怎么来的？ 单表数量限制 首先我们先想想数据库单表行数最大多大？...单表建议值 下面我们就以 3 层，2 分叉（实际中是 M 分叉）的图例来说明一下查找一个行数据的过程。...这不是正好就是文章开头说的最大行数建议值 2000w 嘛！...索引结构不会影响单表最大行数，2kw 也只是推荐值，超过了这个值可能会导致 B + 树层级更高，影响查询性能。
从全备份中，还原某一个库(假如要还原的库叫做hellodb)内容： # mysqldump -uroot -proot --all-databases --master-data=2 > all.sql...# mysql -uroot -proot -e 'create database hellodb;' 还原之前，首先要确保这个库的已经存在了，不然下面的命令会提示失败】 # mysql -uroot... -proot hellodb --one-database < all.sql # --one-database 可以简写成-o 从全备份中恢复出某一个库里的一张表(以取出hellodb.students...d;q' all.sql 可以取出这张表的结构语句 # grep 'INSERT INTO `students`' all.sql 可取出students表中的内容
单表查询的语法及关键字执行的优先级 单表查询语法 SELECT DISTINCT 字段1,字段2......1.找到表:from 2.拿着where指定的约束条件，去文件/表中取出一条条记录 3.将取出的一条条记录进行分组group by，如果没有group by，则整体作为一组 4.执行select（去重）...double 办公室 office int 部门编号 depart_id int #创建表...，可以将所有字符编码统一设置成gbk 准备表和记录 ?...#1:单条件查询 SELECT emp_name FROM employee WHERE post='sale'; #2:多条件查询 SELECT emp_name
MySQL之单表查询 创建表 # 创建表 mysql> create table company.employee5( id int primary key AUTO_INCREMENT not...，如果同时出现并希望先选or，需要结合()来使用 单条件查询 mysql> SELECT name,post FROM employee5 WHERE post='hr'; 多条件查询 mysql> SELECT...//从第4条开始，共显示5条 聚合函数查询 a、count(*) 表示计算总行数，括号中可以写*和列名 b、max(列) 表示求此列的最大值 c、min...(列) 表示求此列的最小值 d、sun(列) 表示求此列的和 e、avg(列) 表示求此列的平均值 mysql> SELECT COUNT...分组查询 单独使用GROUP BY关键字分组 mysql> SELECT post FROM employee5 GROUP BY post; 注意：我们按照post字段分组，那么select查询的字段只能是
1.单表查询 #单表查询语法 select from where group by field 分组...#提示：聚合函数聚合的是组的内容，如果没有分组，默认为一组 1.max() #求最大值 2.min() #求最小值 3.avg() #求平均值 4.sum() #求和 5.count()...发现department表中id=203部门在employee中没有对应的员工，发现employee中id=6的员工在department表中没有对应关系 #查看两个表的交叉连接 mysql> select...employee和department表，并且employee表中的age字段值必须大于25，即找出年龄大于25岁的员工以及员工所在的部门 mysql> select employee.name,department.name...(2)将查出的结果作为临时表,再对根据临时表的dep_id和employee的dep_id作为筛选条件将employee表和临时表进行内连接。
const主键或者唯一的二级索引等于某个常量的时候，访问数据的速度超级快，等一位const级别。ref普通的二级索引等于某个常量的时候，访问数据的速度超级快，等一位const级别。...形成的扫描区间是单个点ref_or_null普通的二级索引等于某个常量的时候，访问数据的速度超级快，等一位const级别。...加上 is null rang形成的扫描区间是多个点 或者 是范围查询index联合索引 且过滤条件不是联合索引的最左标的列 而且查询的数据不用回表all全表扫描的方式
分组与聚合函数 分组 在MySQL中，可以使用GROUP BY 根据一个或多个字段进行分组，字段值相同的为一组。另外对于分组的数据可以使用HAVING进行条件筛选。...; 统计筛选 当对查询的数据进行分组操作时，可以利用HAVING 根据条件进行数据筛选，他与前面学习过的WHERE功能相同，但是在实际运用时两者有一定的区别。...函数名 描述 COUNT() 返回参数字段的数量，不统计为NULL记录 SUM() 返回参数字段值和 AVG() 返回参数字段的平均值 MAX() 返回参数字段的最大值 MIN() 返回参数字段的最小值...JSON对象返回 运算符 常用数学函数 运算符 描述 CEIL(x) 返回大于等于x的最小整数 FLOOR(x) 返回小于等于x的最大整数 FORMAT(x) 返回小数点后保留y位的x（进行四舍五入）...0到1之间的随机数，包括0和1 比较函数 函数 描述 IN() 比较一个值是否在一组给定的集合内 NOT IN() 比较一个值是否不再一组给定的集合内 GREATEST() 返回最大的一个参数值，至少两个参数
https://blog.csdn.net/wh211212/article/details/80998349 mysql 恢复表数据 table A 从全库备份中抽取出t表的表结构 sed...d;q' DB.sql > A.sql (表结构) 从全库备份中抽取出t表的内容 grep 'INSERT INTO `A`' DB.sql > A.sql 到测试库上恢复 # 创建数据库 create...database DB; source /tmp/A.sql; 恢复表结构 source /tmp/A.sql; 恢复表数据 参考：https://www.jb51.net/article/98090
DQL操作单表 排序 # 通过 ORDER BY 子句,可以将查询出的结果进行排序(排序只是显示效果,不会影响真实数据) SELECT 字段名 FROM 表名 [WHERE 字段 = 值] ORDER...； SELECT 聚合函数(字段名) FROM 表名; 聚合函数 作用 count(字段) 统计指定列不为NULL的记录行数 sum(字段) 计算指定列的数值和 max(字段) 计算指定列的最大值 min...-- sum函数求和, max函数求最大, min函数求最小, avg函数求平均值 SELECT SUM(salary) AS '总薪水', MAX(salary) AS '最高薪水', MIN(salary...MySQL 事务隔离级别 一个数据库可能拥有多个访问客户端,这些客户端都可以并发方式访问数据库. 数据库的相同数据可能被多个事务同时访问,如果不采取隔离措施,就会导致各种问题, 破坏数据的完整性。...查询得到的数据状态不准确,导致幻读 四种隔离级别 隔离级别相关命令 # 查看隔离级别 select @@tx_isolation; # 设置事务隔离级别，需要退出 MySQL 再重新登录才能看到隔离级别的变化
语法： 一、单表查询的语法 SELECT 字段1,字段2... ...select distinct order by limit 1.找到表:from 2.拿着where指定的约束条件，去文件/表中取出一条条记录 3.将取出的一条条记录进行分组group by，如果没有...group by，则整体作为一组 4.将分组的结果进行having过滤 5.执行select 6.去重 7.将结果按条件排序：order by 8.限制结果的显示条数 创建公司员工表，表的字段和数据类型...%小时任意多字符，_表示一个字符 5.逻辑运算符：在多个条件直接可以使用逻辑运算符 and or not 验证结果:where条件约束 1 :单条件查询 mysql> select id,name from...#2、分组指的是：将所有记录按照某个相同字段进行归类，比如针对员工信息表的职位分组，或者按照性别进行分组等 #3、为何要分组呢？
一、单表查询的语法 SELECT 字段1,字段2......二、关键字的执行顺序 1.找到表:from 2.拿着where指定的约束条件，去文件/表中取出一条条记录 3.将取出的一条条记录进行分组group by，如果没有group...逻辑运算符：在多个条件直接可以使用逻辑运算符 and or not #1:单条件查询 SELECT name FROM employee WHERE post='sale';...#1、首先明确一点：分组发生在where之后，即分组是基于where之后得到的记录而进行的 #2、分组指的是：将所有记录按照某个相同字段进行归类，比如针对员工信息表的职位分组，或者按照性别进行分组等...Having发生在分组group by之后，因而Having中可以使用分组的字段，无法直接取到其他字段,可以使用聚合函数 mysql> select @@sql_mode; +-------------
导数据是很长有的事, 导完了总得检查一下把, 云上有DTS很方便, 但是有的环境只能手动导数据了, 这比较就比较麻烦了, 或者是用户自己导的, 让你检查检查, 总之检查两个库之间表的数据量是很常见的工作...常见的工作做多了就饭, 就写个脚本, py效果更好, 但是不如shell方便(因环境而异). 我分享下脚本检查mysql两库之间数据行数的脚本吧....这个脚本是mysql的, 也可以改一改给pg或者oracle用, 我就不写了哈 1..../bin/env bash #write by ddcw at 2021.06.26 #检查mysql的表数据是否一致， 只检查行数量 #用法， sh $0.sh src_user/src_passowrd...'{print $1}')\033[0m" echo -e "一致的表: ${same_tbale} \t 不一致的表: ${no_same_tbale}" } init_param # echo
网上常说mysql单表2kw就需要考虑分表了，但生产中我们也用过2亿的表，而且毫无压力。所以记录一下为什么2kw就要分表是依据什么原理，生产大概要注意什么。...1 存储原理这里只关注B+树的存储图片在MySQL中，为了保存内存地址，通常使用6字节来存储指针。...但是一般mysql到了第三层就差不多了，只需要通过3次IO，就可以读取到数据所在的叶子结点的页。至于提取需要的记录，则需要在内存中进行一次条件匹配。2 扩展这里2kw的原理就是这样的假设前提的。...如果是个小表，一条数据不够1k，如0.1k，则第三层为2kw*2=2亿，3次IO也是问题。如果就是1k，256亿条以内的记录，也就是4次IO，真的有想象中的那么不堪吗？不一定！...为了在不同系统上保持兼容性，MySQL选择了6byte作为指针的存储长度。用8byte来保存地址，实属有点浪费，因为6字节可以存储的地址为：32T。如果真的需要这么大的存储空间，估计早就分机器了。
万幸的是，只是单表写花了，而不是哪位大神在DB里面玩drop table。...虽然已经很久没进行单表恢复了，但大致步骤都还在脑海中，没花多久就搞定了～ 言归正传，记录一下单表恢复的步骤和关键点，提醒自己也提醒大家。...第四步： 在主库上将写花的表改名，其目的有二个，其一，停止对这个表的写入（当然这对业务会有一定的影响，会出现一段时间内的写入失败报警，需要提前和业务部门联系好），其二，一旦恢复失败，至少还有一个写花的表存在...最后将这个文件传输到主库服务器上，完成最后的恢复操作 ### 可以选择登陆mysql之后 source tablename.sql； ### 也可以在cmd界面 mysql -uusername -...### 快速的方法可以按照如下操作，在还原机上的命令 mysql -uusername -ppassword -S /tmp/mysql.sock dbname tablename | mysql -uusername
采集MySQL top ten 体积的表明细情况： 脚本如下： source /etc/profile USER='root' PASSWD='123456' SOCKET='/tmp/mysql.sock...' HOST='localhost' datadir=$(/usr/local/mysql/bin/mysql 2>/dev/null -u${USER} -p${PASSWD} -h${HOST} -...total//g' ) IP_ADDR=$(/sbin/ip a|egrep '10.[0|1].[1-9]+.[1-9]+*' | awk '{print $2}'| cut -d '/' -f 1); mysql...','performance_schema') ORDER BY ( data_length + index_length ) DESC LIMIT 10 ; " 脚本里面带上了采集时间、机器的IP...我们还可以用python脚本将这些采集到的数据按行插入到远程数据库中，或者json格式上送到数据库运维平台的接口达到metrics入库的目的。
数据准备 建表 mysql> create table employee( -> id int primary key auto_increment, -> name char(40...聚合函数有： count()：取个数 max()：取最大值 min()：取最小值 avg()：取平均值 sum()：求和 例如： SELECT COUNT(*) FROM employee...Having发生在分组group by之后，因而Having中可以使用分组的字段，无法直接取到其他字段,可以使用聚合函数 order by查询 排序分为升序ASC和降序DESC mysql> select...查询工资大于10000的 的前三名员工信息，并按降序排列 mysql> select * from employee where salary > 10000 order by salary DESC...：单表查询关键字的执行顺序（优先级） from where group by having select distinct order by limit ?
一、关键字的执行优先级 1，from：找到表 2，where：拿着where指定的约束条件，去文件/表中取出一条条数据 3，group by：将取出的一条条数据进行分组，如果没有group...*12，是因为我们通过查询语句查询出来的也是一张表，但是这个表是不是内存当中的一个虚拟表，并不是我们硬盘中存的那个完整的表，对吧，虚拟表是不是也有标题和记录啊， 既然是一个表，我们是可以指定这个虚拟表的标题的...*12的字段名也是一个别名，只不过不直观，是MySQL自动给你写上的 #除了乘法以外，加减乘除都是可以的 #自定义显示格式，自己规定查询结果的显示格式 CONCAT() 函数用于连接字符串 ...100 3,in(80,90,100) 4,like 'ee%' 模糊匹配，%表示任意多字符，_表示一个字符 5，逻辑运算符：在多个条件直接可以用逻辑运算符 and or not #1:单条件查询...每个人都有唯一的id号，我count是计算一下分组之后每组有多少的id记录，通过这个id记录我就知道每个组有多少人了 关于集合函数，mysql提供了以下几种聚合函数：count、max、min、avg、
2.查询指定字段 SELECT 字段1，字段2，字段3...FROM 表名称； 例如查询book表中的书籍名称： select bookName from book; ?...5.带BETWEEN...AND的范围查询 SELECT * FROM 表名称 WHERE 字段 [NOT] BETWEEN 取值1 AND 取值2； 注意：该查询结果的是指在取值1和取值2的范围之间，...7.空值查询 SELECT * FROM 表名称 WHERE 字段 IS [NOT] NULL;（此处的IS不可改为=） 例如查询表中年龄为null的数据：select * from stu where...8.带AND的多条件查询 SELECT * FROM 表名称 WHERE 条件表达式1 AND 条件表达式2; 例如要查询表中年龄=18并且姓名中含有张三字样的数据： select * from stu...9.带OR的多条件查询 SELECT * FROM 表名称 WHERE 条件表达式1 OR 条件表达式2; 例如要查询表中年龄=18或者姓名中含有张三字样的数据： select * from stu
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
即时通信 IM
ICP备案
云直播
实时音视频
