首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

浅谈MySQL 统计行数的 count

MySQL count() 函数我们并不陌生,用来统计每张行数。但如果你的越来越大,且是 InnoDB 引擎的话,会发现计算的速度会越来越慢。...在这篇文章里,会先介绍 count() 实现的原理及原因,然后是 count 不同用法的性能分析,最后给出需要频繁改变并需要统计行数的解决方案。...由于 MVCC 的控制,使得 MySQL 具有并发的能力,也就是说对于同一时刻,InnoDB 返回的行数是不一定的,事务看到的行数与开启后的一致性视图有关,换句话说,每个事务能看到的数据版本是不一样的...另外在使用 show table status 时,也可以查询出行数,而且速度很快,但需要注意的是,该命令是通过索引统计的值来采样估算的。官方文档说误差可以有 40%-50%....这时可以在重启 Redis 后,从数据库执行下 count(*) 操作,然后更新到 Redis 中。一次全扫描还是可行的。 逻辑不精确: 假设一个页面中,需要显示一张行数,以及每一条数据。

2.9K30
您找到你想要的搜索结果了吗?
是的
没有找到

MYSQL统计行数时到底应该怎么COUNT

相信每个人在写代码时都有遇到过要获取MYSQL表里数据行数的情况,多数人获取数据行数时都用COUNT(*),但同时也流传了不少其他方式,比如说COUNT(1)、COUNT(主键)、COUNT(字段)。...文章中都是针对MySQL的InnoDB引擎展开讨论的,MyISAM引擎是把一个的总行数记录在了磁盘里,查询时效率很高(如果加了where条件也不能直接从磁盘返回)。...而InnoDB由于多版本并发控制(MVCC)的原因,即使时同一时刻的查询InnoDB应该"返回多少行"也是不确定的,比如假设t中有10000行数据: 时刻 会话A 会话B 会话C T1 begin;...COUNT(*) MySQL专门做了优化,会找到中最小的索引树,InnoDB普通索引树比主键索引小很多,对于 COUNT(*)遍历哪个树是一样的, count(*)时MySQL不取记录值, count...另外要注意,很多人为了销量会把行数记录到Redis中,但这样不能保证Redis里的计数和MySQL表里的数据保持精确一致,这是两个不同的存储系统不支持分布式事务所以就无法拿到精确的一致性视图,如果为了效率把行数单独存储那么最好存放在一个单独的

1.4K20

MySQL统计信息相关介绍

以前给大家介绍过MySQL中的统计信息,相信大家也都了解了。那么统计信息是存放在哪里呢?我们怎么去查看?...在MySQL中提供了两个表记录统计信息的相关内容,分别是 innodb_table_stats与innodb_index_stats。下面就这两个的内容,与大家进行一些分享。...总 结 数据库中的一些系统对DBA是非常重要的,可以帮助我们排查问题、性能分析、去更好的了解一些机制。...innodb_table_stats与innodb_index_stats两张我们可以了解统计信息、计算索引的大小、索引的选择性如何,也可以做到监控中。...通过5.7的MySQL中添加了Sys Schema也就是让大家不用通过去查看代码的方式去排查各种问题、故障处理等,可见对系统的学习在日后会更重要。

2.1K80

「开发日志」Navicat统计行数竟然和实际行数不一致?!

背景 近期为了保障线上数据库的稳定性,我决定针对一些大的历史数据有计划地进行备份迁移,但是呢,发现一个奇特的现象,Navicat统计行数自身count统计数竟然不一致!?...整个经过 这次大迁移备份,我的整体思路是:首先用Navicat对库内所有的按照行数降序排序,然后选取Top10进行迁移备份。...但是一如既往细心的我发现,它界面的统计行数竟然和我自己count这张行数不一致?!难道要颠覆我对Navicat的认可嘛。...我开始思考,Mysql作为一个数据库,自身肯定就有各个统计,而Navicat只是作为一个可视化界面,让数据肉眼可见。 Navicat:这锅我可不背。...为了证实我的猜想,我查阅了官方文档及其他相关资料,果然,MySQL 在 information_schema.TABLES中息存放了所有的信息。

1.1K30

VSCode统计代码行数

很多小伙伴在开发时想知道当前项目代码行数是多少,很多人会使用Git来进行查看,但是在开发中如果编辑器使用了VsCode我们可以使用VsCode的插件--VS Code Counter来进行代码行数查询。...1.下载插件 在VsCode侧边栏搜索插件名进行下载: image.png 2.配置插件 编写插件配置选择哪些文件统计,哪些文件不统计VsCode插件市场文档 //代码统计 "VSCodeCounter.languages...VSCodeCounter.useGitignore": true, //使用.gitignore "VSCodeCounter.outputAsCSV": false, //不输出CSV //排除统计文件...json", "**/yarn.lock", ] image.png 我在项目中设置了排除的文件以及文件夹 3.生成结果 如果是从根路径开始检测就在目录的空白处右键,如果是想要检测文件夹内代码行数就对指定文件夹右键后选择...directory image.png image.png 4.获得结果 会获得一个md文档和txt文件等等 image.png 这是本项目(个人博客系统)截止2022-05-14时的有效代码行数

6.1K30

git 统计代码行数

版本发布的时候需要统计代码行数 一行命令: git log --format='%aN' | sort -u | while read name; do echo -en "$name\t"; git...{ printf "added lines: %s, removed lines: %s, total lines: %s\n", add, subs, loc }' -; done 使用方法:在需要统计的...注:added lines 代表增加行数,removed lines代表移除行数,total lines代表总行数,但总行数的计算规则是增加的行数减去移除的行数,比如你增加了一行修改了一行,增加行数是2...,移除行数是1,但其实代码量是应该将修改行数也计入的,所以计算增加行数也就是added lines即可 小知识: 绩不如人:绩效不如他人。...据说程序员按代码行数统计工作量 快看看是不是你的代码被remove掉了

4.6K30

python统计文件行数

需求: 需要统计一个文件的行数....讨论: 最简单的办法是把文件读入一个大的列表中,然后统计列表的长度.如果文件的路径是以参数的形式filepath传递的,那么只用一行代码就可以完成我们的需求了: count = len(open(filepath...count = -1 for count, line in enumerate(open(thefilepath, 'rU')):     pass count += 1 另外一种处理大文件比较快的方法是统计文件中换行符的个数...当 外部系统提供统计行数的方法时,你可以使用它们(通过os.popen),如unix的wc - l.当然,通过自己的程序来完成会更简单,快捷和通用.你可以假设大多数的文本文件都有合理的大小,所以把它们一次读入内存中处理是可行的...第三种方法的核心思想是统计缓存中回车换行字符的个数.这可能最不容易直接想到的方法,也是最不通用的方法,但它可能是最快的方法.

2K20

MySQL统计数据库所有的数据量

场景:mysql统计一个数据库里所有的数据量,最近在做统计想查找一个数据库里基本所有的数据量,数据量少的通过select count再加起来也是可以的,不过的数据有点多,不可能一个一个地查 记得在...在mysql里是可以查询information_schema.tables这张的 SELECT table_rows,table_name FROM information_schema.tables...WHERE TABLE_SCHEMA = '数据库名称' and table_name not in ('不查询的名称') ORDER BY table_rows DESC; 要统计的...table_name not in ('不查询的名称') ORDER BY table_rows DESC; OK,本来还以为已经没问题了,然后还是被反馈统计不对,后来去找了资料 https:/...是默认的存储引擎,能支持事务外健,并发情况性能也比较好 所以,根据网上的做法,重新analyze 对应,在mysql8.0版本是不管用的,发现查询数据还是不对,估计是mysql版本太高,mysql5版本没验证过

6.7K10

git 代码行数统计

命令需要在bash下运行,windows系统可使用git客户端附带的“git bash here”右键菜单进入bash命令行 统计所有代码行数 git log --pretty=tformat: --...total lines: %s\n", add, subs, loc }' 命令详解: 使用指定格式输出日志 git log --pretty=tformat: --numstat 输出形式为 添加行数...删除行数 文件路径 读取每一行日志并分成数个字段进行处理,并在处理完成后执行END指定的命令输出汇总信息 awk '{ add += $1; subs += $2; loc += $1 - $2...} END { printf "added lines: %s, removed lines: %s, total lines: %s\n", add, subs, loc }' 统计一定时间内产生的代码行数...= $1 - $2 } END { printf "added lines: %s, removed lines: %s, total lines: %s\n", add, subs, loc }' 统计指定开发者一段时间内产生的代码行数

1.4K10
领券