首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

浅谈MySQL 统计行数的 count

MySQL count() 函数我们并不陌生,用来统计每张表的行数。但如果你的表越来越大,且是 InnoDB 引擎的话,会发现计算的速度会越来越慢。...Count() 的实现 InnoDB 和 MyISAM 是 MySQL 常用的数据引擎,由于两者实现的不同,导致 count() 操作计算的效率也不同。...由于 MVCC 的控制,使得 MySQL 具有并发的能力,也就是说对于同一时刻,InnoDB 返回的表的行数是不一定的,事务看到的行数与开启后的一致性视图有关,换句话说,每个事务能看到的数据版本是不一样的...而且还有一点,由于 redo log 的支持,在 MySQL 发生异常时,是可以保证 crash-safe。...总结 MySQL count() 函数的执行效率和底层的数据引擎有关。MyISAM 不加 where 条件,查询会很快,但不支持事务。

2.8K30
您找到你想要的搜索结果了吗?
是的
没有找到

MYSQL统计行数时到底应该怎么COUNT

相信每个人在写代码时都有遇到过要获取MYSQL表里数据行数的情况,多数人获取数据表行数时都用COUNT(*),但同时也流传了不少其他方式,比如说COUNT(1)、COUNT(主键)、COUNT(字段)。...文章中都是针对MySQL的InnoDB引擎展开讨论的,MyISAM引擎是把一个表的总行数记录在了磁盘里,查询时效率很高(如果加了where条件也不能直接从磁盘返回)。...COUNT(*) MySQL专门做了优化,会找到表中最小的索引树,InnoDB普通索引树比主键索引小很多,对于 COUNT(*)遍历哪个树是一样的, count(*)时MySQL不取记录值, count...另外要注意,很多人为了销量会把表的行数记录到Redis中,但这样不能保证Redis里的计数和MySQL表里的数据保持精确一致,这是两个不同的存储系统不支持分布式事务所以就无法拿到精确的一致性视图,如果为了效率把表行数单独存储那么最好存放在一个单独的...MySQL表里,这样无法拿到一致性视图的问题就能解决了.

1.4K20

Mysql获取数据的总行数count(*)很慢

引擎就麻烦了,他的执行count(*)的时候,是一行行的累加计数 当然我们要知道此事的说的是没有带条件的count(*),如果加了where条件的话,MyiSAM返回也不能返回的很快 由于我们现在如果使用mysql...有数据的默认可复用读是他的默认隔离级别,在代码上通过多版本控制,也就是MVCC,每一行记录的要判断自己师傅对这个会话可见,因此对于count(*)请求来说,innoDB只好把数据一行行的读出判断,可见的行才能后用于累加, 当然mysql...也是对count(*)是有进行优化的,我们知道我们的索引是一棵树,而主键索引叶子节点是数据,而普通索引叶子节点是主键索引,所以主键索引比普通索引的树大些,因此mysql优化器会拿到索引树小的,进行遍历计算...比如有个页面要显示近期操作的100条记录和操作数,这页面的逻辑就是到redis获取总数,再到数据库获取100条记录,如下两种会发生数据不一致的情况 查询到100结果里面有最新插入的数据,而redis...索引count(*),count(1),count(id),都表示返回满足条件的结果集的总行数,而count(字段)则表示满足条件的数据行里面,参数字段不为null的个数 count(主键id) innodb

4.9K20

MySQL 使用 XtraBackup 进行数据热备份指导

239 1月 28 11:13 back_data [root@localhost backUp]# cd back_data/ [root@localhost back_data]# ll 用量...mysql:mysql -R /var/lib/mysql/data 5)....[root@localhost backUp]# ll 用量 56 drwxr-x--- 6 root root 239 1月 27 19:01 back_data # 全量备份的数据 drwxr-x...指定需要备份到哪个目录,使用incremental-dir指定全备目录; (2)进行数据备份时,需要使用参数 --apply-log redo-only 先合并全备数据目录数据,确保全备数据目录数据的一致性...后期若是选定一台 【从机】进行数据恢复,那么停机、合并全备份数据,还原操作即可 … 毕竟鄙人也是初次接触 实际生产环境中,可作具体的优化 比如:在多台从机上配置备份任务,避免不确定哪台服务器宕机等

2.6K21

谁说MySQL单表行数不要超过2000W?

背景 网上看了一篇文章《为什么说MySQL单表行数不要超过2000w》,亲自实践了一下,跟原作者有不同的结论。...单表建议值 下面我们就以 3 层,2 分叉(实际中是 M 分叉)的图例来说明一下查找一个行数据的过程。...叶子节点和非叶子节点的结构是一样的,同理,能放数据的空间也是 15k;但是叶子节点中存放的是真正的行数据,这个影响的因素就会多很多,比如,字段的类型,字段的数量;每行数据占用空间越大,页中所放的行数量就会越少...;这边我们暂时按一条行数据 1k 来算,那一页就能存下 15 条,Y≈15。...这不是正好就是文章开头说的最大行数建议值 2000w 嘛!

28840

使用spark与MySQL行数据交互的方法

在项目中,遇到一个场景是,需要从Hive数据仓库中拉取数据,进行过滤、裁剪或者聚合之后生成中间结果导入MySQL。 对于这样一个极其普通的离线计算场景,有多种技术选型可以实现。...也无需实现MySQL客户端。 我抽象了一下需求,做了如下一个demo。 涉及的数据源有两个:Hive&MySQL;计算引擎:spark&spark-sql。...我们的demo中分为两个步骤: 1)从Hive中读取数据,交给spark计算,最终输出到MySQL; 2)从MySQL中读取数据,交给spark计算,最终再输出到MySQL另一张表。...然后将数据以SaveMode.Append的方式,写入了mysql中的accounts表。 SaveMode.Append方式,数据会追加,而不会覆盖。...4)查看一下结果 我们到mysql中瞅一瞅。 accounts表 有没有注意到,其实不用建立mysql表!这个过程会自动给你创建,相当于if not exists。

5.9K90

SQL 入门:使用 MySQL行数据库操作

SQL 入门:使用 MySQL行数据库操作 目录 引言 SQL 基础 SQL 语言概述 MySQL 简介 数据库设计基础 数据库与表的设计 常见数据类型 MySQL 安装与配置...它被广泛应用于各种数据库系统中,包括 MySQL。本文旨在为初学者提供 SQL 和 MySQL 的基础知识,并指导如何进行基本数据库操作。 2....MySQL 安装与配置 安装 MySQL 在不同平台上安装 MySQL 的步骤略有不同。以下是常见的安装方法: Windows 平台: 下载 MySQL 安装程序。 运行安装程序并按照提示完成安装。...基本配置与连接 安装完成后,可以使用以下命令启动 MySQL 服务: sudo service mysql start 使用 mysql 命令行工具连接到 MySQLmysql -u root -...FROM users ORDER BY created_at DESC; 分页查询: SELECT * FROM users LIMIT 10 OFFSET 20; 聚合函数与分组查询 使用聚合函数进行数据统计

12610

MySQL十四:单表最大2000W行数

转载~ 在互联网技术圈中有一个说法:「MySQL 单表数据量大于 2000 W行,性能会明显下降」。网传这个说法最早由百度传出,真假不得而知。但是却成为了行业内一个默认的标准。...单表超过2000W行数据一定会导致性能下降吗?我认为是不一定的,虽然说建议单表不超过2000W,但是我不接受它的建议可不可以?那必然也是可以的。...一、单表最大到底能存多少数据 先来看看下面这张图,了解一下mysql各个类型的大小 我们知道在MySQL是支持主键自增长的,不考虑其他因素的前提下,理论上只有主键没有用完,表中的数据就可以一直增加。...「主键类型为tinyint时」 主键8位,数据最大为255,Id自增超过255就会报错 「由此可見:MySQL能够存储的数据在一定程度上受限与主键的类型。...但是数据量的大小却跟2000W没啥影响,既然百度大佬推荐单表最大2000W行数据,那肯定不会是空口白话,一定定会有其他影响行数的因素」。

3.7K50

MySQL最大建议行数2000w, 靠谱吗?

叶子节点和非叶子节点的结构是一样的,同理,能放数据的空间也是 15k;但是叶子节点中存放的是真正的行数据,这个影响的因素就会多很多,比如,字段的类型,字段的数量;每行数据占用空间越大,页中所放的行数量就会越少...;这边我们暂时按一条行数据 1k 来算,那一页就能存下 15 条,Y≈15。...这不是正好就是文章开头说的最大行数建议值 2000w 嘛!...,其实这个最大建议值也是不同的,而且影响查询性能的还有很多其他因素,比如,数据库版本,服务器配置,sql 的编写等等,MySQL 为了提高性能,会将表的索引装载到内存中。...8、总结 Mysql 的表数据是以页的形式存放的,页在磁盘中不一定是连续的。 页的空间是 16K, 并不是所有的空间都是用来存放数据的,会有一些固定的信息,如,页头,页尾,页码,校验码等等。

45020
领券