mysql数据库百万条数据查询 - 腾讯云开发者社区

文章/答案/技术大牛

发布

1回答

MySQL优化查询以增强比较报告的性能

mysql、database、jsp

现在，"users“表包含数百万条数据，"temp_users”表包含数千条数据。这两个表包含相同类型的信息，但有时可能会丢失某些记录。SELECT dateTime, address tempUsers t1 WHERE NOT EXISTSS

浏览 1提问于2012-11-07得票数 1

回答已采纳

3回答

我是否可以降低MySQL速度以突出显示哪个查询导致速度变慢？

mysql、performance、benchmarking

我正在编写一个用NodeJS编写并连接到MySQL 5.5数据库的应用程序接口。在我们的实时系统上，我们有一个查询的运行时间超过7秒。我想我已经确定了导致问题的查询，但是，由于我的笔记本电脑上没有500万条记录(这将需要很长时间才能生成)，我无法证明这一点。有没有一种设置/技术可以用来模拟拥有数百万条数据库记录，而实际上没有这些记录？

浏览 0提问于2013-04-11得票数 2

回答已采纳

10回答

在Postgres中进行批量插入的最快方法是什么？

postgresql、bulkinsert

我需要以编程方式将10条数百万条记录插入postgres数据库。目前，我在一个“查询”中执行了1000条insert语句。有没有更好的方法来做这件事，一些我不知道的大容量insert语句？

浏览 264提问于2009-04-17得票数 294

回答已采纳

5回答

MongoDB‘MongoDB()’非常慢。我们如何改进/处理它呢？

performance、mongodb、count

我目前使用的是拥有数百万条数据记录的MongoDB。我发现了一件很烦人的事情。我确保我已经为必填字段建立了索引。有没有人遇到过同样的事情？您如何改进这一点？

浏览 2提问于2011-10-05得票数 63

回答已采纳

4回答

如何提高select操作的执行速度

mysql、sql

create table foo (id int(11) auto_increment, value varchar(255))

浏览 0提问于2012-04-06得票数 0

回答已采纳

3回答

在MYSQL InnoDB中更新百万条记录

mysql、innodb、database-performance

MYSQL Innodb更新问题：谢谢。

浏览 0提问于2011-11-16得票数 1

4回答

在查询数据库的时候，由于数据量大，我要做分页，然后首先获取总的条数，但是使用sql语句SELECT COUNT(*) as total from 表 WHERE addtime between 1164038401and 1511235339；这条sql等于遍历了全表，数据有一百万条，id为主键索引，addtime为普通索引。我现在只是查询个数，但是分页的时候会查询有条件的大量数据，对于内存过大，有什么好的解决办法？比如sql不使用缓存，修改配置文件等等。

浏览 2258提问于2017-11-28

1回答

如何简化多数据库/数亿行数据集的模式

mysql、database-design、schema、data-warehouse

我们目前有一个大约10年前开始的MySQL数据集，它聚合一条数据日志，每个月累加数百万行。开发我们的系统的人员开始将数据分离为几个月，但是他们这样做的方法是创建一个全新的、具有这个月名称的数据库(例如jan2001、mar2009、aug2012)，并在每个数据库中创建一个名为"detail每个月都会有一个cronjob开始运行，然后启动一个全新的数据库，并使用表"detail"，然后应用程序开始将数据写入该表。此时，所有“详细”表中的合并行数为448,2

浏览 0提问于2012-08-27得票数 0

4回答

如何为' in‘语句中的每个列值选择10行(T-SQL)

sql、sql-server、tsql

如何为T-SQL的in语句中的每条记录拉取10条数据？以下是查询示例： SELECT FROM WHERE student_name在数据库中，有1000个同名的。如何在不使用联合的情况下做到这一点？这只是一个示例SQL。我正在使用的这一行有数百万行

浏览 59提问于2017-07-28得票数 3

回答已采纳

3回答

Datastax驱动程序限制选项

cassandra、datastax-java-driver、cassandra-cli

我使用datastax驱动程序构造一个select查询。我使用限制选项设置限制。但是我看到了另一个可以设置的属性DEFAULT_FETCH_SIZE- 5000根据docs.这是否意味着，如果在一行中有大约10000列，如果有一个限制为3的查询运行，它将始终获取指定的默认值- 5000行，然后限制最后3行？当像这样使用时，我认为极限查询默认只获取最后3个值。

浏览 3提问于2014-04-04得票数 2

回答已采纳

4回答

是否一次将所有SQL查询提取到一个数组中？

php、sql

$sql = "SELECT * FROM table WHERE url <> ''";$sql_num = mysql_num_rows($result); {} 问题是，如果url列表有数百万个所以，我想知道另一种不使用循环直接

浏览 0提问于2012-07-20得票数 0

2回答

如果php脚本想要从一个被锁定的表中读取数据，它会等待吗？

php、mysql、concurrency

我有一个cli php脚本，每当电子邮件到达特定地址时都会执行。我的问题是，如果第一个脚本锁定了它需要的所有表，并且运行了脚本的第二个/第三个etc实例，它们会等待第一个执行的脚本解锁这些表吗？如果是这样，会持续多久？

浏览 0提问于2013-06-01得票数 5

回答已采纳

3回答

压缩约会的最好方法是什么？

java、mysql、compression

我的网站需要存储每次访问mysql的ip和时间戳。我担心很快我的数据库中就会有1e6行。在mysql或java上压缩日期的最好方法是什么？mysql已经压缩日期了吗？更新:对不起，我的意思是每天一百万。但我想这仍然是微不足道的。

浏览 0提问于2011-03-30得票数 3

回答已采纳

1回答

有300个查询来显示一个页面是正常的吗？

normalization、denormalization

查询的总数是: Q1 * Q2 * Q3，可能是25 *3*4= 300，甚至更多。或者，我是否应该将数据库规范化，不进行任何重复？

浏览 0提问于2022-11-10得票数 -4

回答已采纳

1回答

mysql查询，如何使用GROUP_CONCAT获得前5位下载？

mysql、sql、select、group-concat、top-n

MySql表中的下列数据。|9 28 |2960,2961,3041,2965,2959FROM Table1我在表和brand_id中有大约2百万条数据记录，image_id和每个用户下载

浏览 0提问于2014-01-07得票数 4

回答已采纳

3回答

Unix时间戳与日期时间

php、mysql、sql、datetime、unix-timestamp

可能重复：添加记录时的显示格式:2小时前、4周前、1年前等允许用户搜索插入到任何日期/月/年的记录。因此，可能允许用户选择仅查看2009年插入的记录。现在我同时使用这两个列，但是由于随着时间的推移，该表将有数百万条记录，因此同时使用这两个列可能会影响数据库的大小。 Unix时间戳似乎更适合用2 hours转换成PHP格式，而且它是独立于时区的。但是datetime具

浏览 27提问于2010-06-01得票数 19

回答已采纳

3回答

在MySQL中哪种优化方法是最好的

mysql

假设我的数据库中有一百万个数据。什么是最优化的标准，以获得更快的结果？单个数据库-多个表多个数据库-多个表单个数据库-单个表我需要注意的其他因素是什么？

浏览 0提问于2010-05-18得票数 1

回答已采纳

1回答

两个简单SQL语句(错误)和一个正在崩溃的奇怪行为

sql、sql-server、select、sql-server-2008-r2

我有一个包含50.000条客户数据记录的数据库表。当我运行此查询时：SELECT * FROM customer WHERE customer_id < 50.001我执行了CHECKTABLE，但没有错误消息。昨天，数据库中的一切都还在正常运行。但是今天我有一个问题。

浏览 0提问于2015-06-04得票数 0

2回答

在实例联机时移动MySQL数据库

mysql、database

我有一个包含许多数据库的MySQL实例，其中一个是存档数据库(尽管使用的是INNODB而不是归档存储引擎)，在正常操作中没有查询或写入。数据文件系统正在填充，我想将归档数据库的数据目录移到另一个文件系统(很明显，然后将它重新链接回来)。如果在移动过程中没有SQL语句试图查询或更新数据，那么当MySQL实例和其他数据库保持在线并使用时，我能安全地这样做吗？我计划将数据库目录重新同步到新的文件系统，然后将原始文件系统上的旧目录重命名为不同

浏览 0提问于2012-02-27得票数 2

1回答

如何有效地使用标记查询项

sql、postgresql、postgresql-10

大概是使用对数据库的一个查询。高效是指查询应该使用尽可能少的服务器和数据库资源(如CPU和)，在尽可能快的时间内返回其结果。据推测，条目和标签的数量超过数百万，并行查询的数量也很高。高负荷和所有东西。我使用的是PostgreSQL 10，所以实际上有两个问题：也许可以重新设计数据的模式，以便更有效地处理这种情况？

浏览 0提问于2018-02-11得票数 2

点击加载更多