开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

对同一表和列(taggables.title)使用多个whereHas()时。执行时间增加40倍

对同一表和列(taggables.title)使用多个whereHas()时，执行时间增加40倍。

在云计算领域中，这个问题涉及到数据库查询优化和性能调优的知识。当我们在数据库中对同一表和列使用多个whereHas()方法时，会导致查询的执行时间大幅增加。

whereHas()方法是一种用于查询关联关系的方法，它可以用来检查模型之间的关联关系，并根据关联关系进行查询。然而，当我们对同一表和列多次使用whereHas()方法时，数据库需要执行多次查询操作，这会导致查询时间的增加。

为了解决这个问题，我们可以考虑以下几个方面：

数据库索引优化：在taggables表的title列上创建索引，可以加快查询速度。索引可以帮助数据库快速定位到符合条件的数据，减少查询时间。
使用with()方法进行预加载：通过使用with()方法，我们可以预加载关联模型的数据，减少数据库查询的次数。例如，可以使用with('taggables')方法预加载taggables模型的数据，避免多次查询。
使用whereHas()方法的回调函数：whereHas()方法可以接受一个回调函数作为参数，我们可以在回调函数中进一步优化查询条件，减少查询时间。例如，可以使用闭包函数来过滤查询结果，只返回符合条件的数据。
数据库查询缓存：如果查询结果是静态的，可以考虑使用数据库查询缓存来提高查询性能。通过将查询结果缓存到内存中，可以避免重复查询数据库，减少查询时间。

综上所述，对同一表和列使用多个whereHas()方法时，我们可以通过数据库索引优化、预加载、回调函数和查询缓存等方法来提高查询性能。具体的实施方法可以根据具体情况进行调整和优化。

腾讯云提供了一系列的云计算产品，包括数据库、服务器、云原生、网络安全等。您可以参考腾讯云的相关产品文档和帮助中心来了解更多详细信息。

参考链接：

腾讯云数据库产品介绍：https://cloud.tencent.com/product/cdb
腾讯云服务器产品介绍：https://cloud.tencent.com/product/cvm
腾讯云云原生产品介绍：https://cloud.tencent.com/product/tke
腾讯云网络安全产品介绍：https://cloud.tencent.com/product/ddos

页面内容是否对你有帮助？

有帮助

没帮助

相关·内容

Laravel Eloquent 模型关联关系（下）

另外，如果访问的是模型实例上的 author() 方法时，返回的不是用户实例了，而是一个关联关系实例，该实例注入了查询构建器，所以你可以在其基础上通过方法链的方式构建查询构建器进行更加复杂的查询，我们以一个一对多的查询为例...whereHas 方法和 orWhereHas 方法相对的，也有 whereDoesntHave 和 orWhereDoesntHave 方法，使用方法一样，这里就不再赘述了。...所以不管模型实例有多少个，关联结果只会查询一次，加上模型本身查询总共是两次查询，在列表查询时，大大减少了对数据库的连接查询次数，因而有更好的性能表现，推荐使用。...、一对多的多态关联、多对多的多态关联；以上关联关系的查询，主要包含两种方式：懒惰式加载和渴求式加载；基于关联查询构架复杂查询对查询结果进行过滤；关联模型的更新、插入和删除操作。...希望你看完学院君的这一系列教程可以了解并完全掌握 Eloquent 模型的定义和使用，有什么问题，欢迎随时与我交流。

19.5K3 0

跟我一起学Laravel-EloquentORM进阶部分

其中role_user表为关联表，包含两个字段user_id和role_id。多对多关联需要使用belongsToMany方法 <?...对多对多关系来说，引入了一个中间表，因此需要有方法能够查询到中间表的列值，比如关系确立的时间等，使用pivot属性查询中间表 $user = App\User::find(1); foreach (...多对多的多态关联多对多的关联使用方法morphToMany和morphedByMany，这里就不多废话了。...$posts = Post::has('comments.votes')->get(); 如果需要更加强大的功能，可以使用whereHas和orWhereHas方法，把where条件放到has语句中。...()->dissociate(); $user->save(); Many to Many 关系中间表查询条件当查询时需要对使用中间表作为查询条件时，可以使用wherePivot， wherePivotIn

4K5 0

MySQL not exists 真的不走索引么?

，使用NOT EXISTS方式应该会产生578436个” executeing和Sending data”的组合项，总计消耗时间=50μs*578436=28921800us=28.92s。...当外层查询结果集的数据量N较小时执行性能较好，如有N=10执行时间为50μs*10=500us=0.005s，再加上一些额外消耗，执行结果也能在0.01秒或10毫秒内范围，这个响应时间应该能被大部分应用程序接受...当外层程勋结果集的数据量N较大甚至上千万数据量时，NOT EXISTS的查询性能会变得非常糟糕，甚至会大量消耗服务器IO和CPU资源从而影响其他业务正常运行。...除上述问题外，在优化过程中发现本应该存储相同数据的resource_id列在两个表中定义不同，一表为VARCHAR而另外一表为BIGINT，外部结果集的字段类型和NOT EXIST字表中字段类型不同导致...京东商城也曾出现过大量类似案例，一些表使用VARCHAR来存放订单号，而另一些表使用BIGINT来存放，在两表进行管理时性能极差，希望研发同事引以为戒。

2.3K4 0

【说站】mysql分库分表的切分方法

mysql分库分表的切分方法 1、水平切分水平切分又称Sharding，是将同一表中的记录分割成多个结构相同的表中。...Sharding是增加，Sharding是必然的选择，它将数据分布到集群的不同节点，从而缓存单个数据库的压力。...2、垂直切分垂直切分是将一个表按列分成多个表，通常根据列的关系密集度进行分割，也可以利用垂直气氛将经常使用的列喝不经常使用的列分成不同的列。...在数据库层面使用垂直分割将根据数据库中表的密度部署到不可接受的数据库，如垂直分割原始电子商务数据部署数据库，称为商品数据库和用户数据库。以上就是mysql分库分表的切分方法，希望对大家有所帮助。

6053 0

深入并行：从数据倾斜到布隆过滤深度理解Oracle的并行

有趣的是, 整个 sql 消耗的 db time 只增加了 37 秒, 而执行时间确增加了 35 秒, 意味着所增加的 db time 并不是平均到每个 PX 进程的....从 sql monitor 报告的Timeline 列信息, 对 lineorder 的扫描和两个 hash join 操作是同时进行的....我们观察使用布隆过滤和不使用布隆过滤时性能的差别. SQL 执行时间为 1 秒, db time 为 7.9 秒. 优化器默认选择 replicate 的方式....如果 sql 涉及多个维度表, 维度表全部使用broadcast 分发, 优化器可能对不同的维度表数据生成多个的布隆过滤, 在扫描事实表时同时使用....使用 rownum 时, create table 执行时间为 22.3 分钟, db time 为 38.4 分钟. SQL 的执行时间为使用lo_orderkey 时的 22 倍。

2K9 0

深入并行：从生产者到消费者模型深度理解Oracle的并行

执行一个 SQL 时, 分配多个并行进程同时执行数据扫描,连接以及聚合等操作, 使用更多的资源, 得到更快的 SQL 响应时间。并行执行是充分利用硬件资源,处理大量数据时的核心技术。...使用 hash 分发方式时, sql 的执行时间为 29s, db time 为 2.6m. 相对于 broadcast 方式, sql 的执行时间和 db time 都增加了大约 40%....这个例子中, 对 lineorder 的 hash 分发会增加明显的 db cpu. 下一节, 我将使用另一个例子, 说明 hash 分发适用的场景。...相比 hash 分发, 执行时间 和 db time 都增加了接近 1.5 倍。...此时 sql 执行时间为 1.6 分钟, db time 6 分钟; 不分区使用 hash 分发时, 执行时间为 2.4 分钟, db time 10.5 分钟.

1.3K6 1

MySQL 数据库表分区.

MySQL 数据库在 5.1 版本时添加了对分区（partitioning）的支持。分区的过程是将一个表或索引分解成多个更小、更可管理的部分。...MySQL 数据库支持的分库类型为水平分区（指将同一表中不同行的记录分配到不同的物理文件中），并不支持垂直分区（指将同一表中不同列的记录分配到不同的物理文件中）。...1 如果表中存在主键/唯一索引时，分区列必须是主键/唯一索引的一个组成部分。...2 此外，RANGE COLUMNS 分区可以对多个列的值进行分区。...MySQL 数据库允许对 NULL 值做分区，视 NULL 值小于任何一个非 NULL 值（和 ORDER BY 处理 NULL 值的规则一致）。

9.1K2 0

【数据库设计和SQL基础语法】--连接与联接--联接的优化与性能问题

当进行联接操作时，如果参与联接的表包含大量的数据记录，可能会导致以下性能问题：高延迟和低效率：大量数据记录会导致联接操作的执行时间增加，从而导致查询的响应时间变长。...网络传输开销：当进行跨多个服务器或节点的联接时，大量数据的传输会增加网络开销。频繁的网络通信可能成为性能瓶颈，特别是在分布式数据库环境中。...考虑联接列的数据类型和选择性，以便更好地利用索引。分页和分批处理：对大表进行分页处理，只获取部分数据，而不是一次性获取全部数据。...对于常用于联接条件的列，优先考虑创建索引。考虑使用复合索引：如果涉及多个列的联接条件，考虑使用复合索引，包含这些列。复合索引可以更有效地加速多列的匹配。...这些案例强调了在设计和执行 SQL 联接时可能遇到的一些性能问题，解决这些问题需要综合考虑索引的使用、联接条件、查询结构、数据库设计等多个方面。

1781 0

SQL Server之索引解析（二）

、堆表堆表通过IAM连接一起，查询时全表扫描。 1、1 非聚集索引结构叶子节点数据结构：行数据结构+Rid（8字节） ?...2、建立索引规则建立聚集索引规则唯一性：如果非唯一性，索引节点会增加一列唯一表示。静态的: 如果对聚集索引键值进行更新时，中间节点页会发生变化，叶子节点页也会发生变化。...索引覆盖对常用查询指定列的索引可以适当增加列覆盖。非聚集索引数据密度原则：数据密度是指列值唯一的记录占总记录数的百分比，这个比率越高，则说明此列越适合建立索引。...3、相关工具 3.1 组织分析命令 DBCC IND 用于分析表组织和索引组织查询命令。.../previous-versions/sql/sql-server-2008-r2/ms174384(v=sql.105) -- 打开IO开销统计 set STATISTICS io ON -- 打开执行时间统计

8293 0

MySQL DDL详情揭露

) 1、添加auto_increment列要锁表，阻塞写;2、虽采用online方式，但是表数据需要重新组织，所以增加列依然是昂贵的操作 drop column online 允许读写(增加自增列除外)...同add column，重新组织表数据，，昂贵的操作 Rename a column online 允许读写操作元数据;不能改列的类型，否则就锁表 Reorder columns online 允许读写...主库执行Online DDL时，不能根据负载暂停DDL操作。使用Inplace方式执行的DDL，发生错误或被KILL时，需要一定时间的回滚期，执行时间越长，回滚时间越长。...对于大表和较大表，如果对复制延迟和主库性能敏感，建议改为gh-ost或pt-osc工具。对于并发操作较高的表，无论表数据量多少，不能在业务高峰期操作。...同个表的多个DDL语句可以合并在一起进行，避免多次table rebuild带来的消耗。但是也要注意分组，比如需要copy table和只需inplace就能完成的，应该分两个alter语句。

1.2K1 0

Linux下top命令详解

该命令可以按CPU使用、内存使用和执行时间对任务进行排序；而且该命令的很多特性都可以通过交互式命令或者在个人定制文件中进行设定。下面详细介绍它的使用方法。...第一行是任务队列信息，同 uptime 命令的执行结果。其内容如下: 第二、三行为进程和CPU的信息。当有多个CPU时，这些内容可能会超过两行。内容如下：最后两行为内存信息。...内容如下：内存中的内容被换出到交换区，而后又被换入到内存，但使用过的交换区尚未被覆盖,该数值即为这些内容已存在于内存中的交换区的大小。相应的内存再次被换出时可不必再对交换区写入。...一般的终止进程可以使用15信号；如果不能正常结束那就使用信号9强制结束该进程。默认值是信号15。在安全模式中此命令被屏蔽。 i：忽略闲置和僵死进程。这是一个开关式命令。 q：退出程序。...需要注意的是如果设置太小的时间，很可能会引起不断刷新，从而根本来不及看清显示的情况，而且系统负载也会大大增加。 f或者F：从当前显示中添加或者删除项目。 o或者O：改变显示项目的顺序。

5.4K5 0

CNCC2017中的深度学习与跨媒体智能

），建立起一个贝叶斯推断模型多视图生成式自编码器除了视觉数据之外，还有其他模态的数据，可以根据多个模态的数据构建多视图的生成时自编码器珠算：基于贝叶斯推断的深度生成模型库任务大数据中有许多不确定因素...锚点是线性增加的，也会增加得很快对第一层采样的点做再采样，多层采样减少了锚点数目，从最少的锚点的层逐层推理标号预测器（速度+++）优化对锚点的标号（打伪标签进行半监督学习）对最小的锚点层接一个优化器进行标号预测...对问题进行记忆用文本和图像特征一同训练生成答案用LSTM做时序推理细粒度分类任务：识别图像同一大类中的子类挑战：姿态视角不同导致类内差异大，外形颜色相似导致类间差异小基于模型动态扩容的增量深度学习方法...，增加一个新的类别时，将其归入最相近的大类中，重用大类的参数，扩展小类分类层参数利用类别子集合划分实现模型动态扩容，利用特征迁移学习实现训练加速（对类别做聚类）局部两级注意力深度模型 The Application...，利用这两个模态的数据提供更高精度的细粒度分类卷积做图像分类，CNN+LSTM做文本分类，两个分类结果合起来 04 跨媒体关联与检索跨媒体统一表征学习：使用相同的特征类型表征不同媒体的数据跨媒体相似度计算

1.4K6 0

CNCC2017中的深度学习与跨媒体智能

），建立起一个贝叶斯推断模型多视图生成式自编码器除了视觉数据之外，还有其他模态的数据，可以根据多个模态的数据构建多视图的生成时自编码器珠算：基于贝叶斯推断的深度生成模型库任务大数据中有许多不确定因素... - 锚点是线性增加的，也会增加得很快对第一层采样的点做再采样，多层采样减少了锚点数目，从最少的锚点的层逐层推理标号预测器（速度+++） - 优化对锚点的标号（打伪标签进行半监督学习） ...Learning平台：经典方法，并行运算，而锚图可以通过并行进一步提升速度视频问答任务：输入视频，问题，输出答案模型（层次记忆网络+视频时序推理）：对图像进行分层对问题进行记忆用文本和图像特征一同训练生成答案...，增加一个新的类别时，将其归入最相近的大类中，重用大类的参数，扩展小类分类层参数利用类别子集合划分实现模型动态扩容，利用特征迁移学习实现训练加速（对类别做聚类） ?...跨媒体关联与检索跨媒体统一表征学习：使用相同的特征类型表征不同媒体的数据跨媒体相似度计算：通过分析跨媒体关联关系，计算不同媒体数据的语义相似性这里的六篇论文我还没读完，读完之后补具体的理解跨媒体关联传递方法

1.9K7 0

一波骚操作，我把 SQL 执行效率提高了 10,000,000 倍

即先执行sc表的过滤，再进行表连接，执行时间为：0.054s 和之前没有建s_id索引的时间差不多，查看执行计划： ?...，必要时建立多列联合索引学会分析sql执行计划，mysql会对sql进行优化，所以分析执行计划很重要索引优化上面讲到子查询的优化，以及如何建立索引，而且在多个字段索引时，分别对字段建立了单个索引。...发现type=index_merge 这是mysql对多个单列索引的优化，对结果集采用intersect并集操作多列索引我们可以在这3个列上建立多列索引，将表copy一份以便做测试 ?...都会使用到索引，即索引的第一个字段sex要出现在where条件中索引覆盖就是查询的列都建立了索引，这样在获取结果集的时候不用再去磁盘获取其它列的数据，直接返回索引数据即可，如： ?...，且长度尽可能短，如主键和外键，类型字段等等建立单列索引根据需要建立多列联合索引当单个列过滤之后还有很多数据，那么索引的效率将会比较低，即列的区分度较低如果在多个列上建立索引，那么多个列的区分度就大多了

6941 0

Hadoop Raid-实战经验总结

集群压力增加表现为NameNode元数据增多、访问量增加、Raid和数据恢复时集群网络及IO负载增加几个方面，具体如下：其一，raid过程中会生成校验文件以及目录结构，导致元数据增加。...其三，做Raid生成校验文件及恢复丢失的block时，需要读取相同stripe的多个block数据，导致集群内网络及IO负载增加。解决方案为选择空闲时段进行操作，减少对现网生产环境的影响。...其四，Raid完成后，源文件block副本数减少，job本地化概率减小，同时增加了网络流量和job的执行时间。...另外，在集群启动时，NameNode要重建元数据信息，同时对比block的实际副本数和配置值，用以删除和增加block；由于Raid块放置策略的引入，每个block的增加和删除都需要考虑相同stripe...解决方案是，在启动时使用默认的块放置策略，保持启动过程同原有流程相同，待启动完成，再修改为Raid块放置策略，动态刷新到NameNode生效。 ?

2.1K10 0

向量化执行从理论到实现，仅需五步！ | DB·洞见

可以看出，针对于CPU Athlon，使用带分支的实现，在选择率较低或筛选率较高时，执行时间较短，表明分支预测误判率较低时执行效率较高，而在中间位置筛选率中等时耗时较长，表明分支预测误判率较高时执行效率较低...前四列是不同数据量的对比，包括执行时间和带宽。第五列是内存占用情况，以1M为单位。第六列是结果集大小。...其设计目标是：能够在执行大量的查询时达到较高的CPU使用率；可以扩展到其他应用领域，如数据挖掘和多媒体检索，并实现同样的高效率可扩展性代码；还能根据底层存储规模大小进行伸缩。...图中包含了4个算子，即Scan、Select、Project和Aggregate。 Scan每次从MonetDB BATs中获取多个列对应的vector，图中有三列。...但每列单独存储的方式一般会有更新删除等代价，比如更新一行可能会涉及修改多个列文件。MonetDB/X100通过经典的delta结构来解决列存更新/删除代价增加的问题。

2.1K3 0

一波骚操作，我把 SQL 执行效率提高了 10,000,000 倍

即先执行sc表的过滤，再进行表连接，执行时间为：0.054s 和之前没有建s_id索引的时间差不多，查看执行计划： ?...，必要时建立多列联合索引学会分析sql执行计划，mysql会对sql进行优化，所以分析执行计划很重要索引优化上面讲到子查询的优化，以及如何建立索引，而且在多个字段索引时，分别对字段建立了单个索引...发现type=index_merge 这是mysql对多个单列索引的优化，对结果集采用intersect并集操作多列索引我们可以在这3个列上建立多列索引，将表copy一份以便做测试 ?...都会使用到索引，即索引的第一个字段sex要出现在where条件中索引覆盖就是查询的列都建立了索引，这样在获取结果集的时候不用再去磁盘获取其它列的数据，直接返回索引数据即可，如： ?...，且长度尽可能短，如主键和外键，类型字段等等建立单列索引根据需要建立多列联合索引当单个列过滤之后还有很多数据，那么索引的效率将会比较低，即列的区分度较低如果在多个列上建立索引，那么多个列的区分度就大多了

5243 0

一波骚操作，我把 SQL 执行效率提高了 10,000,000 倍

即先执行sc表的过滤，再进行表连接，执行时间为：0.054s 和之前没有建s_id索引的时间差不多，查看执行计划： ?...，必要时建立多列联合索引学会分析sql执行计划，mysql会对sql进行优化，所以分析执行计划很重要索引优化上面讲到子查询的优化，以及如何建立索引，而且在多个字段索引时，分别对字段建立了单个索引...发现type=index_merge 这是mysql对多个单列索引的优化，对结果集采用intersect并集操作多列索引我们可以在这3个列上建立多列索引，将表copy一份以便做测试 ?...都会使用到索引，即索引的第一个字段sex要出现在where条件中索引覆盖就是查询的列都建立了索引，这样在获取结果集的时候不用再去磁盘获取其它列的数据，直接返回索引数据即可，如： ?...，且长度尽可能短，如主键和外键，类型字段等等建立单列索引根据需要建立多列联合索引当单个列过滤之后还有很多数据，那么索引的效率将会比较低，即列的区分度较低如果在多个列上建立索引，那么多个列的区分度就大多了

6892 0

Oracle中最容易被忽略的那些实用特性

它只包含SYSTEM表空间和SYSAUX表空间，而且我们不能增减它的表空间，也不能在它里面创建表、索引等对象。同时PDB$SEED只用来作Clone操作时的源，无法对它进行任何操作。...多个PDB可以使用同一表空间名。查询DBA_视图，只能看到当前PDB的信息。但如果在CDB$ROOT中查询V$视图，可以看到所有PDB中表空间的信息。...因此V$视图中会增加CON_ID列，DBA_视图中则没有此列。这是因为每个PDB自己的SYSTEM表空间中保存自己的数据字典，因此DBA_视图只有某个PDB的信息。...逻辑读时锁的变化 ? 逻辑读在Oracle和MySQL中很相似，右下方区域在Oracle中被称为块，保存着实际数据。...竞争优化的重点是缩短DML执行时间、减少事务持续时间（尽快提交）。以上为全部分享内容，谢谢大家！

1.2K6 0

金融风控数据管理——海量金融数据离线监控方法

Calculator通过生成执行计划并优化的方式，合并不同业务同学对同一表的监控计算需求，提升计算效率。...监控指标计算（Calculator）模块监控指标计算（Calculator）模块核心逻辑（如下图）是：读取未完成的计算任务；通过生成执行计划并优化的方式，合并不同业务同学对同一表的监控计算需求，提升计算效率...更复杂的，当有多个监控计算过程时，DAG可以表示为： ?...DAG需要执行的部分为叶子节点，为了避免重复计算，我们对每次执行的叶子节点进行两类类优化：合并同名函数，当函数名和参数都完全一致时，合并函数，仅执行一次；当函数名一致、参数不一致，生成新的执行函数（...，表1，B列），其中两个F:RDD_aggre（cal_seg，表1，A列）为同名同参函数，合并为一个执行，又F:RDD_aggre（cal_seg，表1，A列）与F:RDD_aggre（null_rate

2.7K1 0

点击加载更多

扫码

添加站长进交流群

领取专属 10元无门槛券

手把手带您无忧上云

扫码加入开发者社群

相关资讯

热门标签

活动推荐

运营活动

活动名称

广告关闭