js文档碎片性能 - 腾讯云开发者社区

文章/答案/技术大牛

发布

1回答

Elasticsearch:在相同的碎片上折叠文档是否在崩溃时提高性能？

performance、elasticsearch

Elasticsearch父/子嵌套关系通过在摄入过程中使用_routing字段强制将父级和子级放在同一个碎片上。我在想，在使用elasticsearch的collapse特性时，使用相同的过程是否会提高性能，还是会使它变得更糟？如果我们看看这两种情况：2)文档在许多碎片上:崩溃只能在稍后发生，所有碎片都会返回大量稍后将被折叠的文档。我不知道elast

浏览 4提问于2019-09-30得票数 2

回答已采纳

1回答

如何增加elasticsearch文档限制/索引计数？

elasticsearch、elastic-stack

我的elasticsearch服务器目前包含5B文档。但是，它停止了out DB的索引，我们的DB保存了7B记录。我目前只有5个碎片：我怎么才能增加这个呢？为了更多的数据保持，会增加这个值吗？服务器是4TBSSD，目前只使用800 is。

浏览 1提问于2018-10-14得票数 0

回答已采纳

1回答

ElasticSearch -切分如何影响索引性能？

elasticsearch

我所面临的情况是，更多的碎片将降低索引性能-at在单个节点中最少-(在延迟和吞吐量方面)。以下是我的一些数字：我对大容量API也有相同的结果。

浏览 0提问于2018-11-08得票数 8

回答已采纳

1回答

如何强制ElasticSearch对特定节点的数据进行索引

configuration、routing、elasticsearch

我有8个盒子:4个高性能盒，1TB和4个相当低性能的盒子，但是磁盘存储容量要大得多，大约有6TB。每个索引文档都有“日期”字段，我的搜索用例的80%发生在过去两年(过去两年的数量约为800 is )。因此，我们的想法是:强制ElasticSearch将过去两年的文档存储在分布在高性能盒之间的碎片上，而其余的数据(2年以上)存储在分布在低性能框之间的碎片上。问题是:如何配置ES集群来实现这一点？

浏览 4提问于2014-04-02得票数 1

回答已采纳

1回答

如何在不影响性能、可扩展性和避免弹性搜索的切分效果的前提下，获得更好的相关性。

elasticsearch、lucene、sharding、tf-idf、relevance

假设我有一个很大的索引，包含5亿个文档，默认情况下，ES创建5个主碎片，原因如下，我也使用相同的设置。Performance:-在没有文档(在我的用例中为1亿)的碎片中搜索的时间将比只有一个拥有大量文档的碎片(5亿)更少。此外，还允许跨碎片分发和并行操作。但是当我们在默认情况下搜索时，它只会变成1碎片，并给出结果。在这种情况下，相关性是不准确的(因为以色列国防军受到了很大的影响)，如果我匹配的文档位于另一个碎片上，它

浏览 0提问于2019-05-21得票数 1

回答已采纳

1回答

Gensim的相似性:它是如何工作的？

python、nlp、gensim

如何创建不同的碎片，当只查找top-N类似的文档时，它会提高性能吗？更广泛地说，是否有关于gensim内部结构的文档？

浏览 1提问于2017-07-27得票数 1

回答已采纳

1回答

Elasticsearch切分和副本搜索性能

elasticsearch、elastic-stack

我试图了解搜索查询是如何区分主碎片和副本碎片的。我不清楚为什么有人说复制的好处之一是提高搜索性能。但据我所知，主碎片可以像副本一样提供搜索查询。带10个碎片的索引是否具有5个碎片索引和1个副本索引等性能？

浏览 0提问于2020-05-22得票数 3

回答已采纳

1回答

在同一数据上有大ES指数或几个小ES指数的好处是什么？

elasticsearch、lucene

如果我有像1T这样的文档，并且我想每次都查询整个文档，。只有一个大索引(shard=100)或多个小索引(shard=100/ index _num)的好处是什么？

浏览 2提问于2014-12-25得票数 1

回答已采纳

1回答

ElasticSearch --我可以将连接数据类型用于多到一个关系案例(类似于sql)吗？

elasticsearch

我知道非规范化文档是首选的，但是在我的例子中，同步逻辑并不是直接的。我的情况如下：使用是否可取？

浏览 3提问于2022-03-08得票数 0

1回答

如何禁用弹性搜索的父映射和子映射中的路由？

elasticsearch

我已经显式地禁用了Elasticsearch(ES)映射的路由： "chow-clfg": { "type": "chow-demo" "_routing": { }, "path": "clfg" "dynamic": "true",

浏览 1提问于2012-12-24得票数 3

回答已采纳

1回答

Mongoid + rails 4-实现用户&如下:嵌入式模型的统一验证

ruby-on-rails、ruby、mongodb、mongoid

我使用的是Rails 4.2.1和Mongoid4.0.0{ ... { username: }}我尝试过两种方法：我将validates :username, presence: tru

浏览 4提问于2015-07-19得票数 1

回答已采纳

2回答

当读取/写入切分的MongoDB中的单个碎片时，会出现什么问题？

mongodb、sharding

在正式的MongoDB文档中，有这样的说法：“为了执行读或写操作，客户永远不应该连接到单个碎片。”我确实尝试过将一些数据写到单个的碎片节点上，但是它并不是一个很大的数据集(当然不是一个需要切分的数据集)。这是否会导致我尚未意识到的其他问题？或者仅仅因为性能原因，客户不愿意这么做吗？

浏览 2提问于2021-07-19得票数 0

回答已采纳

2回答

Elasticsearch:如何优化索引性能？

amazon-web-services、elasticsearch、amazon-ec2

当数据存储在碎片中时，数据量会相对较大(~1TB)。个内存优化专用主节点有什么方法可以提高集群的索引性能吗

浏览 0提问于2018-02-21得票数 0

1回答

MongoDB -DB/集合碎片级别

performance、mongodb

最近，我的一个收藏品出现了性能问题。注意:我说的是“内部”碎片，比如文件中的空格，而不是文件在磁盘上传播时的“外部”碎片。

浏览 0提问于2014-07-20得票数 1

回答已采纳

1回答

添加新服务器时的RavenDb切分行为

ravendb

我已经根据文档id将我的数据库分成了几个服务器。现在我看到服务器超载了，我想添加一个新的碎片。我想，在默认情况下，RavenDb的循环robbin算法将继续将相同数量的新文档放到每个服务器上。有没有办法让RavenDb把新文档放到新服务器上，直到它的性能降低到两个当前服务器的性能为止？对我来说，重新思考是一个非常不可取的选择。

浏览 3提问于2014-10-19得票数 0

回答已采纳

1回答

为什么直接搜索MongoDB碎片的全文要比查看集群管理器(mongos)实例快得多？

mongodb、full-text-search、sharding

我对MongoDB中的全文搜索性能非常不满意，所以我一直在寻找盒子外的解决方案。由于在8台强大的机器上共享了2500万个文档的相对较少的集合(4个带有冗余的碎片)，我看到一些查询耗时10秒。在云雀上，我直接对碎片进行了10秒的查询，看起来芒戈斯正在向碎片发送查询，而不是并行的。在这4个碎片中，我看到一个碎片的搜索时间为2.5秒，另一个碎片的搜索时间为2秒以下。有人能确认这些对碎片的查询是连续运行的吗？或者提供其他解释？直接查询<em

浏览 1提问于2018-08-31得票数 16

1回答

APC碎片

apc、fragmentation

我的Wordpress网站有APC这是一件坏事吗？它会降低性能吗？

浏览 0提问于2010-10-16得票数 4

1回答

APC碎片的目标百分比限制

php、caching、apc

我已经看到系统在APC报告< 10%碎片的情况下运行得很愉快。我知道随着碎片化的增加，性能会下降，因为APC需要在周围打乱东西以找到空间。有没有人有一个好的经验法则，在预期总体性能开始显着下降之前，您应该将APC保持在较低的碎片化百分比？如果是这样的话，在这一点上，性能是逐渐线性下降到碎片化，还是性能跌落悬崖？

浏览 0提问于2012-10-18得票数 0

回答已采纳

1回答

通过拆分索引提高搜索性能

elasticsearch

在索引中，我们将其配置为具有35个主碎片和35个副本碎片(1:1)。由于我们将索引的预期数据的增加(我们目前每天索引大约100万个文档，可能会增加10倍)，我们正在考虑基于月份或季度将索引拆分为多个索引。被索引的文档能够被更新，但是大多数文档在一年后可能不会被索引。我的问题是，就扩展和提供更好的搜索性能而言，这看起来是否是一个合理的选择？或者，是否可以通过向集群添加更多节点来提高性能，即使集群变成了一个巨大的整体集群？感谢您提供的任何见解。

浏览 20提问于2021-04-21得票数 0

1回答