如何在python中加速Elasticsearch滚动

文章/答案/技术大牛

发布

1回答

python、elasticsearch

我需要通过es api获取一段时间的数据，并使用python对这些数据进行一些自定义分析，并在仪表板上显示结果。有没有什么方法可以更快地处理这些数据?我可以使用像redis这样的工具来保存结果并避免重复的工作吗？

浏览 8提问于2020-03-12得票数 1

1回答

使用记录超过10000的python从Elasticsearch结果编写CSV？

python、csv、elasticsearch

我可以使用这里提供的解决方案创建CSV：

浏览 4提问于2017-11-09得票数 0

回答已采纳

1回答

Elasticsearch:如何在没有HTTP 404错误的情况下搜索滚动？

elasticsearch

我正在尝试从Elasticsearch获取所有文档，以用于包含600k+文档的搜索查询。在python elasticsearch模块中，我执行以下操作： result = client.search(... scroll='1m') scroll_id = result['_scroll_id控制台报告成功滚动了大约200ms或大约7个滚动。然后我得到了HTTP404。如何在没有HTTP 404错误的情况下搜索滚动？

浏览 53提问于2021-02-02得票数 0

回答已采纳

1回答

如何获得所有文档类型的列表

python、elasticsearch

我在Python中使用Python进行搜索，我真的很喜欢它。但是，我不知道如何插入，是如何获得所有不同文档类型的列表。问题是，对于我来说，type字段与SQL中的表名所扮演的角色几乎相同，我想要做的就是以某种方式模仿SHOW TABLES命令。

浏览 5提问于2015-06-19得票数 0

回答已采纳

1回答

如何备份Elasticsearch索引并使用Python进行恢复？

python-3.x、elasticsearch

我们如何进行备份和恢复？我已经签出了几个库，并且我不能正确地进行备份和恢复。

浏览 0提问于2019-01-02得票数 0

2回答

使用Python API在Elasticsearch中滚动时出现分割错误

python、elasticsearch

我正在使用Elasticsearch Python API根据我存储在ES集群中的数据来计算一些东西。在我的计算中，我需要调用所有满足特定条件的文档，并从中获取特定信息。我已经写了一个Python脚本，它使用ES-Python为我做这项工作。然而，总是在滚动超过1400次之后，脚本退出并显示错误"Segmentation fault (core dumped)“。我尝试将滚动大小增加到10000，但仍然发生同样的问题。下面是我进行滚

浏览 31提问于2017-01-23得票数 1

1回答

错误:没有名为Elasticsearch的模块

python-3.x、elasticsearch、centos

(es_v)$ which java(es_v)$ which python(es_v)$ python --version我运行了配置命令并运行了服务：sudo /bin

浏览 4提问于2018-06-16得票数 3

1回答

ElasticSearch切片滚动限制(python)

python、elasticsearch、scroll、size

我正在处理一个巨大的(500万个文档) ElasticSearch数据库，我需要使用python中的切片滚动来获取数据。问题是:是否有一些方法来限制(设置size参数)切片卷轴？在我的脚本中，我使用切片滚动和python多处理，如下所示：https://github.com/elastic/elasticsearch-dsl-py/issues/817 有没有什么方法可以使用切片卷轴来获取例如

浏览 24提问于2020-01-17得票数 0

1回答

如何使用Javascript、CSS和HTML加速移动中的滑动和滚动？

javascript、html、css、vue.js

我对iPhone设备中的懒惰滚动有麻烦。这个应用程序是用Vue.js构建的。我使用Javascript提高了桌面上的滚动速度，但在移动设备上由于滑动而不起作用。有没有人知道如何在移动设备上加速滑动和滚动？

浏览 11提问于2019-01-08得票数 0

回答已采纳

4回答

使用python客户端的elasticsearch滚动

python、elasticsearch、pyelasticsearch

在elasticsearch中滚动时，在每个滚动中提供最新的scroll_id非常重要 rs = es.search(index=['tweets-2014-04-12','tweets-2014-04-13'], tweets += rs[&

浏览 4提问于2014-07-28得票数 7

6回答

如何收集不同节点的访问日志？

java、logging、cluster-computing、hybris

SAP Hybris不会将这些信息存储在数据库中，因此有必要搜索日志。每个节点都有一个类似log/tomcat/access.2018-11-22.log的文件。手动检查每个文件是不合理的。

浏览 5提问于2018-11-22得票数 0

1回答

Python如何搜索目录中的所有文件

python、file、search、directory、word

我想在一个目录的所有文件中搜索一个单词。TestFile1.txt ...TestFile5.txt 假设它们中只有一个包含写在其中的特定单词Test。我怎么才能搜索到所有的单词，直到找到包含该单词的单词？

浏览 0提问于2019-07-07得票数 1

1回答

如何使用Python从elasticsearch中删除获取的文档

python、elasticsearch

我正在使用scroll api从elasticsearch获取一些文档。我使用python来执行此操作。我想问一下如何在python中删除从elasticsearch中获取的文档？

浏览 21提问于2021-01-18得票数 1

回答已采纳

1回答

python的elasticsearch-py 2.4.0不包含delete_by_query()函数。

python、django、elasticsearch

python的elasticsearch-py 2.4.0不包含delete_by_query()函数。那么如何在elasticsearch 2.4.0库中删除基于查询的文档呢？

浏览 17提问于2016-09-24得票数 0

4回答

通过批量API、扫描和滚动对Elastic search进行重建索引

python、elasticsearch、indexing、reindex、elasticsearch-bulk-api

我能够从Python API获得滚动ID：query = {"query":{"match_all":{知道滚动id能给我带来什么呢？文档中说要使用"Bulk API“，但我不知道scoll_id是如何包含在其中的，这有点令人困惑。

浏览 9提问于2014-10-15得票数 12

2回答

在AMP中滚动时更改css

scroll、amp-html

根据我在移动加速页面文档中发现的信息，有两个组件可以响应滚动：和。

浏览 2提问于2017-08-27得票数 1

1回答

复制iOS 5股票小部件

objective-c、ios、cocoa-touch、uiscrollview

有谁知道如何在iOS 5上复制通知中心的滚动股票报价器？另外，我如何处理无限滚动？谢谢你的建议。

浏览 3提问于2012-03-06得票数 1

1回答

elasticsearch.exceptions.NotFoundError: NotFoundError(404，u' search _phase_execution_exception'，u‘’No

elasticsearch、elasticsearch-helpers

我试图从Elasticsearch索引中检索大量文档，对elasticsearch的查询是一个简单的存在查询。最初，我有25分钟的scroll时间，但是当我收到这个错误时，我决定将它增加到1天，以确定它是否真的是滚动时间的问题，但我仍然会得到这个错误。我在互联网上发现的一切都是因为滚动时间，但我已经看到情况并非如此，因为我已经将它设置为1天，并且在大约5分钟后仍然会弹出错误。 File "/Library/Frame

浏览 28提问于2022-05-26得票数 1

1回答

Elasticsearch整个文档搜索(Smart Search)

elasticsearch、elasticsearch-dsl

我想要编写一个查询，以便能够在Elasticsearch索引中的所有字段中进行搜索。我使用批量API将数据插入到es中，并且在索引时没有选择任何特定的分析器。我想创建一个查询，它搜索elasticsearch中所有字段中的一段文本，并将包含该文本的所有文档作为某个字段中的子字符串返回。关于如何在这样的动态映射字段中搜索字符串的任何建议。如果不是这样，那么我如何在ElasticSearch7.4中没有

浏览 2提问于2020-04-30得票数 0

1回答

关闭闪屏的Android硬件加速

java、android、splash-screen、hardware-acceleration

将android:hardwareAccelerated="true"添加到应用程序元素可以显著改善其用户体验-应用程序使用的是长列表，当我们启用硬件加速时，这些列表中的滚动会更加流畅。一旦我们禁用了硬件加速，闪屏看起来很好。有没有办法只禁用闪屏的硬件加速？我们如何在Java类中做到这一点呢？

浏览 1提问于2015-08-11得票数 0

点击加载更多