腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
3
回答
在
Elasticsearch
中
插入
多个
文档
-
批量
文档
格式化
程序
、
、
如何
批量
格式化
我的JSON文件以便摄取到
Elasticsearch
? 我正在尝试将一些NOAA数据摄取到
Elasticsearch
中
,并且一直
在
使用NOAA Python SDK。identifier": "NWS-IDP-PROD-4179040-3536147", "sender": "w-nws.webmaster@noaa.gov", "sent": 这个脚本解决了我遇到的一些
格式
浏览 85
提问于2020-05-04
得票数 2
回答已采纳
1
回答
在
写线程队列
中
,
elasticsearch
占用了多少空间?
、
、
、
当在
Elasticsearch
中
批量
插入
40万个
文档
时,
多个
写线程同时工作,当Bulkinsert1000个
文档
时,一个写线程运行。根据大容量
插入
的大小,它似乎在内部被分成几个任务并加载到等待队列
中
。我的预测正确吗?
浏览 8
提问于2022-03-23
得票数 0
回答已采纳
2
回答
使用rest客户端的
Elasticsearch
批量
插入
、
、
为了提高性能,我希望将
文档
批量
发送到
Elasticsearch
,而不是逐个发送。我在上读到过有关elastic bulk API的文章我想我必须准备这里描述的请求体(),并将其传递给restclient的performRequest方法?是否有其他方法,例如,ES java rest-c
浏览 3
提问于2017-04-11
得票数 6
回答已采纳
2
回答
Spring1.7(
ElasticSearch
Data
ElasticSearch
)通过查询更新
文档
需要花费大量时间
、
、
、
我的应用
程序
允许
在
单个请求
中
更新
多个
elasticsearch
documents。 我使用
ElasticSearch
BulkRequestBuilder
批量
更新所有此类
文档
。bulkRequestBuilder.add(updateRequest);bulkRequestBuilder.get(); 所有
文档
都是用valueToBeUpdat
浏览 53
提问于2019-01-14
得票数 0
回答已采纳
1
回答
在
NodeJs
中
更改
elasticsearch
的流
、
、
、
、
其目的是
在
elasticsearch
上同步来自某些集合的字段。对于mongodb的每个变化,这也应该在
elasticsearch
上实现。我看过不同的包装。例如,River。数据必须与
Elasticsearch
上的每个更改(
插入
、更新、删除)同步。
多个
集合,但每个集合都不同(每个集合只有特定的字段)。
浏览 4
提问于2021-02-25
得票数 1
1
回答
如何使用Python API
在
Elastic Search
中
创建大容量索引
、
、
我正在尝试使用Python API
在
elastic search
中
批量
插入
大量
文档
。import
elasticsearch
yield op_dict res = bulk(es, action_gen(), st
浏览 1
提问于2015-02-06
得票数 1
1
回答
如何在
elasticsearch
上只添加新
文档
或更改
文档
?
场景:脚本从外部API中提取数据,将结果
格式化
为字典/json对象,并将数据推送到
elasticsearch
。该脚本计划定期运行。我的方法:来自的记录有一个ID,我通过执行搜索查询来检查它们是否存在于
elasticsearch
中
。我列出了
在
elasticsearch</
浏览 5
提问于2020-08-25
得票数 0
回答已采纳
1
回答
如何在弹性搜索
中
批量
插入
,忽略进程
中
可能发生的所有错误?
、
、
我使用的是
Elasticsearch
版本6.8。 import csv from
elasticsearch
import helpersdoc_type=doc_type)raise BulkIndexError("%i document(s) failed to index.
浏览 1
提问于2020-01-01
得票数 3
1
回答
如何避免
elasticsearch
大容量API
中
每个
文档
的索引
、
、
我使用curl将apache作为
文档
添加到
elasticsearch
中
,使用大容量API。我的猜测是,对于每一行日志
文档
行,lucene索引都会更新它的索引。但我不需要
elasticsearch
来做到这一点。我完全可以先添加所有 logrow
文档
,然后更新索引。 这个是可能的吗?
浏览 3
提问于2017-11-17
得票数 1
3
回答
使用PyEs以块为单位的
Elasticsearch
大容量索引
、
、
我有一个简单的python脚本,用于索引包含100万行的CSV文件:from pyes import * for row in reader: data = {"name":row[5]} conn.index(data
浏览 0
提问于2012-01-25
得票数 4
回答已采纳
1
回答
ElasticSearch
异常:推理进程队列已满。使用Python执行大容量
插入
时无法执行命令
、
、
、
我试图
在
elasticsearch
索引中使用Python进行
批量
插入
,该索引通过ingest管道使用nlp模型将文本转换为嵌入。但是并不是所有的
文档
都被
插入
,只有2000个
文档
在
40k
文档
中被
插入
。_index': 'index_name', '_id': '40962', 'status': 500, 'error&
浏览 16
提问于2022-08-02
得票数 0
回答已采纳
1
回答
如果不存在
Elasticsearch
插入
单键,则不影响其他键
、
在
我的一些
文档
中
,我有一个密钥作为school。比如说,文件是: "id" : "123", "school" : "Public"现在,school并不存在于所有
文档
中
。我想在没有默认字符串的所有
文档
中
插入
school键。 我使用的是
Elasticsea
浏览 1
提问于2017-09-11
得票数 0
回答已采纳
2
回答
Elasticsearch
文档
的最大大小是多少?
我读到了关于Lucene被限制为2 2Gb
文档
的说明。
在
Elasticsearch
中
可以索引的
文档
大小是否有其他限制?
浏览 2
提问于2015-03-04
得票数 40
回答已采纳
1
回答
用logstash更新/删除现有日志条目
、
有没有办法告诉logstash删除/更新
Elasticsearch
中
的一些日志条目?看起来Logstash可以对
文档
进行索引,但我没有找到它可以执行更新/删除操作的证据。如果可能的话,我们可以想象我们可以
在
Elasticsearch
上“记录”操作,并使用Logstash
在
Elasticsearch
中
批量
输出它们。这样,
程序
员就不必创建一种机制来对
Elasticsearch
进行<e
浏览 4
提问于2015-04-17
得票数 7
回答已采纳
1
回答
PHP Ruflin/Elastica -如何在海量数据
插入
上刷新索引
、
、
、
我需要向
Elasticsearch
数据库
插入
大约150万个
文档
。我是根据通过PHP库Elastica来实现的。我想知道是否可以
在
批量
插入
的最后使用call $elasticaType->getIndex()->refresh();命令,以及它是否比每次
批量
发送后调用$elasticaType->getIndex是否可以将1500000个
文档
插入
到
elasticsearch
,然后调用$elastica
浏览 8
提问于2018-10-12
得票数 0
1
回答
在
elasticsearch
中
插入
多个
文档
、
我必须在elastic
中
插入
一个json数组。链接
中
接受的答案建议
在
每个json条目之前
插入
一个标题行。答案是2岁了,市场上有没有更好的解决方案?我需要手动编辑我的json文件吗?
浏览 1
提问于2015-11-29
得票数 5
回答已采纳
1
回答
AWS弹性搜索
批量
插入
延迟大幅增加
、
、
我
在
一个t2.小节点和10 EBS的EBS卷上使用AWS。每5分钟我索引大约5000份文件*。对于每个
文档
,我都要手动传递唯一的ID,因为大多数
文档
都会被更新,所以几乎所有
文档
的都可以是版本2或3。还值得一提的是,我每天运行一个delete_by_query操作来删除一个星期以上的
文档
。我用的是<em
浏览 0
提问于2019-09-04
得票数 0
回答已采纳
1
回答
使用Google函数从Firestore
批量
写入
ElasticSearch
、
、
、
每当用户
文档
被创建或更新到用户集合时,云函数就会接收用户
文档
,并将其保存在El154搜索
中
。 我开始关注这个体系结构的可伸缩性。例如,假设数千个云函数开始一次向
Elasticsearch
写入
文档
,那么
Elasticsearch
将处理这个负载。谷歌云有更好的解决方案吗?例如,这些云函数能否
在
队列
中
写入用户
文档
,并在队列的另一端具有云功能,获取100个
文档
并将它们大容量写入
Elasticsearch
。
浏览 2
提问于2021-07-17
得票数 1
回答已采纳
1
回答
ElasticSearch
:原子
批量
更新
是否可以
在
ElasticSearch
中进行
批量
原子更新?有没有其他方法可以自动更新
多个
文档
?也就是说,要么所有的更新都发生,要么一个都不发生。
浏览 1
提问于2018-09-27
得票数 1
1
回答
批量
删除和
批量
更新
、
我
在
文档
中看到
批量
插入
,但没有
批量
删除或
批量
更新。有没有办法使用Yii的db API实现
批量
更新和删除?最好的方法是什么?我希望避免使用循环和发出
多个
请求。另外,我使用的是Yii 1.0。我注意到1.0没有
文档
,这些方法能在1.0
中
工作吗?
浏览 1
提问于2017-04-27
得票数 2
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
用python读取Excel数据,并插入到MySQL数据库
Elasticsearch 7.x文档基本操作(CRUD)
在Python中使用Elasticsearch
东南亚“美团” Grab 的搜索索引优化之法
一个神器的批处理办公软件工具箱.exe
热门
标签
更多标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
活动推荐
运营活动
广告
关闭
领券