在elasticsearch logstash输出中创建/更新对象数组
在elasticsearch logstash输出中创建/更新对象数组，可以通过使用Logstash的Elasticsearch输出插件来实现。该插件允许将数据发送到Elasticsearch中进行索引和存储。
要在Logstash中创建/更新对象数组，可以按照以下步骤进行操作：
- 配置Logstash的输入插件，以获取要处理的数据。例如，可以使用Filebeat插件监控日志文件，并将其发送到Logstash进行处理。
- 在Logstash的过滤器部分，使用相应的过滤器插件对数据进行处理。对于创建/更新对象数组，可以使用mutate插件的add_field选项。
- 例如，假设要创建一个名为"my_array"的对象数组，并将其添加到已有的事件中，可以使用以下配置：
- 例如，假设要创建一个名为"my_array"的对象数组，并将其添加到已有的事件中，可以使用以下配置：
- 这将在每个事件中创建一个空的"my_array"字段。
- 在Logstash的输出部分，使用Elasticsearch输出插件将处理后的数据发送到Elasticsearch进行索引和存储。
- 例如，可以使用以下配置将数据发送到Elasticsearch的索引"my_index"中：
- 例如，可以使用以下配置将数据发送到Elasticsearch的索引"my_index"中：
- 这将把处理后的数据发送到Elasticsearch的"my_index"索引中。
通过以上步骤，你可以在elasticsearch logstash输出中创建/更新对象数组。请注意，这只是一个简单的示例，实际应用中可能需要根据具体需求进行更复杂的配置和处理。
关于Logstash和Elasticsearch的更多详细信息和用法，请参考腾讯云的相关产品和文档：
- Logstash产品介绍：Logstash
- Elasticsearch产品介绍：Elasticsearch
- Logstash配置指南：Logstash配置指南
- Elasticsearch文档：Elasticsearch文档
相关·内容
1回答
在elasticsearch logstash输出中创建/更新对象数组
elasticsearch、groovy、logstash、elastic-stack
我正面临一个使用弹性搜索输出和logstash的问题。guid":"someguid", "field1":"val1", }我希望当更新发生时，具有id的文档已经存在于elasticsearch中。以下是我希望在两次插入后在</em
浏览 13提问于2016-08-29得票数 0
回答已采纳
1回答
用logstash更新/删除现有日志条目
elasticsearch、logstash
有没有办法告诉logstash删除/更新Elasticsearch中的一些日志条目？看起来Logstash可以对文档进行索引，但我没有找到它可以执行更新/删除操作的证据。如果可能的话，我们可以想象我们可以在Elasticsearch上“记录”操作，并使用Logstash在Elasticsearch中批量输出它们。这样，程序员就不必创建<
浏览 4提问于2015-04-17得票数 7
回答已采纳
2回答
如何将其他jars传递给LogStash类路径
elasticsearch、logstash
我已经缩小了从供应商文件夹中删除ElasticSearch jars的LogStash的安装范围。但是，这些jars在机器上可用，但位于不同的文件夹中。我在LS1.0.14 ()的文档中找到了我可以运行
CLASSPATH=$(ls /opt/elasticsearch/lib/*.jar | tr '\n' ':') /opt/logstash
浏览 3提问于2014-05-07得票数 1
3回答
如何停止logstash在ElasticSearch中创建默认映射
elasticsearch、logstash
我正在使用logstash将日志提供给ElasticSearch。，它就会在ES中创建一个映射(日志)，如下所示。创建此映射？更新：正如John Petrone在下面所述，一旦定义了映射，就必须确保您的文档符合该映射。在我的例子中，我定义了一个"type: nested“的映射，但是logstash<
浏览 63提问于2014-07-24得票数 19
回答已采纳
1回答
在Docker构建期间定义elasticsearch映射
docker、elasticsearch
我有一个MySQL，Logstash和ES设置，但我需要将一些字段设置为关键字类型，而不是文本。我读到过在Logstash (logstash.conf)中无法做到这一点，因此需要在ES中完成。check the breaking changes documentation for removed settings", 我使用docker-compose一次性启动同一网络下的所有服务，因此必须在logstashRUN mkdir /data &
浏览 27提问于2020-01-15得票数 1
2回答
Logstash动态分配模板
logstash
我读到有可能为索引指定动态名称，如下所示： cluster => "logstash" }elasticsearch {
浏览 1提问于2014-11-04得票数 3
2回答
在与AWS弹性服务连接时抛出401日志
amazon-web-services、elasticsearch、logstash、aws-elasticsearch
所有这些都适用于Kibana或常规cURL调用，但是logstash在向https://<my_es_hostname>/_license发送带有401响应的请求时会失败。当我尝试在浏览器中点击它时，我得到了{"Message":"Your request: '/_license' is not allowed."}下面是从logstash获得的示例日志：
[INFO ] 2021-06-02 11:40:18.
浏览 17提问于2021-06-02得票数 6
回答已采纳
1回答
如何在使用Logstash时自动更新Elasticsearch索引
elasticsearch、logstash
我创建了两个Docker容器。一个基于Elasticsearch，另一个基于Logstash。我对容器所做的唯一改变是包含了配置文件。我在推送到git时会自动构建它们。我想自动化部署，但是，我不能，因为每当更改模板时，都需要重新创建索引。 我设置了Logstash来管理Elasticsearch模板。.conf文件的输出配置如下： output { hosts => [&quo
浏览 34提问于2021-08-23得票数 0
1回答
Elasticsseach不能将非对象映射与对象映射合并
elasticsearch、logstash
不知何故，在Elasticsearch映射中定义一个并导入数据是可能的，但两者都不能。在JSON数据中，位置字段如下所示 "lat": 41.12,}
因为我们需要"lon“而不是"lng”，所以我们在Logstash配置中使用这个但是，如果我在创建索引时在Elasticsearc
浏览 1提问于2021-06-23得票数 1
回答已采纳
2回答
如何正确配置LogStash以读取RabbitMQ并将输出写入文件？
docker、elasticsearch、rabbitmq、logstash
我想使用LogStash读取RabbitMQ发布的消息，并将响应作为每个文件一行JSON写入本地文件夹中。 我已经安装了Docker桌面并拉取了LogStash docker镜像。我创建了一个包含以下logstash.conf文件的config文件夹 #logstash.conf rabbitmq{ portCMD中写docker run --rm -it -v C:&
浏览 241提问于2019-10-16得票数 0
1回答
X& Logstash -没有输出到elasticsearch
elasticsearch、logstash、filebeat、xpack
现在，我希望logstash通过任何节拍的管道到elasticsearch。
07:52:53.807 [main>worker0]调试logstash</em
浏览 4提问于2017-04-11得票数 1
回答已采纳
5回答
无法将elasticsearch连接到logstash
logstash、kibana
我正在尝试将elasticsearch连接到集中式logstash聚合器上的logstash这是我在e
浏览 3提问于2013-10-31得票数 1
2回答
使用Logstash+ logstash forwarder+ kibana+Elasticsearch自定义日志
elasticsearch、logstash、kibana
我配置了Logstash+日志转发器+ kibana + Elasticsearch。它可以处理系统日志，比如Apache错误日志和syslogs。
浏览 3提问于2014-09-05得票数 0
1回答
使用logstash将一台机器中的日志加载到elasticsearch中的另一台计算机中的安装程序
elasticsearch、amazon-ec2、logstash
/in/M1" }现在，我们在不同的EC2机器( M2 )上运行elasticsearch，我需要使用logstash将日志从M1传输到M2中的elasticsearch。我使用了以下输出配置： stdout { codec => rubydebug }
elasticsearch {
浏览 0提问于2017-05-18得票数 0
回答已采纳
2回答
如何确认logstash已处理日志并送入ES
elasticsearch、logstash、logstash-grok
我已经将我的Logstash配置为从路径获取日志。elasticsearch { }当我启动logstash时，下面是输出。[root@astroELK logstash]# bin/logstash -f /etc/logstash/conf.d/astro_pdl.conf
浏览 9提问于2016-05-05得票数 0
1回答
如何在弹性搜索中匹配两个索引之间的数据
elasticsearch、indexing、logstash、match
我希望在输入netflow索引时匹配数据，并将其与其他索引匹配，如果存在匹配，我希望更改数据并添加客户id。有什么想法吗？感谢您的建议
浏览 1提问于2020-10-14得票数 0
1回答
Logstash管道没有显示在Kibana上，但是日志显示管道正在运行
elasticsearch、docker-compose、logstash、kibana、elasticsearch-8
我正在使用这个YAML文件：services: image: elasticsearch:8.4.0 volumes: environment: image: logst
浏览 7提问于2022-08-27得票数 0
2回答
Logstash配置:如何从ElasticSearch输出插件调用部分更新API？
elasticsearch、logstash
我试图创建一个数据管道，Logstash插件每5分钟通过SQL查询获取一些数据，ElasticSearch输出插件将输入插件中的数据放入ElasticSearch服务器。我希望这个输出插件能够部分更新ElasticSearch服务器中现有的文档。我的Logstash配置文件如下所示： jdbc {
jdbc_driver_library => "
浏览 1提问于2016-07-12得票数 4
回答已采纳
1回答
如何在ElasticSearch 5.3中启用匿名访问
elasticsearch、logstash、kibana、elastic-stack
我刚刚下载了ElasticSearch、LogStash和KibanaVersion5.3(直到几个小时前我还在使用5.2左右)。我在每个麋鹿上安装了XPack。从那以后我就不能再用洛什了。LogStash错误：...[2017-04-06T19:25:55,704][WARN ][logstash.outputs.elasticsearch] Attempted to re
浏览 13提问于2017-04-07得票数 1
1回答
如何在弹性搜索和日志存储中添加动态主机
elasticsearch、output、logstash-configuration
我有一个原型为我工作，设备发送日志，然后日志存储，解析它并放入elasticsearch。日志存储输出代码 :- if [type] == "json" { hosts => ["host1:9200","host2因此，我知道我可以在elasticsearch输出插件中给出5节点的数组IP / Hostn
浏览 2提问于2016-08-29得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频活动推荐
腾讯云开发者
