Logstash无法添加字段吗？

文章/答案/技术大牛

发布

0回答

elasticsearch、logstash、logstash-grok

我一直在使用logstash来读取一些数据库恢复日志。下面是几行示例记录。GREEDYDATA:Mis}" mutate { }我想将从我的记录的最后一行提取的数据"DATETIME“添加到消息中，同时将其他消息添加到索引中。但是，它无法成功添加该字段。

浏览 5提问于2016-07-12得票数 0

回答已采纳

2回答

Logstash不写入日志

logstash

当我跑的时候它不会将任何内容写入/var/log/logstash/logstash.logls -l logstash

浏览 3提问于2016-08-11得票数 1

回答已采纳

1回答

将现有的字段映射转换为geoip

elasticsearch、logstash

我已经使用logstash解析了一个日志文件，并将其放入elasticsearch中。我有一个名为IP的字段，它现在被映射为一个字符串。我希望将elasticsearch中现有的映射转换为geoip，而不再次运行logstash。我在elasticsearch中有几百万张这个领域的记录。

浏览 5提问于2015-11-04得票数 2

回答已采纳

1回答

是否有通过Logstash将JSON数据记录到Elasticsearch的附加值？

elasticsearch、logstash

我对Logstash没有太多的经验，我想知道通过它记录JSON数据是否有附加价值(而不是直接将它们发送到Elasticsearch)。我能想到的唯一优势是日志可以一致地发送到stdout (然后由syslog获取)，然后一致地发送到Logstash (作为syslog)进行分析(例如，Logstash知道来自应用程序myapp.py的数据发送原始还有其他优势可以使用Logstash作为中间层吗？(安全性方面在这个上下文中并不重要)。

浏览 0提问于2019-03-10得票数 0

3回答

无法在logstash中读取CSV文件，因为它自己关闭

elasticsearch、logstash、kibana、elk

我已经启动并运行了elasticsearch和Kibana，我希望使用logstash读取日志，因此我已经将csv文件作为logstash.conf文件中的输入传递给它，但它不会自动读取日志和关闭。下面是运行logstash命令的方式：logstash.conf file{Sending Logstas

浏览 11提问于2022-03-16得票数 0

1回答

如何在logstash字段中添加机器的ip地址？

logstash、logstash-grok、logstash-configuration、elastic-stack

Logstash在"host“字段中返回机器的主机名。我们所有的服务器都有相同的主机名，所以很难从服务器中区分数据。无法更改服务器的主机名，因为我们使用的是amazon AME服务器。是否可以将IP添加到logstash中的任何字段？

浏览 0提问于2016-01-07得票数 0

3回答

无法搜索Kibana \ Unindexed字段

elasticsearch、logstash、kibana

我已经生成了日志，将日志转发到logstash，日志是JSON格式的，因此它们被直接推入ES，只有Logstash中的JSON过滤器，连接并启动指向ES的Kibana。Logstash Config： json { } 现在，我为每天的日志创建了索引，Kibana愉快地显示了所有索引中的所有日志我的问题是:在Kibana中，日志中有许多字段没有启用/索引以进行过滤。当我试图将它们添加到Kiban

浏览 5提问于2015-05-27得票数 29

回答已采纳

2回答

在弹性搜索文档中@是什么意思？

elasticsearch、logstash、kibana、elastic-stack

下面是弹性搜索中的一个文档的例子： "_index": "logstash-2018.02.17", "_id": "0PknomEBajxXe2bTzwxm

浏览 1提问于2018-02-17得票数 4

回答已采纳

1回答

使用默认目标时日志存储日期解析失败

date、parsing、elasticsearch、logstash

我无法使用logstash插件解析日期字段，我的配置如下所示： csv { columns无法将事件索引到Elasticsearch。mapper_parsing_exception，“原因”“=>”未能解析received_date，“=>”格式无效：\"2018-06-19 11:51:15\“格式错误为”11:51:15“} 如

浏览 0提问于2018-06-19得票数 0

3回答

我可以从Logstash中删除消息字段吗？

elasticsearch、logstash

我有一个基本的Logstash -> Elasticsearch设置，在logstash筛选器完成它的工作后，它证明' message‘字段不是必需的-将这个原始消息字段存储到elasticsearch只是将不必要的数据添加到存储imo中。我可以安全地删除这个字段吗?它会给ES带来任何麻烦吗？欢迎您的建议或阅读，谢谢大家。

浏览 18提问于2014-09-24得票数 21

回答已采纳

1回答

Logback losghstash附加器添加自己的字段

logstash、logback

我需要使用: logstash Logback Encoder从多个微服务将应用程序日志直接发送到Logstash。问题是，当我发送日志时，logstash收到的日志如下： { "_type": "_doc", ] "highlight&

浏览 45提问于2021-01-21得票数 0

1回答

@timestamp字段在elasticsearch中未标识

elasticsearch、kibana、date-formatting

在kibana中添加索引时，时间字段不显示。我已经在其他索引中使用了相同格式的时间戳，它没有造成任何问题。

浏览 6提问于2017-07-25得票数 0

1回答

我的_rev字段在什么地方？

elasticsearch、couchdb、logstash

如何在elasticsearch索引中保留couchdb文档中的_rev字段。我使用logstash将数据从couchdb添加到ES。在我的logstash.config文件中，我只有输入和输出部分。index => "users_index" } 我可以在我的elasticsearch索引的_source字段下看到_id和我的couchdb数据库中的其他字段</em

浏览 5提问于2016-03-22得票数 0

1回答

创建索引时的Logstash问题--删除基班纳中的.raw字段

elasticsearch、logstash、kibana

如果我使用默认索引，即logstash-*，我可以在kibana中看到.raw字段。但是，如果我在logstash中的conf文件中创建了一个新的索引，如 elasticsearch { index=> "batchjob-*"} 然后，新索引无法配置.raw字段。有什么解决办法吗？非常感谢。

浏览 3提问于2016-06-06得票数 1

回答已采纳

1回答

访问Logstash上的自定义Filebeat标记

logstash、logstash-forwarder、filebeat

我是第一次接触filebeat和logstash。想知道如何访问自定义字段，插入使用文件节拍在logstash结束。prospectors: - /root/logstash/log/*.log fields:samplevar: 1004 hosts: ["172.31.1.162:5044"]现在如何访问

浏览 5提问于2016-06-07得票数 1

2回答

在logstash中将csv解析为kafka时出错

elasticsearch、logstash、logstash-configuration

.>, :backtrace=>["/usr/share/logstash/logstash-core/lib/logstash/settings.rb:530:in `validate'", "/usr/share/logstash/logstash-core/lib/logstash/setti

浏览 238提问于2021-05-24得票数 0

2回答

使用pipelines.yml的Logstash* Docker*

logstash、pipeline

我一直在尝试使用pipelines.yml让Logstash Docker容器(docker.elastic.co/logstash/logstash-oss:6.0.0)与多个管道一起运行，但我无法让它运行下面是我的Dockerfile：RUN rm -f /usr/share/logstash&

浏览 1提问于2017-11-17得票数 0

1回答

从filebeat向logstash发送json消息

logstash、filebeat

我想通过filebeat向logstash发送json格式的消息。中编写以下代码来过滤json中的每个键值： json.keys_under_root: true json.message_key: message 但是，无法处理多行还有，我能去掉默认添加到filebeat中的字段吗？我想从filebeat中删除元数据。我只想接收我从logstash发送的信息。就像在文件里一样。有没有办法？？

浏览 34提问于2019-04-23得票数 0

1回答

显示错误数据/结果的ELK仪表板

elasticsearch、logstash、kibana

你们中有谁对设置kibana来分析apache访问日志有什么看法吗?他们可以给我一个关于如何设置有表现力的仪表板的提示，或者给我一个示例仪表板作为模型？谢谢你的帮助、时间和问候，塞巴斯蒂安

浏览 1提问于2015-01-12得票数 0

回答已采纳

3回答

logstash + elasticsearch | bug？

elasticsearch、logstash

它似乎无法连接到Elasticsearch本地节点。但是为什么呢？logstash]# bin/logstash -f logstash_exabgp.cfg --debug --verboseGrok loading patterns from file {:path=&

浏览 0提问于2014-12-05得票数 1

点击加载更多