将日志发送到亚马逊ElasticSearch
是一种将日志数据发送到亚马逊ElasticSearch服务进行存储、索引和分析的操作。亚马逊ElasticSearch是一种托管式的分布式搜索和分析引擎，基于开源的Elasticsearch构建而成。
优势：
- 强大的搜索和分析功能：亚马逊ElasticSearch提供了丰富的搜索和分析功能，包括全文搜索、聚合分析、地理位置搜索等，可以帮助用户快速准确地查询和分析日志数据。
- 可扩展性和高可用性：亚马逊ElasticSearch支持自动扩展和负载均衡，可以根据需求动态调整集群规模，保证系统的可扩展性和高可用性。
- 安全性和权限控制：亚马逊ElasticSearch提供了细粒度的访问控制和权限管理，可以根据需要对不同用户和角色进行权限控制，确保数据的安全性。
- 丰富的生态系统：亚马逊ElasticSearch拥有庞大的开源社区支持，提供了丰富的插件和工具，可以方便地与其他工具和系统集成，满足各种需求。
应用场景：
- 日志分析：将日志数据发送到亚马逊ElasticSearch可以方便地进行日志分析，包括错误日志、访问日志、性能日志等，帮助用户快速定位和解决问题。
- 监控和报警：通过将监控数据发送到亚马逊ElasticSearch，可以实时监控系统的状态和性能指标，并设置相应的报警规则，及时发现和解决问题。
- 安全审计：将安全审计日志发送到亚马逊ElasticSearch，可以对系统的安全事件进行记录和分析，帮助用户及时发现和应对安全威胁。
- 业务分析：将业务数据发送到亚马逊ElasticSearch，可以进行数据分析和挖掘，帮助用户了解用户行为、产品趋势等，支持业务决策和优化。
推荐的腾讯云相关产品： 腾讯云提供了类似的日志服务产品，可以满足将日志发送到云端进行存储和分析的需求。推荐使用腾讯云的云原生日志服务CLS（Cloud Log Service）。CLS提供了高可用、高性能的日志采集、存储和分析能力，支持多种数据源和数据格式，可以方便地与其他腾讯云产品集成。详细信息请参考腾讯云CLS产品介绍：https://cloud.tencent.com/product/cls
相关·内容
因此，我们将日志(apache、tomcat等)存储在亚马逊CloudWatch日志中。我正在尝试使用Logstash从AWS中建立索引，并将它们发送到Elasticsearch/Kibana。
我似乎找不到一个插件来完成这个任务。有没有人尝试过并取得了成功？我不想要指标，只想要存储在AWS日志中的日志。
浏览 3提问于2015-09-01得票数 5
我是Elasticsearch世界的新手，我正在做一个项目，使用亚马逊Elasticsearch服务(Elasticsearch和Kibana)为来自不同亚马逊网络服务账户的所有CloudWatch日志提供一个日志分析系统。设置堆栈和路由CloudWatch日志是比较容易的部分。但我注意到，一个好的索引策略特别适用于以时间序列方式(在本例中为日志)的不可变数据。我的第一种方法是为每个日志组创建一个每日单个索引，并使用索引策略根据我的要求移动旧索引/使其过期。但我认为我将在我的Elasticsearch集群中处理许多微小的索引。然后我考虑将每个亚马逊网络服务账户的所有CloudWatch日志组
浏览 21提问于2021-05-07得票数 0
回答已采纳
2回答
我正在尝试设置Serilog，以便将日志从ASP.NET Core WebAPI发送到亚马逊OpenSearch的本地实例。我在控制台上看到了日志，但是在OpenSearch中没有显示任何内容。
安装了第三方图书馆：
Serilog.AspNetCore (6.0.0-dev-00265)Serilog.Enrichers.Environment (2.2.1-dev-00787)Serilog.Sinks.Elasticsearch (9.0.0-β7)
通过运行OpenSearch (没有安全插件)：
Program.cs
var logger = new LoggerConfigura
浏览 14提问于2022-07-05得票数 2
我已经设置了一些elasticsearch代理将日志发送到一个cloudwatch日志组，现在我要做的是将这些日志发送到elasticsearch集群(在ec2上)。理想情况下，我想要做的是编写一个lambda函数，该函数对其进行解析，然后将其发送给elasticsearch，但也可以在任何时候将消息写入日志组时触发lambda函数。是否有可能从cloudwatch日志组触发lambda？
浏览 4提问于2017-02-02得票数 4
回答已采纳
我编写了一个Lambda函数，将Cloudfront日志发送到Elasticsearch中。
工作如下：
Cloudfront将日志(压缩为.gz格式)发送到S3
桶发送一个由Lambda函数捕获的通知。
兰博达被触发了。解压缩日志并将它们发送到Elasticsearch中。
我使用这个与相结合。
Lambda确实被触发，但是只有一个部分的日志被发送到Elasticsearch，因为Lambda函数超时(我将超时设置为最大值:5分钟)。
我怀疑对.gz日志进行解压缩需要一些时间，但它最多只能是30 KB，这并不多，也不需要很长时间。
我受到这个的启发，下面是我的功能：
va
浏览 1提问于2018-06-11得票数 0
2回答
我试图从托管在多个ec2实例上的php应用程序中发送大量日志。
与采用在每台服务器上安装logstash和使用logstash转发程序将日志发送到日志服务器的标准方法不同，logstash解析日志并将其提供给elasticsearch，这样会更好地将apache/ nginx日志写入syslog并让rsylog将其发送到logstash，然后将其提供给elasticsearch吗？
长问题短--什么是更好的方法？
Apache/Nginx -> logstash-forwarder -> logstash -> redis (optional) -> elastic
浏览 2提问于2015-02-10得票数 1
回答已采纳
在非AWS管理的ElasticSearch中，当您将数据发送到要分批索引的节点时，可以将的值增加到大于默认100 In的值。
这将在elasticsearch.yml文件中完成。
在亚马逊OpenSearch中，您似乎没有修改opensearch.yml(?)的选项。那么，当您遇到这个问题时，您如何做出类似的更改呢？
是否可以在亚马逊OpenSearch中增加默认的100 it限制？
浏览 2提问于2021-10-23得票数 4
回答已采纳
地图从Kibana仪表板的LogStash丢失日志到正确的日期和时间
我已经配置了一个亚马逊ElasticSearch域(包括ElasticSearch服务和Kibana仪表板)。我的原木来源是豆茎环境。我已经在这个环境中安装了FileBeat，它将日志发送到EC2，后者配置了LogStash。然后，LogStash服务器将把日志发送到ES域端点。
这发生了一段时间没有问题，但当我检查昨天，我看到日志没有发送到专家大约4天。我把它修好了，现在的日志正在转移。丢失的日志仍然堆放在LogStash服务器中。
我修改了我的logstash.conf文件，以包括丢失的日志文件，但它们都在当前日期的Ki
浏览 3提问于2021-05-25得票数 0
有没有更好的解决方案来实现云服务日志到kibana，这里我使用的是来自亚马逊网络服务的ElasticSearch服务
浏览 0提问于2015-11-21得票数 0
我使用Spring后端来提供一些restful，并需要将所有请求响应日志记录到ElasticSearch中。
以下哪两种方法具有更好的性能？
使用SpringBootResponseBodyAdvice记录直接发送到ElasticSearch.的客户端的每个请求和响应的
将每个请求和响应记录到日志文件中，并使用ElasticSearch.和/或logstash将请求和响应发送到
浏览 6提问于2021-08-09得票数 0
回答已采纳
我正在使用EFK。应用的日志通过fluentD发送到elasticsearch，如何将fluentD的日志发送到elasticsearch？只需从fluentD读取日志文件并发送？ 有没有用例？
浏览 16提问于2019-06-12得票数 0
1回答
我对麋鹿是新手，我正在学习它。在我的项目中，他们从亚马逊S3 -> File导入数据，击败-> logstash ->弹性搜索-> Kibanna。
在logstash文件中，他们直接导入数据并发送给弹性搜索，如下所示，配置文件中没有提到任何索引，
output elasticsearch
{
hosts => ["http://localhost:9200"]
}
在亚马逊的s3中，我们有来自Salesforce的日志，将来我们将从多个来源实现。
在弹性搜索中，我可以看到41个索引(使用Get脚本)存在。假设如果我们在logstash中保持相
浏览 1提问于2020-04-08得票数 0
在Elasticsearch，uptil版本6.2中，通过在elasticsearch.yml文件中设置以下行，可以将安全审计发送到Elasticsearch索引 xpack.security.audit.outputs: [ index, logfile ]
https://www.elastic.co/guide/en/x-pack/current/auditing.html#audit-log-settings 在7.x版中，审核日志只能写入clustername_audit.json或控制台。 我的问题是如何将审计日志发送到ES索引版本7.x，就像6.2一样？现在还有这样的选择吗？
浏览 29提问于2020-01-09得票数 1
回答已采纳
1回答
我是麋鹿堆栈的新手，我只是想知道是否可以使用Kafka将日志文件发送到Elasticsearch。，但我也需要用 grok 这样的过滤器来解析日志。是可能的吗？基本上，我要做的是用卡夫卡取代Filebeats和Logstash的组合，我想知道这是否可能。
谢谢您:)
注意:我试图做的是Ship +分析在Kafka中的日志。我知道使用elasticsearch连接器可以将日志发送到Elasticsearch，但我想问的是，使用Kafka是否可以解析数据(Logstash的工作)。
浏览 0提问于2018-07-18得票数 3
回答已采纳
目前我正在通过filebeat和logstash将laravel日志发送到elasticsearch，可以直接将laravel日志发送到elasticsearch，而不需要filebeat和logstash。
浏览 0提问于2021-06-09得票数 0
我使用filbeat将日志发送到logstash，然后将它们存储在elasticsearch中。 我的日志文件包含如下字符串： MESSAGE: { "url": "http://IP:PORT/index.html" , "msg": "aaa" }
MESSAGE: { "url": "http://IP:PORT/index_2.html" , "msg": "bbb" } 我只想在Elasticsearch中存储JSON对象。我正在努力使用一些正则表达式来解
浏览 83提问于2019-03-22得票数 0
我正在尝试从我的应用程序中可视化日志。我的日志被格式化为json并存储在某个文件中。我已经安装了filebeat，它使用与输入相同的文件。文件节拍可以将日志直接发送到Logstash和Elasticsearch。Logstash可以处理日志，做一些事情，解析它们...但是我的日志已经是json格式了。
Elasticsearch将被安装在另一台服务器上，地球的另一边...
所以，我的问题是，在这种情况下使用logstash有什么好的理由吗？(不需要做任何处理)，或者可以直接将日志发送到elasticsearch服务器？
我猜Logstash可以做一些缓冲，但我想让我的应用程序的服务器保持轻量级
浏览 2提问于2017-11-18得票数 1
2回答
我正在使用filebeat从远程服务器获取日志，并将其发送到logstash，这样它就可以正常工作了。但是，当新日志被追加到源日志文件中时，文件节拍从一开始就读取这些日志，并将其发送到logstash和logstash，在elasticsearch中添加所有带有旧日志的日志，即使我们已经在elasticsearch中有了这些旧日志，所以这里会重复日志。
因此，我的问题是如何将新添加的日志发送到logstash中。一旦在日志文件中追加了新的日志行，那么这些新文件就应该发送到logstash到elasticsearch。
这是我的filebeat.yml
filebeat.inputs:
- ty
浏览 1提问于2019-01-09得票数 0
回答已采纳
我一直试图将日志从logstash发送到elasticsearch.Suppose，我正在运行一个logstash实例，在它运行时，我会更改logstash实例正在监视的文件，然后再次保存以前保存在elasticsearch中的所有日志，从而形成重复的日志。
另外，当logstash实例关闭并再次重新启动时，日志将在elasticsearch中复制。
我该如何解决这个问题？如何将文件中最新添加的条目从logstash发送到elasticsearch？我的logstash实例命令如下：bin/logstash -f logstash-comp.conf
配置文件如下：
input
{
fi
浏览 5提问于2015-02-10得票数 3
回答已采纳
我正在配置logstash和elasticsearch。在我的logstash文件输出部分。
elasticsearch {
codec => json_lines
cluster => "firstEsearch_cluster"
protocol => "http"
host => "192.168.56.3"
port => "9200"
}
如果我这样做，我就能够与elasticsearch实例通信
但是现在，我在不同的机器上有多个用于elasticse
浏览 1提问于2014-09-30得票数 2
回答已采纳
我试图从elasticsearch中的/var/log/wtmp读取访问日志
使用last -F /var/log/wtmp登录到该框时，我可以读取该文件
我让logstash运行并将日志发送到elasticsearch，这里是logstash文件。
input {
file {
path => "/var/log/wtmp"
start_position => "beginning"
}
}
output {
elasticsearch {
host => localhost
protocol =
浏览 5提问于2015-11-05得票数 1
回答已采纳
4回答
我希望将日志从Java应用程序发送到ElasticSearch，传统的方法似乎是在运行应用程序的服务器上设置Logstash，并让logstash解析日志文件(使用regex.！)并将它们加载到ElasticSearch。
是否有理由这样做，而不是仅仅设置log4J (或logback)来将所需格式的东西直接记录到日志收集器中，然后可以异步地发送到ElasticSearch？在我看来，要处理多行堆栈跟踪(并在日志解析时烧掉CPU周期)而不得不摆弄grok过滤器似乎很疯狂，而应用程序本身首先可以记录所需的格式？
请注意，对于在Docker容器中运行的应用程序来说，在只运行一个进程的情况下，直接登
浏览 12提问于2015-08-31得票数 16
回答已采纳
1回答
从气流传递参数到对数
、、、、
我已经配置logstash来侦听默认气流日志路径上的日志。我想将elasticsearch中的索引创建为{dag_id}-{task_id}-{execution_date}-{try_number}.所有这些都是气流的参数。这些是airflow.cfg中修改过的值。
[core]
remote_logging = True
[elasticsearch]
host = 127.0.0.1:9200
log_id_template = {{d
浏览 5提问于2020-03-30得票数 2
我正在研究从我们的CentOS6.x服务器上进行集中日志文件聚合的解决方案。在安装Elasticsearch/ Logstash /Kibana (ELK)堆栈后，我遇到了一个Rsyslog om弹性搜索插件，它可以以logstash格式将消息从Rsyslog发送到Elasticsearch，并开始问自己为什么需要Logstash。
Logstash有许多不同的输入插件，包括接受Rsyslog消息的插件。在我需要从多个服务器收集日志文件内容的用例中，是否有理由使用Logstash？另外，将消息从Rsyslog发送到Logstash而不是直接发送到Elasticsearch有好处吗？
浏览 3提问于2015-08-20得票数 12
回答已采纳
1回答
我们使用ELK (Elasticsearsh，Logstash，Kibana)版本8.x来使用tcp-log插件从江港API网关版本2.8收集日志。
我们已经将tcp-log插件配置为使用Logstash作为端点将日志发送到Logstash，然后Logstash将将日志发送到Elasticsearch。
江tcp-日志插件-> Logstash ->弹性搜索
我非常感谢你的支持，请澄清以下几点：
如何使用Kibana显示Kong API网关日志？从哪里开始？默认情况下，在Elasticsearch中是否会为Kong日志创建索引？我需要使用什么Elasticsearch模式来获取Ko
浏览 6提问于2022-11-09得票数 0
回答已采纳
2回答
我正在使用该，并通过使用以下代码片段的方式将日志发送到流利的ES中：
containers:
- name: fluentd
image: fluent/fluentd-kubernetes-daemonset:v1.4.2-debian-elasticsearch-1.1
env:
- name: FLUENT_ELASTICSEARCH_HOST
value: "my-aws-es-endpoint"
- name: FLUENT_ELASTICSEARCH_PORT
浏览 10提问于2020-09-09得票数 2
回答已采纳
1回答
我正在尝试设置从EKS到ElasticSearch云的pods日志。
根据，应该支持ElasticSearch：
您可以选择CloudWatch，弹力搜索，动态消防软管和动态流作为输出。
根据的说法，拥有Cloud_ID和Cloud_Auth参数应该足以将日志发送到Elasticsearch。
示例展示了如何为FluentBit配置ES输出，因此我的配置如下：
[OUTPUT]
Name es
Match *
Logstash_Format On
Logstash_Prefix ${logstash_prefix}
tls On
tls.verify Off
浏览 0提问于2021-05-13得票数 1
1回答
我们有运行在Citrix场的多个实例中的胖Java客户机，我们希望将客户机日志发送到ElasticSearch服务器。据我了解，首选的方法是设置Logstash并将其指向客户端日志。但是我们的应用程序在Citrix上，所以除了我们的应用程序之外，不希望有另一个应用程序。读取其他答案(如 )会阻止构建用于将日志发送到ElasticSearch的自定义Java。
降低应用程序响应能力不是一种选择，解决方案应该是异步的。我们有什么选择？
浏览 0提问于2017-11-10得票数 0
回答已采纳
1回答
我有一个与logstash和elasticsearch有关的问题。
当我试图通过logstash将日志从远程计算机发送到我的elasticsearch服务器时，就可以创建索引。但是，当我试图通过logstash从承载elasticsearch的服务器发送日志时，没有创建索引，什么也没有发生。
来自logstash的日志记录显示，logstash看到了我试图发送的日志出现了白化问题。
我搞不懂为什么会这样。知道吗？非常感谢
ES版本: 1.0.1 Logstash版本: 1.4.0
logstash配置文件：
input {
file {
type => "d
浏览 1提问于2014-03-24得票数 0
我在GitHub上找到了一个sensu处理程序，用于将数据发送到elasticsearch。可以在这里看到。我已经将此处理程序配置为向Elasticsearch发送keepalive事件。当生成关键事件时，日志会出现在Elasticsearch中。但是，在解决此事件时，关键日志将被覆盖，并替换为已解决的日志。.I需要同时跟踪关键日志和已解决的日志，因此不能覆盖任何日志。有没有人遇到过同样的问题，或者有谁知道如何解决这个问题？
谢谢,
上午
浏览 6提问于2017-04-24得票数 0
我使用file节拍读取我的服务日志，然后file节拍将日志发送到logstash进行解析。logstash将解析的日志发送到elasticsearch以进行索引。但是今天，这个错误发生在logstash中，在elasticsearch中没有对日志进行索引。
2021-11-02T11:35:36,774logstash.outputs.elasticsearch 不能将事件索引到Elasticsearch。{:status=>400，:action=>"index"，{:_id=>nil，:_inde ::Event:0xf85da17>，：_id=&g
浏览 2提问于2021-11-02得票数 0
回答已采纳
我已将亚马逊网络服务CloudTrail设置为通过跟踪将日志发送到CloudWatch。现在如何控制从CloudTrail发送到CloudWatch的日志类型？
例如，如果我只想获取与"EC2实例“相关的日志，以便从CloudTrail转到CloudWatch，该怎么办？
浏览 0提问于2019-08-25得票数 1
我们使用AWS Elasticsearch Service。我们希望在Kubernetes集群中安装fluentd。Fluentd将日志发送到AWS Elasticsearch Service。有关于怎么做的说明吗？在这个名为https://docs.fluentd.org/v/0.12/articles/kubernetes-fluentd的链接上，它显示了将日志发送到Elasticsearch Pod的步骤。这意味着elasticsearch安装在Kubernetes集群内部。 上面的链接显示了对elasticsearch pod的fluentd-daemonset elasticsea
浏览 35提问于2020-08-19得票数 2
回答已采纳
2回答
我正在使用lambda将上传到S3的文件通过ES摄取附件插件推送到亚马逊网络服务托管的elasticsearch上。
有些PDF文件可能会很大-超过100mb -而且似乎最好是以块的形式流式传输文件，而不是将整个文件缓冲区加载到lambda内存中。我见过的s3-lambda-es示例代码都是在json日志上工作的，这些日志很容易流传输，但我还没有看到任何人使用二进制文档来处理摄取插件。
注意:我在http-aws-es connectionClass中使用了elasticssearch-js库来让它与lambda一起工作。
我当前的代码基本上可以工作，但它在发送到ES之前加载整个pdf。下面是
浏览 0提问于2017-04-30得票数 2
我正在公司服务的服务器上实现一个监控工具。为此，我使用logstash。我们的应用程序通过elasticsearch的udp附加器将它们的日志发送到logstash (输入log4net )，然后logstash搜索它们，并将它们发送到elasticsearch。当我在kibana中显示我的日志时，我看到一些日志被截断了，最后一个主要部分丢失了(对于大日志)。所以我的问题是，Logstash是否对收到的每个消息事件都有大小限制。如果是，是否可以增加大小。我需要我所有的日志，并且没有一个被截断。
浏览 0提问于2014-07-07得票数 4
我正在设置Filebeat将日志发送到Elasticsearch。这是我的filebeat.yml
filebeat.prospectors:
- type: log
paths:
- '/var/log/project/*.log'
json.message_key: message
output.elasticsearch:
hosts: ["localhost:9200"]
我有一个包含以下内容的文件/var/log/project/test.log：
{ "message": "This is a test
浏览 21提问于2018-08-29得票数 2
回答已采纳
面对这样的问题，我是个安静的新手，但是我必须将日志数据从Vagrant服务器发送到安装Graylog的本地机器。我在本地的机器对接工具上安装了graylog，mongo和elasticsearch正在运行的地方。Elasticsearch将用于搜索特定的日志。我有第一台机器上的日志(Vagrant)，并希望将它们发送到另一台机器(其中是graylog)。你们，伙计们，有一步步的指导或提示吗？我坚持这个问题，不知道该怎么做.
浏览 1提问于2017-03-30得票数 0
回答已采纳
我已经将Logstash配置为直接获取文件(日志)，使用自定义逻辑处理它们，并发送到Elasticsearch。而且效果很好。我现在正在尝试设置Filebeat来将文件发送到它。
当我看到新的实体在Elasticsearch中结束时，这些基本的东西似乎起作用了，但是它们看起来都是错误的。我的理论是，Logstash被配置为解析Gatling日志，但是File节拍并不直接发送日志，而是一些包含元数据的JSON或其他格式，需要重新配置Logstash来解析这些日志。
但是..。我怎样才能找到Filebeat发送的内容？格式在什么地方被记录了吗？
浏览 2提问于2016-11-24得票数 3
回答已采纳
我正在设置docker-compose.yml文件来读取docker镜像的环境变量。我在我的宿主项目中引用了serilog.sinks.elasticsearch nuget包。 如果我在Visual Studio中使用appsettings.json运行项目，它会读取设置并将日志发送到Elasticsearch，而不是通过docker-compose。 docker镜像docker-compose.yml环境规范： environment:
- serilog:MinimumLevel=Verbose
- serilog:using=Serilog.Sinks.El
浏览 99提问于2019-04-16得票数 1
回答已采纳
我正在评估有关分布式日志服务器的不同选项。
在Java世界中，正如我所看到的，最流行的解决方案是filebeat + kafka + logstash + elasticsearch + kibana。
然而，在.NET世界中，有一个serilog可以直接将结构日志发送到elasticsearch。所以唯一需要的组件是elasticsearch + kibana。
我搜索了很多，但是在生产中没有多少关于这个解决方案的信息。我不知道这是否足以处理大量的日志。
有人能给我一些建议吗？谢谢。
浏览 1提问于2018-06-04得票数 9
回答已采纳
我是麋鹿的新手。我首先安装了没有Logstash的Elasticsearch和File节拍，我想将数据从Filebeat发送到Elasticsearch。在安装了File节拍并配置了日志文件和Elasticsearch主机之后，我启动了Filebeat，但是，尽管日志文件中有很多行，但是没有发生任何事情，这是File拍的前景。
那么，是否可以将日志数据直接转发到没有Logstash的Elasticsearch主机上？我
浏览 1提问于2016-04-25得票数 5
回答已采纳
我阅读了关于设置Logstash、Elasticsearch和Kibana的，作者建议使用NXLog从不同的机器传输日志。“Logstash Book”中介绍了一个典型的分布式场景，展示了如何在运输和索引角色中使用Logstash。我们目前正在试验Logstash，将其设置为将日志发送到Elasticsearch非常简单。所以我想知道为什么人们选择NXLog作为Logstash的日志发送器，而不是在两端都使用Logstash。
浏览 0提问于2014-09-05得票数 7
回答已采纳
我在Azure虚拟机上托管了Elasticsearch和Kibana。我将应用程序日志发送到elasticsearch。每周日6:00UTC，所有索引都将从elasticsearch中删除。我检查了索引生命周期策略，没有索引生命周期策略附加到任何索引。如何防止删除？任何帮助都会很感谢，谢谢。
浏览 45提问于2020-12-30得票数 1
回答已采纳
我在GCP中设置了三个kubernetes集群环境。我已经在所有这些环境中安装了Fluentd作为守护程序来从所有的荚收集日志。我还在集群之外的单独服务器上安装了elasticsearch和kibana。我需要将流畅的日志输入到远程服务器中的elasticsearch，从而运行一个集中的日志平台。
如何将数据从from发送到远程服务器中的elasticsearch？
收到的错误是：
“error_class=Fluent::Plugin::ElasticsearchOutput::ConnectionFailure error=”无法到达弹性搜索群集
浏览 0提问于2018-07-12得票数 4
我从中获得了流畅的kubernetes-守护进程图表，并将fluentd作为守护集部署到kubernetes命名空间中。它将整个集群日志发送到elasticsearch。我们将csc应用程序部署在csc命名空间中。我们希望只在csc命名空间中部署fluentd，并且只将csc命名空间中的csc日志(csc命名空间中的日志)发送到elasticsearch，而不是以守护进程的形式安装fluentd来收集整个集群日志。有办法吗？
浏览 3提问于2020-08-27得票数 5
回答已采纳
对于我的python应用程序，我使用查询弹性搜索。
要调试elasticsearch-dsl库实际生成的查询，我无法记录或打印到elasticsearch的最终查询。
例如，希望看到请求主体发送到elasticsearch，如下所示：
{
"query": {
"query_string": {
"query": "Dav*",
"fields": ["name", "short_code"],
浏览 2提问于2015-10-29得票数 4
回答已采纳
我让Logstash从日志文件status.log中读取并将输出发送到一个Elasticsearch实例。
我想要清理Elasticsearch中的数据，为此我正在执行curl -XDELETE 'http://localhost:9200/index_name/_all'。如果我检查head插件，数据就不见了。
如果这还不够，我还在用echo "" > status.log清理日志文件。
当我再次执行应用程序时，旧数据重新出现在Elasticsearch中，但带有更新的@timestamp。数据不会再次出现在status.log中。新数据将正确插入到El
浏览 1提问于2015-03-20得票数 0
1回答
使用弹性搜索获取日志文件
、、、
信息：
File节拍安装在机器上，从中读取日志并发送到弹性搜索服务器。在测试机器上，使用elasticsearch-dsl，我正在读取日志并将其写入文件。
问题：
原木从机器：
[Timestamp][INFO] AAAAAA
[Timestamp][INFO] BBBBBB
[Timestamp][INFO] CCCCCC
在搜索日志并将日志写入输出文件之后：
[Timestamp][INFO] CCCCCC
[Timestamp][INFO] AAAAAA
[Timestamp][INFO] BBBBBB
如何保持原木的原样或原样？
代码:
from elasticsearch impor
浏览 1提问于2017-04-14得票数 0
回答已采纳
我在ECS上运行了几个NodeJS应用程序，日志正被发送到CloudWatch。我希望在CloudWatch中为每条日志消息(如application.name和application.version )显示自定义字段，并根据日志消息的内容创建可能的字段。假设我的日志消息是[ERROR] Prototype: flabebes-flower crashed，我想提取日志级别的ERROR和原型flabebes-flower的名称。在CloudWatch中可以使用这些字段吗？如果是这样，我怎样才能做到这一点呢？我知道如何使用File节拍处理器并将日志发送到Elasticsearch，我已经有了该解
浏览 8提问于2022-05-26得票数 0
我想要设置一个日志聚合器。到目前为止我倾向于ElasticSearch/Kibana。在我的应用程序中，我使用的是目前写入Windows事件日志的Serilog。如何将Serilog配置为将日志发送到ElasticSearch？
浏览 0提问于2014-10-26得票数 7
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
对象存储
云直播活动推荐
腾讯云开发者
