Fluentd连接ElasticSearch集群失败

文章/答案/技术大牛

发布

1回答

docker、elasticsearch、kubernetes、connection、fluentd

我有一个本地kubernetes集群，其中我使用预配置的elasticsearch镜像(fluent/fluentd-kubernetes-daemonset:elasticsearch).添加了一个Fluentd Daemonsetthis article的第2步。我还有一个弹性集群在云中运行。您可以将一些环境变量传递给fluentd-elasticsearch镜像进行配置。当我尝试使用# wget https://fa

浏览 89提问于2020-03-31得票数 0

回答已采纳

3回答

基于coreos的aws上使用kubernetes的配置集群级日志

amazon-web-services、kubernetes、coreos

我正在关注如何配置集群级日志记录的。我正在使用来配置集群，但我似乎无法找到一种使其工作的方法。在此之后，我尝试手动运行es和kibana和服务，方法是从cluster/addons/fluentd-elasticsearch github上的fluentd-elasticsearch目录中获取它们，但它只运行那些特定的服务，而不是由教程示例也运行的fluentd-elasticsearch服务。运行kubectl get pods

浏览 10提问于2016-04-24得票数 1

1回答

AWS Elasticsearch Service的Fluentd安装说明

amazon-web-services、elasticsearch、kubernetes、elasticsearch-5

我们使用AWS Elasticsearch Service。我们希望在Kubernetes集群中安装fluentd。Fluentd将日志发送到AWS Elasticsearch Service。在这个名为https://docs.fluentd.org/v/0.12/articles/kubernetes-fluentd的链接上，它显示了将日志发送到Elasticsearch Pod的步骤。这

浏览 35提问于2020-08-19得票数 2

回答已采纳

1回答

Fluentd无法连接到Elasticsearch -[警告]：#0 [ Elasticsearch ]无法连接Elasticsearch或获取版本。假设Elasticsearch 5

elasticsearch、kubernetes、fluentd

我正在尝试在裸机Kubernetes上安装Fluentd，并将消息转发到ElasticSearch。我想安装的Fluentd是“稳定/fluentd--版本2.4.3”的舵表。我的ElasticSearch有自定义tls证书，工作正常。Fluentd已安装，但无法连接到ElasticSearch。" <match **> @id elasticsearch

浏览 89提问于2020-07-04得票数 1

1回答

如何在aks集群节点中设置efk日志记录？

elasticsearch、kubernetes、kibana、azure-aks、fluentd

如何在aks集群节点中设置efk日志记录？ name: fluentd app: fluentd selector: app: fluentd集群的情况下，而相同的规范文件在minikube集群中工作得很好。至于这个设置，kibana是向上的，并能够连接到elasticsearch，同样的情

浏览 8提问于2022-04-12得票数 0

1回答

在ElasticSearch中使用Fluentd存储日志

linux、docker、elasticsearch、kubernetes、fluent

我有一个Kubernetes集群，上面有50+ pod，我想从所有这些pod中获取日志，然后将日志存储在ElasticSearch中并可视化使用Kibana，但是ElasticSearch和Kibana如何配置Fluentd抓取日志并发送到非Kubernetes ElasticSearch？

浏览 1提问于2018-02-08得票数 0

1回答

如何丢弃特定容器的日志

elasticsearch、kubernetes、logging、fluentd

我们让Fluentd运行在我们的多个K8s集群上。对于Fluentd，我们使用Elasticsearch存储来自所有远程K8s集群的日志。有一些应用程序我们不希望Fluentd将日志推送到Elasticsearch。寻求关于这方面的建议，我们如何才能做到这一点。谢谢

浏览 7提问于2022-08-16得票数 0

1回答

为什么bitnami Fluentd守护进程集不生成日志作为标准输出？

kubernetes、kubernetes-helm、elastic-stack、bitnami、fluentd

我已经在K8s集群上部署了Bitnami EFK helm图表。https://github.com/bitnami/charts/tree/master/bitnami/fluentd 所有pod运行正常，但Fluentd没有显示任何日志。然而，集群是受限制的，不知道这是否会有什么不同。我在具有相同配置的无限制集群上部署了相同的EFK，并且工作得很好。-5f5656cdd5-9d4lj 1/1 Runn

浏览 144提问于2021-02-24得票数 0

回答已采纳

1回答

如何在Kubernetes中启用第三方容器的日志记录？

kubernetes

logging: options: fluentd-address: "0.0.0.0:24224

浏览 2提问于2019-02-18得票数 0

3回答

Kubernetes:只将Fluentd安装到名称空间

kubernetes、fluentd

我从中获得了流畅的kubernetes-守护进程图表，并将fluentd作为守护集部署到kubernetes命名空间中。它将整个集群日志发送到elasticsearch。我们希望只在csc命名空间中部署fluentd，并且只将csc命名空间中的csc日志(csc命名空间中的日志)发送到elasticsearch，而不是以守护进程的形式安装fluentd来收集整个集群日志

浏览 3提问于2020-08-27得票数 5

回答已采纳

1回答

kubernetes删除pod故障排除

apache-spark、kubernetes

Spark driver尝试创建executor pod，executor pod启动失败。问题是，一旦pod出现故障，spark driver就会将其移除并创建一个新的。新的失败是由于同样的原因。我不得不怀疑，如果我不能恢复错误，我应该如何修复失败的pod问题。

浏览 2提问于2018-12-26得票数 0

1回答

无法使用ubuntu上的EFK堆栈获取Kubernetes集群的日志

docker、elasticsearch、kubernetes、fluentd

我试图使用Elasticsearch、Fluentd和Kibana对kubernetes集群进行日志监视。这是我在这个任务中遵循的。我用beta.kubernetes.io/fluentd标记节点："true“。最初，我为Elasticsearch创建了StatefulSet。我检查了Fluentd容器的日志，它显示了如下错误： 2018-10-12 13:58:06 +0000警告: elasticsearch坏块移动到/tmp

浏览 0提问于2018-10-12得票数 3

3回答

如何从Kubernetes中去除流畅的弹性

kubernetes、salt-stack

我们有一个使用kube-up.sh提供的AWS上的Kubernetes 1.1集群。弹性搜索设置似乎有两部分。第一个是在addon上定义的/etc/kubernetes/addons/fluentd-elasticsearch主服务器。我们将该文件移出加载项

浏览 4提问于2016-05-03得票数 2

1回答

试图将FluentD添加到我的工作流中，但它未能连接

docker、elasticsearch、docker-compose、fluentd、efk

我查看了github错误，注意到了一些类似但不同的东西，我真的很困惑如何使用一个安全启用的Elasticsearch流来实现FluentD。我一直在犯的错误是：我试着在流畅的主机也是'elasticsearch‘，以及考虑到dns。同样的问题。

浏览 6提问于2022-04-08得票数 -1

回答已采纳

1回答

Fluentd错误：“缓冲区空间数据太多”

elasticsearch、logging、kubernetes、fluentd

我在kubernetes集群中使用fluentd从pod中收集日志，并将它们发送到弹性搜索。error_class=Fluent::Plugin::Buffer::BufferOverflowError error=“buffer space has too many data” location=“/fluentd/vendor/bundle/ruby/2.6.0/gems/fluentd-1.7.4/lib/fluent/

浏览 381提问于2020-02-20得票数 5

1回答

基于集群节点数量的水平Pod自动伸缩器副本

kubernetes、autoscaling、kubernetes-pod、kops、horizontal-pod-autoscaling

我正在寻找一种解决方案，当节点加入集群时自动向外扩展pod，并在删除节点时向后扩展。我们在节点上运行WebApp，当节点计划断开连接时，这需要正常的pod驱逐/终止。我正在检查使用DaemonSet的选项，但是因为我们使用Kops进行集群滚动更新，所以它忽略了DaemonSets驱逐(不支持标志“--ignore-DaemonSet”)。我想找到根据集群中的节点数动态更改HorizontalPodAutoscaler yaml中的最小/最大副本的方法。minReplicas: "Num of

浏览 3提问于2020-01-22得票数 2

1回答

使用Fluentd将日志发送到Elasticsearch后，日志不会按顺序显示

elasticsearch、kubernetes、kibana、fluentd、efk

我们在Kubernetes中部署了一个应用程序，所有应用程序都配置为记录到stdout.We，使用fluentd DaemonSet从/var/lib/docker/containers/文件夹收集日志，并将它们发送到ElasticSearch集群。ElasticSearch集群连接到一个Kibana实例，显示的日志是按@timestamp排序的，但这里的日志顺序不正确(与flie中的顺序不同)。有没有办法在从fluentd</e

浏览 33提问于2020-01-21得票数 1

1回答

Openshift-外部Elasticsearch配置

openshift、openshift-origin、openshift-3

我有一个Openshift集群设置，其中我聚合了Openshift日志记录。Elasticsearch，fluentd和Kibana。我在不同的服务器上设置了外部弹性搜索。我想将我的Openshift集群日志转发到我新设置的Elasticsearch。请帮我解决这个问题。谢谢

浏览 13提问于2019-01-14得票数 0

1回答

Fluentd正在添加多个相同的记录。

fluentd

我们正在使用AKS集群，并希望在弹性搜索中摄取自定义应用程序日志。所有的设置为Fluentd部署，弹性搜索和基巴纳是完成的，并正在工作。下面是Fluentd文件的配置。现在的问题是，对于每个日志，我们得到的记录被节点成倍增加。例如，如果一个AKS集群有10个节点，那么相同的日志就会被吸入10次到弹性搜索中，并且在Kibana中显示10次。apiVersion: v1metadata: namespace: efk-clou

浏览 5提问于2021-11-17得票数 0

点击加载更多