腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(5881)
视频
沙龙
1
回答
Fluentbit
-
解析
多种
格式
的
日志
(
log+json
)
mlp
、
fluent-bit
我试图通过
fluentbit
向elasticsearch发送以下
日志
行,但我没有找到正确
的
解决方案来提取时间和MLP部分之后
的
json结构: 2020-12-29 08:00:03,230 INFOimage1.png","objType":"Image","outcome":"OK","uuid":"1234566573234242342-123434234-12342"} 有没有人想要达到这
浏览 112
提问于2020-12-29
得票数 1
1
回答
收集kubernetes
的
pods
日志
docker
、
logging
、
kubernetes
、
fluentd
我试图在应用程序容器
的
整个生命周期中收集它们
的
日志
。这些容器在Kubernetes中运行,我已经找到了像Fluentd这样
的
解决方案,但我也发现我需要指定一个后端(Elasticsearch,AWS S3等)。而我希望收集具有特定名称
的
文件中
的
日志
,例如podname_namespace_containername.json,然后使用脚本
解析
这些文件。使用fluentd可以做到这一点吗?
浏览 20
提问于2020-09-16
得票数 2
回答已采纳
1
回答
只为选定
的
荚激活kubernetes
日志
logging
、
kubernetes
、
fluentd
、
fluent-bit
我想用像please_log_with_parser: myparser这样
的
注释来注释一些kubernetes荚,并且有一些类似于
fluentbit
的
东西,它只处理那些豆荚
的
日志
和给定
的
解析
器到我们
的
弹性搜索集群对于流利位,我只知道注释
fluentbit
.io/exclude,但这将导致不得不注释所有其他豆荚。-是否有可能告诉
fluentbit
只处理带有标签
的
日志
,或者
浏览 9
提问于2020-01-16
得票数 2
2
回答
如何配置来自Azure Blob存储
的
Fluentbit
/ Fluentd输入?什么输入类型?
logging
、
azure-blob-storage
、
pipeline
、
fluentd
、
fluent-bit
我们目前正在使用tail输入收集IIS
日志
,并使用
fluentbit
将它们发送到New Relic。[OUTPUT] match * api_key {{NewRelicKey}} 现在,我们希望收集可以在Azure Blob存储中访问
的
另一个
日志
源我们希望使用
fluentbit
,这样两个数据源
的
解析
就会以相同
的
方式完成,确保收集到
的
字段是相同
的
,只使用
浏览 36
提问于2020-08-31
得票数 1
回答已采纳
3
回答
能否从一个文件中
解析
多个类型
的
日志
行?
fluentd
、
fluent-bit
我在k8s中有一个相当简单
的
Apache部署,使用fluent位v1.5作为
日志
转发器。我
的
设置几乎与下面的回购程序相同。我正在运行AWS并将
日志
输出到AWS ElasticSearch服务。ConfigMap在这里: access (-> /dev/stdout)和error (-> /dev/stderr)
日志
行都位于节点上
的
同一个容器
日志
文件中。我遇到
的
问题是,fluent位似乎无法自动检测使用
浏览 14
提问于2020-10-08
得票数 5
回答已采纳
1
回答
Kubernetes中JSON
日志
记录
的
最佳实践
docker
、
kubernetes
、
logging
、
devops
我正在开发一个应用程序,它
的
日志
包含用于度量目的
的
自定义字段。因此,我们以JSON
格式
生成
日志
,并将它们发送到Elasticsearch集群。我们
的
集群使用Fluentd作为DaemonSet,将
日志
从所有的荚输出到我们
的
Elasticsearch集群。设置类似于以下内容:,以JSON
格式
正确<e
浏览 2
提问于2021-05-14
得票数 0
1
回答
将数据存储到NoSQL数据库
的
成本效益方法
mongodb
、
amazon-web-services
、
nosql
、
amazon-dynamodb
、
etl
数据是简单
的
日志
。我们现在正在使用AWS。我想知道两种技术都能提供更便宜
的
解决方案。AmazonDB或MongoDB. 我们有30张桌子正在收集这些
日志
。
浏览 5
提问于2022-01-05
得票数 2
1
回答
如何将php api
日志
以二进制
格式
导入kafka
php
、
logging
、
apache-kafka
让我们假设我们有一个运行在apache we服务器上
的
PHP api。我想问一下,如何以结构化
格式
将
日志
从PHP放到kafka中(让我们说avro或protobuf,因为它将传输特定
的
业务合同,而不仅仅是纯apache
日志
)。Php不在我
的
领域或专业范围内,所以它可能很愚蠢,但解决方案可能只是从php本身向kafka发送消息。但考虑到它是在网络服务器下运行
的
,它很可能必须为每次调用创建到kafka
的
连接。另一种可能
的
解决方案是将<em
浏览 16
提问于2021-10-22
得票数 0
1
回答
使用fluentd JSON
解析
器
的
多种
时间
格式
json
、
ruby
、
logging
、
containers
、
fluentd
我目前正在阅读容器
日志
,并将其作为我
的
源,并
解析
所有JSON
格式
的
日志
文件。基于我们
的
配置,JSON
解析
器正在按预期工作,但问题是时间
格式
。根据
日志
文件有
多种
时间
格式
。例如,一个
日志
文件可以将时间存储为2020-05-28T21:00:07Z,但另一个
日志
文件将存储时间为2020-04-28T20:07:52.013557931Z。在所有情况下,
浏览 4
提问于2020-05-28
得票数 1
回答已采纳
1
回答
基于EKS和Fargate
的
流比特云彩模板
amazon-cloudwatch
、
amazon-eks
、
aws-fargate
、
fluent-bit
我有一个EKS集群,完全在Fargate上,我正在尝试将
日志
设置为Cloudwatch。我有很多输出部分可以使用一些变量进行统一。我希望将每个部署
的
日志
统一到一个log_stream中,并将log_stream按环境分离(name_space)。使用两个变量,我只需要编写一个输出部分。,根据README.md,在没有
解析
变量
的
情况下,README.md是回退名称。Fargate中
的
Fluentbit
自动管理输入部分,因此我不知道哪些变量被发送到输出部分,我猜想变量kub
浏览 19
提问于2022-07-15
得票数 0
回答已采纳
2
回答
Kubernetes
日志
在kibana拆分
elasticsearch
、
kubernetes
、
kibana
它被分成3个
日志
。 如何增加1个log
的
限制?我希望能够在一个
日志
中看到36k个字符。
浏览 0
提问于2020-09-27
得票数 1
1
回答
如何摄取为splunk创建
的
Kafka文本文件?
apache-kafka
、
splunk
我正在评估使用apache-kafka来摄取现有的文本文件,在阅读了文章、连接器文档等之后,我仍然不知道是否有一种简单
的
方法来摄取数据,或者它是否需要转换或自定义编程。背景:splunk服务器消失了,但我们仍然生成用于将数据摄取到splunk中
的
日志
文件。使用Splunk - forwarders将数据摄取到splunk;转发器以以下
格式
读取
日志
文件: date="l
浏览 16
提问于2021-06-09
得票数 0
回答已采纳
2
回答
fluent位kubernetes注释不起作用
kubernetes
、
fluent-bit
我部署了一个带有注释
fluentbit
.io/parser: cri
的
pod。但是它仍然使用
解析
器ivyxjc
解析
日志
,
解析
器是INPUT中
的
配置。2021 15:28:47 +0800 pod-template-hash=5c6658b5dd <em
浏览 4
提问于2021-10-15
得票数 1
2
回答
fluent-bit无法
解析
kubernetes
日志
elasticsearch
、
kubernetes
、
fluentd
、
fluent-bit
、
helmfile
我想通过fluentd将Kubernetes
日志
从fluent-bit转发到elasticsearch,但是fluent-bit无法正确
解析
kubernetes
日志
。我尝试了稳定/
fluentbit
和fluent/
fluentbit
,都遇到了同样
的
问题:...n
浏览 146
提问于2020-07-19
得票数 0
1
回答
Humio kubernetes
解析
器登录json
kubernetes
、
fluent-bit
、
humio
我使用humio (https://www.humio.com)来聚合kuberntes pod发送
的
日志
。在一些pod中,使用humio-parser= json -for-action或humio-parser=json注释
日志
是正确
的
json对象,如下所示: {"@timestamp":"2021-11,但它们在json开始之前都有一个日期时间stdout F,这会导致
解析
器错误。humio kubernetes使用官方
的
helm-
浏览 34
提问于2021-11-16
得票数 0
1
回答
通过
fluentbit
输出插件联系loki
kubernetes
、
fluent-bit
、
grafana-loki
我正在使用
fluentbit
从kubernetes集群收集
日志
,有一个连接到loki
的
输出将它们发送到那里。这是我在
fluentbit
configmap文件中
的
loki配置 由于loki部署在loki命名空间,并且在
fluentbit
命名空间中使用流利,所以我用它来联系loki:host loki.loki.svc.cluster.localversion: 1.8.8 name: fluent-b
浏览 125
提问于2021-10-21
得票数 1
1
回答
飞镖中
的
tryParse在DateFormat中
的
应用
android
、
flutter
、
dart
我想要tryParse
多种
日期
格式
。tryParse方法在DateTime中可用,但在DateFormat中没有。我想使用DateFormat,因为我想
解析
多种
格式
。目前,我正在分析下面的单一日期
格式
。为了
解析
另一种日期
格式
,我必须将它添加到catch块中。line.text));} catch (e) { // parse another date forma
浏览 4
提问于2022-04-22
得票数 0
回答已采纳
2
回答
为什么EKS说我
的
fluent-bit.conf无效
amazon-web-services
、
kubernetes
、
logging
、
amazon-eks
、
fluent-bit
我正试图为库伯伦特斯在EKS + Fargate上设置流畅
的
位。我能够在Cloudwatch上获得所有
日志
都指向一个常规
日志
组,但是现在当我向data:字段添加fluent-bit.conf: AC.26并尝试将更新应用到我
的
集群时,我得到了以下错误: 对我来说最突出
的
是,错误消息要求我只提供输出、过滤器
浏览 12
提问于2021-06-22
得票数 2
回答已采纳
2
回答
Azure
日志
分析中
的
Fluent位无法到达DNS
azure-aks
、
fluent-bit
我正在运行DaemonSet
的
服务,输出到Analytics。一旦Fluent位试图发送
日志
,它就无法连接DNS服务器:有什么不对
的
?我
的
心声: - apiVersion:
浏览 8
提问于2021-09-03
得票数 0
1
回答
一般
日志
文件
解析
器
的
配置文件
configuration
我们公司使用
多种
日志
文件
格式
。列
的
标题(即所涉及
的
进程)也许也是消息参数 这些,我们打算通过
解析
日志</em
浏览 0
提问于2015-08-20
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
ELK+Filebeat 搭建日志系统
带着问题阅读开源项目,才是最有效的
如何处理日志中的结构化数据?
日均TB级数据,携程支付统一日志框架
数据收集工具的设计与最佳实践
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券