腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
使用Apache提取twitter数据时出错
、
、
我是刚认识Hadoop
的
。训练并开始练习。我正在使用cloudera (CDH5.5)来练习.配置Apache
flume
twitter数据提取,如下所示TwitterAgent.sources = Twitter 配置源 TwitterAgent.sources.Twitter.type = com.cloudera.
flume
.source.TwitterSourceTwitte
浏览 2
提问于2016-01-19
得票数 0
1
回答
Spark Streaming水槽集成
、
、
在尝试了许多更改之后,我仍然遇到了将
Flume
自定义接收器和Spark Stream绑定到同一
端口
的
问题。我使用
的
是
Flume
1.6.0和Spark 2.0.0。使用Spark+
flume
集成指南,我构建了.conf文件和spark .py文件。我首先启动
flume
代理,但当我尝试在同一
端口
上使用Spark-streaming (读取)时,它显示fail to bind。我尝试了多个
端口
,但据我所知,无法找到任何网络限制(完全权限)
浏览 17
提问于2016-09-28
得票数 0
1
回答
如何集成rsyslog、AWS ELB和
Flume
、
、
、
我一直在使用php脚本将日志写入rsyslog,然后rsyslog将消息直接发送到tcp
端口
上
的
flume
(syslogtcp源)。所以我添加了一个带有tcp
端口
转发
的
ELB。似乎ELB正在从rsyslog中获取事件,但它并没有将其转发到
flume
。我
的
flume
源是一个syslog tcp源,它使用负载均衡器转发事件
的
相同
端口
。 在这方面任何帮助都会很好。
浏览 3
提问于2014-10-15
得票数 0
回答已采纳
3
回答
带水槽
的
HDFS IO错误(Hadoop2.8)
、
、
当我试图通过
Flume
将流数据导入hadoop时,我得到了下面的错误。 at org.apache.
flume
.sink.hdfs.BucketWriter$9$1.run(BucketWriter.java:679) at org
浏览 7
提问于2017-07-20
得票数 0
回答已采纳
2
回答
flume
无法连接到HDFS
端口
9099
、
我正在尝试使用
flume
.I访问日志文件HDFS,我连接到
端口
9099,但我不知道为什么要连接8020,我收到以下错误:NameNode正在使用netstat -tlpn _ grep :9099监听
端口
9099 我认为设置它
的
方法是格式化namenode并将
端口
设置为8020,但是我不
浏览 15
提问于2014-12-18
得票数 1
1
回答
监听Google Compute Engine自定义
端口
的
托管进程
、
、
这个问题可能适用于在Google Compute Engine上
的
VM实例上侦听
端口
的
任何Java进程。我正在尝试在
端口
9090上建立TCP连接,在该
端口
上运行着一个Apache
Flume
-ng进程。我正在尝试通过本地Web应用程序上
的
Flume
-ng客户端进行连接,该客户端在配置为本地路由时有效。--<host>127.0.0.1</host>--> <port>9090</p
浏览 0
提问于2014-12-03
得票数 1
1
回答
码头集装箱间通信
、
、
、
我想运行Hadoop和
Flume
。我有一个具有所有默认值
的
标准Hadoop映像。我看不出这些服务如何在分开
的
容器中相互通信。
Flume
的
Dockerfile看起来是这样
的
: RUN apt-get update && apt-get install -q -y --no-install-recommendsRUN wget -qO- http://archive.apache.org/dist
浏览 6
提问于2016-04-02
得票数 2
回答已采纳
1
回答
我在aws实例上运行
flume
代理,无法从aws实例上
的
avro接收器接收事件到本地计算机上
的
avro源?
、
这是在我
的
aws实例
的
控制台上出现
的
错误。:142)启动Avro源fromLocal:{ bindAddress: ec2-54-221-143-114.计算-1.amazonaws.com,
端口
: 44444 }. 2014-08-09 12avro客户端:EC2-54-221-143-114.Computer-1.amazonaws.com,
端口
: 41414 org.apache.
flume
.FlumeException: NettyAvroRpcClient{ host: ec2
浏览 2
提问于2014-08-09
得票数 0
1
回答
在Hadoop中使用
FLUME
存储数据
、
、
、
、
我遵循了教程中有关hadoop安装和
Flume
的
所有步骤。我是一个大数据工具
的
天真。我得到了以下错误。我不明白,问题出在哪里? at org.apache.
flume
.sink.hdfs.BucketWriter$1.call(BucketWriter.java:246) at org.apache.
flume
.sink.hdfs.BucketWrit
浏览 46
提问于2017-09-29
得票数 1
2
回答
如何在正在运行
的
码头容器上执行命令?
、
、
第二个文件
的
基本图像是从第一个坞文件创建
的
hadoop_image。
flume
-start.sh我把这两个集装箱分开管理。但如果我跑了它启动水槽并向我显示bash提示符/bin/bash是
flume
-start.sh
的
最后一行。但我怀疑
的
是我
的
第一个集装箱正在运行。我使用这个作为第二个容器
的
基
浏览 1
提问于2015-01-27
得票数 0
2
回答
Apache
Flume
多代理
我测试了Apache
Flume
将文件从本地传输到HDFS。但是,如果源文件来自多个服务器(从不同服务器
的
本地文件传输到HDFS),我是否可以只运行一个
Flume
实例并将更多代理添加到
flume
-conf.properties中?如果可以,如何在
flume
-conf.properties中编辑以下参数:还有,我
怎样
才能运行
flume
? .
浏览 2
提问于2013-10-08
得票数 1
1
回答
Kafka源与Avro源使用水槽将数据读写到kafka通道
、
、
、
、
在水槽中,我有卡夫卡频道,在那里我可以读写数据.如果用阿夫罗源和阿夫罗水槽代替卡夫卡源和卡夫卡水槽,卡夫卡通道读写数据
的
性能有什么不同?在我看来,如果用Avro-source替换Kafka-source,我将无法从Kafka broker
的
多个分区并行读取数据,因为在Avro-source
的
情况下没有指定
的
消费者组。
浏览 4
提问于2015-11-23
得票数 0
回答已采纳
1
回答
Apache
Flume
中
的
Apache Avro模式验证
、
、
另一个很大
的
好处似乎是它可以处理Apache Avro对象:-)然而,我很难理解如何使用Avro模式来验证接收到
的
Flume
事件。事件,将"Test“定义为事件主体,将事件发送到在VM (192.168.99.101)中运行
的
单独
的
Apache
Flume
代理。或者,如果我误解了
Flume
是如何将
Flume
事件转换为Avro事件
的
意图?我更喜欢使用嵌入式
Flume
代理来实现这一点,但如果这是不可能
的
浏览 21
提问于2019-02-18
得票数 1
回答已采纳
1
回答
使用Apache
Flume
编写Apache服务器日志
、
、
我使用
的
是ApacheFlum1.3Version1.3,它指的是。 我引用了链接,它属于Cloudera,而不是Apache。我尝试
浏览 1
提问于2013-01-22
得票数 1
1
回答
Flume
错误:连接被拒绝
请
查看
以下错误:
Flume
Code: at org.apache.
flume
.sink.DefaultSinkProcessor.process(DefaultSinkProcessor.java:68) at org.apache.
flume</em
浏览 1
提问于2013-06-28
得票数 1
回答已采纳
1
回答
Flume
忽略了
flume
conf中
的
过滤关键字
、
、
、
我正在使用
flume
导入TWITTER数据。我在我
的
flume
conf中添加了以下一行:但是
flume
Flume
总是从twitter导入所有数据,而不
浏览 3
提问于2014-06-16
得票数 2
1
回答
如何使用
flume
-node命令在同一台计算机上运行代理节点和收集器节点?
在ubuntu机器host1上安装了CDH3u3 (名称节点、辅助名称节点、作业跟踪器、数据节点、任务跟踪器)和
Flume
(
flume
、
flume
-master和
flume
- node )。对于
Flume
安装,我关注
的
是。$
flume
master $
fl
浏览 3
提问于2012-03-16
得票数 2
回答已采纳
1
回答
如何在play Framework2.4中将logback更改为log4j 2?
、
、
在一个项目中,我想使用
Flume
从多个Play Framework2.4服务器收集日志。Logback没有提供
Flume
,但是log4j 2做到了。见。
浏览 2
提问于2016-02-04
得票数 0
回答已采纳
1
回答
如何识别运行Rsyslog
的
端口
?
、
我正在尝试设置
flume
代理以从Rsyslog收集日志事件,但我没有root权限/sudoer来确定syslog在哪个
端口
上运行/以及它在TCP或UDP上运行
的
位置,因此我可以相应地配置
flume
代理。有没有办法确切地知道Rsyslog守护进程在哪个
端口
上运行?下面是我用来标识Rsyslog守护进程
的
命令root 4874 1 0 Feb04 ?
浏览 26
提问于2017-02-10
得票数 1
1
回答
水槽不采摘log4j.properties
(顺便说一句,我目前正在研究水槽-ng 1.3.1)"
flume
-ng agent --conf conf --conf-file /usr/lib/
flume
/我希望将root.
flume
.logger更改为首次发布,以
查看
/var/log/
flume
/flme.log中
的
logger.debug消息,但无法这样做。log4j.proper
浏览 1
提问于2013-08-16
得票数 3
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
大数据进级教程之-Flume监听netstat端口
常见的应用层协议使用的端口及查看
wps图片怎样查看尺寸!
微信手机端怎样查看支付分,查看自己的信用评分
基于Flume的日志采集
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
活动推荐
运营活动
广告
关闭
领券