正在尝试在HortonWorks中获取Apache Flume推文。(使用教程点参考)TwitterAgent.sources = TwitterTwitterAgent.sinks = HDFSTwitterAgent.sources.Twitter.type = com.cloudera.flume.source.TwitterS
浏览 3提问于2016-03-01得票数 0
1回答
我的twitter数据格式不可读。我使用flume获取twitter数据，我正在尝试使用hive表读取这些数据。但我在hdfs中看不到正确的数据。以下是详细信息：export JAVA_HOME=/usr/java/jdk1.7.0_67-cloudera
FLUME_CLASSPATH="/opt&
浏览 5提问于2017-03-17得票数 0
我需要上传数据，这是存在于一个网络链接，比如说，一个“博客”到hdfs。现在，我正在研究实现该功能的选项，可以找到以下链接：
但是，通过阅读flume docs，我不清楚如何设置flume源代码来指向博客内容所在的网站。根据我对fluem文档的理解，需要有一个webserver，我需要在其中部署一个应用程序，然后生成weblog，然后通过flume将其传输到hdfs。但是我不想要web服务器日志，实际上我正在寻找博客内容(，即所有的数据+博客上的评论，如果有的话)，这是一个非结构化的数据</em
浏览 3提问于2013-04-11得票数 1
1回答
在Cloudera创建表单
、、、、
我在Cloudera生态系统工作，作为一个初学者，我从实现flume示例开始，并成功地完成了它。现在，每当我想为不同的关键字流来自Twitter的数据时，我必须进入Twitter的配置文件并编辑它，然后使用终端执行flume代理。我想出了一种方法，让用户打开表单并在其中输入关键字，然后执行flume代理程序从Twitter获取数据，而不是每次访问twitter配置文件。
浏览 0提问于2018-11-05得票数 0
回答已采纳
我试图从推特检索数据使用flume和存储到hdfs的JSON FORMAT.And的数据是加载到HDFS.BUT，而不是JSON格式。\E4这是我使用的命令：
bin/flume-ng agent --conf .= org.apache.flume.
浏览 0提问于2016-05-19得票数 2
在使用FLUME将twitter数据获取到HDFS时，只要更改了twitter4j.jar文件的版本，我就会一次又一次地得到这个错误，请告诉我为什么这个错误是coming.Can --有人建议我在HDFS中获取数据的下一步是什么；
(conf-file-poller-0)调试-org.apache.flume.source.DefaultSourceFactory.getClass(DefaultSourceFactory.java
浏览 3提问于2017-11-01得票数 0
我正在尝试使用flume获取Twitter数据，但得到了以下错误TwitterAgent.sources = Twitter
Twitte
浏览 5提问于2022-01-14得票数 0
1回答
我是新的水槽，我已经使用水槽从twitter的数据流使用搜索API。但是twitter json将"geo“键设置为null。那么，是否有一种方法可以使用Flume中的流API获取twitter数据呢？
浏览 1提问于2015-04-14得票数 0
我在Ubuntu 14.04上使用Hadoop-1.2.1
我正在尝试使用Flume-1.6.0将数据从twitter流到HDFS。我下载了flume 1.0-SNAPSHOT.jar，并将其包含在flume/lib文件夹中。我在conf/flume-env.sh中将Flum-Source1.0-SNAPSHOT.jar的路径设置为FLUME_CLASSPATH。Twitter-agent.sin
浏览 2提问于2015-06-22得票数 2
回答已采纳
1回答
我试图在HDFS中获取twitter数据，但遇到了问题。这是我的flume.conf文件TwitterAgent.channels= MemChannelTwitterAgent.source
浏览 6提问于2016-09-25得票数 0
1回答
我正在尝试使用flume将twitter源连接到蜂窝接收器。下面给出了我的属性文件TwitterAgent.sources.Twitter.type = org.apache.flume.source.twitter.TwitterSource是否需要创建数据库名、表名、分区列、字段名？？在启动代理之前?？如果是这样，我应
浏览 0提问于2018-05-21得票数 1
我正在使用flume导入TWITTER数据。我在我的flume conf中添加了以下一行：但是flumeFl
浏览 3提问于2014-06-16得票数 2
1回答
我一直在尝试在我的windows系统上运行flume代理来获取twitter数据。我正在关注这个博客https://acadgild.com/blog/streaming-twitter-data-using-flume 但是，每当我尝试运行flume代理程序时，我都会得到以下错误-/conf/flume.conf
E:\apache-flume-1.7.0-bin\apa
浏览 25提问于2019-03-19得票数 1
回答已采纳
1回答
我目前在Hadoop中对Twitter数据进行情感分析。我已经将FLUME配置为基于特定的关键字来获取数据，这些关键字保存在"FLUME.conf“文件中，如下所示致以最好的问候，拉姆
浏览 1提问于2014-03-10得票数 1
基于这篇文章它尝试使用Flume和twitter流来获取tweet进行数据分析。一切都很顺利，创建Twitter应用程序，在HDFS上创建目录，配置Flume，然后开始获取数据，在tweet上创建模式。
然后，问题就来了。Twitter streaming将推文转换为Avro格式，并将Avro事件发送到downsteam
浏览 3提问于2016-03-17得票数 3
由于一个无法摆脱的错误，我无法使用Flume将Twitter数据拉到HDFS中。 命令： bin/flume-ng agent --conf .<clinit>(TwitterStreamFactory.java:40)
at org.apache.flume.source.twitter.TwitterSource.configure:我手动将flume-sources 1.0-SNAPSHOT.jar添加到fl
浏览 38提问于2020-12-15得票数 0
回答已采纳
我正在尝试使用Flume进行twitter分析。为了从twitter获取tweet，我在flume.conf文件中设置了所有必需的参数(consumerKey、consumerSecret、accessToken和accessTokenSecret)TwitterAgent.sources = TwitterTwitterAgent.sinks = HDFS
TwitterAgent.source
浏览 6提问于2015-10-30得票数 1
我有一个hadoop集群和apache flume用于从twitter到HDFS的数据集成，它默认按时间顺序获取数据，就像大多数最近的推文将首先获取一样，现在我已经使用have从twitter获取特定时期的特定数据
浏览 0提问于2013-08-23得票数 0
#FLUME_CLASSPATH=""TwitterAgent.sinks = HDFS
#TwitterAgent.sources.Twitter.type = com.cloudera.flume.source.TwitterSourceTwitterAgent.sources.Twitter.type = org.apache.flume.source.
浏览 4提问于2015-09-25得票数 5
回答已采纳
云服务器
ICP备案
实时音视频
云直播
对象存储
腾讯云开发者
