1回答
如何将Facebook评论和feeds拉到hadoop？
facebook、hadoop
我正在做一个案例研究，我必须从我的facebook页面获得评论、活动等，并在Hadoop中聚合它们，以便使用map reduce进行文本分析。
什么是拉动Facebook粉丝页面馈送的正确方法？有没有什么API可供flume或scribe等hadoop组件使用？
浏览 0提问于2012-10-17得票数 4
回答已采纳
1回答
Hadoop日志文件分析
java、hadoop
它可以部署在Hadoop上，其目的如下：大部分地图减少了阿尔戈。在日志文件来自不同来源(Tux、Websphere、IIS等)的情况下，如何设计map()和()函数--本例中为--如何存储日志报告(例如:来自Tux的错误&#
浏览 0提问于2012-06-15得票数 0
回答已采纳
1回答
如何使用nodejs创建日志收集服务？
node.js、logging
我需要建立一个日志收集系统。1、作为前端开发人员，我是否可以花费一定的时间(例如，一周)来完成简单的构建而不需要服务端的基础？2、我可以使用nodejs、mongodb和其他技术栈来构建日志系统吗？
浏览 4提问于2022-09-05得票数 0
回答已采纳
1回答
设计日志数据存储时使用哪种策略？
mysql、logging、cassandra、cluster-computing
日志。为了生成日志，我们使用了一个基于Apache synapse esb的解决方案。但是，由于我们希望存储日志，并且仅为了维护问题而读取日志，因此读/写比率将会很低。
浏览 3提问于2011-10-14得票数 2
2回答
将数据加载到Hadoop中
hadoop、mapreduce、apache-pig、sqoop、flume
我正试图找出这两个问题的正确答案，这两个问题都涉及将数据加载到您的Hadoop，这是我在网络上发现的，作为Hadoop开发的材料和案例研究的一部分。第一个问题是：A. HDFS指挥部C.您将如何收集这些数据以进行分析？编写一个MapReduce作业，其中web服务器用于映射器，<em
浏览 2提问于2015-01-13得票数 1
回答已采纳
2回答
Hadoop -分析日志文件(Java)
java、logging、hadoop
日志文件如下所示：--此日志中的具体示例：User45687也做了order，但是他没有收到reminder，所以没有总结他的dataU
浏览 4提问于2013-03-11得票数 6
1回答
我需要一个工具来分析日志Hadoop
hadoop、mapreduce、hadoop2、hadoop-streaming、hadoop-plugins
我有来自Hadoop的日志文件，我想分析这些大文件以生成报告，所以我正在寻找一个方便的工具来分析这些文件。请介绍用于分析这些文件的工具。
浏览 16提问于2016-08-13得票数 0
2回答
应用洞察日志分析
azure、azure-blob-storage、azure-hdinsight、azure-application-insights、bigdata
我有应用程序洞察的事件日志，其中事件被记录并作为json存储在存储在blob存储中的文本文件中。我需要找到符合标准的customProperty。点击次数非常少(约10或20)，但是记录的数据非常大。
浏览 7提问于2016-06-10得票数 0
回答已采纳
2回答
hadoop如何帮助用户跟踪数据？
logging、hadoop、mapreduce
我想知道hadoop如何帮助用户数据跟踪。例如，我有一个电子商务应用程序，我希望记录客户执行的每一个活动，例如查看项、添加到购物车或购买项目。是否有使用hadoop记录事件的示例或最佳实践。我之所以想使用hadoop，是因为它的高可用性和可伸缩性，而且记录的数据也将从GBs增长到TBs。还是我错了？因为日志记录应该独立于hadoop，以后对日志数据的分析可以用hadoop完成吗？Hadoop仅仅是关于MapReduce的吗？如果我可以
浏览 3提问于2014-04-11得票数 1
回答已采纳
2回答
跨多个节点的日志的Hadoop句柄
hadoop、hdfs
我有十个服务器，每个服务器每天都会产生大约3G日志文件。我已经完成了hadoop教程，并在每台机器上安装了每个hadoop (HDFS)。我想要使用map-reduce来分析这些日志。我的问题是如何在hadoop中启用MP的每日日志？目前，对于服务器A，我手动将日志文件复制到HDFS目录：然后
>
浏览 28提问于2017-02-20得票数 0
回答已采纳
2回答
Hadoop日志记录和报告
hadoop、client-server、thrift、scribe
我们可以只使用Hadoop进行日志记录，还是只使用Hadoop进行报告？因此，我可以尝试不同的东西，比如使用脚本进行日志记录和使用Hadoop进行报告。
浏览 3提问于2011-12-05得票数 0
3回答
Hadoop和分析？
hadoop、analytics
我正在构建一个完整的“横向扩展”解决方案，为我们的客户提供深入的实时分析。我希望每个会话长达4分钟，并在4分钟内触发大约20个事件。我考虑过Hadoop，因为关系型数据库管理系统显然不太容易向外扩展(如果你说服我PostgreSQL可以在一台5000-8000美元的机器上处理这个负载，我会使用PostgreSQL )。然而，我读到过<
浏览 3提问于2011-11-21得票数 2
2回答
在本地模拟集群的Hadoop框架
hadoop
有没有可以在Linux或Windows机器上本地模拟完整集群的Hadoop框架？DFS可以在本地复制数据，而计算层将进行并行执行？有没有这样或类似的框架？
浏览 3提问于2011-11-28得票数 1
回答已采纳
1回答
Ctrl+C后纱线+ Sqoop =粘合接受
hadoop、hadoop-yarn、sqoop
我是Hadoop的新手，我用一个节点执行POC。这是第二次发生这种情况，而且不知道如何解决。[root@hadoop01 /]# hadoop versionSubversion git@github.com:hortonworks/hadoop.gitsource with checksum a25c30f622eb057f47e2155f78dba5e
This command was run using /usr&#
浏览 1提问于2015-07-15得票数 0
回答已采纳
4回答
Flume和Sqoop有什么不同？
hadoop、sqoop、flume
Flume和Sqoop都是用于数据移动的，那么它们之间的区别是什么呢？在什么情况下应该使用Flume或Sqoop？
浏览 133提问于2013-10-22得票数 22
回答已采纳
2回答
/local/hadoop-2.2.0export HADOOP_MAPRED_HOME=/usr/local/hadoop-2.2.0export HADOOP</
浏览 3提问于2015-02-22得票数 0
回答已采纳
2回答
我可以考虑哪些解决方案/模式来存储数百万原始数据？
mongodb、redis、analytics、bigdata
另一方面，如果您想对其执行复杂的分析和数据挖掘，那么数据库是很有帮助的。当涉及到聚合为更具可读性/分组的格式时。像Postgres这样的RDBMS就足够了。然而，我正在考虑使用MongoDB的文档结构。
浏览 1提问于2013-05-12得票数 0
回答已采纳
2回答
带蜂巢的Hadoop
hadoop、hive
我们希望使用Hadoop开发一个简单的Java应用程序，其中包含日志文件分析。下面是开发应用程序的步骤。但我们无法通过这一办法。日志文件将使用sftp/ftp从客户端机器上传到Hadoop服务器。
我们
浏览 7提问于2012-12-18得票数 1
1回答
使用CouchDB和Hadoop来存储/分析web应用程序日志数据的优点是什么？
ruby-on-rails、logging、couchdb、hadoop、analytics
我想将普通的Rails日志文件用于我的web应用程序，这样我就可以分析页面视图和使用模式。我听说CouchDB有时会用来做这件事。另一方面，我知道有些人只是将纯文本日志文件提供给Hadoop，并将其缩减为摘要统计数据，然后将其插入MySQL。
这两种日志记录和分析日志文件的方法各有什么优缺点？
浏览 2提问于2011-03-02得票数 3
回答已采纳
2回答
连接异常时，从quickstart.cloudera/172.17.0.2调用quickstart.cloudera:8020失败: java.net.ConnectException:连接被拒绝
hadoop、docker、dockerfile、cloudera
我对Docker和Hadoop系统非常陌生。我已经在Ubuntu 16.04中安装了Docker，并在一个新的Docker容器中运行了Cloudera中的Hadoop镜像。
浏览 72提问于2017-02-10得票数 8
回答已采纳
云服务器
对象存储
ICP备案
云点播
实时音视频
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号