我在一个基于社交网络的应用程序上工作，这是使用Apache web服务器和MYSQL服务器的数据库与codeigniter MVC框架。我不知道如何将Hadoop集成到这个应用程序中，也不知道如何编写map- reduce程序。
浏览 0提问于2011-08-09得票数 16
1回答
我对hadoop和bigdata非常陌生，通过horton的工作，我对hadoop提供的Pig、Hive和不同类型的分析有了一些了解，但还不清楚开发阶段，请给我一些例子，说明如何开始使用hadoop分析支持来构建一个应用程序
浏览 4提问于2014-11-06得票数 1
回答已采纳
我正在开发一个用于传感器数据和预测分析的大数据解决方案。我是大数据的新手，读过关于lambda-架构的文章。我考虑过将Cassandra数据库与Hadoop一起使用。Cassandra是一个高可用性和分区容错的数据库，Hadoop hdfs是一个用于大型分析作业的文件系统。Hadoop中的数据用于大型分析，而cassandra中的数据应该是我的Hadoop作业的结果。
这是否意味着我可以将原始数据存储在这两个文件中？我可以在Cassandra和Hadoop</e
浏览 2提问于2016-11-22得票数 4
1回答
Hadoop，火花和云
、、、、
看起来Hadoop、Spark和不同版本的Clouds提供了存储和分析大数据的工具。有一些文章比较Hadoop和Spark (例如，这篇文章)。还有一些文章讨论了AWS上用于使用Hadoop/spark的服务，例如这篇文章。
我的问题是，如果我使用的是提供存储和分析服务的云计算，我还需要hadoop/spark吗？任何有助于识别不同用例和应用程序的引用/阅读都将受到高度赞赏！
浏览 0提问于2023-04-16得票数 0
我想知道Hadoop批处理分析和Hadoop实时分析的区别。例如，Hadoop real time analytics可以使用Apache Spark完成，而Hadoop batch analytics可以使用Map reduce编程。另外，如果实时分析是更好的分析方法，那么批量分析需要什么？
谢谢
浏览 5提问于2016-02-11得票数 1
2回答
我有各种应用程序服务器(例如我也一直在使用hadoop与Hbase，Impala，Hive等。我可以得到我正在寻找的结果，使用命令行或使用web界面，如色调。现在，如何将Hadoop作为后端与当前的应用程序集成，以取代MySQL、MSSQL、Oracle等后端解决方案？附注:我知道很多都是使用hadoop进行批处理的，但HBase确实提供了一些近乎实时的分析。即使是批处理，我也想让用户开始一些分析，然后回来在我自己的前端应用程序中查看结果。
浏览 0提问于2014-04-24得票数 3
2回答
我想编写一个应用程序，该应用程序能够从大型生产系统的监视数据中生成报表并启用交互式数据分析(OLAP)。(我知道，前面有一些有问题的权衡决定，但让我们暂时搁置它们。)我确定了基本技术栈的下列可能性：
根据我的研究，我倾向于认为Hadoop/HBase/Hive将是最常见的组合。或者更具体地回
浏览 6提问于2013-06-24得票数 1
回答已采纳
2回答
应用洞察日志分析
、、、、
我有应用程序洞察的事件日志，其中事件被记录并作为json存储在存储在blob存储中的文本文件中。我需要找到符合标准的customProperty。点击次数非常少(约10或20)，但是记录的数据非常大。
浏览 7提问于2016-06-10得票数 0
回答已采纳
馈送Hadoop集群并使用该集群将数据馈送到Vertica/InfoBright数据仓库有什么意义？谢谢！
浏览 6提问于2011-11-25得票数 5
1回答
我安装了splunk来监控和分析hadoop作业。在Jobtracker、forwarder和TA中安装了splunk核心和splunk hadoop应用程序后，HDFS容量和插槽容量在利用率部分显示为N/A。知道可能的原因吗？
谢谢
浏览 2提问于2013-02-01得票数 1
回答已采纳
摘要：
在单个事务中使用Sqoop导出它。我正在用MongoDB构建一个web应用程序。虽然MongoDB在大部分工作中运行良好，但在某些部分，我需要更强的事务性保证，为此我使用了一个MySQL数据库。我的问题是，我想要阅读一个大型的MongoDB集合来进行数据分析，但是集合的大小意味着分析工作将花费太长的时间来处理。不幸的是，MongoDB的内置映射
浏览 8提问于2012-04-01得票数 7
回答已采纳
1回答
我对数据分析和大数据概念很陌生。我坚持要决定实现我的需求的技术是什么。我的客户正在使用多个oracle数据库作为其组织的ERP后端。这两个数据库具有不同的结构和不同的数据类型。我需要用这两个数据库的数据创建一个数据分析应用程序。什么样的技术可以由我来适应这个实现。我可以使用Hadoop和它的相关应用程序吗？如果我使用hadoop，如何将我的oracle数据库同步到hadoop。我正在寻找一个解决方案与实时同步。
或者可以使用本机与数据库的连接来实现数据
浏览 1提问于2017-05-08得票数 0
回答已采纳
3回答
我已经设置了一个具有3个DataNodes和1个NameNode的Hadoop集群。我还在其中一台DataNodes上安装了elasticsearch。( Hadoop集群和Elasticsearch可以独立工作)现在，我想将我的Hadoop集群与elasticsearch集成。我发现有一个单独的插件可以实现这个功能。但是我无法下载它。
浏览 2提问于2014-05-02得票数 0
1回答
我正在设计和实现一个(接近)实时的网络分析引擎。这类似于和。预计每天将有近1.5亿次请求。我们有5到8台机器，每台机器都有2.5 GB (8核) CPU和16 GB的RAM。目前，我正在分析mongo-hadoop组合以达到此目的。据我所知，到目前为止，将所有数据保存在一个地方(一台机器)进行分析是困难的。因此，在我看来，Hadoop作为数据处理器和MongoDB作为数据存储是一个很好的组合。
对于这类应用程序，有没有一个标准的或者(我应该说)经过验证的架构？我应该考虑哪些设计考虑因素？
浏览 5提问于2012-11-18得票数 0
3回答
我正在构建一个完整的“横向扩展”解决方案，为我们的客户提供深入的实时分析。我希望每个会话长达4分钟，并在4分钟内触发大约20个事件。我考虑过Hadoop，因为关系型数据库管理系统显然不太容易向外扩展(如果你说服我PostgreSQL可以在一台5000-8000美元的机器上处理这个负载，我会使用PostgreSQL )。然而，我读到过<
浏览 3提问于2011-11-21得票数 2
2回答
我想知道hadoop如何帮助用户数据跟踪。例如，我有一个电子商务应用程序，我希望记录客户执行的每一个活动，例如查看项、添加到购物车或购买项目。是否有使用hadoop记录事件的示例或最佳实践。我之所以想使用hadoop，是因为它的高可用性和可伸缩性，而且记录的数据也将从GBs增长到TBs。还是我错了？因为日志记录应该独立于hadoop，以后对日志数据的分析可以用hadoop完成吗？Hadoop仅仅是关于MapReduce的吗？如果我可以使用had
浏览 3提问于2014-04-11得票数 1
回答已采纳
我使用beanstalkd从多个前端服务器(php应用程序)收集日志数据，并将数据插入到mysql中。只要数据增长，我就需要选择Hadoop来分析数据，以便使用Hive实现BI目的。将beanstalkd与hadoop集成的最佳实践是什么？我找到了FlumeNG，但它似乎太重了，无法满足我的需求。
浏览 3提问于2014-06-04得票数 2
2回答
我目前有一个web应用程序，它与Oracle中的所有数据一起运行。在较高级别上，应用程序由一个java、一些java、一些Ajax和oracle数据库组成。我想知道将整个套件转换为Hadoop会花费多少工作成本？下面是一些问题，可以帮助我掌握它。这里也有一些Ajax，这与SQL和Hadoop有什么不同？
在解释与Hadoop有关
浏览 3提问于2014-03-27得票数 2
回答已采纳
2回答
由于我们必须创建复杂的查询和大量的连接等，如果我们使用Cassandra、Hadoop或Elasticsearch来加载数据(加载数据或增量更新的日常作业)并查询所有任务，这是不是一个好主意。哪个是卡桑德拉、Hadoop、Elasticsearch或MongoDB的首选？
我们还希望为统一数据库上的报告和分析构建一个Web UI。
浏览 0提问于2013-04-30得票数 0
1回答
Storm框架应用程序
、、、、
我使用Hadoop构建了一个应用程序，用于在分布式环境中搜索相似的图像存储。但是Hadoop不支持实时处理，这就是响应时间长的原因。我知道Storm是另一个大数据分析应用程序框架。但我对我们是否可以使用Storm来实现这种应用程序感到困惑。
有没有人能给出一个有效使用Storm框架的应用程序的建议。
浏览 0提问于2015-10-07得票数 1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
