腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
1
回答
如何在现有系统中实现
Hadoop
框架
java
、
hadoop
、
mapreduce
、
hbase
、
hdfs
我计划在我的基于web的应用程序中实现
Hadoop
框架。但我只是将其托管在本地主机中。我计划实现mapreduce和hdfs作为分布式文件系统。问题是,我要做的第一步是什么?我应该从什么开始呢?我对
Hadoop
框架进行了深入的研究。了解它是如何工作的,并尝试使用互联网上的wordcount示例。
浏览 2
提问于2015-02-04
得票数 0
3
回答
用于处理大数据的MySQL集群与
Hadoop
hadoop
、
mapreduce
、
hive
、
bigdata
、
mysql-cluster
我想知道使用MySQL集群和使用
Hadoop
框架的优缺点。什么是更好的解决方案。我想听听你的意见。
Hadoop
有什么缺点吗? 您也可以使用商品硬件。为什么
Hadoop
是处理大数据的圣杯?你的意见是什么?
浏览 7
提问于2014-01-29
得票数 2
1
回答
集成了Mongdb,加快了
数据处理
速度
mongodb
、
hadoop
Mongodb可以与
hadoop
集成以进行更快的
数据处理
,但在此集成过程中( mongodb ->
hadoop
),数据会从mongodb传输到
hadoop
。问题是,2.数据传输( mongodb ->
hadoop
)是一次性活动吗?如果是,mongodb的后续更新将如何反映在
hadoop
中。
浏览 2
提问于2014-09-01
得票数 3
6
回答
如何搭建
Hadoop
处理环境?
apache
、
mapreduce
、
分布式
、
hadoop
、
数据处理
Apache
Hadoop
是用于开发在分布式计算环境中执行
数据处理
应用程序的框架。旨在从单个服务器提供存储和计算资源的方式扩展到数千台机器。Apache
Hadoop
的核心部分由存储部分(
Hadoop
分布式文件系统)及其
数据处理
部分(MapReduce)组成。
Hadoop
将文件分割成大块,并将它们分发到群集中的节点上。那么如何搭建
Hadoop
处理环境?
浏览 2195
提问于2018-10-24
2
回答
我们可以使用
Hadoop
MapReduce进行实时
数据处理
吗?
hadoop
、
hive
、
mapreduce
、
hdfs
Hadoop
地图-减少和它的回声系统(如蜂巢..)我们通常用于批处理。但是我想知道是否有任何方法可以使用
hadoop
MapReduce作为实时
数据处理
的例子,比如实时结果,实时tweet。如果不是,实时
数据处理
或分析的替代方案是什么?
浏览 0
提问于2018-12-18
得票数 2
回答已采纳
1
回答
在Lucene中一起显示同一系列中的文档。
lucene
这些文章分几部分编写,例如,我从IBM developer works获得了这些文章: 使用
Hadoop
的分布式
数据处理
,第2部分:更进一步 我将把这三篇文章分别编入索引。
浏览 1
提问于2010-07-18
得票数 2
3
回答
Hadoop
离线
计算意义
hadoop
我一直在读
Hadoop
,有一件事我读了几遍,那就是
Hadoop
对
离线
计算很有好处。“
离线
计算”是什么意思?
浏览 7
提问于2016-01-13
得票数 2
回答已采纳
1
回答
使用Python存储和访问大数据
python
、
bigdata
我正在考虑将PyTables或MongoDB与PyMongo (或者
Hadoop
-谢谢)一起使用。是否有其他我应该考虑的文件结构/DB? 我要做的一些操作是计算一个点到另一个点的距离。
浏览 5
提问于2012-10-08
得票数 3
回答已采纳
2
回答
hadoop
和spark有什么区别?
hadoop
、
apache-spark
随着see在市场上的增长,我可以看到spark在
Hadoop
上的主要用例如下: 而且处理得很快。 火花会在未来几天取代
Hadoop
吗?当火花并行运行时,
Hadoop
同时工作?(这是真的吗?)
浏览 0
提问于2015-07-08
得票数 3
回答已采纳
1
回答
Apache Spark与MapReduce
apache-spark
、
hadoop
、
mapreduce
我一直在查找Spark和MapReduce之间的区别,我真正发现的是Spark在内存和磁盘上运行,这使得它的速度大大加快。但想必,使用Spark,您无论如何都会在内存和磁盘之间移动数据,因此如果内存空间不足,您可以将一些数据移回磁盘,然后引入新数据进行处理。
浏览 0
提问于2018-05-02
得票数 0
1
回答
Hadoop
simple Java程序-与MongoDB交互
hadoop
我选择
Hadoop
进行
数据处理
,并在我的一个包含大量数据的项目中使用MongoDB进行存储。我配置并安装了
hadoop
,并执行了中给出的示例,该示例具有读取给定文本文档中出现的单词的次数的示例,并且运行良好。但是,当我尝试寻找一个简单的Java示例时,它将连接到MongoDB并执行简单的
数据处理
,例如,表中存储的记录数量属于某个简单条件(name like '%John%')。 有人有什么建议吗?
浏览 1
提问于2013-05-24
得票数 0
回答已采纳
1
回答
Hadoop
和图像的3d渲染
3d
、
rendering
、
hadoop
目标是学习
hadoop
,而不是图像处理。因此,谁能建议我应该使用什么语言,c++或java,以及3d渲染器的一些标准实现。任何其他的帮助都是非常有用的。
浏览 0
提问于2010-09-13
得票数 1
1
回答
与单独安装HBase和
Hadoop
相比,同时安装HBase和
Hadoop
有什么利弊?
hadoop
、
hbase
、
hdfs
、
distributed-computing
我的意思是,有两个选择: 1.在
Hadoop
集群上安装HBase,这也是
离线
计算,所以只有1个
hadoop
集群。2.安装一个用于
离线
计算的
Hadoop
集群,然后再安装一个仅供HBase使用其HDFS的
Hadoop
集群。这两个选项的优缺点是什么?
浏览 2
提问于2013-07-11
得票数 1
2
回答
MapReduce是否需要与HDFS一起使用?
java
、
hadoop
、
mapreduce
、
hdfs
我希望使用
Hadoop
MapReduce获得更好的
数据处理
性能。那么,我是否需要与
Hadoop
一起使用它呢?或者MapReduce可以与其他类型的分布式数据一起使用?请给我带路..。
浏览 1
提问于2015-01-20
得票数 0
回答已采纳
1
回答
蜂箱更新效率(0.14版)
hadoop
、
hive
如何有效地处理未分区的列上的更新?
浏览 4
提问于2015-04-23
得票数 1
1
回答
从32位桌面构建并行处理网格
hypervisor
、
gridengine
、
distributed-computing
我正在我的笔记本电脑上运行模拟(Core2Duo1.8Ghz和4GB内存运行windows 7),这需要很长时间。怎么做?我应该使用哪个操作系统?我的操作系统应该是服务器吗?我需要额外的硬件吗? 请给我指点任何教程或书籍。请给我你的宝贵建议和建议。
浏览 0
提问于2011-05-30
得票数 1
回答已采纳
1
回答
PC上的大量数据?
python-3.x
、
database
、
apache-spark
你好,我想处理10亿行,23列的大量数据。但在熊猫身上,我甚至无法读取数据。那么,如何在我的Dell XPS 9570计算机上处理这些数据呢?我能用spark来做这个吗?有什么建议可以在我的电脑上处理吗?
浏览 11
提问于2019-10-23
得票数 0
1
回答
大容量交易数据信息模式生成
hadoop
、
distributed-computing
、
large-data-volumes
我试图获得更多关于使用
Hadoop
等分布式
数据处理
的信息。我刚刚开始阅读
Hadoop
,据我最初的理解,
Hadoop
非常适合非结构化
数据处理
,对于关系
数据处理
可能用处不大。
浏览 1
提问于2012-10-25
得票数 1
回答已采纳
1
回答
星火是Apache
Hadoop
的替代品吗?
hadoop
、
apache-spark
、
hdfs
、
pyspark
我们在
hadoop
上工作了很多年。它被用于分布式数据存储以及
数据处理
。现在我们知道火花比
hadoop
要强。这是否意味着我们应该用火花取代
hadoop
生态系统?有人能详细说明一下吗?
浏览 2
提问于2016-12-27
得票数 0
回答已采纳
1
回答
我是否可以运行
Hadoop
onflow (在应用程序运行时运行map还原)
java
、
hadoop
我们能在流上使用
hadoop
生成输出吗?我有一个由日志和预约id组成的大文件,如果我使用传统的RDBMS,我可以得到预约id,但需要1或2个小时。我是否可以运行
Hadoop
onflow (在应用程序运行时运行map还原)
浏览 4
提问于2013-10-25
得票数 0
回答已采纳
点击加载更多
热门
标签
更多标签
云服务器
对象存储
ICP备案
云点播
实时音视频
活动推荐
运营活动
广告
关闭
领券