腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
1个
Hadoop
和
Hbase
大
簇与1个
Hadoop
簇+1个Hbase簇
、
Hadoop
将通过从Hbase读取
数据
并将
数据
写入Hbase来运行许多作业。假设我有100个节点,那么有两种方法可以构建
Hadoop
/Hbase集群: 哪种
浏览 4
提问于2014-04-19
得票数 1
回答已采纳
1
回答
Hadoop
,蜂箱,动物园管理员等
、
、
我开始了解
hadoop
。我对它有了一些了解,但是当我读到关于Hive,Pig
和
其他Apache工具时,我感到很困惑。因此,有人能简单地概述一下
hadoop
和
Apache的工具(Hive、Pig、等),我想知道它们在处理大
数据
时是如何和在哪里使用的。
浏览 3
提问于2014-05-20
得票数 0
回答已采纳
1
回答
Kylin其他
数据
源,如SQL Server
、
、
、
我有一个库伯内特斯集群与凯林作为后端
和
超级作为前端。kylin.source.default=8 kylin.source.jdbc.connection-url但是在容器中,我没有pip来安装它,所以我应该创建一个安装了pip
和
SQOOP的新映像吗?这条路对吗?Kylin需要什么?
浏览 4
提问于2021-08-25
得票数 0
1
回答
所有NoSQL框架都使用吗?
、
、
、
、
我是大
数据
的新手;显然,大多数使用NoSQL框架(如MongoDB、CouchDb
和
Cassandra )的应用程序都需要访问大量的
数据
。现在,我的问题是,这些NoSQL工具是否都使用
Hadoop
文件系统作为它们的存储,或者某些文件系统是如何使用的呢?如果他们使用
Hadoop
文件系统,那么他们有一个简单的方法来集成
Hadoop
文件系统吗? 谢谢
浏览 2
提问于2015-01-26
得票数 1
回答已采纳
1
回答
我的MongoDB需要
Hadoop
吗?
、
、
我听说
Hadoop
是一个很棒的
数据
处理工具,一旦MongoDB连接到,它就可以提高性能。它能很好地处理Map Reduce,但它对我这个不包含任何Map Reduce函数的例子有用吗?此外,如果我在MongoDB中使用Map Reduce并连接
Hadoop
,性能将如何提高?
浏览 0
提问于2014-04-25
得票数 0
1
回答
使用supercsv的
Hadoop
、
、
我必须在非常
大
的文本文件(如5TB大小)中处理
数据
。处理逻辑使用supercsv解析
数据
并对其运行一些检查。显然,由于规模相当
大
,我们计划使用
hadoop
来利用并行计算的优势。我在我的机器上安装了
hadoop
,然后开始编写mapper
和
reducer类,然后我就被卡住了。因为映射需要一个键值对,所以要读取这个文本文件,我不确定在这个特定场景中应该是什么键
和
值。我的思考过程是这样的(让我知道我是否正确) 1)使用superCSV
和
<em
浏览 3
提问于2012-10-26
得票数 2
1
回答
HBase表的大小比
hadoop
中的文件大得多。
、
、
最近,我使用
hadoop
批量加载将
数据
放入hbase中,首先,我调用hdfs将
数据
写入
hadoop
中的文件中,总共有7,000,000行
数据
,大小为503 to。其次,我使用org.apache.
hadoop
.hbase.mapreduce.ImportTsv
和
org.apache.
hadoop
.hbase.mapreduce.LoadIncrementalHFiles将
数据
放入hbase中。我所做的最重要的事情是使用
大</e
浏览 5
提问于2012-12-13
得票数 3
1
回答
在蜂巢中生成星型模式
、
、
、
、
我来自世界,在那里,我通过一个平面提要生成维度
和
事实表。在一般的
数据
仓库项目中,我们将提要划分为事实
和
维度。例如:我对
Hadoop
完全陌生,我知道我可以在蜂箱中构建
数据
仓库。那么,下面的策略是正确的方式加载事实
和
维度的蜂巢?将源
数据
加载到一个单元表中;假设是Sales_Data_Warehouse 从New_Guid()、Customer_Name、Customer_Address这就是我应该在
浏览 4
提问于2017-03-28
得票数 12
回答已采纳
2
回答
地图缩减:这是使用的底层
数据
结构。
、
、
我想知道,如果
hadoop
中使用了这么
大
的
数据
集,那么
Hadoop
使用的
数据
结构是什么。如果可能的话,请有人向我提供
hadoop
中底层
数据
结构的详细视图。
浏览 12
提问于2014-02-24
得票数 2
回答已采纳
2
回答
扩展算法所需的概念
和
工具
、
、
、
、
我想开始思考如何扩展我为
数据
分析编写的算法,以便它们可以应用于任意
大
的
数据
集。我想知道实现这一点的相关概念(线程、并发、不可变
数据
结构、递归)
和
工具(
Hadoop
/MapReduce、Terracota
和
Eucalyptus)是什么,以及这些概念
和
工具是如何相互关联的。我对R、Python
和
bash脚本以及C
和
Fortran编程有基本的了解,尽管我也熟悉一些基本的函数式编程概念。采用像R/
浏览 2
提问于2010-03-10
得票数 5
回答已采纳
1
回答
对于这个场景,Python
和
Hadoop
的选择是一个很好的选择吗?
、
、
我正在寻找一个解决方案来构建一个具有以下特性的应用程序: 我在哪里可以找到一个用Python编写的快速示例,用于向
Hadoop
添加/检索信息,以便用我的一只眼睛看到概念运行的证据并作出决定? 提前感谢!
浏览 1
提问于2017-08-11
得票数 1
2
回答
在Azure上使用IaaS的
Hadoop
、
、
、
我正在考虑使用Azure中的虚拟化环境为大
数据
分析设置
Hadoop
集群。由于
数据
量非常
大
,我正在考虑将
数据
存储在辅助存储中,如Azure data Lake Store
和
Hadoop
集群存储将充当主存储。我想知道,如何进行配置,以便在我创建Hive表
和
分区时,部分
数据
可以驻留在主存储中,其余
数据
可以驻留在辅助存储中? 感谢问候,马德胡
浏览 10
提问于2018-01-27
得票数 2
1
回答
如何在
Hadoop
中建立接收
和
存储大
数据
的大
数据
平台
、
、
、
、
我试图建立一个
大
的
数据
平台,在
Hadoop
中接收
和
存储大量的异构
数据
,如文档、视频、图像、传感器
数据
等,然后实现分类过程。那么,由于我目前使用的是VMware VSphere EXSi
Hadoop
,什么样的体系结构可以帮助我 Habse XAMPP所有这些都很好,但是我不知道如何接收大量
数据
和
如何存储
数据
,因为我发现Hbase是一个面向列的
数据
库,而不是
数据
仓库。
浏览 1
提问于2015-10-05
得票数 0
回答已采纳
2
回答
相当于mongodb的flume或kafka
、
、
、
在
Hadoop
世界中,flume或kafka习惯于流或收集
数据
,并将它们存储在
Hadoop
中。我只是想知道Mango是否有一些类似的机制或工具来实现一些?
浏览 3
提问于2013-08-02
得票数 1
回答已采纳
2
回答
HBase项目-技术
和
架构
、
、
、
、
我想开发一个应用程序来学习如何使用HBase。我可以使用什么技术来使用HBase开发一个好的学习项目?例如,我想使用Ruby on Rails或Java或Spring之类的东西。我能做什么架构?
浏览 0
提问于2012-02-25
得票数 1
回答已采纳
1
回答
HBase可以像
Hadoop
一样访问文本文档
和
CSV文档吗?
、
、
在
Hadoop
中,我可以轻松地创建Map/Reduce应用程序,这些应用程序可以访问
和
处理巨大的文本文件
和
csv文件中的
数据
。我的问题是,Hbase能不能做同样的事情,访问这么
大
的文件,或者HBase有其他用途?HBase就像运行关系
数据
库一样运行查询;所以,我很难理解Hbase的优势,除非它可以像
Hadoop
那样访问巨大的文本
和
csv文件。
浏览 3
提问于2012-12-18
得票数 0
回答已采纳
3
回答
使用cassandra
和
hadoop
的大
数据
lambda架构
、
、
我正在开发一个用于传感器
数据
和
预测分析的大
数据
解决方案。我是大
数据
的新手,读过关于lambda-架构的文章。我考虑过将Cassandra
数据
库与
Hadoop
一起使用。Cassandra是一个高可用性
和
分区容错的
数据
库,
Hadoop
hdfs是一个用于大型分析作业的文件系统。为什么
数据
应该放在
Hadoop
的第一位?如果
Hadoop
包含原始
数据
,那么Cassandra
浏览 2
提问于2016-11-22
得票数 4
1
回答
将具有现有
数据
的服务器作为DataNode添加到
Hadoop
我需要使用现有
数据
从多个服务器构建分布式防故障(尽可能)集群。我刚接触
Hadoop
,但据我所知,
Hadoop
比其他产品更能满足我的需求。问题是,我已经有一些
数据
(相当
大
的文件),我希望在
Hadoop
中可用。是否可以将已有
数据
的服务器作为DataNode添加到
Hadoop
中?我该怎么做才能做到这一点呢?
浏览 0
提问于2015-10-22
得票数 0
2
回答
虚拟机上的
Hadoop
、
、
、
为了实现可伸缩性,我们希望从MySQL迁移到
Hadoop
。运行在虚拟机上的
hadoop
集群会改善我们网站的性能吗? 在虚拟机(ESXi)上实现
hadoop
集群有哪些优点
和
缺点?
浏览 0
提问于2011-01-26
得票数 -2
2
回答
hadoop
是怎么工作的?客户端如何连接到
hadoop
、
、
、
我对
hadoop
有基本的理解。我的问题是客户机/开发人员如何连接到
hadoop
集群来执行查询。 例如,我是
hadoop
开发人员。某个远程位置的
Hadoop
集群。如何连接到
hadoop
集群来运行我的java代码?我是否也必须在我的笔记本电脑中安装
hadoop
(为此我必须运行Linux)?或者,如果我与
Hadoop
集群在同一个网络中,只需在我的笔记本电脑中挂载共享,并将我的代码放入
hadoop
集群,是否可以呢?第二个问题:对于运行java代码,
浏览 4
提问于2014-11-07
得票数 1
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
大数据hadoop和spark有什么区别?内附大数据Spark+Hadoop资料
Hadoop环境中管理大数据存储八大技巧
大数据技术,Spark详细介绍,Spark和Hadoop的区别
Hadoop 没死,开源大数据基于技术和潮流不断演进
大数据之Hadoop
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券