腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
1
回答
云SQL - Postgres -非常慢的插入
python
、
pandas
、
postgresql
、
google-cloud-sql
我可能习惯了
大数
据技术,但是当我尝试插入大约300k行,总共30Mb (作为csv)时,我不认为花15分钟在Postgres上的插入时间是可以接受的。
浏览 0
提问于2020-10-27
得票数 3
3
回答
如何在家里学习云
计算
和
大数
据?
learning
、
cloud-computing
、
big-data
我想在家里学习云
计算
和
大数
据。在云
计算
中应该学习哪些技术? 学习
大数
据(
Hadoop
)的技术是什么?
浏览 0
提问于2012-07-04
得票数 15
回答已采纳
3
回答
Hadoop
是什么?怎么使用呢?
mapreduce
、
hadoop
听说
Hadoop
是做
大数
据并行
计算
的框架,这种跟“云
计算
“有什么区别?
浏览 818
提问于2017-09-28
2
回答
BOINC与
Hadoop
/Spark/etc的差异
hadoop
、
distributed-computing
、
boinc
、
bigdata
与
Hadoop
/Spark/等
大数
据框架?它们似乎都是分布式
计算
框架--我有什么地方可以读到其中的差异,尤其是BOINC吗? 看来欧盟的大型强子对撞机正在使用BOINC,为什么不使用
Hadoop
呢?
浏览 3
提问于2016-06-25
得票数 1
回答已采纳
1
回答
我 想好好学精通一门技术,大家用的走过的路,帮我指点指点呗 让我少走了弯路和坑的苦 ?
自学,自己摸索 白白浪费大把时光 二是,降低他人的学习成本。 三是,别人对自己学习结果的审核。
浏览 356
提问于2020-09-25
3
回答
用于处理
大数
据的MySQL集群与
Hadoop
hadoop
、
mapreduce
、
hive
、
bigdata
、
mysql-cluster
我想知道使用MySQL集群和使用
Hadoop
框架的优缺点。什么是更好的解决方案。我想听听你的意见。
Hadoop
有什么缺点吗? 没有实时数据访问。分析数据可能需要几分钟或几个小时。因此,在我看来,对于处理
大数
据,MySQL集群是更好的解决方案。为什么
Hadoop
是处理
大数
据的圣
浏览 7
提问于2014-01-29
得票数 2
1
回答
我们如何在开源Spark和Hortonworks的
Hadoop
沙箱中使用集群?
amazon-web-services
、
hadoop
、
apache-spark
我下载了Apache Spark和Hortonworks
Hadoop
Sandbox。据我所知,我们通过将任务分布到多台机器或集群来分析
大数
据。但是在Spark或
Hadoop
的情况下,当我简单地下载这些环境时,我使用的是谁的集群?他们说这些环境提供了单节点集群,也就是说,我假设我的
计算
机本身。但是,如果我被限制在我的
计算
机本身,我如何分析
大数
据?简而言之,在我自己的笔记本电脑上使用Spark的逻辑是什么?
浏览 0
提问于2017-03-19
得票数 0
1
回答
java.net.ConnectException:使用外壳命令时在
Hadoop
中拒绝连接
java
、
linux
、
ubuntu
、
hadoop
、
hdfs
exception: java.net.ConnectException: Connection refused; For more details see: http://wiki.apache.org/
hadoop
exception: java.net.ConnectExc
浏览 2
提问于2015-03-22
得票数 0
3
回答
国内
Hadoop
大数
据解决方案与传统的有何优势?
大数据解决方案
、
分布式
、
hadoop
浏览 668
提问于2019-03-27
1
回答
Hadoop
,火花和云
machine-learning
、
data-mining
、
apache-spark
、
apache-hadoop
、
cloud
看起来
Hadoop
、Spark和不同版本的Clouds提供了存储和分析
大数
据的工具。有一些文章比较
Hadoop
和Spark (例如,这篇文章)。还有一些文章讨论了AWS上用于使用
Hadoop
/spark的服务,例如这篇文章。 我的问题是,如果我使用的是提供存储和分析服务的云
计算
,我还需要
hadoop
/spark吗?
浏览 0
提问于2023-04-16
得票数 0
1
回答
Hadoop
集群中的最
大数
据阳极数是多少?
hadoop
、
hortonworks-data-platform
我使用8节点
hadoop
集群,namenode内存使用率显示为7%。我觉得这个集群将达到namenode内存的最大限度。 当前集群存储大小为5.6TB,namenode堆大小为4GB。:对于
Hadoop
集群(使用单个namenode),
计算
最
大数
据节点的方法是什么?
浏览 1
提问于2014-12-07
得票数 2
2
回答
Hadoop
MapReduce vs MPI ()--什么时候使用其中一种而另一种?
hadoop
、
parallel-processing
、
mapreduce
、
mpi
我对并行
计算
很陌生,刚刚开始在Amazon上试用MPI和
Hadoop
+MapReduce。但我不知道什么时候该用一种而另一种。 但是,我也看到了MapReduce on MPI ()的实现,它不提供容错,但在某些基准测试上比在
Hadoop
上的MapReduce更有效,而且似乎使用外存来处理
大数
据。相反,在新一代
Hadoop</em
浏览 5
提问于2015-01-06
得票数 17
回答已采纳
3
回答
R的记忆约束是什么?
apache-hadoop
、
r
在回顾“应用预测建模”a审查员陈述时:R的内存限制
浏览 0
提问于2014-05-14
得票数 11
回答已采纳
1
回答
R server 9.0.1仍然无法rxImport海量数据
microsoft-r
我渴望在
hadoop
计算
环境中使用Microsoft R server来处理真正的
大数
据。它可以很好地处理不大的数据。但是当数据量很大时,它会失败,并出现以下错误:
浏览 0
提问于2017-03-23
得票数 1
2
回答
在
Hadoop
中,数据局部性究竟意味着什么?
hadoop
、
mapreduce
许多
Hadoop
教程站点(即)定义的数据局部性说明:“
Hadoop
中的数据局部性是将
计算
移至接近实际数据所在的位置,而不是将
大数
据移动到
计算
中。这使整个网络拥塞最小化。”我可以理解,让数据所在的节点处理这些数据的
计算
,而不是移动数据,将是有效的。然而,“将
计算
移到实际数据的位置”是什么意思呢?这是否意味着,如果数据位于德国的服务器上,那么使用法国的服务器对这些数据进行
计算
比使用新加坡的服务器进行
计算
要好,因为法国比新加坡离德国更近?
浏览 6
提问于2019-10-07
得票数 3
回答已采纳
1
回答
如何开始学习谷歌云数据流?
bigdata
、
google-bigquery
、
google-cloud-platform
、
google-cloud-dataflow
我正在学习
计算
机工程。我正在考虑学习。如果是的话,我如何开始学习呢?
浏览 2
提问于2015-03-30
得票数 1
回答已采纳
1
回答
想购买云服务做
大数
据
计算
及数据分析,如何选择满足个人日常学习的配置?
云数据库 SQL Server
想购买云服务做
大数
据
计算
和分析,如何选择满足个人日常学习的配置?我是小白,从未用过云服务,现在需要用到
Hadoop
、Hbase、Mysql、Hive、Spark、zookeeper等,只是学习使用
浏览 213
提问于2018-06-21
1
回答
机器学习如何与
Hadoop
连接?
java
、
hadoop
ML根据其经验或给定的一组监督来处理机器的学习,我们可以根据ML算法分析数据,
Hadoop
是用于在商品硬件集群上存储和大规模处理数据集的软件框架。所以我的问题是: 我对这些事情有错误的理解吗?
浏览 7
提问于2014-04-16
得票数 1
回答已采纳
1
回答
当人们谈论
Hadoop
、火花和
大数
据时,所谓的“中间结果”是什么意思?
apache-spark
、
hadoop
、
mapreduce
我正在尝试学习更多关于
大数
据的知识,特别是在使用
Hadoop
和Spark方面。然而,我一直看到这个术语“中间结果”,我不太清楚它指的是什么。例如,我读到"
Hadoop
将中间结果写入
计算
机的存储磁盘,而Spark则尽可能将这些结果保存在内存中。“我以为这是指地图缩减后的结果,但我不太确定。有人能更详细地了解什么是“中间结果”以及它们在火花和
Hadoop
之间的差异吗?
浏览 1
提问于2019-09-29
得票数 0
回答已采纳
2
回答
我们可以在ASP.Net中使用
大数
据概念吗
c#
、
asp.net
、
.net
、
bigdata
由于
大数
据术语被广泛用于管理海量数据,我想尝试用
大数
据构建一个小型应用程序,以了解结构以及如何从ASP.NET技术开始? 有可能吗?
浏览 1
提问于2014-04-02
得票数 5
回答已采纳
点击加载更多
热门
标签
更多标签
云服务器
对象存储
ICP备案
云点播
实时音视频
活动推荐
运营活动
广告
关闭
领券