腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
在PYspark中创建RDD
Spark
中的一切都是以RDD (键和值对)的形式创建的。这有必要吗?可以通过RDD数据集创建/执行哪种类型的分析?请提供一个将其转换为RDD的示例和用法 谢谢,Aditya
浏览 15
提问于2019-04-30
得票数 0
2
回答
Spark
ML和MLLIB包之间的区别是什么
、
、
我注意到SparkML中有两个LinearRegressionModel类,一个在ML包(
spark
.ml)中,另一个在MLLib (
spark
.mllib)包中。
浏览 9
提问于2016-08-09
得票数 50
回答已采纳
1
回答
Cassandra数据库中数据分析的备选方案
、
、
、
没有显示报告的
spark
界面。 导致维修费用高的要求 2)将数据移至红移,并在此基础上进行分析。
浏览 2
提问于2016-06-20
得票数 2
1
回答
Apache
Spark
如何支持不同
语言
的API
、
我一直想知道像Apache
Spark
这样支持不同
语言
API的系统的高级架构。例如,
Spark
支持Scala、Python和Java中的API。 尽管该软件是用Scala编写的,但它支持多
语言
API。如何在
编程
层面上做到这一点?有人能解释一下这样的系统的高层架构吗?
浏览 0
提问于2016-03-13
得票数 3
1
回答
火花壳和火花sql有什么区别?表现有什么不同吗?
、
Spark
-shell:它基本上打开了scala>提示符。查询需要以下面的方式编写// Queries are expressedin HiveQL
spark
-sql:它似乎与蜂巢转移直接相连在
spark
中处
浏览 7
提问于2017-05-01
得票数 6
回答已采纳
1
回答
需要ada
编程
语言
spark
2014的词法和语法表
如果需要Ada
编程
语言
spark
2014的词法和语法表,有人能帮上忙吗?提前谢谢。
浏览 2
提问于2018-11-29
得票数 0
1
回答
星火数据集组按和和
、
、
、
我使用
Spark
1.6.1和Java作为
编程
语言
。CURRENT_MONTH"), ); 但是,它不使用数据集,知道如何在Java/
Spark
浏览 3
提问于2017-06-21
得票数 2
2
回答
基于Hadoop/星火的.NET场景仿真分布式计算
、
、
、
、
我目前正在研究一种使用Hadoop或
Spark
在集群上运行作业DAG (场景模拟)的方法。在这两种情况下,我都遇到了与代码
语言
有关的问题。如果发现
Spark
支持用Scala、Python和R编写的代码,而不是用.NET编写的,而Hadoop支持用.NET编写作业,但是我没有在.NET上找到用于Hadoop的DAG实现。是否有一种方法可以使用.NET
编程
语言
在集群/云上实现作业的DAG?
浏览 5
提问于2015-06-30
得票数 2
回答已采纳
1
回答
C/frama-c与
Spark
-ada的等价性
、
、
我正在研究Frama-c框架,我想知道C/Frama-c和
Spark
Ada之间是否有等价物。我知道比较这种不同的
语言
看起来很奇怪,但在阅读了、和一些
SPARK
的用户手册后,我很难猜测
SPARK
和C/Frama-c/ACSL是否提供了相同的证明健壮性和相同的代码可靠性。PS:我是frama-c的新手,我对
SPARK
编程
了解不多。
浏览 9
提问于2018-05-24
得票数 0
1
回答
一种
语言
的驱动程序代码和不同
语言
的执行器
我如何使用不同的
编程
语言
来定义我的执行器的逻辑,而不是我用于驱动程序的逻辑?这到底有没有可能?
浏览 0
提问于2018-02-20
得票数 0
9
回答
如何读取R中的Parquet并将其转换为R DataFrame?
、
、
、
我想用R
编程
语言
处理文件(在我的例子中是用
Spark
生成的)。若非如此,何谓最快捷的方法呢?注意:有Java和C++绑定:
浏览 6
提问于2015-05-22
得票数 56
回答已采纳
2
回答
Hive和
Spark
的执行差异
、
、
所有人:我正在寻找有更多知识的人来检查我对蜂巢和火花的理解 我一直在研究不同的大型数据库解决方案,我试图了解Hive和
Spark
在执行方面的差异。我尝试安装Hadoop、Hive和
Spark
,看看它们的性能如何。我能够让Hadoop和
Spark
工作。我不能让蜂巢去工作。当我在
Spark
中运行查询,在它们通过优化器之后,似乎最大的好处是在最早的时候只从源中选择相关的表数据。在内存存储方面也存在差异(Hive频繁地返回HDFS,而
Spark
将东西保存在RAM中)。根据数据集/查询的不同,这既有优点也
浏览 44
提问于2021-04-09
得票数 0
回答已采纳
1
回答
Spark
和PySpark之间是否存在特征奇偶
、
、
、
我听到一个常见的主题在运行,我只应该在
Spark
上使用Scala进行严肃的
编程
(1.5.1)。真正的超级用户使用Scala。据说Python对于分析是很好的,但是最终应该将代码写到Scala来完成。我听到的原因有很多: 谢谢
浏览 1
提问于2015-10-06
得票数 1
1
回答
如何在pyspark中进行广播连接之前获取数据帧的大小
、
、
、
我使用Python作为
spark
的
编程
语言
任何帮助都非常感谢
浏览 0
提问于2020-06-19
得票数 1
2
回答
Siri
编程
语言
、
、
、
据说他们甚至专门为它开发了一种新的
编程
语言
。 我在任何地方都找不到关于它的信息。唯一可能的线索是学术论文,但我不在大学网络中,所以我无法访问其中的大多数。
浏览 6
提问于2011-10-07
得票数 32
回答已采纳
1
回答
Apache
Spark
中的惰性评估
、
我正在尝试理解Apache
spark
中的延迟计算。我的理解是:步骤:我的理解到这里是正确的吗?我这里的第二个问题是,它说它(懒惰评估)的原因之一是
spark
比Hadoop强大
浏览 2
提问于2018-03-04
得票数 1
2
回答
在Hadoop中使用HBase代替Hive的目的
、
、
、
在我的项目中,我们使用Hadoop 2、
Spark
、Scala。Scala是
编程
语言
,
Spark
在这里用于分析。我们同时使用Hive和HBase。我可以使用HDFS访问Hive的所有细节,如文件等。
浏览 2
提问于2016-12-29
得票数 4
回答已采纳
3
回答
用于数据科学应用的Scala (如RStudio / Spyder / Rodeo)
、
、
随着
Spark
的兴起,Scala作为数据科学应用的首选
编程
语言
,获得了巨大的发展势头。
浏览 5
提问于2016-12-06
得票数 5
1
回答
SPARK
可以正确使用多核吗?
、
、
我读过关于
spark
的文章,发现
spark
是用scala编写的。由于scala是一种函数式
语言
,就像erlang一样,它可以正确地使用多核。对吗?我想知道我是否可以在具有多核处理器的分布式系统中使用
spark
。单个任务可以同时使用所有内核吗?我读过YARN将为每个不同的任务分配不同的核心,但在这种情况下,它是一个单一的任务 而且,在JAVA中使用多线程
编程
(hadoop)来使用每台计算机中的所有内核是否足够?
浏览 0
提问于2015-04-18
得票数 10
1
回答
查询大量csv文件的工具
、
、
、
、
我已经开始研究hive、
spark
和其他大数据工具,但还不清楚它们是否可以直接从源访问分区数据,在我们的例子中是通过nfs。 理想情况下,我们可以通过给出列的描述以及分区信息来定义一个表。
浏览 0
提问于2016-01-14
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Spark支持哪些编程语言?
Spark实战(5)_Spark Core核心编程
Spark快速入门-2-Spark的编程模型
Spark 核心编程RDD 行动算子
Spark SQL,DataFrames 以及 Datasets 编程指南
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
活动推荐
运营活动
广告
关闭
领券