1回答
我想获取我在R中创建的数据帧，并将其转换为JSON对象，然后将该JSON对象读入sparkR。对于我目前的项目，我不能简单地将一个数据帧传递到SparkR中，然后必须执行这个绕过弯的方法才能让我的项目正常工作。我也不能先创建一个本地JSON文件来读入sparkR，所以我尝试<
浏览 4提问于2017-08-04得票数 0
1回答
嗨，我在用纱线集群在分布式模式下做SparkR。( 1)如果我制作了一个包含R行代码和SparkR行代码的脚本，它将只分发SparkR代码或简单的R？
这是剧本。我读了一个csv，只拍了100 K的第一张唱片。我清除它(使用R函数)，删除NA值，并创建了一个SparkR数据。这就是它所做的: foreach将每个TimeInterval都
浏览 3提问于2016-01-11得票数 2
回答已采纳
我在Databricks上创建了一个PySpark DataFrame。中使用df1library('SparkR')sparkR无法使用或找到由PySpark创建的df1。DATABRICKS_CURRENT_TEMP_CMD__)) : object 'df1' not found
浏览 1提问于2018-10-05得票数 0
我一直想知道像Apache Spark这样支持不同语言API的系统的高级架构。例如，Spark支持Scala、Python和Java中的API。
尽管该软件是用Scala编写的，但它支持多语言API。如何在编程层面上做到这一点？有人能解释一下这样的系统的高层架构吗？
浏览 0提问于2016-03-13得票数 3
1回答
我是spark的新手。我正在尝试将我的R程序转换为用于分发purpose.when的SparkR。我尝试初始化我遇到错误的sparkR sql。sqlContext <- sparkRSQL.init(sc)
如何在ec2中安装sparkSql，任何帮助都将不胜感激
浏览 2提问于2015-09-29得票数 0
在SparkR中加载拼花，没有问题，模式说：df <- read.df(sqlContext, filespec, "parquet")StructType|-name = "value", type = "ArrayType(IntegerType,true)", nullable = TRUE
因此，在SparkR中
浏览 2提问于2016-01-12得票数 1
回答已采纳
我在Apache服务器上用SparkR创建了一个数据帧。我需要在R代码中调用它来处理数据并从中提取特征。谁能告诉我如何将SparkR df读入R？SparkR df：myframe <- filter(read.df(sqlContext, source= "org.apache.spark.sql.ca
浏览 0提问于2017-10-27得票数 1
我对火花和sparkR是新手，我的问题是:当我在下面写代码时: 1)。设置环境并启动spark.session()df <- as.Data
浏览 4提问于2016-09-23得票数 1
回答已采纳
1回答
我知道sparklyr有以下读取文件的方法：
那读取兽人文件呢？我知道我可以在SparkR或中使用SparkR或，但我想将我的代码保存在sparklyr中。
浏览 2提问于2017-05-17得票数 3
回答已采纳
我正在Azure databricks中读取一个拼图文件:使用SparkR > read.parquet()使用Sparklyr > spark_read_parquet()这两个数据帧是不同的，有没有办法将SparkR数据帧转换为sparklyr数据帧，反之亦然？
浏览 11提问于2020-08-18得票数 0
回答已采纳
1回答
我有一个正式的类DataFrame对象，它是从MySQL (通过json文件)上传到SparkR的，其中包含如下格式的字符串："2012-07-02 20:14:00“
我需要将它们转换为SparkR中的是否有未记录的函数或使用UDF执行此操作的方法？(注意：我以前实际上没有尝试过创建一个SparkR UDF，所以在这里我是在摸索着。)
浏览 2提问于2015-12-23得票数 2
我们已经成功地完成了关于在SparkR实例上设置它并在RStudio中运行基本程序的所有EC2教程。我们现在无法弄清楚的是，如何创建一个带有SparkR作为依赖项的项目，编译/jar它，并在其中运行任何不同的R程序。
我们来自Scala和Java，因此我们可能以错误的心态来处理这个问题。这在R中是可能的吗?或者Java
浏览 0提问于2016-01-07得票数 1
回答已采纳
2回答
我在SparkR中有一个DataFrame类型的数据集“数据”。举个例子，我想得到第50号。在R中，我只需键入data[50,]，但当我在sparkR中这样做时，我会得到以下消息
我能做些什么来解决这个问题？此外:如何向数据中添加(列大小相同)的列？
浏览 7提问于2015-07-28得票数 3
回答已采纳
1回答
如何将SparkR中的SparkDataFrame转换为sparklyr中的tbl_spark有什么建议可以解决这个问题吗？
谢谢!
浏览 6提问于2020-11-06得票数 2
我想将它转换为SparkR中的日期类型对象。但是，我可以告诉您的是，cast和as.Date在SparkR中的函数只能将字符串日期转换为日期类型对象，如果它的格式是MM-DD-YYYY。在尝试将我的period列转换为可以重铸为日期dtype的表单时，我尝试使用带有withColumn SparkR函数
浏览 3提问于2016-06-23得票数 2
回答已采纳
我是Hadoop和Spark的新手。我使用的是Spark-2.1.1-bin-hadoop2.7。使用SparkR，我想从Hadoop2.7.3HDFS加载(读取)数据。我知道，我可以使用“hdfs:// the - to - my - file”来指向我的Hadoop文件，但是我在SparkR中找不到一个函数来完成这项工作。read.df()不起作用。我正在使用sparkR.session()连接到我的Spark
浏览 5提问于2017-08-08得票数 0
我试图将数据库中加载的R数据帧转换为sparklyr数据帧，但我认为通常使用的copy_to函数无法处理文件大小。我需要转换的文件大小从780MB到4.7 to。
浏览 0提问于2019-10-09得票数 1
我用离散的“目标值”对数据建模的代码如下：# TARGETeither 0 or 1# Conver
浏览 4提问于2016-06-25得票数 1
回答已采纳
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
腾讯云开发者
