1回答
我正在尝试编写一个函数来执行并创建一个sdf_pivot() DataFrame，它的列名包含原始变量或列的名称。<int> 1, 2, 3, 4, 5$ var2 <chr> "M", "O", "O", "O", "O"
这是没有
浏览 5提问于2018-02-13得票数 1
回答已采纳
1回答
我正在尝试在sparklyr中使用高斯混合模型对我的数据进行聚类：但是，调用此函数不会像ml_kmeans()那样返回用于评估集群数量的度量(此函数返回WSSSE)。有没有办法在sparklyr中获得ml_gaussian_mixture()的轮廓得分或BIC？
浏览 9提问于2019-10-25得票数 0
1回答
我想计算按两个因素分组时出现的较早日期(dia_hora_OEM)。这两个因素是：
使用for循环： OEM_final %>%}Error in c(U3003,
浏览 1提问于2020-04-03得票数 0
回答已采纳
7回答
有没有人概述一下SparkR和sparklyr的优缺点？谷歌没有产生任何令人满意的结果，两者似乎相当相似。尝试这两种方式，SparkR看起来要麻烦得多，而sparklyr非常简单(既要安装，也要使用，特别是在使用dplyr输入时)。sparklyr只能用于并行运行dplyr函数，还是“普通”的R-Code？
最好的
浏览 0提问于2016-09-14得票数 53
2回答
我需要在sparklyr数据帧的列上使用qchisq函数。
问题是，似乎qchisq函数没有在Spark中实现。如果我没有读错下面的错误信息，sparklyr试图执行一个叫做"QCHISQ“的函数，但是这在Hive SQL和Spark中都不存在。一般来说，有没有办法用sparklyr运行在Hive或Spark中没有实现的任意函数？我知道spark_apply，但还不知道如何配置它。0.00
浏览 1提问于2018-05-16得票数 1
我不知道group_by_()函数基于下划线的函数是什么。来自group_by帮助：summarise(by_cyl, mean(disp), mean(hp)) Source- group_by_(mtcars, cyl) "Error in as.lazy_dots(list(...)) : object 'cyl' not found"
所以我
浏览 2提问于2015-02-23得票数 11
回答已采纳
1回答
我试图通过R中的函数来创建一个全局变量： name <<- value如果我键入命令我得到一个名为' name‘的全局变量:)
编辑:这是一个精简的和非常简化的版本我的问题。我知道，这里有also ()命令，也有‘<-’-操作符，它们都在执行相同的操作。
浏览 1提问于2018-11-06得票数 1
回答已采纳
我试图在R中创建一个表，根据一个组(“处理”)计算汇总统计数据，作为一个更长的函数的一部分。在运行函数之前，我要输入dataframe名称(data)和列(y)，我需要对它们进行总结。model) { group_by(Treatment) %>%
summarize(Mean= mean(y), StdError = se(y), Mean_StdError = mean(y) + se</e
浏览 1提问于2020-08-11得票数 0
回答已采纳
1回答
R火花包作为火花的前端有多快？
、、、、
我还看到了不同前端之间的比较，得出的结论是R太慢，以至于测试人员放弃了测试它的性能(；虽然这是对用户定义的函数的专门测试，并且可能没有使用sparklyr包)。我还知道sparklyr现在有了arrow集成，这导致了用户定义函数的性能改进，以及将数据复制到集群或从集群复制数据，如所示。我的问题是:与Python/Scala相比，sparklyr 的速度有
浏览 3提问于2019-09-29得票数 3
我正在运行Sparklyr和SparkR。当我试图使用由schema()创建的数据表调用spark_read_csv()函数时，会收到以下错误(以及select()和lapply()函数上的类似错误)：
R版本3.5.3 (201
浏览 1提问于2019-04-14得票数 0
我使用df_pqt_tbl <- spark_read_parquet(...)函数读取了一个拼花文件。我的环境是Databricks。我想使用SparkR::sampleBy函数进行分层抽样，但是我得到了一个错误： fractions = list('0'=0.7, '1'=0.7),
浏览 0提问于2019-09-03得票数 1
回答已采纳
背景:我正在进行一个试点项目，评估使用DataBricks训练模型的利弊。我使用的是一个数据集，当加载到熊猫数据中时，该数据集占用了大约5.7GB的内存。数据存储在中的增量表中。下面是我在collect()和R中运行的单元格的屏幕截图。
我希望我只是遗漏了一些关于sparklyr如何加载数据的东西。对于上下文，我使用的是sdf_collect()函数，因为如果我正确地读取了，那么这
浏览 8提问于2022-10-31得票数 1
今天你要设计一个怀疑论者-机器人编写程序或函数，当给定有效单词和规则字典时，该程序或函数决定规则是否适用。这本词典是取自这里的“C3”。您提交的文件理论上必须能够检查文件中的所有单词，但是为了测试，您可以使用一个简短的列表。依从性定义为：“单词中的相邻x和y按正确<em
浏览 0提问于2018-08-06得票数 7
回答已采纳
我发现自己一直在编写这段代码，以便为组方法(然后用于绘制置信区间)生成标准错误。df %>% summarize(avg=mean(var2), n=n(), sd=sd(var2), se
浏览 2提问于2017-05-30得票数 4
回答已采纳
1回答
我当时正在读“”一书，并混淆了在关于的章节中反复提到的“转义舱口”的概念。例如，作者第一次提到这个词时，其定义如下：
通常，在用户直接调用函数时，语言上的计算最有用，而其他函数调用函数时，则不太有用。参见下面示例的<
浏览 0提问于2019-09-14得票数 2
2回答
如果这种问题不能用火花解决的话，我很惊讶：# in this format: YYYY-MM-DD (year, month, day) ... ...我收到这个错误：
Error: org.apache.spark
浏览 4提问于2016-10-27得票数 3
回答已采纳
1回答
我正在处理一个以字符串作为函数参数的R包。现在，我想使用非标准的评估来允许非字符串输入。此外，为了保持向后兼容性，我希望保留函数使用字符串的可能性。Hadley给出了一个带有子集函数的，并建议每个NES函数都应该有一个标准的评价函数。written easily afterwards
subset2 <- function(df, condition) {
浏览 1提问于2015-10-19得票数 3
回答已采纳
1回答
汇总”函数，它将列名作为变量，并很好地工作： col <- as.name(col)4 2005 pre 5 274.200 29.79429 13.32441 }
Error in median (doy, na.
浏览 2提问于2016-11-25得票数 2
回答已采纳
1回答
Sparklyr未连接到数据库
、、、、
我正在尝试使用sparklyr或SparkR连接到数据库。install.packages("sparklyr")
浏览 0提问于2018-11-27得票数 1
我正在尝试使用sparklyr分析R中的大型数据集。Please fix JAVA_HOME or reinstall from: https://www.java.com/en/
我已经重新安装了Java，但仍然得到相同的错误。有什么建议吗？
浏览 0提问于2018-10-16得票数 2
云服务器
ICP备案
对象存储
云直播
实时音视频
腾讯云开发者
