1回答
我按照指南中的说明安装了SparklyR和Spark的本地版本：library(sparklyr)然后我打开一个连接，下面是错误发生的地方：我得到"R code execution error“和以下信息$.invoke(invoke.scala:
浏览 11提问于2017-01-11得票数 2
我可以确认使用spark-shell连接到群集，例如 spark-shell --master spark://myurl:7077 作品 但 library(sparklyr)
master="spark://myurl:7077", ) 不会并给出错误 Errorin
浏览 13提问于2019-10-09得票数 0
我试图从本地环境中运行sparklyr来复制生产环境。然而，我甚至不能开始。我成功地使用spark_install()安装了Spark的最新版本，但是在尝试运行spark_connect()时，我得到了这个模糊和无用的错误。> library(sparklyr)
spark hadoopstats graphics grDevices utils datasets methods base
other attached packa
浏览 0提问于2018-06-20得票数 0
回答已采纳
1回答
Sparklyr未连接到数据库
、、、、
我正在尝试使用sparklyr或SparkR连接到数据库。install.packages("sparklyr")
浏览 0提问于2018-11-27得票数 1
我终于成功地将我的堆栈设置为使用RStudio通过sparklyR连接到一个独立的spark集群(在CassandraDB中有文件存储)。我仍然无法解决的唯一问题是如何获得sparklyR连接以利用集群上所有可用的工作节点(总共有6个)。每次连接时，Executor Summary页面都会显示sparklyR连接只使用了2个工作进程(每个节点上都有一个执行进程)。有没有其他设置可以让sparklyR使用所有节点？我是否可以通过某种方式
浏览 3提问于2017-02-06得票数 1
回答已采纳
3回答
我想将本地桌面RStudio会话通过sparklyr连接到远程spark会话。当您在RStudio中的sparklyr选项卡中添加一个新连接并选择群集时，表示您必须在集群上运行，或者具有到集群的高带宽连接。library(sparklyr)
sc <- spark_connect(master = "spark://ip-[MY_PRIVA
浏览 6提问于2016-09-30得票数 8
回答已采纳
我正在运行Sparklyr和SparkR。当我试图使用由schema()创建的数据表调用spark_read_csv()函数时，会收到以下错误(以及select()和lapply()函数上的类似错误)：
library(SparkR, lib.loc = c(file.path(Sys.getenv("SPARK_HOME"), "R", "
浏览 1提问于2019-04-14得票数 0
强制错误(代码)：连接到sessionid (2044)的端口(8880)时失败:端口(8880)中的网关没有响应。\java\sparklyr-1.6-2.10.jar"，，sparklyr.Backend，--packages，"com.databricks:spark-csv_2.11:1.3.0"，classgatewayAddress，gatewayPort，sessionId，config= config，isStarting = TRUE) }，error = function(
浏览 0提问于2016-11-03得票数 1
我使用下面的命令连接到来自rstudio的星星之火：
Path: C:\Users\....\Local\rstudio\spark\Cache\spark-2.0.0-bin-hadoo
浏览 2提问于2017-07-10得票数 0
1回答
与Kerberos的连接
、、、
我能够通过Livy服务连接到非Kerberized集群，而不会出现来自远程Rstudio桌面(windows)的问题。但是，如果启用了Kerberos安全性，则连接将失败：sc <- spark_connect("http://host:8998", method = "livy"Try spark_connect with config = livy_config()
使用sparklyr_0.5.6-9002和进行身
浏览 1提问于2017-06-23得票数 5
在使用spark_read_jdbc从MS数据库读取时，我试图在本地进行开发。这需要连接到数据库。# spark_install()conf$`sparklyr.cores.local` <- 4
浏览 1提问于2019-04-15得票数 1
1回答
我正在尝试使用R中的sparklyr包连接到spark，我得到了以下错误：> library(dplyr)
> sc <-, --jars, "C:&#x
浏览 13提问于2017-01-25得票数 0
由于本地的SparklyR，我正在尝试连接到我的Spark服务器。实际上，在我的服务器上，我打开一个R会话并执行library(dplyr)我没有收到错误消息，但是当我打开服务器UI时
我没有看到任何正在运行的应用程序。当我直接打开一个SparkR控制台时，我能够看到一个正在运行的应用程序。我真的很想和SparklyR一起工作，我该怎么办
浏览 3提问于2017-08-21得票数 1
1回答
连接MongoDB与火花和火花
、、、、
我正在尝试使用MongoDB > Apache > RStudio sparklyr在本地机器上组装一个大型数据基础结构。我找不到一个解决方案来连接sparklyr和MongoDB。MongoDB连接器显示了对SparkR的支持，但是这个包已经不在CRAN上了。有了Pyspark，我就可以连接起来，并与下面的信任一起工作：from pyspark.sql import
浏览 6提问于2022-07-15得票数 0
2回答
我想要为大约2250万个观察值的数据集估计滚动风险值，因此我想使用sparklyr进行快速计算。现在我这样做是为了利用sparklyr：sc <- spark_connect(master = "local")
lmanagers_sp <- copy_to(
浏览 0提问于2017-09-03得票数 9
我正在关注RStudio上的spark on Data Science Experience。但是，本教程中列出的函数不可用：Error: could not find function "list_spark_kernels"> dir(all.files = TRUE)
[1] "." ".." ".pki"
浏览 4提问于2017-02-16得票数 0
回答已采纳
1回答
我正在尝试从下面的链接安装sparklyr "0.8.4“的最新版本。install.packages("C:/Users/USER/Downloads/sparklyr-0.8.4.tar.gz", repos = NULL, type="source")In R CMD INSTALL
[1] ‘0.8.4’> library(
浏览 0提问于2018-07-18得票数 0
回答已采纳
2回答
火花-安装后出错
、、
我很高兴能轻松地安装sparklyr。
安装完成。但是在安装之后，我想连接spark，我得到了下面的错误消息。文件夹C:/spark不存在，因为RStudio在我的用户下面安装了spark命令。中创建默认hadoop目录: C:\ Spark \tmp\hadoop错误(master= master，spark_home = spark_home，spark_version = version，
浏览 3提问于2017-05-19得票数 1
回答已采纳
7回答
有没有人概述一下SparkR和sparklyr的优缺点？谷歌没有产生任何令人满意的结果，两者似乎相当相似。尝试这两种方式，SparkR看起来要麻烦得多，而sparklyr非常简单(既要安装，也要使用，特别是在使用dplyr输入时)。sparklyr只能用于并行运行dplyr函数，还是“普通”的R-Code？
最好的
浏览 0提问于2016-09-14得票数 53
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
