1回答
我想使用sparklyr包打开gz文件，因为我在R上使用Spark。我知道我可以使用read.delim2(gzfile("filename.csv.gz"), sep = ",", header = FALSE)打开gz文件，我也可以使用spark_read_csv打开csv文件，但当我
浏览 18提问于2019-01-23得票数 2
回答已采纳
我在tgz中有所有的包，我想安装sparklyr： lib = getwdrepos = NULL,system (cmd0): /opt/cloudera/extras/R-3.3.1/lib/R/bin&#
浏览 0提问于2018-10-22得票数 0
我试图遵循关于SparklyR的简单指南，但它从一开始就给我带来了错误。我安装了SparklyR和Spark的本地版本，如指南中所写：spark_install(version="1.6.2")sc <- spark_connect(master="local")使用Sp
浏览 4提问于2017-09-15得票数 0
回答已采纳
我正在Windows上运行RStudio并使用databricks-connect成功地连接到Azure。在Databricks上，我在/mnt/clientdata上挂载了Azure Datalake Gen2文件系统。在Python中，在Windows机器上，我可以成功地运行
df = spark.read.format("csv").option("header", "true").load("dbfs:/mnt/"
浏览 3提问于2020-05-12得票数 1
我的问题归结为: Sparklyr相当于str R命令的什么？如何描述这张桌子？事先道歉，这是一个非常基本的问题，但我确实搜索了它，并检查了Rstudio的Sparklyr Cheatsheet，但没有找到答案。
浏览 0提问于2019-08-02得票数 0
回答已采纳
1回答
最近， R通过使用结构化流的sparklyR获得了流功能。如何在sparklyR中使用这些窗口功能？.groupBy( $"word")(R)withWatermark("times
浏览 0提问于2019-04-10得票数 0
希望使用sparklyr Spark install中包含的自定义scalac (Scala编译器)；可以在RStudio SparkUI选项卡(或从spark_web(sc))中找到>>环境>> /jars这是我目前使用的Ubuntu，但在下面的错误中停滞不前。我设置了一个与上面"hello world“示例中使用的Github-repo完全相同的目录。知道如何在不安装到建议的基本路径文件夹--即/
浏览 2提问于2016-12-12得票数 2
我的linux目录中有一个文件夹/var/tmp，其中有以下提到的格式(name_yyyymmddhhmmss.gz)的多个name_yyyymmddhhmmss.gz文件。aakashdeep_20181120080005.gz aakashdeep_20181120080025.gz kalpana_20181119080005.gz aakashdeep_20181120080025.gz
现在，我想以name_2018112
浏览 0提问于2018-11-20得票数 0
回答已采纳
我试图在R中打开和处理存储为asc.gz文件的栅格数据: ASCII和.gz压缩，天气数据。我需要提取每年和每个月的每个位置的天气数据=多个值，所以我希望自动处理这个过程，而不是手动地压缩文件。我遵循了前面的建议和如何打开.gz压缩文件，然后是光栅文件。unable to find an inherited method for function ‘raster’ for signature ‘&q
浏览 4提问于2022-07-13得票数 0
回答已采纳
2回答
在存档中安装R包
、、
如何在Windows中安装存档包？当我试图安装从存档下载的tar.gz时，我会得到以下错误：
gzfile( file，"r")中的错误:无法打开连接:警告消息: 1:解压缩(zipname，exdir = dest)：从zip文件中提取错误1:在gzfile中(文件，"r")：无法打开压缩文件‘抓取_2.5-7.tar.gz</e
浏览 2提问于2012-02-06得票数 5
回答已采纳
概述：集群类型: ML服务(R服务器)我正在尝试将csv文件从Azure数据存储blob导入R服务器环境。")sc <- spark_connect(master = "yarn")
但由于HDI中安装了旧版本，因此出现错误消息。does not currently support Spark version: 2.1.1.2.
浏览 1提问于2019-08-14得票数 0
我需要使用wget下载一个文件，但是我不知道文件名到底是什么。https://foo/bar.1234.tar.gz如何在使用wget时使用通配符？我用的是gnu。/usr/local/bin/wget -r "https://foo/
浏览 0提问于2014-03-03得票数 72
回答已采纳
1回答
我使用sparklyr的spark_write_table函数将表写入到HDFS中，并使用partition_by参数定义如何存储它们： spark_write_table在Hadoop-SQL中，我会这样做：PARTITION (col1 = 'my_partition')
VALUES (myvalues..)在sparklyr<e
浏览 0提问于2018-01-26得票数 2
安装sparklyr软件包后，我按照这里的说明( )连接到spark。但面对这个错误。我是不是做错什么了。请帮帮我。sc = spark_connect( master = 'local' )
文件中的错误(con，"r")：无法打开连接:警告消息: in file(con，"r")：无法打开拒绝的文件'C:\Users\USER\AppData\Local\Temp\RtmpY
浏览 1提问于2017-06-25得票数 4
在读取整个文件的答案之后，我需要确定of文件的未压缩文件大小。它保存在gz文件的最后4个字节，但是我找不到如何在不使用r的情况下打开文件，而是用解压缩层包装它，所以我无法访问原始的gz文件。
浏览 3提问于2016-10-08得票数 1
回答已采纳
我已经通过更改${SPARK_HOME}/conf/log4j.properties中的适当行更改了spark本身的日志级别，但当我提交R-sparklyr脚本和sparklyr.jar以作为一种独立作业执行时，我仍然会获得以下信息： # 用户@主机${SPARK_HOME}/bin/spark-submit --class sparklyr.Shell 'sparklyr.jar‘脚本。R 21/07
浏览 27提问于2021-07-02得票数 0
我想对存储在Hadoop集群中的数据运行Java工具。我正在尝试使用sparklyr中的spark_apply函数来实现，但我对语法感到有点困惑。我不能访问包裹，所以我需要使用本文中描述的第二个选项。conda环境还包含我想要使用的Java工具。/r_env.zip/r_env/lib/R"
config$sparklyr.apply.env.RHOME <-
浏览 0提问于2018-10-18得票数 1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
