腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(818)
视频
沙龙
0
回答
spark-shell
命令
引发
此
错误
:
SparkContext
:
初始化
SparkContext
时
出错
Scala: sbt-1.5.5.msi 我按照这个链接执行了所有的步骤:https://phoenixnap.com/kb/install-spark-on-windows-10 当我通过cmd运行
spark-shell
命令
时
,它抛出了以下
错误
: C:\spark-3.2.0-bin-hadoop3.2\bin>
spark-shell
Using Spark's default log4j profile: org/apache<i
浏览 203
提问于2021-11-11
得票数 4
5
回答
Spark :
错误
:找不到值SC
、
然而,当我尝试使用
sparkcontext
时
,它给出了如下
错误
val distdata = sc.parallelize它会给
出错误
No such File or Directory
浏览 0
提问于2015-11-16
得票数 10
1
回答
启动
Spark-Shell
时
出现许多
错误
、
当我开始使用
spark-shell
时
,我得到了大量的
错误
。当我尝试创建spark会话
时
:Unable to open a test connection to the given database.
浏览 3
提问于2017-07-19
得票数 2
13
回答
SparkContext
spark-shell
初始化
Mac
时
出错
/bin/
spark-shell
". 16/01/04 13:49:40 ERROR
SparkContext
: Error initializing
SparkContext
. import sqlC
浏览 1
提问于2016-01-05
得票数 92
4
回答
无法绑定到: spark-master,使用具有两个工作进程的远程群集
、
、
setAppName("POC_JAVA_AND_SPARK") conf); System.out.println(mi
浏览 0
提问于2015-04-28
得票数 23
1
回答
错误
SparkContext
:
初始化
SparkContext
时
出错
。IntelliJ和Scala
、
、
、
import org.apache.spark.
SparkContext
defval sparkConf = new SparkConf().setAppName("SparkWordCount").setMaster("local[2]") val sc = new
SparkContext
text.flatMap(line=>line.split(" ")).
浏览 5
提问于2016-09-14
得票数 1
回答已采纳
1
回答
我可以在哪里设置spark.eventLog.enabled?
、
、
、
当我尝试编译示例
时
,我得到了以下异常:`ERROR
SparkContext
:
初始化
SparkContext
时
出错
。ERROR
SparkContext
: Error initializing
SparkContext
. at org.apache.spark.
SparkConte
浏览 12
提问于2016-08-13
得票数 0
回答已采纳
1
回答
Spark-submit:
错误
SparkContext
:
初始化
SparkContext
时
出错
、
、
、
、
我正在尝试在Hadoop YARN客户端模式下运行我的spark Job,并且我正在使用以下
命令
spark.yarn.scheduler.heartbeat.interval-ms 5000我收到下面的
错误
: Error initializing
SparkContext
. org.ap
浏览 0
提问于2017-11-09
得票数 3
16
回答
如何检查星火版本
、
作为标题,我如何知道哪个版本的火花已经安装在CentOS?
浏览 19
提问于2015-04-17
得票数 80
回答已采纳
1
回答
如何把一份工作送到库伯奈特斯的斯派克。不能实例化外部调度程序
、
我已经启动了一个Minikube集群,但是当我发出火花-提交
时
,作业会
出错
。我的
命令
: bin/spark-submit --master k8s://https://192.168.99.101:8443 --deploy-mode cluster --name spark-testspark.kubernetes.container.image=spark local:///opt/spark/examples/jars
浏览 0
提问于2019-03-13
得票数 1
3
回答
异常:
错误
SparkContext
-
初始化
本地
SparkContext
时
出错
。java.net.BindException
、
、
、
我正在尝试为spark应用程序编写一个测试,但是在尝试运行下一个测试
时
,我得到了这个异常 var context:
SparkContext
= new
SparkContext
(sparkConf) def myTest():
浏览 2
提问于2016-07-25
得票数 4
7
回答
spark <console>:12:
错误
:未找到:值sc
、
、
我写了以下内容:val b = sc.parallelize(a)<console>:12: error: not found: value
浏览 0
提问于2014-08-08
得票数 8
1
回答
未找到:在spark scala中键入MultipleTextOutputFormat
、
、
我找到了这个import org.apache.spark.
SparkContext
._ NullWritable.get() 如果我使用spark-submit提
浏览 21
提问于2018-03-01
得票数 0
1
回答
“非绑定方法textFile()必须以
SparkContext
实例作为第一个参数来调用(改为获得str实例)”
、
、
但是,我得到了“必须以textFile实例作为第一个参数(代替
SparkContext
实例)调用的未绑定方法”
错误
。我在堆栈溢出中查找可能的答案,但找不到任何答案。请帮帮忙import os.path filename = os.path.join(b
浏览 7
提问于2015-08-10
得票数 5
1
回答
星星之火无法
初始化
metastore_db Windows服务器2008 R2企业
、
、
、
、
这是我尝试过的简单代码:sdf = spark.read.option("header","true").csv(file_1, sep=";", encoding='cp1252')日志
错误</em
浏览 3
提问于2018-04-10
得票数 0
回答已采纳
2
回答
无法解析不可序列化的任务[org.apache.spark.SparkException: task not serializable] Spark Scala RDD
、
、
、
当我尝试创建一个类的对象并调用特定的方法newRDD和blah
时
,我总是得到以下
错误
堆栈跟踪 at org.apache.spark.util.ClosureCleaner$.clean(Closure
浏览 13
提问于2020-06-04
得票数 0
回答已采纳
38
回答
Pyspark: Exception: Java网关进程在向驱动程序发送其端口号之前退出
、
、
、
、
当我尝试启动它
时
,我得到了
错误
:当sc=
SparkContext
()在启动
时
被调用。我已经尝试运行以下
命令
:./bin/
spark-shell
export PYSPARK_SUBMIT_ARGS="--master local[2] pyspa
浏览 4
提问于2015-08-06
得票数 81
2
回答
SparkContext
:通过google DataProc运行火花作业
时
初始化
SparkContext
时
出错
、
、
SparkContext
:通过google DataProc运行火花作业
时
初始化
SparkContext
时
出错
22/01/09 00:36:50 INFO org.spark_project.jetty.server.Server: Started 3339ms 22/01/09 00:36:ERROR org.apach
浏览 5
提问于2022-01-10
得票数 3
3
回答
Spark2.0CassandraScalaShell
错误
: NoClassDefFoundError
、
、
spark-shell
--packages datastax:spark-cassandra-connector:1.5.1-s_2.11sc.stopimport org.apache.spark._import org.apache.spark.
SparkContext
com.datastax.spark.connector.cql.Cassan
浏览 4
提问于2016-08-17
得票数 1
回答已采纳
3
回答
并行化/避免spark中的foreach循环
、
、
、
中执行
此
命令
时
,一切工作正常//... x.calcSomething()2)
错误
apply(Future.scala
浏览 1
提问于2016-06-28
得票数 12
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Zzreal的大数据笔记-SparkDay03
PySpark分析二进制文件
spark安装和提交程序测试,占用大数据最多的节点他的魔力展现在哪里?
SparkStreaming-1
Python学习第二天:命令行参数
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
活动推荐
运营活动
广告
关闭
领券