1回答
在IBM DSX上，对于Python-Spark 2.1内核，我得到了以下代码：spark = SparkSession.builder.getOrCreate$$anonfun$7.apply(JDBCOptions.scala:84) a
浏览 17提问于2017-07-04得票数 0
回答已采纳
在火花提交过程中，我得到了以下错误：
是否有任何方法通过db2.jcc.charsetDecoderEncoder在火花提交。
浏览 2提问于2017-11-10得票数 3
回答已采纳
我一直试图连接卡桑德拉与斯派克在斯卡拉，但我一直面临一些问题。" % "spark-core_2.11" % sparkVersion,
"org.apache.spark" % "spark-streaming_2.11" % sparkVersion,"org.apache.spark" % "spark-streaming-twitter_2.11" % sparkVe
浏览 0提问于2015-09-17得票数 1
回答已采纳
1回答
我正在尝试通过pyspark连接到db2，下面是我的连接字符串。conf)
.option('url', 'jdbc:db2:242) at org.apache.spark</
浏览 22提问于2020-12-08得票数 1
回答已采纳
2回答
" \一切都很好，我得到了我的火花对象作为火花。现在，当我试图将一个集合加载到一个dataframe时 at com.mongodb.s
浏览 2提问于2017-05-26得票数 1
我在我的应用程序中添加了SQL数据库和Spark，并成功地将数据导入数据库。Class.forName(driver)
val data
浏览 5提问于2016-01-28得票数 0
我编写了下面的代码来连接BigSQLspark = SparkSession.builder.getOrCreate()
spark_train_df = spark.read.jdbc("jdbc:db2://my bigsq url :port number:sslConnection=true;sslTrustStoreLocation'driver' : 'com
浏览 2提问于2017-10-13得票数 0
回答已采纳
我正在寻找以下问题的解决方案。
问:当我们使用数据库中的表在Apache中创建Dataframe时，很明显，连接将被创建。但是，如果我执行一些操作(如select())，它会尝试重新连接吗？
浏览 1提问于2016-01-27得票数 1
回答已采纳
我们正在使用Spark 2.1中的结构化流式处理测试重新启动和故障转移。“无法将/user/spark/checkpoints/Structur
浏览 31提问于2017-02-04得票数 0
我正试图跟踪，用Spark加载云数据。我有一个Scala2.11和Spark2.1(也适用于Spark2.0)笔记本，其中包含以下代码：var credentials = scala.collection.mutable.HashMap请在org.apache.spark.sql.execution.datasources.DataSource$.lookupDataSource(DataSource.scala:569)，org.apache.<em
浏览 4提问于2017-07-08得票数 0
回答已采纳
在spark 1.6中，我们可以使用cassandraSqlContext直接查询cassandra表，如下所示：火花2.1中有这样的特性吗？我知道spark 2.1没有cassandra上下文，相反它有一个session会话。如果我执行spark.sql("select * from keyspace.tableName")，它会引发关于未解决
浏览 0提问于2017-05-22得票数 1
我使用的是Scala 1.6。数据框上的describe不显示列标题和值。如下所示：data.toDF.describe().show请让我知道为什么它没有显示整个结果集。+-+|摘要|+-+|计数||均值|| stddev| | min| | max| +-+
浏览 18提问于2017-03-10得票数 0
回答已采纳
我正在使用Apache Spark运行机器学习算法和其他大数据任务。以前，我使用spark集群独立模式，在同一台机器上运行spark master和worker。有没有人可以帮助我如何更改随机spark端口，并告诉我需要编辑的确切配置文件？我读了spark文档，它说应该配置spark-defaults.conf，但我不知道如何配置这个文件，特别是更改spark的随机端口。
浏览 10提问于2015-01-01得票数 15
我正在尝试从db2服务器执行sqoop导入。fields-terminated-by '\001' --direct --connection-manager com.cloudera.sqoop.manager.Db2Manager --connect jdbc:db2)你能帮我解决这个问题吗
浏览 3提问于2017-10-05得票数 0
1回答
我正在尝试将Tableau Desktop 10 (mac)连接到Spark SQL 2.1 (在centos 7服务器上)。我使用Authentication = Username和Username =通过Simba ODBC驱动程序进行连接。它没有给出任何错误，但我没有看到Hive中可用的表。但是，当我在服务器上使用beeline连接到Spark SQL时，配置单元表是可见的。
如果我使用自定义SQL特性，我可以查询表和使用数据，但我仍然无法在Tableau中列出表。我不确定这个问题是在Tableau
浏览 0提问于2017-01-10得票数 4
ERRORCODE=-4220, SQLSTATE=null 我已经检查并尝试了主题Getting error code 4220 with null SQL State My DB version : DB2v10.5.0.11
The db2 Jar I use : db2jcc-9.5.jar 以前有没有人遇到过这种情况？
浏览 392提问于2020-10-14得票数 0
回答已采纳
我运行了一个命令spark-shell --jars /home/krishnamahi/graphframes-0.4.0-spark2.1-s_2.11.jar，它抛出了一个错误
错误:加载类文件(重新运行with -Ylog-classpath，查看问题类路径。)如果“Logging.class”是针对不兼容的com版本编译的，则完全重构可能会有所帮助。(重新运行with -Ylog-classpath，查看问题类路径。)如果“Logging.class”是针对不兼容
浏览 6提问于2017-05-08得票数 0
回答已采纳
1回答
是否有更好的选择从mongodb读取通过火花？目前我使用val mongoRDD = sql.fromMongoDB(mongoConfigurationData)因为很多数据是最初扫描的，所以速度很慢吗？怎么可能是这样
浏览 0提问于2016-04-14得票数 0
回答已采纳
+= "com.github.tototoshi" %% "scala-csv" % "1.3.5"libraryDependencies += "org.apache.spark" %% "spark-core" % &q
浏览 2提问于2019-04-01得票数 4
回答已采纳
我正在向spark 2.1独立集群提交play应用程序。在play应用程序中，postgres依赖也被添加，并且应用程序在本地spark库上工作。stage 0.0 (TID 1, 172.31.21.3, executor 1): java.lang.ClassNotFoundException: org.postgresql.Driver spark.executor.extraClassPath /home/u
浏览 0提问于2017-04-04得票数 2
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
云直播
对象存储
腾讯会议活动推荐
腾讯云开发者
