1回答
我得到了以下错误SQLException: No suitable driver 我在代码中设置了如下spark类：os.environ['PYSPARK_SUBMIT_ARGS'] = '--driver-class-pathjars /Users/my_user/tools/spark-3.12-bin-hadoop3.2/jars/postgresql-42.2.23.jar postgres_elt.py 然后，我将我的驱动程序和执行器放入我<
浏览 13提问于2021-08-11得票数 0
下面是我的代码：pword = "xxxxx" table = "xxxxx"在添加postgres驱动程序ja
浏览 21提问于2017-02-14得票数 0
回答已采纳
我用python2.7写了一个脚本，用pyspark把csv转换成拼花和其他东西。当我在较小的数据上运行我的脚本时，它工作得很好，但当我在较大的数据(250 of )上运行时，我崩溃了以下错误-总分配超过95.00% (960,285,889字节)的堆内存。我该如何解决这个问题？部分代码:导入的库：import pyspark as ps from pyspark.sql.types import StructType, StructField
浏览 0提问于2018-11-21得票数 2
我正在研究分析航空数据的PySpark应用程序。数据库是MS SQLServer DB。同时连接到服务器上的数据库。我得到一个错误“没有合适的驱动程序”。但是，当我使用CLI在本地机器上运行，并将JDBC驱动程序jar文件添加到driver-class-path中时，它会运行并连接到DB。但是当我尝试在Dataproc集群上运行时，它抛出了一个错误“没有合适的驱动程序”。代码片段如
浏览 0提问于2018-11-26得票数 1
当我尝试创建一个简单的数据集并将其打印出来时，我得到了以下错误消息。from pyspark import SparkContextfrom pyspark.sql import SparkSession ("%d.cannot run with different minor versions.Please c
浏览 93提问于2019-11-15得票数 0
1回答
我试图从连接到Oracle DB，但是得到了这个错误:不合适的驱动程序“。知道为什么吗？from pyspark.sql import SparkSession
spark = SparkSession.builder.config('spark.driver.extraClassPath
浏览 0提问于2022-09-05得票数 1
我已经在我的远程linux服务器(IBM RHEL Z系统)上配置了Spark 2.1。我正在尝试创建一个SparkContext，并收到以下错误master_url="spark:/当我在pyspark shell中的远程服务器上运行相同的代码时，它可以正常工作。
浏览 1提问于2017-10-23得票数 1
--当我按照下面的方式提交spark命令时，它会出错:没有名为Callmodule的模块当我提交带有驱动程序类路径(没有执行器类路径)的spark命令时，它在下面成功运行.
spark-submit --master local --py-fileslocal --py-files C:\pyspark
浏览 0提问于2020-12-22得票数 0
回答已采纳
1回答
我试图做一个简单的数据库链接，但每次我尝试运行它时，它都会给我一个“没有合适的驱动程序错误”。我正在遵循一个教程，所以我不确定为什么我的教程与所示的示例相比不能工作。= null) { }
} 预期的输出是“已连接”，但它给出的错误是"java.sql.SQLException:找不到适合jdbc的
浏览 9提问于2019-10-08得票数 0
当在PySpark驱动程序中创建新的Python进程(例如，使用JobLib或其他多处理库)时，这些进程是共享Spark驱动程序内存，还是在该PySpark驱动程序JVM之外分配内存？
浏览 17提问于2018-07-21得票数 2
回答已采纳
1回答
我的笔记本电脑里装了火花。我能够执行spark-shell命令并打开shell，如下所示：scala>C:\Spark1_6\spark-1.6.0-bin-hadoop2.6\bin>pyspark
我重新启动了笔记本电脑，仍然得到了同样的<
浏览 0提问于2017-06-15得票数 7
回答已采纳
我正在尝试从MySQL应用程序加载python JDBC驱动程序。我没有调用'bin/pyspark‘或'spark-submit’程序；相反，我有一个Python脚本，我在其中初始化了'SparkContext‘和'SparkSession’对象。我知道我们可以在调用'pyspark‘时传递'--jars’选项，但我如何在我的python应用程序中加载和指定jdbc驱动程序？
浏览 21提问于2019-06-04得票数 0
回答已采纳
并希望将.csv格式的数据保存到blob存储中。tt.csv', )
我的问题是在追加数据后Https触发器不授予我保存csv文件的权限。
浏览 1提问于2021-03-25得票数 0
为了编写一个独立的脚本，我想直接从Python启动和配置一个Spark上下文。使用PySpark的脚本，我可以通过以下方式设置驱动程序的内存大小：.......我知道的唯一解决方案是在s
浏览 6提问于2016-06-23得票数 7
回答已采纳
1回答
火花Sql连接
、、、
下面是我的代码，SqlContext = pyspark.SQLContext(sc)
DriverSqlContext.read.format('jdbc') \ File "C:\Hadoop\Spark\spark-3.0.0-preview2-bin-hadoop2.7\python\lib\pyspark.zip\pyspark<
浏览 2提问于2020-04-11得票数 0
回答已采纳
我在堆栈溢出中发现了类似的问题，但似乎没有任何问题适合我的分区问题。
如果您需要任何信息，请在评论中告诉我，因为我不知道这里需要什么样的信息。
浏览 0提问于2019-01-28得票数 0
我正在尝试从Azure Synapse笔记本中查询Oracle数据库，最好使用Pyodbc，但也可以接受pyspark解决方案。我相信，这里的复杂性来自于火花池的低可配置性--我相信代码一般是正确的。：
Pyodbc -我可以使用默认的可用驱动程序( SQL Server}的{ODBC驱动程序17 )，并获得登录超时。我尝试了服务器和IP的正常URL，并且使用了所有端口组合，没有端口，逗号端口，冒号端口，并且
浏览 4提问于2022-08-15得票数 0
1回答
我们在找出为什么在创建与DriverManager的连接时收到错误消息时遇到了一些麻烦。下面是我们的代码import java.sql.DriverManager;
import java.sql.PreparedStatement第一次加载页面时，我们得到一个错误消息“没有找到适用于jdbc mysql的驱动程序”，但是当我们刷新时，我们查询的信息被正确地显示出来。因此，我们只在第一次加载时
浏览 0提问于2013-04-06得票数 2
回答已采纳
1回答
没有合适的驱动程序JEE
、、、、
我一直收到“没有找到适用于jbdc的驱动程序:mysql://localhost:3306/db_catal”的提示。
我已经把MySQL连接器放到了构建路径和web-inf的lib文件夹中。
浏览 0提问于2019-12-10得票数 0
spark.executor.instances=20spark.hadoop.fs.defaultFS = XXXXXXX
spark.pyspark.pythonFile "/home/airflow/spar_dmp/src/analyse/financieel_dashboard_revenue_per_shop_per_product_group_pyspark.pyOverwrite")
浏览 51提问于2020-09-16得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
