当我在Databricks/PySpark中运行查询时,我得到以下错误:
org.apache.spark.SparkException: Could not execute broadcast inYou can increase the timeout for broadcasts via spark.sql.broadcastTimeout or disable broadcast joinby setting spark.sql.au
我做了一个pip install -U databricks-connect==5.5.*原因: com.databricks.service.SparkServiceConnectionException:令牌无效
To connect to a Databrickscluster, you must specify an API token.: spark.
您能告诉我不同的方法:1)我们如何连接到spark for Sparksql? 2)我们如何连接到spark数据帧或数据集?对于hive,我们通过unix与beeline连接,如果我们有像teradata这样的sql工具,我们必须通过安装了hive驱动的odbc连接到hive。如何连接到sparksql和spark数据帧或数据集?
另外,如果有人能给我提供一个