问无法创建Extract - Tableau和Spark SQL

EN

一种快速的解决方法是更改执行上下文中的设置。

spark.sql("set spark.driver.maxResultSize = 8G")

对Spark SQL Thrift Server并不完全信服，而且要提炼出所有事实有点笨拙。Tableau使用收集到的结果给驱动程序，否则它如何通过Spark获得它们？

但是：

• 在相关spark-thrift-sparkconf.conf文件中设置spark.driver.maxResultSize 0表示没有限制(驱动节点上的物理限制除外)。
• 在相关spark-thrift-sparkconf.conf文件中设置spark.driver.maxResultSize 8G或更高版本。注意:并不是驱动程序上的所有内存都可以使用。
• 或，假设是Hive Impala源，则对Tableau使用Impala连接，这样的问题就少了。

此外，并发用户的数量也可能是一个问题。因此，最后一点。

至少可以说很有趣。

spark.driver.maxResultSize %0

这是您可以在高级群集设置中设置的设置。这将解决您的4 GB问题。