是否可以在本地安装HDInsight服务器时使用Hadoop SDK,尤其是LINQ to Hive。请注意,我指的不是托管在Azure上的HDInsight服务。
我尝试从Azure Nuget包中使用LINQ to Hive,但无法正常工作,因为LINQ to Hive似乎需要将结果存储在Microsoft.Hadoop.Hive Blob Storage中,而不是我的托管实例上。
var hiveConnection = new HiveConnection(new Uri("http://hadoop-poc.cloudapp.net:50111"), "had
默认设置 spark-shell --conf spark.hadoop.metastore.catalog.default=hive
val df:Dataframe = ...
df.write.saveAsTable("db.table") 在尝试写入内部/托管/事务性表时失败(请参阅How to write a table to hive from spark without using the warehouse connector in HDP 3.1)。 我如何告诉spark不要创建一个托管的表,而是创建一个外部表?