我正在尝试使用我的HDInsight集群创建一个外部数据源。在执行此操作时,我需要提供位置,如Hadoop、名称、节点、IP地址和端口号。
那么,我在哪里可以找到HDInsight群集上这两者的名称、节点、IP地址、资源管理器位置、IP地址和端口号?
我已经浏览了Core-site.xml & yarn-site.xml,没有找到HDInsight的任何东西。
- 3:创建外部数据源的语法。
CREATE EXTERNAL DATA SOURCE MyHadoopCluster WITH (
TYPE = HADOOP,
LOCATION ='hdfs://10.xxx.xx.xxx:xxxx',
RESOURCE_MANAGER_LOCATION = '10.xxx.xx.xxx:xxxx',
CREDENTIAL = HadoopUser1
); -- LOCATION (必填):Hadoop名称Node IP地址和端口。
--资源管理器位置(可选):支持下推计算的Hadoop资源管理器位置。
-- credential (可选):上面创建的数据库范围的凭据。
谢谢。
发布于 2016-11-30 09:23:17
如果我没理解错你的问题,你已经有了一个HDInsight集群,并且正在尝试让Azure SQL DW通过一个外部表与之对话。如果你在CREATE EXTERNAL DATA SOURCE的文档中搜索"Azure SQL Data Warehouse“的语法部分,你会发现目前在Azure SQL DW中Polybase工作的唯一方式是通过与Azure Blob Storage和Azure Data Lake Store交谈。(请继续关注文档页面,因为随着时间的推移,Azure SQL DW中的Polybase将变得更加灵活,因为他们将继续增强它。)
因此,现在您应该让HDInsight写入配置单元中定义的外部表,然后让Azure SQL DW指向blob存储中的同一文件夹,并声明自己的外部表来读取这些blob。
https://stackoverflow.com/questions/40831904
复制相似问题