首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >问答首页 >用HDInsight创建外部数据源

用HDInsight创建外部数据源
EN

Stack Overflow用户
提问于 2016-11-28 01:42:02
回答 1查看 248关注 0票数 0

我正在尝试使用我的HDInsight集群创建一个外部数据源。在执行此操作时,我需要提供位置,如Hadoop、名称、节点、IP地址和端口号。

那么,我在哪里可以找到HDInsight群集上这两者的名称、节点、IP地址、资源管理器位置、IP地址和端口号?

我已经浏览了Core-site.xml & yarn-site.xml,没有找到HDInsight的任何东西。

- 3:创建外部数据源的语法。

代码语言:javascript
运行
复制
CREATE EXTERNAL DATA SOURCE MyHadoopCluster WITH (  
    TYPE = HADOOP,   
    LOCATION ='hdfs://10.xxx.xx.xxx:xxxx',   
    RESOURCE_MANAGER_LOCATION = '10.xxx.xx.xxx:xxxx',   
    CREDENTIAL = HadoopUser1        
); 

-- LOCATION (必填):Hadoop名称Node IP地址和端口。

--资源管理器位置(可选):支持下推计算的Hadoop资源管理器位置。

-- credential (可选):上面创建的数据库范围的凭据。

谢谢。

EN

回答 1

Stack Overflow用户

发布于 2016-11-30 09:23:17

如果我没理解错你的问题,你已经有了一个HDInsight集群,并且正在尝试让Azure SQL DW通过一个外部表与之对话。如果你在CREATE EXTERNAL DATA SOURCE的文档中搜索"Azure SQL Data Warehouse“的语法部分,你会发现目前在Azure SQL DW中Polybase工作的唯一方式是通过与Azure Blob Storage和Azure Data Lake Store交谈。(请继续关注文档页面,因为随着时间的推移,Azure SQL DW中的Polybase将变得更加灵活,因为他们将继续增强它。)

因此,现在您应该让HDInsight写入配置单元中定义的外部表,然后让Azure SQL DW指向blob存储中的同一文件夹,并声明自己的外部表来读取这些blob。

票数 2
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/40831904

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档