基于HDFS构建的Apache HAWQ安装
我想安装基于Hadoop的Apache HAWQ。
在安装HAWQ之前，我应该安装Hadoop并配置所有我的节点。
我有四个节点，如下所示，我的问题是blow。
我应该为hawq-master安装hadoop发行版吗？
1. hadoop-master //namenode, Secondary Namenode, ResourceManager, HAWQ Standby,
2. hawq-master //HAWQ Master
3. datanode01 //Datanode, HAWQ Segment
4. datanode02 //Datanode, HAWQ Segment如上所述，我在节点旁边写下了每个节点的角色。在我看来，我应该为hadoop-master，datanode01和datanode02安装hadoop，并且我应该将hadoop-master设置为namenode (主)，其他的设置为datanode (从)。然后，我将在所有节点上安装apache HAWQ。我将hawq-master设置为主节点，将hadoop-master设置为备用节点，最后将其他两个节点设置为HAWQ段。
我想要的是安装基于Hadoop的HAWQ。所以，我认为hawq-master应该建立在hadoop之上，但这与hadoop-master没有关系。
如果我继续上面的过程，那么我认为我不需要在hawq-master上安装hadoop发行版。我认为基于hadoop成功安装HAWQ安装正确吗？
如果hadoop应该安装在hawq-master上，那么哪一个是正确的？
1. `hawq-master` should be set as `namenode` .
2. `hawq-master` should be set as 'datanode`.任何帮助都将不胜感激。
回答 1
Stack Overflow用户
发布于 2017-02-16 11:10:30
老实说，如果配置正确，hadoop和hawq的安装方式没有严格的限制。
出于您的考虑，“我认为hawq-master应该构建在hadoop之上，但与hadoop-master没有任何联系”。国际海事组织，它应该是"hawq应该建立在hadoop之上“。我们配置了hawq-master conf文件( hawq -site.xml)，使hawq可以与hadoop连接。
通常，对于hawq主服务器和hadoop主服务器，我们可以在一个节点上安装每个组件，但也可以在一个节点上安装其中一些组件以保存节点。但是对于HDFS datanode和HAWQ段，我们经常将它们安装在一起。考虑到每台机器的工作负载，我们可以按如下方式安装它们：
hadoop hawq
hadoop-master namenode hawq standby
hawq-master secondarynamenode hawq master
other node datanode segment如果您使用yarn集成来配置hawq，那么集群中将会有resourcemanager和nodemanager。
hadoop role hawq role
hadoop-master namenode hawq standby
hawq-master snamenode,resourcemanager hawq master
other node datanode, nodemanager segment将它们安装在一起并不意味着它们有连接，而是您的配置文件使它们可以相互访问。你可以把所有的主组件安装在一起，但是这对机器来说可能太重了。在http://incubator.apache.org/projects/hawq.html上阅读更多关于Apache HAWQ的信息，在http://hdb.docs.pivotal.io/211/hdb/index.html上阅读一些文档。
此外，您可以订阅开发和用户邮件列表，发送电子邮件至dev- subscribe @hawq.incubator.apache.org / user- subscribe @hawq.incubator.apache.org进行订阅，并发送电子邮件至dev@hawq.incubator.apache.org / user@hawq.incubator.apache.org询问问题。
https://stackoverflow.com/questions/42263693
复制相似问题
腾讯云开发者
