前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >Hive多用户模式安装

Hive多用户模式安装

作者头像
CoderJed
发布2018-09-13 10:53:11
1.6K0
发布2018-09-13 10:53:11
举报
文章被收录于专栏:Jed的技术阶梯


1. 集群规划

hadoop01-hadoop04:hadoop集群

hadoop01:MySQL服务器

hadoop02:Hive服务端

hadoop03-hadoop04:Hive客户端

2. 安装步骤

(1) 上传并解压安装包

代码语言:javascript
复制
[hadoop@hadoop02 ~]$ tar -zxvf apache-hive-1.2.1-bin.tar.gz -C /home/hadoop/apps/

(2) 把JDBC驱动包加入到HIVE_HOME/lib下

(3) 把hive目录分发给hadoop03和hadoop04

代码语言:javascript
复制
[hadoop@hadoop02 ~]$ scp -r /home/hadoop/apps/hive-1.2.1 hadoop03:/home/hadoop/apps/
[hadoop@hadoop02 ~]$ scp -r /home/hadoop/apps/hive-1.2.1 hadoop04:/home/hadoop/apps/

(3) 3台hive节点的环境变量中都加入HIVE_HOME

代码语言:javascript
复制
export HIVE_HOME=/home/hadoop/apps/hive-1.2.1
export PATH=$PATH:$HIVE_HOME/bin

(4) 修改服务端(hadoop02)的hive配置文件hive-site.xml

该文件在HIVE_HOME/conf/下

代码语言:javascript
复制
# 如果没有该文件,复制hive-default.xml.template为hive-site.xml
[hadoop@hadoop02 conf]$ cp hive-default.xml.template hive-site.xml

[hadoop@hadoop02 conf]$ vim hive-site.xml

<configuration>
    <!--可选,配置hive数据存放的位置,是一个HDFS路径,默认就是/user/hive/warehouse-->
    <property>  
        <name>hive.metastore.warehouse.dir</name>
        <value>/user/hive/warehouse</value>
    </property> 
    
    <!--以下4个配置是mysql的基本配置-->
    <!--数据库hivedb是存放元数据的mysql数据库,可以自定义名称-->
    <!--
        注意:
        如果hive服务器与mysql在同一台机器,把hadoop01换成localhost
        一定是localhost,不能写mysql那台的服务器的主机名或IP
    -->
    <property>  
        <name>javax.jdo.option.ConnectionURL</name>
        <value>jdbc:mysql://hadoop01/hivedb?createDatabaseIfNotExist=true</value>
    </property>  
    <property>  
        <name>javax.jdo.option.ConnectionDriverName</name>
        <value>com.mysql.jdbc.Driver</value>
    </property>
    <property>
        <name>javax.jdo.option.ConnectionUserName</name>
        <value>root</value>
    </property>  
    <property>
        <name>javax.jdo.option.ConnectionPassword</name>
        <value>root</value>
    </property>
</configuration>

(5) 修改客户端(hadoop03、hadoop04)的hive配置文件hive-site.xml

代码语言:javascript
复制
<configuration>
    <!--要与服务端配置的这个路径一样-->
    <property>  
        <name>hive.metastore.warehouse.dir</name>
        <value>/user/hive/warehouse</value>
    </property>
    <property>  
        <name>hive.metastore.local</name>  
        <value>false</value>  
    </property>  
    <property>
        <name>hive.metastore.uris</name>
        <value>thrift://hadoop02:9083</value>
    </property>
</configuration>

(6) 保证hadoop集群中的jline jar包和所有hive节点的 jline jar包版本保持一致(高版本替换低版本)

hadoop的jline jar包存放位置:HADOOP_HOME/share/hadoop/yarn/lib/

其中的jline包为:jline-0.9.94.jar(hadoop-2.6.5)

hive的jline jar包存放位置:HIVE_HOME/lib/

其中的jline包为:jline-2.12.jar(hive-1.2.1)

删除hadoop的jline包,把hive的jline包放进去

(7) hive服务端初始化元数据(必须保证mysql服务正常启动,且允许远程权限)

代码语言:javascript
复制
[hadoop@hadoop02 conf]$ schematool -dbType mysql -initSchema

上图代表初始化成功!

(8) 启动hive服务端(必须保证hadoop集群正常启动)

代码语言:javascript
复制
[hadoop@hadoop02 conf]$ hive --service metastore 

(9) 启动两台客户端

代码语言:javascript
复制
[hadoop@hadoop03 ~]$ hive
hive>

[hadoop@hadoop04 ~]$ hive
hive>

Hive多用户模式安装成功!

本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2017.12.22 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 1. 集群规划
  • 2. 安装步骤
    • (1) 上传并解压安装包
      • (2) 把JDBC驱动包加入到HIVE_HOME/lib下
        • (3) 把hive目录分发给hadoop03和hadoop04
          • (3) 3台hive节点的环境变量中都加入HIVE_HOME
            • (4) 修改服务端(hadoop02)的hive配置文件hive-site.xml
              • (5) 修改客户端(hadoop03、hadoop04)的hive配置文件hive-site.xml
                • (6) 保证hadoop集群中的jline jar包和所有hive节点的 jline jar包版本保持一致(高版本替换低版本)
                  • (7) hive服务端初始化元数据(必须保证mysql服务正常启动,且允许远程权限)
                    • (8) 启动hive服务端(必须保证hadoop集群正常启动)
                      • (9) 启动两台客户端
                      相关产品与服务
                      云数据库 SQL Server
                      腾讯云数据库 SQL Server (TencentDB for SQL Server)是业界最常用的商用数据库之一,对基于 Windows 架构的应用程序具有完美的支持。TencentDB for SQL Server 拥有微软正版授权,可持续为用户提供最新的功能,避免未授权使用软件的风险。具有即开即用、稳定可靠、安全运行、弹性扩缩等特点。
                      领券
                      问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档