版权声明:本文为王小雷原创文章,未经博主允许不得转载 https://blog.csdn.net/dream_an/article/details/80960556
本节主要内容:
在此之前已经部署好Hadoop(伪分布式或者完全分布式),并设置了Hadoop环境变量(参考第二章 Linux)。
sudo vim /etc/profile.d/sqoop-2.sh
#!/bin/sh
# Author:wangxiaolei(王小雷)
# Blog: http://blog.csdn.net/dream_an
# Github: https://github.com/wangxiaoleiai
# Date:201807
export SQOOP_HOME=/opt/sqoop2/sqoop-1.99.7-bin-hadoop200
export PATH=$SQOOP_HOME/bin:$PATH
export SQOOP_SERVER_EXTRA_LIB=/var/lib/sqoop2/
修改conf/sqoop.properties
org.apache.sqoop.submission.engine.mapreduce.configuration.directory=/opt/hadoop/hadoop-3.1.0/etc/hadoop/conf/
Sqoop2数据库初始化
sudo mkdir /var/lib/sqoop2
sudo chown busuanzi:busuanzi /var/lib/sqoop2/
mkdir /var/lib/sqoop2/data
mkdir /var/lib/sqoop2/extra-lib
sqoop2-tool upgrade
验证
sqoop2-tool verify
sqoop2-server start
sqoop2-server start
查看
jps
将数据库驱动放置
cp postgresql-42.2.2.jar /var/lib/sqoop2/extra-lib/
开启Sqoop2客户端
sqoop2-shell
查看帮助
help
关闭客户端
:x
sqoop2-server stop
:clap:本节完成
开源、源码获取 https://github.com/wangxiaoleiAI/big-data
分割线以下可忽略
:izakaya_lantern:拓展部分
:izakaya_lantern:Sqoop2-shell在本地terminal打开报错问题 在服务器中正常,远程连接本地打开报错(但是仍然打开成功)。
其实是因为本地terminal主题颜色的问题导致报错,这个问题可以忽略。不影响正常使用。
本地因主题导致颜色报错,但实际是成功的。
服务端无报错。
解决 先执行
export TERM=xterm-color
然后执行
sqoop2-shell