本文是《CDH+Kylin三部曲》的第一篇,整个系列由以下三篇组成:
整个三部曲的实战内容如下图所示:
接下来,就从最基本的准备工作开始吧。
ansible是常用的运维工具,可大幅度简化整个部署过程,接下来会使用ansible来完成部署工作,如果您对ansible还不够了解,请参考《ansible2.4安装和体验》,部署操作如下图所示,在一台安装了ansible的电脑上运行脚本,由ansible远程连接到一台CentOS7.7的服务器上,完成部署工作:
需要登录CDH服务器做以下设置:
本次实战一共要准备13个文件,这里用表格列举如下:
编号 | 文件名 | 简介 |
---|---|---|
1 | jdk-8u191-linux-x64.tar.gz | Linux版的jdk安装包 |
2 | mysql-connector-java-5.1.34.jar | mysql的JDBC驱动 |
3 | cloudera-manager-server-6.3.1-1466458.el7.x86_64.rpm | cm的server安装包 |
4 | cloudera-manager-daemons-6.3.1-1466458.el7.x86_64.rpm | cm的daemon安装包 |
5 | cloudera-manager-agent-6.3.1-1466458.el7.x86_64.rpm | cm的agent安装包 |
6 | CDH-5.16.2-1.cdh5.16.2.p0.8-el7.parcel | CDH应用离线安装包 |
7 | CDH-5.16.2-1.cdh5.16.2.p0.8-el7.parcel.sha | CDH应用离线安装包sha验证码 |
8 | apache-kylin-2.6.4-bin-cdh57.tar.gz | kylin安装包(适配CDH版本) |
9 | hosts | ansible用到的远程主机配置,里面记录了CDH6服务器的信息 |
10 | ansible.cfg | ansible用到的配置信息 |
11 | cm6-cdh5-kylin264-single-install.yml | 部署CDH时用到的ansible脚本 |
12 | cdh-single-start.yml | 初次启动CDH时用到的ansible脚本 |
13 | var.yml | 脚本中用到的变量都在在此设值,例如CDH包名、flink文件名等,便于维护 |
下面是每个文件的下载地址:
如果您已经下载好了上述13个文件,请按照如下位置摆放,这样才能顺利完成部署:
ansible参数设置的操作设置很简单:配置好CDH服务器的访问参数即可,包括IP地址、登录账号、密码等,修改~/playbooks/hosts文件,内容如下所示,您需要根据自身情况修改deskmini、ansible_host、ansible_port、ansible_user、ansible_password:
[cdh_group]deskmini ansible_host=192.168.50.134 ansible_port=22 ansible_user=root ansible_password=888888
至此,所有准备工作已完成,下一篇文章我们将完成这些操作: