首页
学习
活动
专区
圈层
工具
发布
社区首页 >专栏 >教你快速搭建Kafka集群(2)——Kafka集群安装部署

教你快速搭建Kafka集群(2)——Kafka集群安装部署

作者头像
刘浩的BigDataPath
发布2021-04-13 11:02:35
发布2021-04-13 11:02:35
9290
举报
文章被收录于专栏:大数据那些年大数据那些年

上一篇快速认识Kafka阶段(1)——最详细的Kafka介绍给大家简单介绍了消息队列和kafka的一些基本内容,下面教大家怎样去安装部署Kafka集群哦!!!!!!

码字不易 先点个赞吧!

1、初始化环境准备

安装jdk,安装zookeeper并保证zk服务正常启动

2、下载安装包并上传解压

点击文字下载Kafka安装包

提取码:r766

代码语言:javascript
复制
node01执行以下命令,下载并解压

cd /export/softwares

tar –zxvf  kafka_2.11-1.0.0.tgz -C /export/servers/

3、node01服务器修改kafka配置文件

代码语言:javascript
复制
node01执行以下命令进入到kafka的配置文件目录,修改配置文件
node01执行以下命令创建数据文件存放目录

mkdir -p  /export/servers/kafka_2.11-1.0.0/logs 

cd /export/servers/kafka_2.11-1.0.0/config

vim server.properties
代码语言:javascript
复制
broker.id=0 (每个节点不能相同)

log.dirs=/export/servers/kafka_2.11-1.0.0/logs/

zookeeper.connect=node01:2181,node02:2181,node03:2181

delete.topic.enable=true

host.name=node01 (改成对应的节点)

4、安装包分发到其他服务器上面去

代码语言:javascript
复制
node01执行以下命令,将node01服务器的kafka安装包发送到node02和node03服务器上面去

cd /export/servers/
scp -r kafka_2.11-1.0.0/ node02:$PWD
scp -r kafka_2.11-1.0.0/ node03:$PWD

5、node02与node03服务器修改配置文件

node02使用以下命令修改kafka配置文件
代码语言:javascript
复制
cd /export/servers/kafka_2.11-1.0.0/config
vim server.properties

broker.id=1 (每个节点不能相同)

log.dirs=/export/servers/kafka_2.11-1.0.0/logs/

zookeeper.connect=node01:2181,node02:2181,node03:2181

delete.topic.enable=true

host.name=node02
node03使用以下命令修改kafka配置文件
代码语言:javascript
复制
cd /export/servers/kafka_2.11-1.0.0/config
vim server.properties
代码语言:javascript
复制
broker.id=2 (每个节点不能相同)

log.dirs=/export/servers/kafka_2.11-1.0.0/logs/

zookeeper.connect=node01:2181,node02:2181,node03:2181

delete.topic.enable=true

host.name=node03

6、kafka集群启动与停止

注意事项:在kafka启动前,一定要让zookeeper启动起来。

node01执行以下命令将kafka进程启动在后台

代码语言:javascript
复制
cd /export/servers/kafka_2.11-1.0.0

nohup bin/kafka-server-start.sh config/server.properties 2>&1 &

node02执行以下命令将kafka进程启动在后台

代码语言:javascript
复制
cd /export/servers/kafka_2.11-1.0.0

nohup bin/kafka-server-start.sh config/server.properties 2>&1 &

node03执行以下命令将kafka进程启动在后台

代码语言:javascript
复制
cd /export/servers/kafka_2.11-1.0.0

nohup bin/kafka-server-start.sh config/server.properties 2>&1 &

三台机器也可以执行以下命令停止kafka集群

代码语言:javascript
复制
cd /export/servers/kafka_2.11-1.0.0

bin/kafka-server-stop.sh
以上就是kafka的集群搭建,其实很简单,接下来给大家更新 kafka集群的操作,点个关注点个赞再走吧!!!
本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2020/03/19 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 1、初始化环境准备
  • 2、下载安装包并上传解压
  • 3、node01服务器修改kafka配置文件
  • 4、安装包分发到其他服务器上面去
  • 5、node02与node03服务器修改配置文件
  • 6、kafka集群启动与停止
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档