专栏首页千里行走kubernetes-6:elasticsearch容器化

kubernetes-6:elasticsearch容器化

提供helm和yaml两种部署方式。

Helm部署步骤详见笔者git地址:

https://github.com/hepyu/k8s-app-config/tree/master/helm/min-cluster-allinone/es-min

yaml部署步骤详见笔者git地址:

https://github.com/hepyu/k8s-app-config/tree/master/yaml/min-cluster-allinone/es-min

目录

(1).容器化组件

(2).helm容器化方式

1.镜像准备

2.部署存储卷

3.helm部署masternode

4.helm部署ingestnode

5.helm部署datanode

(3).yaml容器化方式

(4).yaml配置文件重点详解

1.pod亲和性

2.pod优雅关闭

3.pvc保护设置

正文

(1).容器化组件

容器化成功后的组件,因为是demo,所以replica=1,笔者的demo机器配置不高,需要节约。

(2).helm容器化方式

1.镜像准备

docker pull elasticsearch:6.4.3

重命名镜像为:docker.elastic.co/elasticsearch/elasticsearch:6.4.3

docker images |grep elasticsearch |awk'{print "docker tag ",$1":"$2,$1":"$2}' |sed -e's#elasticsearch#docker.elastic.co/elasticsearch/elasticsearch#2' |sh -x

增加helm仓库:

Add the elastic helm charts repo:

helm repo add elastic https://helm.elastic.co

2.部署存储卷

如下地址有存储卷的yaml配置,依次执行:

https://github.com/hepyu/k8s-app-config/tree/master/helm/min-cluster-allinone/es-min

kubectl apply -f es-min-data0-pv-local.yaml

kubectl apply -fes-min-data-storageclass-local.yaml

kubectl apply -fes-min-ingest0-pv-local.yaml

kubectl apply -fes-min-ingest-storageclass-local.yaml

kubectl apply -fes-min-master0-pv-local.yaml

kubectl apply -fes-min-master-storageclass-local.yaml

3.helm部署masternode

helm install --name es-min-master--namespace es-min elastic/elasticsearch --version 6.4.3 --setmasterService=es-min-master,nodeGroup=master,clusterName=es-min,roles.data=false,roles.ingest=false,volumeClaimTemplate.resources.requests.storage=1Gi,volumeClaimTemplate.storageClassName=es-min-master-pv-local,volumeClaimTemplate.accessModes[0]=ReadWriteOnce,replicas=1,minimumMasterNodes=1

--name:指定安装的helm套件的名称

--namespace:要部署到容器中哪个namespace

--version 6.4.3:指定要部署的es版本

--set:指定容器化的详细参数

masterService:指定es在k8s容器内部的service负载均衡的名字;代理后端的POD。

nodeGroup:因为master生产环境是不说多个节点,所以对这些节点分组,指定这个分组名字;

clusterName:指定elasticsearch集群的名字;

roles.data:指定容器是否开启data功能;

roles.ingest:指定容器是否开启ingest功能;

volumeClaimTemplate.resources.requests.storage:指定存储空间大小;

volumeClaimTemplate.storageClassName:指定存储空间的storageClassName;

volumeClaimTemplate.accessModes[0]:指定存储空间的访问模式,ReadWriteOnce表示PV只能被一个POD读写;

replicas:标识创建几个POD。

minimumMasterNodes:标识elasticsearch集群最少需要几个存活的master;

4.helm部署ingestnode

helm install --name es-min-ingest--namespace es-min elastic/elasticsearch --version 6.4.3 --setmasterService=es-min-master,nodeGroup=ingest,clusterName=es-min,roles.data=false,roles.master=false,volumeClaimTemplate.resources.requests.storage=1Gi,volumeClaimTemplate.storageClassName=es-min-ingest-pv-local,volumeClaimTemplate.accessModes[0]=ReadWriteOnce,replicas=1,minimumMasterNodes=1

5.helm部署datanode

helm install --name es-min-data --namespacees-min elastic/elasticsearch --version 6.4.3 --setmasterService=es-min-master,nodeGroup=data,clusterName=es-min,roles.master=false,roles.ingest=false,volumeClaimTemplate.resources.requests.storage=1Gi,volumeClaimTemplate.storageClassName=es-min-data-pv-local,volumeClaimTemplate.accessModes[0]=ReadWriteOnce,replicas=1,minimumMasterNodes=1

(3).yaml容器化方式

笔者github提供elasticsearch的yaml配置文件:

https://github.com/hepyu/k8s-app-config/tree/master/yaml/min-cluster-allinone/es-min

提供了一个deploy.sh,可以直接运行sh deploy.sh完成容器化;

或者依次执行命令:

kubectl apply -fes-min-data-storageclass-local.yaml

kubectl apply -fes-min-ingest-storageclass-local.yaml

kubectl apply -fes-min-master-storageclass-local.yaml

kubectl apply -f es-min-data0-pv-local.yaml

kubectl apply -fes-min-ingest0-pv-local.yaml

kubectl apply -fes-min-master0-pv-local.yaml

kubectl apply -fes-min-data-statefulset.yaml

kubectl apply -fes-min-ingest-statefulset.yaml

kubectl apply -fes-min-master-statefulset.yaml

kubectl apply -f es-min-pvc.yaml

kubectl apply -f es-min-service.yaml

(4).yaml配置文件重点详解

笔者的yaml配置文件中做了详细注释,可以直接进入github去阅读相关yaml配置文件,这里只罗列其中的重点:

1.pod亲和性

作为elasticsearch集群,data/ingest/master节点都是多个,相同类型的节点如master是不能工程拓扑到相同的workNode上的,防止一台workNode宕机后将部分数据不能访问(部分数据的primary和复本恰好都在这台宕机的workNode上)。

2.pod优雅关闭

3.pvc保护设置

防止误删除了PVC,如果发现PVC还有POD使用,即使执行了delete pvc的操作,依然不会删除,只有当pod也被杀掉后才会删除掉pvc。

本文分享自微信公众号 - 千里行走(a_thousands_of_miles),作者:千里行走

原文出处及转载信息见文内详细说明,如有侵权,请联系 yunjia_community@tencent.com 删除。

原始发表时间:2019-06-06

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • kubernetes-5:使用helm与yaml两种方式进行mysql容器化

    实际生产环境中,为了稳定和高可用(晚上睡觉踏实),我们并不会把mysql装在k8s集群中,一般是用阿里云的RDS或者自己在高性能机器上搭建mysql。

    千里行走
  • kubernetes-15:全链路追踪skywalking容器化

    https://github.com/hepyu/k8s-app-config/tree/master/helm/min-cluster-allinone/sk...

    千里行走
  • kubernetes-8:kibana容器化

    http://toutiao.com/item/6699441606832947723/

    千里行走
  • 招募写手,限量乐享定制礼盒&京东卡等你!

    你可能不知道,腾讯乐享现已经为各行各业的客户提供服务,越来越多人成为我们的同路人,正与我们一同书写中国企业的新故事。 现在,我们想将这些故事记录下来,传播出去...

    腾讯乐享
  • 【读书笔记】linux编程艺术

    一、哲学 1、Rule of Modularity: Write simple parts connected by clean interfaces. 1、模...

    财主刀刀
  • html总结01

    周小董
  • MySQL 主从,读写分离

    版权声明:Copyright © ...

    zhengzongwei
  • Python中的SQL库:MySQL

    在上一篇《Python中的SQL库:SQLite》中,已经对数据库的基本操作有所概括,并且用SQLite做了演示。本文将重点介绍在Python程序中如何操作My...

    老齐
  • [随缘一题]排序数组中的单个元素

    因为我发现每日一题太难了,,,总会出现一些加班已经很累了(懒得不想动)的时候,而且周末有事多做两道题都叫做同一天的每日一题也让我这个强迫症贼难受.

    呼延十
  • 陈希章(O365开发指南):Office 365平台及其价值主张

    从今天开始我会给大家带来一个《Office 365开发入门指南》的视频教程。在2018年9月,我出版了这本迄今为止唯一的专门讲解Office 365开发的中文图...

    寒树Office与RPA

扫码关注云+社区

领取腾讯云代金券