专栏首页Java工程师成长之路ElasticSearch集群搭建

ElasticSearch集群搭建

需求

  1. 用docker搭建一个ElasticSearch一主一从的集群,加一个elasticsearch-head查看集群状态

步骤

  1. 在参考了一堆博客后,我写了个固定容器ip的docker-compose.yml es1.yml
network.bind_host: 0.0.0.0
cluster.name: es_cluster
node.name: master
node.master: true
node.data: true
http.cors.enabled: true
http.cors.allow-origin: "*"
#network.host: 0.0.0.0
network.publish_host: 172.20.0.2
discovery.zen.minimum_master_nodes: 1

es2.yml

network.bind_host: 0.0.0.0
cluster.name: es_cluster
node.name: node2
node.master: false
node.data: true
http.cors.enabled: true
http.cors.allow-origin: "*"
#network.host: 0.0.0.0
network.publish_host: 172.20.0.3
discovery.zen.minimum_master_nodes: 1
discovery.zen.ping.unicast.hosts: es1

docker-compose.yml

version: '2'
services:
  elasticsearch-central: 
    image: elasticsearch:5.6.4
    container_name: es1
    volumes:
      - /root/mydocker/docker-es/es1.yml:/usr/share/elasticsearch/config/elasticsearch.yml
      - /root/mydocker/docker-es/data1:/usr/share/elasticsearch/data
    restart: always
    environment:
      - ES_CLUSTERNAME=elasticsearch
      - "ES_JAVA_OPTS=-Xmx50m -Xms50m"
    command: elasticsearch
    ports:
      - "9200:9200"
      - "9300:9300"
    networks:
      extnetwork:
        ipv4_address: 172.20.0.2
  elasticsearch-data: 
    image: elasticsearch:5.6.4
    container_name: es2
    volumes:
      - /root/mydocker/docker-es/es2.yml:/usr/share/elasticsearch/config/elasticsearch.yml
      - /root/mydocker/docker-es/data2:/usr/share/elasticsearch/data
    restart: always
    environment:
      - ES_CLUSTERNAME=elasticsearch
      - "ES_JAVA_OPTS=-Xmx50m -Xms50m"
    command: elasticsearch
    ports:
      - "9201:9200"
      - "9301:9300"
    links:
      - elasticsearch-central:elasticsearch
    networks:
      extnetwork:
        ipv4_address: 172.20.0.3
  elasticsearch-head:
    image: mobz/elasticsearch-head:5
    container_name: head
    volumes:
      - /root/mydocker/docker-es/head-conf/Gruntfile.js:/usr/src/app/Gruntfile.js
      - /root/mydocker/docker-es/head-conf/app.js:/usr/src/app/_site/app.js
    ports:
      - "9100:9100"
    links:
      - elasticsearch-central:elasticsearch
    networks:
      extnetwork:
        ipv4_address: 172.20.0.4
networks:
  extnetwork:
    ipam:
      config:
        - subnet: 172.20.0.0/16
          gateway: 172.20.0.1

遇到的问题

  1. Caused by: java.nio.file.AccessDeniedException 这类异常原因是文件夹权限问题,把data1,data2都设置上读写权限就可以
  2. 5.0版本默认容器jvm占用2G内存,若机器内存不足也会报错Cannot allocate memory,这个问题我在脚本已经解决了 "ES_JAVA_OPTS=-Xmx50m -Xms50m" 加上,因为我只是测试玩玩,不用于生产,所以只设置了50M
  3. sysctl.conf文件修改后最好运行下 /etc/sysctl.conf 立即生效
  4. 如果你用的是elasticsearch6.0版本,又会有新的问题,详情看 https://www.elastic.co/cn/blog/strict-content-type-checking-for-elasticsearch-rest-requests

参考博客 https://blog.csdn.net/u012915455/article/details/78952068 https://blog.csdn.net/wanghao_0206/article/details/79583325 https://blog.csdn.net/hechaojie_com/article/details/83625265 https://blog.csdn.net/sinat_31908303/article/details/80496349 https://blog.csdn.net/moliyiran/article/details/53791515 https://segmentfault.com/a/1190000014283157

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • 有关SQL的面试题

    对于第一题,我联想到leetcode的第N高的薪水的问题,没错第一题最好采用函数的方法,将 N = 10 来作为参数输入

    用户6029108
  • Elasticsearch基础但非常有用的功能之一:别名

    本文是系列文章第一篇。介绍Elasticsearch的一些非常基础但实战开发确非常有用的技术点。了解这些技术点会帮助你设计更易于维护的数据索引,预先知道PB级大...

    用户1461999
  • Github | 高效微信公众号历史文章和阅读数据爬虫

    项目地址:https://github.com/54xingzhe/weixin_crawler

    JAVAandPython君
  • 搜索技术的秘密(一):概览

    「多字段搜索」是一个非常复杂的话题,设想你有一堆日志记录,有很多字段。然后产品经理希望可以通过各种组合字段进行搜索,比如根据时间段、用户 ID、行为类型、目标 ...

    老钱
  • 别再说你不会 ElasticSearch 调优了,都给你整理好了

    (https://www.elastic.co/guide/en/elasticsearch/reference/current/tune-for-indexi...

    Yajun_
  • Elasticsearch高级调优方法论之——根治慢查询!

    Elasticsearch是非常灵活且功能丰富的搜索引擎,它提供了许多不同查询数据的方法。在实战业务场景中,经常会出现远远低于预期查询速度的慢查询。作为分布式系...

    zhisheng
  • ELK日志系统介绍

    当我们的系统发生故障时,我们需要登录到各个服务器上,使用 grep / sed / awk 等 Linux 脚本工具去日志里查找故障原因。

    用户1149268
  • Elasticsearch 快速开始

    本文非完全直译译文,主要参考的的是 elasticsearch 6.5 版的官网文档 Getting Started,可以把这篇文章理解为个人学习笔记,我力求详...

    波罗学
  • haystack+whoosh

    haystack: 全文检索框架(对检索引擎包装下,抹掉差异 提供统一接口,方便码农)。该框架支持Elasticsearch,Whoosh, Xapian,So...

    lesM10
  • 使用Docker命令如何启动服务?

    如果出现错误net/http: TLS handshake timeout,将http://d1d9aef0.m.daocloud.io/添加到daemon

    _simple

扫码关注云+社区

领取腾讯云代金券