elasticsearch集群安装部署

一、安装部署

1.前期准备

安装JDK版本
服务器执行：
yum install -y java-1.8.0-openjdk-devel
echo $JAVA_HOME  #检测默认jdk环境是不是1.8版本，如果不是自行百度。

增加服务器参数
vim /etc/sysctl.conf 
vm.max_map_count=655360
sysctl -p

2.从官网下载包

官网下载页传送门：http://www.elastic.co/downloads/elasticsearch
目前官网已经更新到6.2.3，但是本次安装的版本为5.5.2
可以直接点击[past releases](http://www.elastic.co/downloads/past-releases)找到过去的版本
安装方式说明：
目前官网提供了好几种包：zip，tar，rpm。
无论是哪种安装方式都可以，rpm直接安装也比较方便，但是我需要定制化安装，果断下载zip包
服务器上执行：
cd /opt/  && wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-5.5.2.zip

3.修改文件

找到下载的包解压：
cd /opt/
unzip elasticsearch-5.5.2.zip &&  cd elasticsearch-5.5.2
elasticsearch的目录结构大致为：

image.png

bin目录放启动脚本，安装插件脚本
config目录放主配置文件和jvn启动参数配置，以及log4j文件，如果下载插件，默认也会在里面放置配置文件。
lib目录放置库文件，modules放置模块，plugins放插件
我们主要做的就是修改配置文件和脚本

修改主配置文件
vim config/elasticsearch.yml
cluster.name: test_cluster                    # 集群名称
node.name: els1                                        # 节点名称，仅仅是描述名称，用于在日志中区分
path.data: /var/lib/elasticsearch                 # 数据的默认存放路径
path.logs: /var/log/elasticsearch                # 日志的默认存放路径
network.host: 172.18.68.11                       # 当前节点的IP地址
http.port: 9200                                           # 对外提供服务的端口，9300为集群服务的端口
discovery.zen.ping.unicast.hosts: ["172.18.68.11", "172.18.68.12","172.18.68.13"]       # 集群个节点IP地址，，可用域名
discovery.zen.minimum_master_nodes: 2       # 为了避免脑裂，集群节点数最少为 半数+1
注意！！！
集群配置中最重要的两项是node.name与network.host，每个节点都必须不同。
其中node.name是节点名称主要是在Elasticsearch自己的日志加以区分每一个节点信息。
以上的几个配置项为必须修改的选项，否则启动的时候会有各种各样的问题，建议根据实际情况，全部修改。```

修改启动文件
不过其中还是有两项最重要的-Xmx1g与-Xms1gJVM的最大最小内存。          
如果太小会导致Elasticsearch刚刚启动就立刻停止。太大会拖慢系统本身
官方建议是尽量不要修改其他启动项，除非你有特殊需求。
vim config/jvm.options
-Xms1g                                                  # JVM最大、最小使用内存
-Xmx1g
本人服务器内存为32g，分配了2G。

修改启动脚本
vim bin/elasticsearch
JAVA_HOME="/export/servers/jdk1.8.0_60"  #这里的JAVA_HOME路径为你安装jdk版本的路径
JAVA_OPTS=""

JAVA_OPTS配置为空，是为了不受系统配置的环境变量的影响，由于踩过坑所以建议这么做。
OK，至此全部修改完毕。

4.启动

创建用户，更改目录权限
新版本不允许用root启动，所以需要创建其他用户来启动，如果你一定要root启动，做以下更改
对于5.X版本，在config/jvm.options配置文件中，添加-Des.insecure.allow.root=true
非root用户启动
groupadd elasticsearch
useradd -g elasticsearch elasticsearch
passwd elasticsearch
chown -R elasticsearch. /opt/elasticsearch-5.5.2
#启动命令
sh /opt/elasticsearch-5.5.2/bin/elasticsearch -d
#停止命令
 ps -ef |grep /opt/elasticsearch-5.5.2 |grep -v 'grep'|awk '{print $2}'|xargs kill -9
本人写了个一个简单的脚本放在bin目录，可以直接进行启动，停止，重启操作，可自行修改使用。

#!/bin/bash
cd `dirname $0`
BIN_DIR=`pwd`
#启动脚本目录
StartES=/opt/elasticsearch-5.5.2/bin/elasticsearch
# 日志输出

start()
{
        echo "*****************************************"
        echo "*** elasticsearch-132 starting action ***"
        echo "*****************************************"
        sh $StartES -d
}

stop()
{
        echo "*****************************************"
        echo "*** elasticsearch-132 stoping  action ***"
        echo "*****************************************"
        `ps -ef |grep /opt/elasticsearch-5.5.2 |grep -v 'grep'|awk '{print $2}'|xargs kill -9`
}


restart(){
        stop
        sleep 3
        start
}

case "$1" in
  start)
        start
        ;;
  stop)
        stop
        ;;
  restart)
        restart
        ;;
  ?|help)
        echo $"Usage: $0 {start|stop|restart|help|?}"
        ;;
  *)
        restart
esac
##脚本名称随意命名

二、插件安装

目前插件安装分为在线安装和离线安装
**离线安装：**
先去下载对应插件版本的zip包，解析到`/opt/elasticsearch-5.5.2/plugins/`下，重启你的ES
**在线安装：**
到elasticsearch安装的bin目录下面执行脚本，此处举例安装elasticsearch-analysis-ik插件
./elasticsearch-plugin install https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v6.1.1/elasticsearch-analysis-ik-6.1.1.zip
然后重启ES即可。

三、报错排查

can not run elasticsearch as root
#请看启动区域教程，要么修改配置文件允许root运行，要么就创建新用户，更改文件夹权限
error='Cannot allocate memory'
#jvm配置文件中jvm空间大小需要修改，具体修改看服务器情况
max file descriptors [65535] for elasticsearch process likely too low, increase to at least [65536]
#请看文章开头的安装前准备，需要优化系统参数

参考文章
http://www.elastic.co/products/elasticsearch
https://www.cnblogs.com/aubin/p/8012840.html
https://blog.csdn.net/u011499747/article/details/78917718
https://blog.csdn.net/deardreaming/article/details/52785595