elasticsearch集群安装部署

一、安装部署

1.前期准备
安装JDK版本
服务器执行:
yum install -y java-1.8.0-openjdk-devel
echo $JAVA_HOME  #检测默认jdk环境是不是1.8版本,如果不是自行百度。

增加服务器参数
vim /etc/sysctl.conf 
vm.max_map_count=655360
sysctl -p
2.从官网下载包
官网下载页传送门:http://www.elastic.co/downloads/elasticsearch
目前官网已经更新到6.2.3,但是本次安装的版本为5.5.2
可以直接点击[past releases](http://www.elastic.co/downloads/past-releases)找到过去的版本
安装方式说明:
目前官网提供了好几种包:zip,tar,rpm。
无论是哪种安装方式都可以,rpm直接安装也比较方便,但是我需要定制化安装,果断下载zip包
服务器上执行:
cd /opt/  && wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-5.5.2.zip
3.修改文件
找到下载的包解压:
cd /opt/
unzip elasticsearch-5.5.2.zip &&  cd elasticsearch-5.5.2
elasticsearch的目录结构大致为:
image.png
bin目录放启动脚本,安装插件脚本
config目录放主配置文件和jvn启动参数配置,以及log4j文件,如果下载插件,默认也会在里面放置配置文件。
lib目录放置库文件,modules放置模块,plugins放插件
我们主要做的就是修改配置文件和脚本
修改主配置文件
vim config/elasticsearch.yml
cluster.name: test_cluster                    # 集群名称
node.name: els1                                        # 节点名称,仅仅是描述名称,用于在日志中区分
path.data: /var/lib/elasticsearch                 # 数据的默认存放路径
path.logs: /var/log/elasticsearch                # 日志的默认存放路径
network.host: 172.18.68.11                       # 当前节点的IP地址
http.port: 9200                                           # 对外提供服务的端口,9300为集群服务的端口
discovery.zen.ping.unicast.hosts: ["172.18.68.11", "172.18.68.12","172.18.68.13"]       # 集群个节点IP地址,,可用域名
discovery.zen.minimum_master_nodes: 2       # 为了避免脑裂,集群节点数最少为 半数+1
注意!!!
集群配置中最重要的两项是node.name与network.host,每个节点都必须不同。
其中node.name是节点名称主要是在Elasticsearch自己的日志加以区分每一个节点信息。
以上的几个配置项为必须修改的选项,否则启动的时候会有各种各样的问题,建议根据实际情况,全部修改。```

修改启动文件
不过其中还是有两项最重要的-Xmx1g与-Xms1gJVM的最大最小内存。          
如果太小会导致Elasticsearch刚刚启动就立刻停止。太大会拖慢系统本身
官方建议是尽量不要修改其他启动项,除非你有特殊需求。
vim config/jvm.options
-Xms1g                                                  # JVM最大、最小使用内存
-Xmx1g
本人服务器内存为32g,分配了2G。
修改启动脚本
vim bin/elasticsearch
JAVA_HOME="/export/servers/jdk1.8.0_60"  #这里的JAVA_HOME路径为你安装jdk版本的路径
JAVA_OPTS=""

JAVA_OPTS配置为空,是为了不受系统配置的环境变量的影响,由于踩过坑所以建议这么做。
OK,至此全部修改完毕。
4.启动
创建用户,更改目录权限
新版本不允许用root启动,所以需要创建其他用户来启动,如果你一定要root启动,做以下更改
对于5.X版本,在config/jvm.options配置文件中,添加-Des.insecure.allow.root=true
非root用户启动
groupadd elasticsearch
useradd -g elasticsearch elasticsearch
passwd elasticsearch
chown -R elasticsearch. /opt/elasticsearch-5.5.2
#启动命令
sh /opt/elasticsearch-5.5.2/bin/elasticsearch -d
#停止命令
 ps -ef |grep /opt/elasticsearch-5.5.2 |grep -v 'grep'|awk '{print $2}'|xargs kill -9
本人写了个一个简单的脚本放在bin目录,可以直接进行启动,停止,重启操作,可自行修改使用。
#!/bin/bash
cd `dirname $0`
BIN_DIR=`pwd`
#启动脚本目录
StartES=/opt/elasticsearch-5.5.2/bin/elasticsearch
# 日志输出

start()
{
        echo "*****************************************"
        echo "*** elasticsearch-132 starting action ***"
        echo "*****************************************"
        sh $StartES -d
}

stop()
{
        echo "*****************************************"
        echo "*** elasticsearch-132 stoping  action ***"
        echo "*****************************************"
        `ps -ef |grep /opt/elasticsearch-5.5.2 |grep -v 'grep'|awk '{print $2}'|xargs kill -9`
}


restart(){
        stop
        sleep 3
        start
}

case "$1" in
  start)
        start
        ;;
  stop)
        stop
        ;;
  restart)
        restart
        ;;
  ?|help)
        echo $"Usage: $0 {start|stop|restart|help|?}"
        ;;
  *)
        restart
esac
##脚本名称随意命名

二、插件安装

目前插件安装分为在线安装和离线安装
**离线安装:**
先去下载对应插件版本的zip包,解析到`/opt/elasticsearch-5.5.2/plugins/`下,重启你的ES
**在线安装:**
到elasticsearch安装的bin目录下面执行脚本,此处举例安装elasticsearch-analysis-ik插件
./elasticsearch-plugin install https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v6.1.1/elasticsearch-analysis-ik-6.1.1.zip
然后重启ES即可。

三、报错排查

can not run elasticsearch as root
#请看启动区域教程,要么修改配置文件允许root运行,要么就创建新用户,更改文件夹权限
error='Cannot allocate memory'
#jvm配置文件中jvm空间大小需要修改,具体修改看服务器情况
max file descriptors [65535] for elasticsearch process likely too low, increase to at least [65536]
#请看文章开头的安装前准备,需要优化系统参数

参考文章
http://www.elastic.co/products/elasticsearch
https://www.cnblogs.com/aubin/p/8012840.html
https://blog.csdn.net/u011499747/article/details/78917718
https://blog.csdn.net/deardreaming/article/details/52785595

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 216,744评论 6 502
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,505评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 163,105评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,242评论 1 292
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,269评论 6 389
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,215评论 1 299
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,096评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,939评论 0 274
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,354评论 1 311
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,573评论 2 333
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,745评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,448评论 5 344
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,048评论 3 327
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,683评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,838评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,776评论 2 369
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,652评论 2 354