龙果社区 > 博客列表 > 正文

Elasticsearch 安装与集群配置

标签:ELK 发布于 2017-01-11 11:36:32

一、软件版本

操作系统:CentOS-6.5-x86_64

ES版本:5.0

主机:192.168.63.246

主机: 192.168.63.242

 

二、部署环境规划:

 

1、 需求:jdk版本:open-jdk.1.8

[root@www config]# java -version

openjdk version "1.8.0_101"

OpenJDK Runtime Environment (build 1.8.0_101-b13)

OpenJDK 64-Bit Server VM (build 25.101-b13, mixed mode)

 

2、 下载解压安装即可:

[root@www src]# cd /test/

[root@www test]# tar zxvf elasticsearch-5.0.0.tar.gz

 

3、 具体配置:

[root@www elasticsearch-5.0.0]# cd config/

[root@www config]# vim elasticsearch.yml

 

配置解析:

集群:

cluster.name: es-log

节点:

node.name: log-1  ##节点保持唯一性。

数据和日志存放目录:

#path.data: /path/to/data

#path.logs: /path/to/logs     ##默认当前目录下,可以修改

是否使用swap:

bootstrap.memory_lock:true

广播配置:

discovery.zen.ping.unicast.hosts: ["192.168.63.242", "192.168.63.247"]

discovery.zen.minimum_master_nodes: 1

 

其他相关系统设置:

 

Vim /etc/sysctl.conf

vm.max_map_count= 262144

sysctl –p

 

系统打开文件数配置:

[root@controller config]# vim /etc/security/limits.conf

*  hard nofile 65536

* soft nofile 65536

 

修改用户打开的线程数,因为es 的段要经常打开文件控制索引:

vim /etc/security/limits.d/90-nproc.conf

*          soft    nproc     2048

 

切换到普通用户启动:

Su – dashuju

[dashuju@www bin]$ ./elasticsearch

 

#####要是提示,报一些没有启动的目录,直接创建即可,但是想写入日志和数据必须是普通用户有写入权限#####

 

启动之后:测试有如下显示表示已经安装成功。

 

[root@www bin]# curl  -XGET '192.168.63.242:9200'

{

  "name" : "log-1",

  "cluster_name" : "es-log",

  "cluster_uuid" : "_na_",

  "version" : {

    "number" : "5.0.0",

    "build_hash" : "253032b",

    "build_date" : "2016-10-26T04:37:51.531Z",

    "build_snapshot" : false,

    "lucene_version" : "6.2.0"

  },

  "tagline" : "You Know, for Search"

}

 

4、 集群启动设置:

 

加入说只有一个节点,那么es就当做自己是一个集群。

一个节点(node)就是一个Elasticsearch实例,而一个集群(cluster)由一个或多个节点组成,它们具有相同的cluster.name,它们协同工作,分享数据和负载。

当加入新的节点或者删除一个节点时,集群就会感知到并平衡数据。

 

 

1、 我们已经启动了192.168.63.242这台机器,我们可以现在创建一条索引,然后查看一下单集群的状态:

[root@www elasticsearch-5.0.0]# curl -XPOST '192.168.63.242:9200/test/name/1' -d '

{

  "name": "xiaoluo"

}'

####创建一条test的索引,type为name,id=1

 

2、 然后我们查看一下集群当前的状态:

 

ticsearch-5.0.0]# curl  -XGET '192.168.63.242:9200/_cluster/health?pretty'

{

  "cluster_name" : "es-log",

  "status" : "yellow",

}

 

主要看一下集群的几个状态:

 

green    所有主要分片和复制分片都可用

yellow   所有主要分片可用,但不是所有复制分片都可用

red  不是所有的主要分片都可用

 

#####可以看到我们现在显示为:yellow的,因为我们只有主分片,而没有复制分片的。

 

现在我们启动配置好192.168.63.246这个节点:

 

cluster.name: es-log

node.name: log-2

bootstrap.memory_lock: true

network.host: 192.168.63.246

discovery.zen.ping.unicast.hosts: ["192.168.63.246", "192.168.63.242"]

discovery.zen.minimum_master_nodes: 1

 

可以看到相关启动日志:

face/zTr6e5NwdAxDsHWPpAA78GhXRdjeFPD2.png

我们知道已经加入这个集群了,现在我们看一下集群的相关状态:

 

[root@www elasticsearch-5.0.0]# curl  -XGET '192.168.63.242:9200/_cluster/health?pretty'

{

  "cluster_name" : "es-log",

  "status" : "green",

}

可以看到集群已经变成绿色,说明我们复制分片是已经可以使用了的,我们在192.168.63.246上面查看一下我们刚刚创建的数据看:

 

[root@www elasticsearch-5.0.0]# curl -XGET '192.168.63.246:9200/test/name/1?pretty'

{

  "_index" : "test",

  "_type" : "name",

  "_id" : "1",

  "_version" : 1,

  "found" : true,

  "_source" : {

    "name" : "xiaoluo"

  }

}

############可以看到数据已经被复制到192.168.63.246上面了。

 

后面我们测算成功之后,我们集群的配置要稍作修改:

discovery.zen.minimum_master_nodes: 2   ###开始设置成1是为了一台测试,宣讲我们推荐大于1台。


文章内容整理自《日志分析之 ELK stack 实战》课程资料


阅读人数(727) (0) 关注(0)
0/5000字

全部评论(0)

1篇文章 | 0关注

注册

找回密码

没有账号?立即注册

注册成功,激活邮件已发送至您的邮箱请注意查收并激活帐号。

如未收到激活邮件,请点击重新发送

正在加载 · · ·