ELK的安装配置
提前说明
学习整理
需要配置好的虚拟机
一、ES简介
ES是一个基于RESTful web接口并且构建在Apache Lucene之上的开源分布式搜索引擎。
特点是:高可用,高扩展,是一种NOSQL的数据存储工具
二、ES安装前的准备(elk安装包版本要求一致)
下载:elasticsearch-6.2.2.tar.gz
elasticsearch-head-master.zip
kibana-6.2.2-linux-x86_64.tar.gz
logstash-6.2.2.tar.gz
node-v8.9.1-linux-x64.tar.gz
三、ELK的安装
1.把下载好的安装包,拖拽到/software目录中(software需要提前在系统根目录创建)
2.输入:yum install -y unzip 下载解压缩工具
3.输入:cd /software 进入安装包目录,输入ll可以查看目录中的文件
4.输入:tar -zxvf elasticsearch-6.2.2.tar.gz -C /opt
5.输入:tar -zxvf kibana-6.2.2-linux-x86_64.tar.gz -C/opt
6.输入:tar -zxvf logstash-6.2.2.tar.gz -C /opt
7.输入:tar -zxvf node-v8.9.1-linux-x64.tar.gz -C/opt
8.输入:unzip elasticsearch-head-master.zip
9.输入 mv elasticsearch-head-master /opt/eshm 把解压的文件夹移动并改名
10.输入:cd /opt
11.输入:mv kibana-6.2.2-linux-x86_64/ kibana622
12.输入:mv logstash-6.2.2/ logstash622
13.输入:mv node-v8.9.1-linux-x64/ node8
操作过程图:
mkdir /software 创建空文件夹
cd /software 进入software目录,将准备的5个包扔进去在加一个jdk包
yum下载unzip
解压文件到目标目录
新开框口
在新开的窗口cd /opt 使用mv重命名
解压zip文件
将解压的文件移动到opt下并且重命名
解压剩下的文件并移动到opt目录下:
将opt下的文件进行重命名(目的是简单点)
在第一个窗口将software安装包删除
四、ES的配置
1.输入:vi /etc/hostname 修改主机名
2.输入:vi /etc/hosts 修改主机列表
3.配置es的参数
(1)输入:vi /opt/es622/config/elasticsearch.yml,按shift+g,快速定位到尾行,按o在下一行插入以下内容:
cluster.name: test --集群名
node.name: test-master --节点名
node.master: true --是否是主节点
network.host: 192.168.56.110 --本机地址
discovery.zen.ping.unicast.hosts: ["192.168.56.110"] --同上
http.cors.enabled: true
http.cors.allow-origin: "*"
4.配置系统参数
(1)输入:vi /etc/sysctl.conf 插入内容:vm.max_map_count=655360
最好首次也要使用以下命令刷新 sysctl -w vm.max_map_count=655360
(2)输入:vi /etc/security/limits.conf 插入内容:
* soft nofile 65536
* hard nofile 65536
* soft nproc 4096
* hard nproc 4096
5.修改es622目录的属组(es不能使用root启动) chown -R bigdata:bigdata es622
6.输入:su bigdata 切换到普通用户
7.在/opt目录下输入:./es622/bin/elasticsearch
底部出现 started即是启动成功
8. 在windows界面打开网页,输入http://192.168.56.110:9200/,可以正常出页面,切有节点的信息,即是启动成功
在第一个窗口操作:
输入vi /etc/hostname 进去设置主机名;完成后保存退出
进入修改主机列表,完成后保存退出
在原本下面新增3行
配置es的参数:输入:vi /opt/es622/config/elasticsearch.yml,按shift+g,快速定位到尾行,按o在下一行插入以下内容:
配置系统参数:输入:vi /etc/sysctl.conf 插入内容:vm.max_map_count=655360
最好首次也要使用以下命令刷新 sysctl -w vm.max_map_count=655360
输入:vi /etc/security/limits.conf 插入内容:
* soft nofile 65536
* hard nofile 65536
* soft nproc 4096
* hard nproc 4096
第二个窗口:
修改es622目录的属组(es不能使用root启动) chown -R es:es es622
输入:su bigdata 切换到普通用户
在/opt目录下输入:./es622/bin/elasticsearch; 由于之前没配置java所以翻车
接下来在第一个窗口配置Java
第二个窗口:需要在root用户下source /etc/profile或者吧第二个窗口关闭重新开
然后su es ; 在/opt目录下输入:./es622/bin/elasticsearch
备注:ctrl+c终止
在windows界面打开网页,输入192.168.56.122:9200,可以正常出页面,切有节点的信息,即是启动成功
五、Head-master及node的配置
1.输入:vi /etc/profile 按shift+g定位到底部,然后按o在下一行插入以下内容:
export NODE_HOME=/opt/node8
export PATH=$PATH:$NODE_HOME/bin (如之前在java配置过PATH变量则在原先的尾部增 加: :$NODE_HOME/bin)
2.输入:source /etc/profile 激活配置文件,输入node -v 可以查看是否配置成功
3.输入:cd /opt/eshm - cd/opt/eshead
4.输入:npm install -g grunt-cli --等待的时间比较长,要有点耐心
5.输入:npm install 出错时需要输入:
npm install phantomjs-prebuilt@2.1.14 --ignore-scripts
6.输入:vi Gruntfile.js,在以下位置高亮位置增加一行代码:hostname: ‘*’,
7. 输入:vi _site/app.js,找到如下代码,并进行修改:
8. 输入:npm run start 启动head-master
9.在windows界面,打开网页,输入:192.168.56.110:9100
输入:vi /etc/profile 按shift+g定位到底部,然后按o在下一行插入以下内容:
export NODE_HOME=/opt/node8
export PATH=
P
A
T
H
:
PATH:
PATH:NODE_HOME/bin (如之前在java配置过PATH变量则在原先的尾部增 加: :$NODE_HOME/bin)
这个在上面配置Java 已经配置过了
输入node -v 可以查看是否配置成功
输入:cd /opt/eshm - cd/opt/eshead
输入:npm install -g grunt-cli --等待的时间比较长,要有点耐心
输入:npm install
出错时(或者下载很慢就终止)需要输入:
npm install phantomjs-prebuilt@2.1.14 --ignore-scripts
输入:vi Gruntfile.js,在以下位置高亮位置增加一行代码:hostname: ‘*’, 提示查看模式下shift+g到最后就能看见
输入:vi _site/app.js,找到如下代码,并进行修改
输入:npm run start 启动head-master 前提是先重新开一个窗口在该窗口输入su es 然后再在/opt目录下输入:./es622/bin/elasticsearch
在windows界面,打开网页,输入:192.168.56.122:9100
六、使用Head-master对ES进行测试
七、kibana安装,配置和实例
1.输入:cd /opt/kibana622
2.输入:vi config/kibana.yml 按shift+g跳转到行末,按o增加以下内容:
server.host: "192.168.56.110"
elasticsearch.url: "http://192.168.56.110:9200"
3.输入:./bin/kibana 运行kibana
4.在windows界面打开网页,输入192.168.56.110:5601
cd /opt/kibana622目的是到之前重命名kibana那里面
输入:vi config/kibana.yml
按shift+g跳转到行末,按o增加以下内容:
server.host: “192.168.56.110”
elasticsearch.url: “http://192.168.56.110:9200”
输入:./bin/kibana 运行kibana
在windows界面打开网页,输入192.168.56.122:5601