ElasticSearch-6.2.4部署安装及常见的问题

ELK简介

ELK是Elasticsearch、Logstash、Kibana的简称，这三者是核心套件，但并非全部。

• Elasticsearch：是实时全文搜索和分析引擎，提供搜集、分析、存储数据三大功能；是一套开放REST和JAVA API等结构提供高效搜索功能，可扩展的分布式系统。它构建于Apache Lucene搜索引擎库之上。附上安装教程：ElasticSearch-6.2.4部署安装及常见的问题
• Logstash：是一个用来搜集、分析、过滤日志的工具。它支持几乎任何类型的日志，包括系统日志、错误日志和自定义应用程序日志。它可以从许多来源接收日志，这些来源包括syslog、消息传递（例如 RabbitMQ）和JMX，它能够以多种方式输出数据，包括电子邮件、websockets和Elasticsearch。
• Kibana：是一个基于Web的图形界面，用于搜索、分析和可视化存储在 Elasticsearch指标中的日志数据。它利用Elasticsearch的REST接口来检索数据，不仅允许用户创建他们自己的数据的定制仪表板视图，还允许他们以特殊的方式查询和过滤数据。附上安装教程：es可视化工具kibana的部署安装及使用

1.下载安装

1）JDK1.8.0_144

解压：tar -zxvf jdk.tar.gz -C /usr/local/
配置：vim /etc/profile

#my srttings 
	export JAVA_HOME= /usr/java/jdk1.8.0_144
	export PATE=$PATH:$JAVA_HOME/bin:

source /etc/profile

错误： source /etc/profile -提示找不到命令
　　试试：A）locate source /etc/profile
　　试试：B）usr/bin/source /etc/profile

2）elasticsearch-6.2.4

下载地址：https://www.elastic.co/cn/downloads/elasticsearch

解压：tar -zxvf elasticsearch-6.2.4.tar.gz

2.SSH免密码登录

通过$:ssh localhost命令查看是否需要密码，如果需要执行以下命令：

[root@centos hadoop]# ssh-keygen -t rsa -P '' -f ~/.ssh/id_dsa
[root@centos hadoop]# cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys
[root@centos hadoop]# chmod 0600 ~/.ssh/authorized_keys

3.启动

./bin/elasticsearch

ERROR:can not run elasticsearch as root

如果你是root用户启动的话，会报"can not run elasticsearch as root"的错误。
因为安全问题elasticsearch不让用root用户直接运行，所以要创建新用户

第一步：liunx创建新用户：“adduser esroot”，然后给创建的用户加密码：“passwd esroot@123”，输入两次密码。

命令：
adduser testuser    创建用户testuser
passwd testuser     给已创建的用户testuser设置密码
说明：新创建的用户会在/home下创建一个用户目录testuser
usermod --help     修改用户这个命令的相关参数
userdel testuser     删除用户testuser
rm -rf testuser      删除用户testuser所在目录

第二步：切换刚才创建的用户：“su esroot”，然后启动elasticsearch。如果显示Permission denied权限不足，则继续进行第三步。
第三步：给新用户赋权限，因为这个用户本身就没有权限，肯定自己不能给自己付权限。所以要用root用户登录并赋予权限，
elasticsearch用户没有该文件夹的权限，执行命令:

chown -R 用户名 /usr/local/elasticsearch/

4.验证启动是否成功

curl localhost:9200

5.远程访问elasticsearch服务

默认情况下，Elasticsearch 只允许本机访问，如果需要远程访问，可以修改 Elasticsearch 安装目录中的config/elasticsearch.yml文件，去掉network.host的注释，将它的值改成0.0.0.0，让任何人都可以访问，然后重新启动 Elasticsearch 。

network.host: 0.0.0.0

上面代码中，"network.host:"和"0.0.0.0"中间有个空格，不能忽略，不然启动会报错。线上服务不要这样设置，要设成具体的 IP。

ERROR：

1）can not run elasticsearch as root

如果你是root用户启动的话，会报"can not run elasticsearch as root"的错误。因为安全问题elasticsearch不让用root用户直接运行，所以要创建新用户

useradd testuser  创建用户testuser
passwd testuser  给已创建的用户testuser设置密码
说明：新创建的用户会在/home下创建一个用户目录testuser
usermod --help  修改用户这个命令的相关参数
userdel testuser  删除用户testuser
rm -rf testuser  删除用户testuser所在目录

2）Exception in thread “main” java.nio.file.AccessDeniedException: /usr/local/elasticsearch/elasticsearch-6.2.2-1/config/jvm.options

elasticsearch用户没有该文件夹的权限，执行命令（使用root用户执行）

chown -R 用户名 /usr/local/elasticsearch/

3）max virtual memory areas vm.max_map_count [65530] likely too low, increase to at least [262144]

解决：执行下面的命令：

sudo sysctl -w vm.max_map_count=262144

4）max file descriptors [4096] for elasticsearch process likely too low, increase to at least [65536]

解决：执行下面的命令：

sudo vim /etc/security/limits.conf
在limits.conf最下方加入下面两行：
esroot hard nofile 65536
esroot soft nofile 65536

注：此文件修改后需要重新登录用户，才会生效

ElasticSearch的可视化工具：

Kibana是一个开源的分析和可视化平台，设计用于和Elasticsearch一起工作。
安装详情可见kibana部署安装：https://blog.youkuaiyun.com/c_chuxue/article/details/100019089