文章目录
- ELK简介
- 1.下载安装
- 2.SSH免密码登录
- 3.启动
- 4.验证启动是否成功
- 5.远程访问elasticsearch服务
- ERROR:
- 1)can not run elasticsearch as root
- 2)Exception in thread "main" java.nio.file.AccessDeniedException: /usr/local/elasticsearch/elasticsearch-6.2.2-1/config/jvm.options
- 3)max virtual memory areas vm.max_map_count [65530] likely too low, increase to at least [262144]
- 4)max file descriptors [4096] for elasticsearch process likely too low, increase to at least [65536]
- ElasticSearch的可视化工具:
ELK简介
ELK是Elasticsearch、Logstash、Kibana的简称,这三者是核心套件,但并非全部。
- Elasticsearch:是实时全文搜索和分析引擎,提供搜集、分析、存储数据三大功能;是一套开放REST和JAVA API等结构提供高效搜索功能,可扩展的分布式系统。它构建于Apache Lucene搜索引擎库之上。附上安装教程:ElasticSearch-6.2.4部署安装及常见的问题
- Logstash:是一个用来搜集、分析、过滤日志的工具。它支持几乎任何类型的日志,包括系统日志、错误日志和自定义应用程序日志。它可以从许多来源接收日志,这些来源包括syslog、消息传递(例如 RabbitMQ)和JMX,它能够以多种方式输出数据,包括电子邮件、websockets和Elasticsearch。
- Kibana:是一个基于Web的图形界面,用于搜索、分析和可视化存储在 Elasticsearch指标中的日志数据。它利用Elasticsearch的REST接口来检索数据,不仅允许用户创建他们自己的数据的定制仪表板视图,还允许他们以特殊的方式查询和过滤数据。附上安装教程:es可视化工具kibana的部署安装及使用
1.下载安装
1)JDK1.8.0_144
解压:tar -zxvf jdk.tar.gz -C /usr/local/
配置:vim /etc/profile
#my srttings
export JAVA_HOME= /usr/java/jdk1.8.0_144
export PATE=$PATH:$JAVA_HOME/bin:
source /etc/profile
错误: source /etc/profile -提示找不到命令
试试:A)locate source /etc/profile
试试:B)usr/bin/source /etc/profile
2)elasticsearch-6.2.4
下载地址:https://www.elastic.co/cn/downloads/elasticsearch
解压:tar -zxvf elasticsearch-6.2.4.tar.gz
2.SSH免密码登录
通过$:ssh localhost命令查看是否需要密码,如果需要执行以下命令:
[root@centos hadoop]# ssh-keygen -t rsa -P '' -f ~/.ssh/id_dsa
[root@centos hadoop]# cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys
[root@centos hadoop]# chmod 0600 ~/.ssh/authorized_keys
3.启动
./bin/elasticsearch
ERROR:can not run elasticsearch as root
如果你是root用户启动的话,会报"can not run elasticsearch as root"的错误。
因为安全问题elasticsearch不让用root用户直接运行,所以要创建新用户
第一步:liunx创建新用户:“adduser esroot”,然后给创建的用户加密码:“passwd esroot@123”,输入两次密码。
命令:
adduser testuser 创建用户testuser
passwd testuser 给已创建的用户testuser设置密码
说明:新创建的用户会在/home下创建一个用户目录testuser
usermod --help 修改用户这个命令的相关参数
userdel testuser 删除用户testuser
rm -rf testuser 删除用户testuser所在目录
第二步:切换刚才创建的用户:“su esroot”,然后启动elasticsearch。如果显示Permission denied权限不足,则继续进行第三步。
第三步:给新用户赋权限,因为这个用户本身就没有权限,肯定自己不能给自己付权限。所以要用root用户登录并赋予权限,
elasticsearch用户没有该文件夹的权限,执行命令:
chown -R 用户名 /usr/local/elasticsearch/
4.验证启动是否成功
curl localhost:9200
5.远程访问elasticsearch服务
默认情况下,Elasticsearch 只允许本机访问,如果需要远程访问,可以修改 Elasticsearch 安装目录中的config/elasticsearch.yml文件,去掉network.host的注释,将它的值改成0.0.0.0,让任何人都可以访问,然后重新启动 Elasticsearch 。
network.host: 0.0.0.0
上面代码中,"network.host:"和"0.0.0.0"中间有个空格,不能忽略,不然启动会报错。线上服务不要这样设置,要设成具体的 IP。
ERROR:
1)can not run elasticsearch as root
如果你是root用户启动的话,会报"can not run elasticsearch as root"的错误。因为安全问题elasticsearch不让用root用户直接运行,所以要创建新用户
useradd testuser 创建用户testuser
passwd testuser 给已创建的用户testuser设置密码
说明:新创建的用户会在/home下创建一个用户目录testuser
usermod --help 修改用户这个命令的相关参数
userdel testuser 删除用户testuser
rm -rf testuser 删除用户testuser所在目录
2)Exception in thread “main” java.nio.file.AccessDeniedException: /usr/local/elasticsearch/elasticsearch-6.2.2-1/config/jvm.options
elasticsearch用户没有该文件夹的权限,执行命令(使用root用户执行)
chown -R 用户名 /usr/local/elasticsearch/
3)max virtual memory areas vm.max_map_count [65530] likely too low, increase to at least [262144]
解决:执行下面的命令:
sudo sysctl -w vm.max_map_count=262144
4)max file descriptors [4096] for elasticsearch process likely too low, increase to at least [65536]
解决:执行下面的命令:
sudo vim /etc/security/limits.conf
在limits.conf最下方加入下面两行:
esroot hard nofile 65536
esroot soft nofile 65536
注:此文件修改后需要重新登录用户,才会生效
ElasticSearch的可视化工具:
Kibana是一个开源的分析和可视化平台,设计用于和Elasticsearch一起工作。
安装详情可见kibana部署安装:https://blog.youkuaiyun.com/c_chuxue/article/details/100019089