作者:禅与计算机程序设计艺术
1.简介
(一)Elasticsearch、Beats、Kibana简介及其之间的关系
Elasticsearch
Elasticsearch是一个开源分布式搜索和分析引擎,它的目的是帮助用户发现数据中的隐藏信息,并对数据进行实时地全文检索、可视化分析,最终得出有价值的信息。它提供了一个分布式文档存储,索引,搜索和分析能力的全套解决方案。由于它可以高度扩展,支持各种数据类型,比如对象或者文本,使之能够快速检索到想要的数据;并且可以自动完成数据分析任务,分析海量数据,从而生成各类报表和图表。目前,它已经成为开源搜索引擎领域的主流产品。
Beats
Beats是一组轻量级的数据采集器(Data Collectors)。它主要用于实时的日志、监控和事件数据收集,且无需安装 Agent 。同时还提供了许多内置模块来处理常见的场景,如文件旁路、传输代理、远程控制等功能。其中最著名的应该就是 Filebeat ,它的作用是从各类日志源(如 Nginx、Apache、Docker 等)收集日志,然后通过一个管道传输到 Elastics