随风飘雁

导言项目主要是通过Filebeat读取日志文件，传输到Kafka上，Logstash获取Kafka的消息，过滤日志信息，传输到ElasticSearch上。实现数据的实时统计。楼主也是刚接触了ElasticSearch，有什么错误的，或者更好的操作，可以提供下，一起讨论。1. 下载Filebeat的基础文件（根据自己的系统选择对应的文件https://www.elastic.co/cn/downloads/beats/filebeat）2. filebeat的配置文件（filebeat.yml）3

需要连接到Elasticsearch才能加载索引模板。 如果输出不是Elasticsearch，则必须手动加载模板。在Elasticsearch中，索引模板用于定义确定应如何分析字段的设置和映射。Filebeat软件包安装了推荐的Filebeat索引模板文件。 如果您在filebeat.yml配置文件中接受默认配置，则Filebeat成功连接到Elasticsearch后将自动加载模板。配置模板加载默认情况下，如果启用了Elasticsearch输出，Filebeat将自动加载建议的模板文件fi.

Filebeat是用于收集和转发日志数据的轻量级传送程序。 作为服务器上的代理安装，Filebeat监视您指定的日志文件或位置，收集日志事件，并将其转发到Elasticsearch或Logstash进行索引。Filebeat的工作方式如下：启动Filebeat时，它将启动一个或多个输入，这些输入将在指定的位置中查找日志数据。 对于Filebeat所找到的每个日志，Filebeat都会启动收集器。 每个收集器都读取一个日志以获取新内容，并将新日志数据发送到libbeat，libbeat会汇总事件并将汇总的数