Elasticsearch中使用Filebeat插件采集容器日志

系列文章目录

---

文章目录

目录

系列文章目录

前言

一、部署方案

二、使用步骤

1.宿主机部署filebeat

2.设置filebeat参数

3.设置运行时字段

总结

---

前言

 ‌       Filebeat是一个轻量级的数据采集器，主要用于转发和集中日志数据。它由Elastic公司开发，使用Go语言编写，相比更加轻便，对系统资源的占用极少‌。Filebeat可以监视用户指定的日志文件或位置，收集日志事件，并将这些数据转发到Elasticsearch、Logstash、Redis、Kafka等存储服务器‌。

        Filebeat一般用于收集文件日志，如宿主机日志，容器日志，这就包括docker，k8s，k3s等日志，本文主要探讨如何使用该插件收集k8s容器日志。

---

一、部署方案

网上的部署方案有三种

1，Filebeat与应用运行在同一容器；

2，Filebeat与应用运行在不同容器；

3，Filebeat作为k8s daemonset运行；

上述三种方式，各有利弊，网上探讨也比较多，本文采用另一种部署方