k8s 安装filebeat使用以及自定义filebeat.yml

原创

已于 2024-07-05 16:24:02 修改 · 1.1k 阅读

3 ·

CC 4.0 BY-SA版权

文章标签：

#kubernetes #容器 #云原生

于 2023-06-09 10:17:11 首次发布

文章详细描述了如何重写Dockerfile以使用elastic/filebeat:7.10.2镜像，并定制filebeat.yaml配置。接着，展示了在Kubernetes(K8s)环境中部署Filebeat，将其日志输出到Kafka的配置步骤，包括ConfigMap和DeploymentYAML文件的内容，其中涉及日志路径、Kafka主机和主题等关键设置。

1、重写dockerfile

FROM elastic/filebeat:7.10.2
# 自定义指定 filebeat.yaml
CMD ["-e", "-c", "elk-log.yml"]

2、k8s部署filebeat并写入kafka

2.1、filebeat-config yaml

---
apiVersion: v1
kind: ConfigMap
metadata:
  name: log-filebeat-config
  namespace: log-namespace
data:
  elk-log.yml: |
    filebeat.inputs:
    - type: log
      include_lines:  ['^[0-9]{4}-[0-9]{2}']
      multiline.pattern: '^[0-9]{4}'
      multiline.negate: true
      multiline.match: after
      encoding: UTF-8
      fields:
        wisentIp: 0.0.0.0
      paths: