用 logstash 解析 json 数组

最新推荐文章于 2024-11-22 14:03:14 发布

原创最新推荐文章于 2024-11-22 14:03:14 发布 · 7.4k 阅读

1 ·

CC 4.0 BY-SA版权

Elasticsearch 专栏收录该内容

47 篇文章

订阅专栏

本文介绍如何使用Logstash的JSON codec来解析包含多个JSON对象的日志文件，并将其拆分为单独的事件。通过配置示例展示了如何轻松地实现这一目标。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

原始输入日志文件每行日志格式如下，json 数组格式的：
[{“a”:1},{“a”:2}]

要求拆分成2行事件，在ES中保存两个文档
{“a”:1}
{“a”:2}

本来以为挺麻烦，原来 input -> codec => json 直接支持解析这种格式，真愚昧啊

    file {
        type => "test"
        path => "/home/jfy/tmp/test.txt"
        sincedb_path => "/home/jfy/soft/logstash-2.0.0/test.access"
        start_position => "beginning"
        codec => json
    }

codec json:
This codec may be used to decode (via inputs) and encode (via outputs) full JSON messages. If the data being sent is a JSON array at its root multiple events will be created (one per element).