fluentd配置每天创建es索引

有个需求,每天创建一个索引,然后从日志文件中把一天的数据都存入索引中

要求:

每个索引存储0-24点的日志

如果fluentd宕机,重启后仍然能正常分析日志并按照日期对应的索引存储

配置

 <filter test.elasticsearch.**>
            @type record_transformer
            enable_ruby true
            <record>

                # fluentd 不支持毫秒级的时间戳,因此需要将
                # 毫秒级时间戳变成秒级
                createTimeSecond ${record['createTime']/1000}
            </record>
            # remove_keys message
        </filter>

 <match test.elasticsearch.**>
        @type elasticsearch
        host 12

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值