logstash对于String类型的时间转成long

最新推荐文章于 2024-06-27 00:13:38 发布

原创最新推荐文章于 2024-06-27 00:13:38 发布 · 5.4k 阅读

1 ·

CC 4.0 BY-SA版权

文章标签：

#filter #logstash #date

大数据可视化同时被 3 个专栏收录

24 篇文章

订阅专栏

电商金融风控

9 篇文章

订阅专栏

matplotlib

2 篇文章

订阅专栏

本文介绍如何使用Logstash将时间字符串（格式为yyyy-MM-dd HH:mm:ss）转换为毫秒级的时间戳。通过配置示例展示了如何利用Ruby插件实现这一转换。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

在工作中，遇到传过来的是时间字符串yyyy-MM-dd HH:mm:ss，用到logstash时需要先把这种时间转换成long，然后进行存储操作。
上config代码：

input{
  stdin{
     # codec=>rubydebug
    }
}
filter{
#   codec=>rubydebug
    mutate{
    split=>["message"," "]
        add_field => {
            "field1" => "%{[message][0]}"
        }   
        add_field => {
            "field2" => "%{[message][1]}"
        }
        remove_field => ["message"]
    }
    ruby{
        code=>"
            event['field1'] = Time.parse(event['field1']).to_f*1000
        "
    }
#   json{
#       source => "field1"
#       target => "field1"
#   }
}
output{
  stdout{
    codec=>rubydebug
  }
}

event[‘field1’] = Time.parse(event[‘field1’]).to_f*1000 就是这种转换形式。具体参考ruby吧

http://stackoverflow.com/questions/33490335/logstash-convert-utc-time-to-long-timestamp
http://www.cnblogs.com/wangyuyu/archive/2013/08/03/3235751.html