yoqu的专栏

背景： 目前项目日志使用hsfs收集离线日志，在实时日志查询方面需要录入以方便更好的排查问题和统计情况。 当前项目日志收集方式使用 flume-> hdfs 实时日志通过flume sink存储至ElasticSearch 集成过程中遇到日期类型问题 为什么会需要时间类型：在kibana中，如果需要将日志和时间挂钩，例如查询近三天的日志，以及按天分类统计等功能，需要一个索引至少有一个时间类型的字段才能做到，故需要使用日志的生成时间。 当索引不存在时，es将会根据客户端的数据进行类型自动推断，.