日志数据和监控数据混合系统架构

2019独角兽企业重金招聘Python工程师标准>>>

[特点]

1.日志数据和监控数据统一收集渠道，相互转换

[注意]

1.虽然统一收集渠道，但是严格区别哪些日志类型数据，哪些是监控类型数据，分而治之。

2.对于监控数据定义固定格式和opentsdb存储格式保持一致

3.Kafka订阅两种类型通道：日志和监控类，订阅不同处理机制消费者;

相关开源技术研究：

1.Kafka

2.Elastic Search

3.OpenTsdb

4.Spark

5.Flume

转载于:https://my.oschina.net/guoenzhou/blog/791495