qq_40650378的博客

万事开头难，花了2天的时间一直在忙这个，总算有点头绪，废话不多说，直接开整！ 一基础知识 ELK一般由三部分组成：logstash（日志格式化） + elasticsearch（检索） + Kibana（前台报表展示） 这里因为自己也是在摸索阶段，就直接在自己的windows系统上操作（流下了没有服务器的泪水） 官网地址：https://www.elastic.co/ 下载logstas...

上篇主要介绍了怎么搭建服务的，这篇就主要讲怎么用得到的日志数据处理 使用的官网最新的6.6.*（版本不一的话配置的FILFER写法可能不一样） 第一个业务场景：记录系统日志+项目日志 logstash日志可参考如下： input { beats { port => 5044 } } filter { if [fields][logtype] == "syslog" ...

废话不多说，直接开整！ 业务场景：需要将一个服务的日志服务通过kafka整合到ES上 难点有2个:一个是如何将数据传递到kafka;一个是如何将数据抓取到ES分析 第一个难点： 我这里因为是个Netty服务结构，里面只有DI模型，只支持TCP,UDP传输，不支持spring-web(所以不支持MVC注解模式)。所以最新的KafkaTemplate（模板模式）别想了！ 采取思路只有...