- 博客(7)
- 收藏
- 关注
RSS订阅原创 log-pilot 多行日志合并multiline
将filebeat.tpl从启动的pod中拷贝到本地$ kubectl cp kube-system/log-pilot-hvf6h:/pilot/filebeat.tpl ./filebeat.tpl 修改filebeat.tpl文件，增加multiline参数$ vi filebeat.tpl{{range .configList}}...... multiline.pat...
2019-12-11 11:36:27
1651
2
原创 logstash处理多个topic，处理不同类型的日志
背景之前已经收集了k8s的日志，但是现在又想通过filebeat收集物理机的程序日志，传输到kafka，并通过logstash输出到es，有个小问题就是，如何在logstash中区分开不同的topic，或者相同topic中不同程序日志，假设多种程序日志的日志格式相同，并且已经配置了grok过滤思考解决收集本地日志，并且输出到kafka处理java异常日志logstash从topic中过...
2019-04-24 15:09:15
7999
原创 elk 使用geoip添加地图展示
logstash查看可用插件 /usr/share/logstash/bin/logstash-plugin list --verbose 安装插件/usr/share/logstash/bin/logstash-plugin install logstash-filter-geoip/usr/share/logstash/bin/logstash-plugin install log...
2019-03-27 19:08:31
1585
原创 logstash过滤阿里云cdn日志
aliyun cdn日志样例[26/Feb/2019:09:22:26 +0800] 111.206.221.2 - 169 “https://www.baidu.com/” “GET https://www.baidu.com/js/lib/swiper.jquery.min.js?20190221” 200 749 91127 HIT “Mozilla/5.0 (iPhone; CPU i...
2019-03-27 18:05:02
325
原创 k8s中filebeat使用multiline合并日志
介绍业务上线到k8s，日志接入到elfkk，filebeat收集pod日志方法见这里。由于日志中有java的报错日志，还有sql的查询语句，导致kibana展示日志时，一行sql就是一条日志，占用大量空间不说，还不方便查询。这个时候需要用到multiline，这个参数，可以在logstash中配置，也可以在filebeat中配置，经过测试，logstash中，存在无序及不完整性，这里不过多阐...
2019-03-27 17:51:47
1705
转载 csdn-markdown使用
这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入欢迎使用Ma...
2019-03-27 17:17:52
556
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人