logstash指定结束符与过滤

本文详细介绍如何使用Logstash进行日志数据的输入、过滤和输出配置,包括通过grok插件解析Apache日志,以及如何将日志数据输出到Elasticsearch。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

[root@server2 conf.d]# vim syslog.conf
[root@server2 conf.d]# cat syslog.conf
input {
stdin {
codec => multiline {
pattern => “EOF”##以EOF结尾
negate => “true”
what => “previous”
}
}
}
output{
stdout {}
}

在这里插入图片描述

过滤

3.在server2上添加过滤文件

[root@server2 ~]# cd /etc/logstash/conf.d
[root@server2 conf.d]# ls
[root@server2 conf.d]# vim test.conf
input {
        stdin {}
}
filter {
  grok {
    match => { "message" => "%{IP:client} %{WORD:method} %{URIPATHPARAM:request} %{NUMBER:bytes} %{NUMBER:duration}" }
  }
}

output {
         stdout {}
}

执行
root@server2 conf.d]# /usr/share/logstash/bin/logstash -f /etc/logstash/conf.d/test.conf
在下面输入:55.3.244.1 GET /index.html 15824 0.043 会被拆分成指定的的格式

在这里插入图片描述
过滤apache日志

[root@server2 conf.d]# vim es.conf 
[root@server2 conf.d]# cat es.conf 
input {
	file {
		path => "/var/log/httpd/access_log"
		start_position => "beginning"
	}
}
filter{
	grok {
		match => { "message" => "%{HTTPD_COMBINEDLOG}" }	
	}
}
output {
	stdout {}
        elasticsearch {
		hosts => ["172.25.32.1:9200"]
		index => "apache-%{+YYYY.MM.dd}"
	}
}

[root@server2 ~]# /usr/share/logstash/bin/logstash -f /etc/logstash/conf.d/es.conf
在这里插入图片描述
在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值