Logstash环境搭建

本文介绍了Logstash的安装步骤,包括上传安装包、解压和配置文件设置。重点讲解了如何通过My.conf配置文件从指定的日志文件中读取JSON格式的日志,并将数据输出到Elasticsearch。配置中指定了日志文件路径、类型、起始读取位置以及Elasticsearch的主机和索引名。

已成功起飞!将自己进大厂前花4w买的java全套教程,整整300集,现在拿出来分享给大家!拿走不谢!从入门到精通 学会即可就业!_哔哩哔哩_bilibili

1.操作步骤

1、上传logstash安装包
2、解压tar –zxvf logstash-6.4.3.tar.gz
3、在config目录下放入jarye.conf 读入并且读出日志信息
./logstash -f ../config/cfg.conf

2.配置信息My.conf

input {
# 从文件读取日志信息 输送到控制台
file {
path => "/usr/local/elasticsearch-6.4.3/logs/myes.log"
codec => "json" ## 以JSON格式读取日志
type => "elasticsearch"
start_position => "beginning"
}
}

# filter {
#
# }

output {
# 标准输出
# stdout {}
# 输出进行格式化,采用Ruby库来解析日志
stdout { codec => rubydebug }
elasticsearch {
hosts => ["192.1

Logstash是一个开源的数据收集引擎,用于实时处理和转发日志和其他事件数据。它可以从多种来源(如文件、数据库、消息队列等)收集数据,并将其转换为可用于存储、分析和可视化的格式。 要独立搭建Logstash,您可以按照以下步骤进行操作: 1. 下载Logstash:首先,您需要从Elastic官方网站(https://www.elastic.co/downloads/logstash)下载适用于您的操作系统的Logstash安装包。 2. 配置Logstash:在安装Logstash之后,您需要创建一个配置文件来定义数据的输入、过滤和输出。配置文件使用简单的DSL(Domain Specific Language)语法编写,您可以根据自己的需求进行定制。 3. 定义输入:在配置文件中,您需要指定数据的输入源。Logstash支持多种输入插件,例如文件输入、网络输入、数据库输入等。根据您的需求选择适当的输入插件,并配置相关参数。 4. 定义过滤:在配置文件中,您可以定义一系列过滤器来处理输入数据。过滤器可以用于解析、转换、过滤或增强数据。Logstash提供了许多内置的过滤器插件,您可以根据需要选择并配置这些插件。 5. 定义输出:最后,在配置文件中定义数据的输出目标。Logstash支持多种输出插件,例如文件输出、数据库输出、消息队列输出等。选择适当的输出插件,并配置相关参数。 6. 启动Logstash:完成配置后,您可以使用命令行启动Logstash,并指定配置文件的路径。Logstash将开始监听输入源,并根据配置文件中的定义进行数据处理和转发。 这是一个简单的Logstash独立搭建的过程。根据您的具体需求和环境,可能还需要进行一些额外的配置和调整。建议您参考Logstash官方文档(https://www.elastic.co/guide/en/logstash/current/index.html)以获取更详细的信息和指导。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值