rsyslog研究——第一章 rsyslog整体架构

本文深入研究rsyslog的架构及配置方法,分享作者在实际应用过程中遇到的问题与解决方案,特别针对不同版本之间的差异进行了详细说明。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

最近因为工作需要研究了rsyslog,主要是把官网的文档看了一遍,因为学习的过程中,发现中文资料很少,所以研究的差不多以后,决定拿出来分享一下。

rsyslog官网的文档还是挺烂的(在我看完后,官网有了一次改版,可能好一些了),尤其是配置文件部分,每个版本都有改动,但是官网只有最新版本的参数介绍,好几次我按照文档的参数写配置文件,或者报错,或者参数不起作用,因此大家使用哪个版本的rsyslog,最好是下个该版本的源代码,以供核查参数是否准确。

本文的结构,来自我的内部分享。

使用的rsyslog版本为:7.2.5

第一章 rsyslog整体架构

我主要使用rsyslog来保证日志的可靠性传输,日志中心宕机,client端可以本地保存日志,因此rsyslog与数据库结合方面的知识在文章中没有涉及。

10231124-47833e3a70d24191aeb6435264c4392f.png 

Rsyslog架构,这是rsyslog官网上的一张图,用来介绍rsyslog的架构,rsyslog的消息流是从输入模块->预处理模块->主队列->过滤模块->执行队列->输出模块。

在这个流程图中,输入、输出、过滤三个部分称为module,输入模块有imklg、imsock、imfile。输出模块有omudp、omtcp、omfile、omprog、ommysql、omruleset(后两者我没有研究,本文不会涉及)。过滤模块研究不多,只会提到mmnormalize。

预处理模块主要解决各种syslog协议实现间的差异,举例说明如果日志系统client端使用rsyslog、server端使用syslog-ng,如果自己不做特殊处理syslog-ng是无法识别的。但是反过来,rsyslog的server端就可以识别syslog-ng发过来的消息。

Input模块包括imklg、imsock、imfile、imtcp等,是消息来源。

Filetr模块处理消息的分析和过滤,rsyslog可以根据消息的任何部分进行过滤,后面会介绍到具体的做法。

Output模块包括omfile、omprog、omtcp、ommysql等。是消息的目的地。

Queue模块负责消息的存储,从Input传入的未经过滤的消息放在主队列中,过滤后的消息放入到不同action queue中,再由action queue送到各个输出模块。

1.1启动参数

正常启动:指定-f和-i就可以了,新版本不需要-c 5 这样的参数。

  1. rsyslogd -f /root/rsyslog_worker_dir/rsyslog.conf -i /root/rsyslog_worker_dir/rsyslog.pid
复制代码

debug版本:debug消息会输出到标注输出,如果出现未预期的结果,可以尝试使用debug方式,查看处理流程

  1. rsyslogd -f /root/rsyslog_worker_dir/rsyslog.conf -i /root/rsyslog_worker_dir/rsyslog.pid -dn >debuglog
复制代码

测试配置文件是否正确:

  1. rsyslogd -N1 -f file
复制代码

### rsyslog 系统日志程序的功能介绍 #### 日志管理基础 rsyslog 是一种增强型的日志管理系统,用于替代传统的 syslog 和 klogd 组件。传统上,在 CentOS 5 及更早版本中,系统日志由两个独立的服务负责:`syslogd` 负责记录应用程序产生的日志,而 `klogd` 则专注于捕获 Linux 内核生成的日志[^1]。 然而,随着技术的发展,这种分离式的架构逐渐显得不足以为现代复杂环境提供高效支持。因此,rsyslog 应运而生,作为一个统一且强大的解决方案来满足这些需求。 #### 高性能特性 相比原始的 syslog 实现方式,rsyslog 提供显著更高的吞吐量以及更加灵活配置选项的能力。官方资料表明其能够每秒处理多达一百万条消息事件[^2]。这一能力使得即使是在高负载生产环境中也能保持稳定运行状态而不至于因为大量涌入的数据而导致崩溃或者延迟增加等问题发生。 #### 安全性和模块化设计 除了速度之外,安全性也是该软件开发过程中重点考虑的一个方面;通过内置加密机制保护传输过程中的敏感信息不被窃取篡改成为可能 。另外值得注意的是它的高度可扩展性——借助于插件系统(plugins),用户可以根据实际需要加载不同的功能组件以实现特定目的 ,比如数据存储、网络协议适配等等。 #### 配置与维护 当完成必要的设置更改之后(例如指定远程服务器地址以便集中式日志管理),可以通过简单的命令重新启动服务使新参数生效: ```bash [root@node1 ~]# systemctl restart rsyslog ``` 此操作会立即应用最新的规则集并开始按照新的指示行事[^3]。 综上所述,rsyslog 不仅继承了经典 syslog 协议的核心理念,还在此基础上进行了多方面的改进优化,从而成为了当前主流操作系统平台上的首选日志工具之一。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值