13、容器消息传递与安全防护全解析

容器消息传递与安全防护全解析

1. 容器消息队列的原理与优势

在容器化处理流程中，单个处理阶段的背压可能会导致级联回流停止。消息队列（通常也称为发布/订阅消息系统）为我们提供了解决此类问题的方案。消息队列一般以先进先出（FIFO）的队列结构存储数据，允许发送者将所需输入添加到特定阶段的队列（“入队”），工作者（监听器）则对队列中的新消息做出响应。

当工作者处理消息时，队列会将该消息对其他工作者隐藏；处理成功完成后，消息会从队列中永久移除。通过异步处理结果，发送者可以继续执行自己的任务，从而实现数据处理管道的完全模块化。

以下是消息队列工作流程的 mermaid 流程图：

graph LR
    A[发送者] -->|添加消息| B(消息队列)
    B -->|触发消息| C[工作者]
    C -->|处理消息| D{处理结果}
    D -->|成功| E(移除消息)
    D -->|失败| B(重新入队)

为了更直观地理解队列的工作方式，假设我们有两个运行中的容器，在很短的时间内，消息 A、B、C 和 D 依次作为输入到达。队列会跟踪它们的顺序，最初容器队列监听器未注意到这些消息，但很快会收到有新工作的通知，并按接收顺序获取消息。消息队列会将这些消息标记为对其他监听器不可用，并为工作者设置完成任务的超时时间。

如果在处理过程中某个容器出现故障，例如容器 1 崩溃，未完成的消息 A 超时后会被重新放回队列顶部，供其他监听器处理，而另一个容器则继续正常工作。

新的工作者伪代码循