Flink 写入 Kafka 失败：无法发送数据到 Kafka：Expiring record for ms has passed 大数据

Flink 写入 Kafka 失败：无法发送数据到 Kafka：Expiring record for ms has passed 大数据

近年来，随着大数据技术的快速发展和广泛应用，越来越多的企业开始采集和处理海量的数据。在数据处理过程中，往往需要将数据写入消息队列以供后续处理或分发。Apache Kafka 是一个被广泛使用的分布式消息系统，而 Apache Flink 是一款流式计算引擎。在实际应用中，将 Flink 与 Kafka 结合使用可以构建高效可靠的大数据处理系统。然而，在某些情况下，我们可能会遇到像 “Flink 写入 Kafka 报错 Failed to send data to Kafka: Expiring record for ms has passed” 这样的错误。本文将对这个问题进行分析并给出相应的解决方案。

首先，让我们看一下这个错误信息：

Failed to send data to Kafka: Expiring record for ms has passed

从错误信息中可以看出，写入 Kafka 失败，且记录已经过期。这个错误通常发生在以下两种情况下：

1. Kafka 配置不当：在配置 Kafka 生产者时，没有正确设置适当的参数，例如超时时间、错误处理策略等。

2. Flink 任务压力过大：Flink 任务的计算或处理能力无法跟上数据输入的速度，导致 Kafka 生产者发送数据的速度跟不上。

针对这两种情况，我们可以分别进行解决。

第一种情况，我们需要检查 Kafka 配置是否正确。下面是一个示例的 Kafka 生产者配置：

<