【Flink网络数据传输（3）】RecordWriter的能力：实现数据分发策略或广播到下游InputChannel

本文链接：https://blog.youkuaiyun.com/hiliang521/article/details/136512405

本文详细解析了Flink中RecordWriter的创建过程，包括根据recordWrites数量创建不同代理类，主要组件如RecordSerializer和ResultPartitionWriter的作用，以及ChannelSelectorRecordWriter和BroadcastRecordWriter的发送策略。重点介绍了数据分发策略和广播模式的工作原理。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

StreamTask节点中的中间结果数据元素最终通过RecordWriterOutput实现了网络输出，RecordWriterOutput底层依赖RecordWriter组件完成数据输出操作，接下来我们深入了解RecordWriter的设计和实现。

一.创建RecordWriter实例都做了啥

在StreamTask构造器方法中会直接创建RecordWriter实例，用于输出当前任务产生的Intermediate Result数据。

1. 根据recordWrites数量创建不同的代理类

其中createRecordWriterDelegate根据recordWrites的数量创建对应的RecordWriterDelegate代理类。

protected StreamTask(  
        Environment environment,  
        @Nullable TimerService timerService,  
        Thread.UncaughtExceptionHandler uncaughtExceptionHandler,  
        StreamTaskActionExecutor actionExecutor,  
        TaskMailbox mailbox)  
        throws Exception {
   
        ...
	this.recordWriter = createRecordWriterDelegate(configuration, environment);
	...
	
}
//1. 如果recordWrites数量等于1，则创建SingleRecordWriter代理类；
//2. 如果recordWrites数量等于0，则创建NonRecordWriter代理类；
//3. 其他情况则创建MultipleRecordWriters代理类。

@VisibleForTesting  
public static <OUT>  
        RecordWriterDelegate<SerializationDelegate<StreamRecord<OUT>>>  
                createRecordWriterDelegate(  
                        StreamConfig configuration, Environment environment) {
     
    List<RecordWriter<SerializationDelegate<StreamRecord<OUT>>>> recordWrites =  
            createRecordWriters(configuration, environment);  
    if (recordWrites.size() == 1) {
     
        return new SingleRecordWriter<>(recordWrites.get(0));  
    } else if (recordWrites