Flink DataStream unoin与connect的区别

张行之

于 2019-06-27 14:40:36 发布

阅读量3.7k

点赞数 2

CC 4.0 BY-SA版权

分类专栏：大数据文章标签： flink union connect

本文链接：https://blog.youkuaiyun.com/qq_33689414/article/details/93875954

Flink DataStream unoin与connect的区别

Flink DataStream中union和connect都有一个共同的作用，就是将2个流或多个流合成一个流。但是两者的区别是：union连接的2个流的类型必须一致，connect连接的流可以不一致，但是可以统一处理。

具体看下面示例：

public class ConnectOperator {

    public static void main(String[] args) throws Exception {

        StreamExecutionEnvironment sEnv = StreamExecutionEnvironment.getExecutionEnvironment();
        sEnv.setParallelism(1);

        Properties p = new Properties();
        p.setProperty("bootstrap.servers", "localhost:9092");

        SingleOutputStreamOperator<Student> student = sEnv
                .addSource(new FlinkKafkaConsumer010<String>("student", new SimpleStringSchema(), p))
                .map(new MapFunction<String, Student>() {
                    @Override
                    public Student map(String value) throws Exception {
                        return ne