Flink基本转换算子map/filter/flatmap

最新推荐文章于 2024-11-23 13:59:26 发布

Stephen6Yang

最新推荐文章于 2024-11-23 13:59:26 发布

阅读量1.4k

点赞数 7

分类专栏： flink 文章标签： flink java 转换算子 flatmap map

本文链接：https://blog.youkuaiyun.com/qq_44675837/article/details/134859250

版权

map

map是大家非常熟悉的大数据操作算子，主要用于将数据流中的数据进行转换，形成新的数据流。简单来说，就是一个“一一映射”，消费一个元素就产出一个元素。
在这里插入图片描述
我们只需要基于DataStream调用map()方法就可以进行转换处理。方法需要传入的参数是接口MapFunction的实现；返回值类型还是DataStream，不过泛型（流中的元素类型）可能改变。

public class TransMap {
   
    public static void main(String[] args) throws Exception {
   

        StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment();

        DataStreamSource<WaterSensor> stream = env.fromElements(
                new WaterSensor("sensor_1", 1, 1),
                new WaterSensor("sensor_2", 2, 2)
        );

        // 方式一：传入匿名类，实现MapFunction
        stream.map(new MapFunction<WaterSensor, String>() {
   
            @Override
            public String map(WaterSensor e) throws Exception {
   
                return e.id;
            }
        }).print();