Flink自定义sink端SinkFunction的应用

最新推荐文章于 2025-06-22 17:08:56 发布

原创

最新推荐文章于 2025-06-22 17:08:56 发布 · 4.4k 阅读

1 ·

CC 4.0 BY-SA版权

文章标签：

#flink #mysql #kafka

本文介绍如何使用Apache Flink将数据从Kafka读取并写入MySQL。详细讲解了单条数据插入和批量数据插入的方法，并对比了它们在实际开发中的效率差异。

场景说明

从kafka里面读取数据，经过处理写入到mysql里面。在flink里面就是从source到sink的过程，那么本篇文章说明一下，mysqlsink的单条数据插入和批量数据插入操作。

1、先说明一下SinkFunction的继承关系

在这里插入图片描述
通过API我们可以看到sinkFunction接口的实现类有很多。比如常用的RichSinkFunction。

2、mysql单条数据插入

public class SinkToMysql extends RichSinkFunction<Tuple2<String, Integer>> {
   
   
public void invoke(Tuple2<String, Integer> value, Context context) throws Exception {
   
   
        conn = getConnection();
        String sql = "insert into dm_stu(stuname, stuaddr) values(?,?);";
        ps = this<