【Flink】维表关联之异步连接mysql

一杯咖啡半杯糖

已于 2022-12-07 17:32:36 修改

阅读量987

点赞数

分类专栏： Flink实战文章标签： mysql flink 数据库

于 2021-09-16 19:45:54 首次发布

本文链接：https://blog.youkuaiyun.com/sinat_23225111/article/details/120336033

版权

Flink实战专栏收录该内容

95 篇文章 ¥19.90 ¥99.00

订阅专栏

超级会员免费看

在Flink处理过程中，直接对每个数据查询MySQL会造成数据库压力大和数据背压问题。通过利用Flink的异步IO机制，并结合Vertx实现MySQL的异步连接，可以显著提升维表关联的效率，有效缓解这一问题。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

由于flink每个数据都要直接查询mysql会导致mysql压力很大，前一条数据没处理完后面的数据会阻塞，导致数据背压，此时可以考虑flink的异步IO机制，mysql的话和vertx结合实现异步维表关联，加快了效率

1、引入依赖

 <dependency>
            <groupId>mysql</groupId>
            <artifactId>mysql-connector-java</artifactId>
            <version>5.1.44</version>
        </dependency>

        <dependency>
            <groupId>io.vertx</groupId>
            <artifactId>vertx-jdbc-client</artifactId>
            <version>3.8.3</version>
        </dependency>
        <dependency>
            <groupId>io.vertx</groupId>
            <artifactId>vertx-core</artifactId>
            <version>3.8.3<

了解本专栏