
Flink SQL
文章平均质量分 89
大数据羊说
这个作者很懒,什么都没留下…
展开
-
71 篇 Flink 实战及原理解析文章(面试必备)
去重系列 一、Flink去重第一弹:MapState去重 二、Flink去重第二弹:SQL方式 三、Flink去重第三弹:HyperLogLog去重 四、关于hyperloglog去重优化 五、关于bitmap的使用总结 六、Flink去重第四弹: bitmap精确去重 七、编码方式实现Split Distinct Aggregation功能 实战系列目录: 一、热点流量优化 二、分流 三、自定义RetractStreamTableSink 四、自定义UpsertStreamTableSink 五、Flin转载 2022-02-14 20:50:21 · 1921 阅读 · 0 评论 -
flink sql 知其所以然(十九):Table 与 DataStream 的转转转(附源码)
1.序篇 源码公众号后台回复1.13.2 table datastream获取。 废话不多说,咱们先直接上本文的目录和结论,小伙伴可以先看结论快速了解博主期望本文能给小伙伴们带来什么帮助: 背景及应用场景介绍:博主期望你能了解到,Flink 支持了 SQL 和 Table API 中的 Table 与 DataStream 互转的接口。通过这种互转的方式,我们就可以将一些自定义的数据源(DataStream)创建为 SQL 表,也可以将 SQL 执行结果转换为 DataStream 然后后续去完成一些在原创 2022-02-13 22:54:52 · 1729 阅读 · 0 评论 -
flink sql 知其所以然(十八):在 flink 中还能使用 hive udf?附源码
1.序篇 源码公众号后台回复1.13.2 sql hive udf获取。 废话不多说,咱们先直接上本文的目录和结论,小伙伴可以先看结论快速了解博主期望本文能给小伙伴们带来什么帮助: 背景及应用场景介绍:博主期望你能了解到,其实很多场景下实时数仓的建设都是随着离线数仓而建设的(相同的逻辑在实时数仓中重新实现一遍),因此能够在 flink sql 中复用 hive udf 是能够大大提高人效的。 flink 扩展支持 hive 内置 udf:flink sql 提供了扩展 udf 的能力,即 modul原创 2022-02-13 22:52:53 · 1861 阅读 · 0 评论 -
flink sql 知其所以然(十七):flink sql 开发利器之 Zeppelin
1.序篇 上节介绍了 flink sql 的企业级开发利器 Dlink。本节就来介绍下 Apache Zeppelin。 本节主要介绍一下博主在本地部署 Apache Zeppelin 的过程以及感受。 先说下安装感受,Apache Zeppelin 安装起来真的是非常的方便!!! 几步就完成了。 2.Apache Zeppelin 平台效果 具体功能如下图所示: sql 开发 sql 开发 3.安装部署篇 安装真的很简单。 可以参考 jeff 大佬的安装教程,也可以参考博主本文的安装教程。 jeff原创 2022-02-13 22:48:39 · 1191 阅读 · 0 评论 -
flink sql 知其所以然(十六):flink sql 开发企业级利器之 Dlink
1.序篇 博主这个系列都是讲 flink sql 相关的实践的。 讲到这个章节,其实挺多常用的 flink sql 语法及实战案例都已经讲了。 那么原理讲了,得在自己家公司把 flink sql 这等好东西用起来啊。 搞大数据开发的同学基本都知道在 HUE 上面写 hive sql 贼爽。那么有没有写 flink sql 的企业级的 web IDE 推荐的呢? 经过博主调研之后,发现有两款非常优秀的利器: Apache Zeppelin Dlink 为啥先介绍 Dlink 呢? 因为博主和其开发原创 2022-02-13 22:47:59 · 2069 阅读 · 1 评论