- 博客(3)
- 收藏
- 关注
RSS订阅原创 Flink1.7学习笔记（二）时间戳和水印的使用
上文介绍了关于时间戳，时间，与水印的性质，接下来是关于如何在程序之中使用它们的用例。（本例只使用了最为复杂的事件时间窗口，关于其它的窗口的使用请参考官方API文档） ps：关于本文以及以后所用到的maven依赖与打包插件请参考 https://blog.youkuaiyun.com/hxw79321/article/details/86612814 就不在文章之中继续赘述。首先要设置流环境...
2019-01-24 11:32:05
4103
原创 Flink1.7学习笔记（一）时间
首先要理解三个关于时间的概念一、处理时间：指执行相应操作的机器时间处理时间是最简单的时间概念，不需要流与机器之间的协调。即我机器收到数据后就将其放入时间窗口进行处理，类似将其转化成一个以时间为界的批处理任务之中。也就是把流抽象成批处理，只是批处理的数据大小由固定时间内收到的数据的数量来决定。二、事件发生时间：指事件在其设备上发生的时间事件时间程序必须指定如何生成waterMarking，这...
2019-01-23 19:32:28
595
3
原创 Scala Flink1.7 消费kafka2.x模板 数据存入hdfs
demo1将数据从kafka之中读取出来，wordwount最后将写出的数据存入hdfsdemo2 将数据存入Dgraph 图数据库 （全为Scala实现）kafka、flink等相关依赖与 maven打包依赖<dependencies> <dependency> <groupId>o
2019-01-23 16:37:44
2227
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人