
flink
需要梦想丶
这个作者很懒,什么都没留下…
展开
-
Getting Exception org.apache.logging.slf4j.SLF4JLoggerContext cannot be cast to org.apache.logging.l
把下面的依赖去掉即可!log4j-to-slf4j-2.0.2.jarlog4j-to-slf4j-2.0.2-sources.jarlog4j-slf4j-impl-2.0.2.jarlog4j-slf4j-impl-2.0.2-sources.jarflink里面好像有一个是有冲突的,下面是我去掉依赖之后的图<dependency> <groupId>...原创 2020-03-06 16:39:56 · 12511 阅读 · 3 评论 -
how to use org.apache.kafka.common.serialization.StringSerializer书写实例
以下是显示如何使用org.apache.kafka.common.serialization.StringSerializer的投票最高的示例。 这些示例摘自开源项目。请自行查找KafkaProducer或者properties的代码位置书写Example 1public void run(Configuration configuration, Environment environmen...原创 2020-02-07 11:58:22 · 889 阅读 · 0 评论 -
org.apache.kafka.common.serialization.StringSerializer
反正我这样写报了异常出来,org.apache.kafka.common.serialization.StringDeserializer is not an instance下面的两行代码我运行会报错properties.setProperty("key.serializer", StringDeserializer.class.getName());properties.setProp...原创 2020-02-07 11:51:42 · 9109 阅读 · 6 评论 -
4 Ways to Optimize Your Flink Applications
不是原创必须要尊重原文作者,我是从国外作者 Ivan Mushketyk 拷贝过来学习的,大家也可以借鉴学习,原文地址:FLink优化方法Use Flink TuplesWhen you use operations like groupBy, join, or keyBy, Flink provides you a number of options to select a key in y...转载 2020-02-06 17:04:46 · 169 阅读 · 0 评论 -
Start a long-running Flink cluster on YARN遇到的问题总结
Session-Cluster模式需要先启动集群,然后再提交作业,接着会向yarn申请一块空间后,资源永远保持不变。如果资源满了,下一个作业就无法提交,只能等到yarn中的其中一个作业执行完成后,释放了资源,下个作业才会正常提交。所有作业共享Dispatcher和ResourceManager;共享资源;适合规模小执行时间短的作业。先启动Hadoop和Yarn这个就不说了哟…xxxx/app/...原创 2020-02-04 22:14:59 · 439 阅读 · 0 评论 -
Unable to run flink example program,Connection refused
./bin/flink run examples/streaming/SocketWindowWordCount.jar --port 9000启动了flink之后,想启动一个案例看看效果,但是很遗憾没成功,都怪自己太菜!Caused by: java.net.ConnectException: 拒绝连接 (Connection refused)明明自己先启动了监听端口9000的,但是...原创 2020-02-04 10:41:31 · 1584 阅读 · 3 评论 -
手动编译 Flink 1.9 flink-table-api-java问题
因为我自己在做Flink源码编译的时候,报了一个错误。[ERROR] Failed to execute goal org.apache.maven.plugins:maven-compiler-plugin:3.8.0:compile (default-compile) on project flink-table-api-java: Compilation failurejava/s...原创 2020-02-03 10:59:48 · 689 阅读 · 2 评论 -
在mac上Flink1.9.0源码编译(使用hadoop2.6.0-cdh5.15.1)
源码编译安装flink前置条件:JDK8Maven3(jdk 和 maven 请自行搜索,谢谢!)通过下载Flink源码进行编译,不是使用直接下载二进制包Flink GitHub 地址 在releases中找到自己需要的版本。我用的是1.9.0版本:1.9.0tar -zxvf flink-release-1.9.0.tar.gz [-C 可以指定需要放置的目录]如要在其他第...原创 2020-02-02 21:21:20 · 854 阅读 · 0 评论