解决 scala - Apache Flink Streaming 的 type mismatch in flatMap function

最新推荐文章于 2023-03-06 17:25:06 发布
原创 最新推荐文章于 2023-03-06 17:25:06 发布 · 739 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#flink

当使用Flink 1.7.2和Scala 2.11时，Flatmap函数可能因导入java代码而非Scala代码导致错误。解决此问题只需正确导入Scala的StreamExecutionEnvironment。

当我使用Flink 为1.7.2,Scala为2.11时，使用Flatmap函数时会报错
在这里插入图片描述
点进去Flatmap查看代码时发现，系统自动导入的时java的代码
在这里插入图片描述
解决办法

只需要导入
org.apache.flink.streaming.api.scala.StreamExecutionEnvironment. 即可
在这里插入图片描述

Flink 日常问题总结
zl
02-10 596
目录 1、Hadoop相关 2、启动时出现missing parameter type错误 3、处理Protobuf对象 4、Flink-kafka Producer问题 5、static关键字导致加载config为空问题 6、序列化异常 1、Hadoop相关 javax.xml.parsers.FactoryConfigurationError: Provider for class javax.xml.parsers.DocumentBuilderFactory cannot be .
scala之flatMap函数
qq_51903852的博客
12-02 1779
函数flatMap 格式 def flatMap[B, That](f: Int => scala.collection.GenTraversableOnce[B])(implicit bf: scala.collection.generic.CanBuildFrom[Array[Int],B,That]): That def flatMap[B, That](f: Int => scala.collection.GenTraversableOnce[B])(implicit bf: scala
踩坑——Flink报错 找不到org.apache.flink.streaming.api.scala.StreamExecutionEnvironment的类文件
热门推荐
@羲凡—只为更好的活着
02-27 1万+
@羲凡——只为了更好的活着 踩坑——Flink报错 找不到org.apache.flink.streaming.api.scala.StreamExecutionEnvironment的类文件 一.问题背景 新建一个项目，准备用java写flinktable，发现报错如下 Error:(20, 58) java: 无法访问org.apache.flink.streaming.api.scala.S...
Scala-用Java语法编写Scala中的Map、Filter、reduce、flatMap函数
m0_46538284的博客
12-18 353
import java.util.Arrays; import java.util.List; public class Test { public static void main(String[] args) { AdList<Integer> adl = new AdList(); adl.add(1); adl.add(2); adl.add(3); adl.add(4); adl.
Scala中映射操作map与flatMap函数
愤怒的小兵
06-27 1344
映射操作是针对容器的典型变换操作，通过对容器中的元素进行某些运算来生成一个新的容器。 两个典型的映射操作是map方法和flatMap方法，二者区别简而言之在与map直接处理容器内单个元素，flatMap会将元素进一步打碎处理。 map map方法将某个函数应用到集合中的每个元素，映射得到一个新的元素，因此，map 方法会返回一个与原容器类型大小都相同的新容器，只不过元素的类型可能不同。 @Test def testMap(): Unit = { /** * 测试map与flatMa
import org.apache.flink.streaming.api.scala._
dataastron的博客
01-11 2186
import org.apache.flink.streaming.api.scala._ 不引入这句话要报错？
flink streaming 的scala与java版本的单词统计实现
nengyu的专栏
07-26 1294
Apache Flink是另一种新一代通用大数据处理引擎，旨在统一不同的数据负载。Flink正试图解决Spark试图解决的同样问题。这两个系统都旨在构建单一平台，您可以在其中运行批处理，流媒体，交互式，图形处理，ML等。因此，flink与Spark的意识形态中间没有太大差别。但是它们在实现细节方面确实存在很大差异。 这里介绍单词统计flink的scala版本和java版本的代码实现 scala...
Scala中map操作和flatMap操作的区别
震逗比的博客
03-25 2636
Scala中map操作和flatMap操作的区别flatMap()和map()操作对比map操作flatMap操作加深理解 flatMap()和map() flatMap(function)和map(function)操作都是传入的函数对RDD中的每一个元素进行处理的操作。但是不同点在于，map操作是一对一的，即map(function)传入的函数在处理RDD的每一个元素后都产生相对应的结果，输入...
java.lang.ClassNotFoundException: org.apache.flink.streaming.api.scala.StreamExecutionEnvironment$
感谢你的关注~~~~ღ( ´･ᴗ･` )
11-16 3112
flink报如下错误： 解决办法： 如果直接运行项目，会报这个错，解决方式是将pom.xml中的org.apache.flink依赖的<scope>provided</scope>去掉。
Apache Flink 流处理（快速入门）
qq_36752007的博客
01-19 672
Flink Streaming 概述 DataStream在Flink中实现了对数据流的Transformation，内部Flink的数据源可以通过各种数据源创建，例如：消息队列、socket streams、文件。流计算的结果通过Sinks输出,例如 将数据写入文件、标准输出等。 共同依赖 <properties> <flink.version>1.7.1</f...
Flink流处理StreamExecutionEnvironment用法
杨得朝的博客
11-05 1万+
大家好，我是瓜哥，今天进行了Flink相关内容的总结和学习。Flink可以处理实时流式数据处理。 具体的资料文档可以登录flink官方文档直接进行在线学习。flink官方文档 直接看官方文档对flink的一个架构图： Apache Flink 功能强大，支持开发和运行多种不同种类的应用程序。它的主要特性包括：批流一体化、精密的状态管理、事件时间支持以及精确一次的状态一致性保障等。Flink 不仅可以运行在包括 YARN、 Mesos、Kubernetes 在内的多种资源管理框架上，还支持在裸机集群
Flink（四）流处理API-Source
星星的博客
07-19 411
1.从集合读取数据 package com.flink.sounce import org.apache.flink.streaming.api.scala._ /** * @Author :star * @Date :2020/7/4 12:56 * @Version :1.0 */ object ReadList { //从集合中读取数据 def main(args: Array[String]): Unit = { // 创建flink执行环境 val.
flink入门_Flink流处理API代码详解，Source、Transform、Sink，Flink学习入门（二）
weixin_39980347的博客
11-27 848
❝ 大家好，我是后来，我会分享我在学习和工作中遇到的点滴，希望有机会我的某篇文章能够对你有所帮助，所有的文章都会在公众号首发，欢迎大家关注我的公众号" 「后来X大数据」 "，感谢你的支持与认可。 ❞又是一周没更文了，上周末回运城看牙去了，一直都在路上，太累了。说回正题，关于flink的入门在上一篇已经讲过了。今天主要说一下关于「流处理的API」，这一篇所有的代码都是scala。那么我们还得回到上次...
[flink]报错
胖胖的博客
03-06 452
Caused by: java.lang.ClassNotFoundException:org.apache.flink.streaming.api.scala.StreamExecutionEnvironment$ Caused by: java.lang.ClassNotFoundException: org.apache.commons.compress.compressors.zstandard.ZstdCompressorInputStream
**scala split遇到的坑 **
weixin_42348946的博客
10-25 2065
**scala split遇到的坑 ** 使用Scala编程很方便，常用之后就是flatMap() flatMap与split截取字符串统计遇到的坑 val str = “1,122,xxx,shandongyin” val file=sc.textFile(logFile) file.flatMap(line=&amp;amp;gt;line.split(&amp;quot;,&amp;quot;)(3)) 上面代码本意是根据&amp;quot;,“分隔，取”3...
org.apache.flink.streaming.api.environment.StreamExecutionEnvironment.createLocalEnvironment
Nice的博客
11-08 3002
运行flink scala 程序报错： Exception in thread "main" java.lang.NoSuchFieldError: MODE at org.apache.flink.streaming.api.environment.StreamExecutionEnvironment.createLocalEnvironment(StreamExecutionEnvironm...
Flink Java与Scala的Api类型不匹配问题
吟啸徐行
04-24 5357
由于之前写的程序是Java版本，之后改写Scala版本时候就把import 包直接复制到Scala文件的包上，然后报错： Java程序引包如下: import org.apache.flink.api.common.functions.FilterFunction; import org.apache.flink.cep.CEP; import org.apache.flink
依赖能导入但是报告ClassNotFoundException: org.apache.flink.streaming.api.scala.StreamExecutionEnvironment
微电子学与固体电子学-俞驰
12-24 5864
Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/flink/streaming/api/scala/StreamExecutionEnvironment$ at FlinkKafkaDDLDemo$.main(FlinkKafkaDDLDemo.scala:13) at FlinkKafkaDDLDemo.main(FlinkKafkaDDLDemo.scala) Caused by: java.la...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值