flinksqlbug : AggregateFunction udf Could not extract a data type from

org.apache.flink.table.api.ValidationException: SQL validation failed. An error occurred in the type inference logic of function ‘default_catalog.default_database.CollectSetSort’.
org.apache.flink.table.api.ValidationException: An error occurred in the type inference logic of function ‘default_catalog.default_database.CollectSetSort’.
org.apache.flink.table.api.ValidationException: Could not extract a valid type inference for function class ‘com.xiaomi.cloud.streaming.computing.udagg.CollectSetSort’. Please check for implementation mistakes and/or provide a corresponding hint.
org.apache.flink.table.api.ValidationException: Error in extracting a signature to accumulator mapping.
org.apache.flink.table.api.ValidationException: Unable to extract a type inference from method:
public void com.xiaomi.cloud.streaming.computing.udagg.CollectSetSort.accumulate(java.util.ArrayList,java.lang.Integer)
org.apache.flink.table.api.ValidationException: Could not extract a data type from ‘java.util.ArrayList<java.lang.Integer>’ in generic class ‘org.apache.flink.table.functions.AggregateFunction’ in class com.xiaomi.cloud.streaming.computing.udagg.CollectSetSort. Please pass the required data type manually or allow RAW types.
org.apache.flink.table.api.ValidationException: Could not extract a data type from ‘java.util.ArrayList<java.lang.Integer>’. Interpreting it as a structured type was also not successful.
org.apache.flink.table.api.ValidationException: Field ‘size’ of class ‘java.util.ArrayList’ is mutable but is neither publicly accessible nor does it have a corresponding setter method.

这个报错org.apache.flink.table.api.ValidationException: Could not extract a data type from ‘java.util.ArrayList<java.lang.Integer>’ in generic class ‘org.apache.flink.table.functions.AggregateFunction’ in class com.xiaomi.cloud.streaming.computing.udagg.CollectSetSort. Please pass the required data type manually or allow RAW types.

是因为我代码中AggregateFunction 定义的参数是 extends AggregateFunction<String, ArrayList>
java中的数据类型分两种 一个是基本类 一个是封装类。例如 数据类型int是Java中的基本数据类型,而Integer是int的封装类。

这里我用了封装类,导致无法解析数据类型,改用了 java.lang.long 直接声明引用就可以了。

另一个报错
org.apache.flink.table.api.ValidationException: Field ‘size’ of class ‘java.util.ArrayList’ is mutable but is neither publicly accessible nor does it have a corresponding setter method.

这是因为 ArrayList是封装类型,在udf中 访问其中的私有方法访问不到,所以应该用 List ,在创建的时候

在这里插入图片描述
返回List接口 就可以了

解决Flink中could not find implicit value for evidence parameter of type报错 报错信息如图: 原因分析: 在flink中的大部分算子中,并没有默认的隐式类型参数的定义,我们在使用时也没有显式地指定类型,因此会报类型异常。 解决方案: import org.apache.flink.api.scala._ 代码如下: package com.jh.wc import org.apache.flink.api.scala._ import org.apache.flink.api.scala.{AggregateDataSet, DataSet, ExecutionEnvironme 阅读详情

相关推荐

Flink问题整理

这里例举flink使用中遇到的问题以及解决办法

chanyue123的博客 4872

Flink SQL validation failed. From line 1, column 89 to line 1, column 111: List of column aliases

SQL validation failed. From line 1, column 89 to line 1, column 111: List of column aliases must have same degree as table; table has 1 columns ('f0'), whereas alias list has 3 columns at org.apache.flink.table.planner.calcite.FlinkPlannerImpl.validate(Fli

Top5软件工程硕士,先后在京东、字节从事多年Java后端开发、实时和离线大数据开发 3058

【Flink实战系列】Flink 各种报错汇总以及解决方案(持续更新中)

这篇文章主要用来记录平时使用 Flink 过程中遇到的问题以及解决方案,其实前面已经有一篇这样的文章了,但是那篇文章里面的问题已经很多了,不太方便浏览,所以新开了一篇文章,后面的问题都会更新到这篇文章中. ...

JasonLee实时计算 4903

Fluent-UDF常见问题解析

搜集了FLUENT-UDF使用过程中常见的一些问题,对初学者有一定帮助

基于深度学习的UWB门禁检测

针对基于UWB技术智能门禁管理系统,由于测距误差或非视距原因导致门禁产生不合理动作的现象。分析如何采用基于深度学习的方法,通过对TWR测距数据、TWR监听数据、到达角度差(PDOA)、信道脉冲响应(CIR)等数据维度进行深度学习,利用 TensorFlow建立相应的推导模型,对卡片姿态进行更加精准可靠的检测,从而更好完成闸机开合控制。

tenth_quadrant的博客 2028

手把手教你搞定JBI投稿:从Statement of Significance到Declaration Statement的保姆级避坑指南

本文提供了一份详细的JBI投稿指南,重点解析Statement of Significance和Declaration of Interests的撰写技巧,帮助研究者避开常见格式陷阱。通过实战案例和检查清单,确保投稿符合JBI的学术严谨性和临床转化价值要求,提升稿件通过率。

weixin_29278805的博客 626

海康威视VS互联网大厂:薪资、福利、工作强度全方位对比

本文全面对比了海康威视与互联网大厂在薪资、福利和工作强度等方面的差异。海康威视提供稳定的薪资结构和较低的工作强度,适合追求专业深度的职场人;而互联网大厂则以高薪和快速成长吸引人才,但工作压力较大。文章还分析了职业发展路径和长期价值,帮助求职者做出明智选择。

weixin_29171129的博客 392

XC95144XL-10TQG144I Xilinx XC9500XL 高性能 CPLD

XC95144XL-10TQG144I 属于 Xilinx 的 XC9500XL 高性能 CPLD 家族,是一颗面向 3.3V 低电压系统的可编程逻辑器件。该器件以小封装、高速响应和良好的系统兼容性为设计目标,常用作系统控制/ glue-logic、I/O 缓冲、状态机、总线桥接与接口协议前端等场景中的可重编程逻辑单元。产品支持现场(in-system)编程与 IEEE-1149.1 JTAG 边界扫描,能在系统板上直接更新逻辑。

2403_90082736的博客 1063

YOLOv11涨点改进 | 全网独家创新,损失函数改进篇 | TGRS 2025 | 引入AdaFocalLoss损失函数,改进小目标检测,自适应聚焦小目标与样本分布不平衡,提升检测精度与训练稳定性

本文提出了一种改进YOLOv11模型的AdaFocalLoss损失函数,通过动态调节机制有效提升小目标检测性能。AdaFocalLoss融合了目标尺寸感知和IoU引导的自适应调节,解决了传统损失函数在小目标检测中的样本不平衡问题。该方法自动调整训练权重,无需手动调参,显著提升了模型在多尺度目标、复杂背景下的检测精度和训练稳定性。实验表明,AdaFocalLoss能更好地平衡不同尺度目标的梯度分布,改善边界完整性,减少误检漏检。文章详细介绍了算法原理、实现代码和在YOLOv11中的集成方法,为提升目标检测性能

Ai缝合怪、助力小伙伴高效发论文 338

ESP32开发板使用Arduino实现变成蓝牙鼠标教程

通过这个教程,你可以轻松将ESP32开发板变成蓝牙鼠标。如果你在使用过程中遇到任何问题,或者库没有正常工作,不妨下载我上传的修复版本,再试试看。希望你们能根据这个基础做出更多有趣的蓝牙控制项目!

代码简单说 Vue、JAVA、PHP、Node.js 熟练运用,接口、架构、性能全搞定。 974

重回童年的经典系列☀️|【炸弹人小游戏】制作过程+解析 | 收藏起来跟曾经的小伙伴一起梦回童年!

Unity,小游戏开发。 本篇文章对童年经典小游戏——炸弹超人进行制作和解析。不知道有没有勾起你童年的回忆呢!快来和我一起制作这个童年经典的小游戏吧! 敬请品尝!

努力前行,总会成为自己心中的那道光 13万+

【vsomeip3 教程】基于 vSomeIP 3.5 的路由域实践:从配置到运行状态的完整指南

___ > 前言(读者定位与准备) 目标读者:在 Linux 上做分布式/车载中间件通信的 C++ 工程师。 > 先决条件:CMake、Boost 基础;理解 TCP/UDP 与多进程通信。 > 文中术语:Routing Host(路由进程)、Application、Service/Instance、Method、Event/EventGroup、SOME/IP-SD。 > 演示环境:单机多进程 & 跨主机两套对照。

探索C++编程的奥秘,分享深入的技术见解和实践,旨在激发读者创造力与解决问题的思维。 1162

TMS_WebGMaps_1.9.8.0_Full_Source

TMS_WebGMaps_1.9.8.0_Full_Source 全源码 delphi cbuilder

SAP B1中文培訓教材_SDK

公司内部培训资料,对开发工具 ,DIAPI, UIAPI,Add-ON有详细解说

ET2012新版免狗免安装绿色软件

ET2012新版免狗免安祖昂绿色软件。,新界面,新视觉,

上一篇: 空0002
下一篇: 空0001
Direction_Wind
博客等级 码龄8年 6438粉丝 102原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Direction_Wind

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值