Hive错误--＞由于lateral view explode() 导致的空指针错误 FAILED: NullPointerException null

大数据langlang

于 2021-08-22 13:20:39 发布

阅读量1.1k

点赞数 2

CC 4.0 BY-SA版权

分类专栏： Hive开发总结文章标签： hive hql sql 数据仓库 exception

本文链接：https://blog.youkuaiyun.com/LangLang1111111/article/details/119851531

本文探讨了一种SQL查询错误，该错误出现在使用lateral view explode函数时。通过分析问题，发现该函数是导致查询性能下降的原因。解决方案是通过将查询包裹在一个额外的子查询中，从而避免了直接使用lateral view explode。这种方法成功地优化了查询，使其能够正确处理top50高浏览量视频的相关视频Id。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

错误:

代码:

select videoId,category
    from gulivideo_orc
    where videoId in (

                 select relatedId_name
                 from (
                          select relatedId, `views`
                          from gulivideo_orc
                          order by `views` desc
                          limit 50
                      ) t1--找到top50
                lateral view explode(relatedId) tmp as relatedId_name
            ) t2 --找出top50对应的相关视频Id

原因:经过多种测试发现是因为lateral view explode() 函数导致的,

解决方法:通过子查询再进行一次封装即可

select videoId,category
from gulivideo_orc
where videoId in (
    select *
    from (
             select relatedId_name
             from (
                      selec

最低0.47元/天解锁文章