hive join图解-和spark-sql对比

最新推荐文章于 2025-06-05 15:13:49 发布

Thomas2143

最新推荐文章于 2025-06-05 15:13:49 发布

阅读量457

点赞数

分类专栏：总结

本文链接：https://blog.youkuaiyun.com/qq_35515661/article/details/103413385

版权

总结专栏收录该内容

792 篇文章 ¥99.90 ¥299.90

订阅专栏

本文对比了Hive SQL与Spark SQL中的JOIN操作，重点介绍了Hive中的left_anti及其等效性，强调了Spark SQL中outer join的简化写法，以及无条件JOIN相当于crossJoin的事实。同时提到了Spark DataFrame的官方文档作为参考资料。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

join                // inner  on a.id=b.id; 返回id编号的交集 行
left join           // outer  on a.id=b.id; 返回a的所有id行；无匹配字段为null
right join          // outer  on a.id=b.id; 返回b的所有id行；无匹配字段为null
full join            // outer； on a.id=b.id ; 返回结果是a b 中所有id(id号去重),匹配不到为null；重复则左右拼接为多列；
left semi join       //   on a.id=b.id 半连接  semi-finished products：半成品
cross join          //笛卡尔积关联 不需要指定关联键 即没有on条件[只有cross join没有on条件限制] ； n行 * m行