SparkSql Join Types详解

SunnyRivers

已于 2024-12-23 14:28:20 修改

阅读量397

点赞数

分类专栏： Spark最佳实战与性能优化 SparkSQL权威指南文章标签： spark sparksql join jointypes anti semi

于 2024-01-31 11:26:39 首次发布

本文链接：https://blog.youkuaiyun.com/Android_xue/article/details/135945520

版权

38 篇文章 ¥9.90 ¥99.00

订阅专栏

15 篇文章 ¥9.90 ¥99.00

订阅专栏

本文详细介绍了Spark SQL中的各种JOIN类型，包括INNER JOIN、LEFT JOIN、RIGHT JOIN、FULL JOIN、CROSS JOIN、SEMI JOIN和ANTI JOIN，并通过案例实战展示了每种JOIN类型的使用，帮助读者理解它们的区别和应用场景。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

我们都知道join是根据某些条件把两行数据关联起来，而且也熟悉常用的一些join type，如inner、left、right等等，但是有些人可能对semi、anti或者一些语法的缩写和全写搞的不是很清楚，这篇博客就用简单明了的案例把这些都讲明白。

relation { [ join_type ] JOIN [ LATERAL ] relation [ join_criteria ] | NATURAL join_type JOIN [ LATERAL ] relation }

relation
指定要进行join两个或多个表、dataset
join_type
指定关联类型

[ INNER ] | CROSS | LEFT [ OUTER ] | [ LEFT ] SEMI | RIGHT [ OUTER ] | FULL [ OUTER ] | [ LEFT ] ANTI
join_criteria
指定两个表关联的字段，如 on t1.id = t2.id