- order by:会对查询出的结果集执行一次全局排序,意味着所有的数据都通过一个 reduce 进行处理过程,这对于大数据集,这个过程将消耗很大的时间来执行。在严格模式下直接使用 order by 会报错,必须加上 LIMIT 关键字。字段后面加上asc关键字(默认)表示升序,desc关键字是降序排序。
- sort by:执行一个局部排序过程。这可以保证每个 reduce 的输出数据都是有序的(但并非全局有序)。在使用sort by之前,需要先设置Reduce的数量>1,才会做局部排序,如果Reduce数量是1,作用与 order by一样,全局排序。字段后面加上asc关键字(默认)表示升序,desc关键字是降序排序。
- distribute by:控制 map 结果的分发,可以根据字段将数据输出到不同的reduce中,然后和sort by搭配使用。
- cluster by:如果 distribute by 和 sort by 的列相同可以用 cluster by 。cluster by 指定的列只能是降序,不能指定 asc 和 desc。
hive中有哪几种排序
最新推荐文章于 2024-01-11 19:53:17 发布