hive.exec.parallel参数控制在同一个sql中的不同的job是否可以同时运行,默认为false.
下面是对于该参数的测试过程:
测试sql:
select r1.a
from (
select t.a from sunwg_10 t join sunwg_10000000 s on t.a=s.b) r1
join
(select s.b from sunwg_100000 t join sunwg_10 s on t.a=s.b) r2
on (r1.a=r2.b);
1 当参数为false的时候,三个job是顺序的执行
set hive.exec.parallel=false;
2 但是可以看出来其实两个子查询中的sql并无关系,可以并行的跑
set hive.exec.parallel=true;
Hive并行执行参数测试
本文通过一个具体的SQL查询案例介绍了Hive中hive.exec.parallel参数的作用。此参数用于控制同一SQL内不同任务是否能够并发执行,默认情况下为false,即任务会顺序执行。通过设置该参数为true,可以实现SQL子查询的并行处理,从而提高查询效率。
8315

被折叠的 条评论
为什么被折叠?



