xrl001的博客

要点： 优化时，把 hive sql 当做 map reduce 程序来读，会有意想不到的惊喜。 理解 hadoop 的核心能力，是 hive 优化的根本。 长期观察 hadoop 处理数据的过程，有几个显著的特征: 1.不怕数据多，就怕数据倾斜。 2．对 jobs 数比较多的作业运行效率相对比较低，比如即使有几百行的表，如果多次关联 多次汇总，产生十几个 jobs，没半小时是

可以同步参考 使用hive-site.xml自动连接到HiveServer2 从Hive 2.2.0（HIVE-14063）开始，BeeLine  增加了使用类路径中存在的hive-site.xml来自动生成基于hive-site.xml中的配置属性的连接url和另外一个用户配置文件。并非所有的url属性都可以从hive-site.xml派生，因此为了使用此功能，用户必须创建一个名为“be