xrl001的博客

要点： 优化时，把 hive sql 当做 map reduce 程序来读，会有意想不到的惊喜。理解 hadoop 的核心能力，是hive 优化的根本。长期观察 hadoop处理数据的过程，有几个显著的特征:1.不怕数据多，就怕数据倾斜。2．对jobs 数比较多的作业运行效率相对比较低，比如即使有几百行的表，如果多次关联多次汇总，产生十几个 jobs，没半小时是

可以同步参考使用hive-site.xml自动连接到HiveServer2从Hive 2.2.0（HIVE-14063）开始，BeeLine  增加了使用类路径中存在的hive-site.xml来自动生成基于hive-site.xml中的配置属性的连接url和另外一个用户配置文件。并非所有的url属性都可以从hive-site.xml派生，因此为了使用此功能，用户必须创建一个名为“be