hive字段级血缘关系实现

1.数据血缘的概念
https://zhuanlan.zhihu.com/p/133953825
就放一张效果图，可以理解为有向无环图，对于图中的Table X，还可以画出其右半边，即Table X作为来源表的情况

2.环境准备：
开发环境：需要一台能够联外网的linux开发机。用来maven编译hive
生产环境：一台8c16t linux，内存128g
目前项目实现的效果
    将最早2015年至今的hql每日解析一次，约两万条sql语句，10线程并发解析，可以在一个小时内完成。解析成功率约98%
    前后端联调，前端展示优化。

3.数据血缘核心实现
    (1).http://cxy7.com/articles/2017/11/10/1510310104765.html
        利用hooks, 在hive-site.xml中配置 hive.exec.post.hooks 为 org.apache.hadoop.hive.ql.hooks.LineageLogger
        自己实现解析较为困难，可以直接用开源实现好的来做。但是也有一些解析结果不符合预期的
    (2).使用hive jdbc连接hiveserver2，编写程序并行运行sql时，在sql前加explain ,即只编译，不运行
    (3).hive-site.xml 并行编译配置 修改 hive.driver.parallel.compilation=