Tez0.9.1源码编译(Centos6.10)

本文介绍了如何在CentOS 6.10上编译Apache Tez 0.9.1源码。Tez是一个开源计算框架,提升DAG作业性能。编译要求包括JDK 1.7+,Maven 3.1+,ProtocolBuffer 2.5.0等,且需确保Hadoop版本不低于2.7.0。在编译过程中,建议跳过可能遇到问题的tez-ui模块。

什么是Tez

Tez 是 Apache 最新的支持 DAG 作业的开源计算框架,它可以将多个有依赖的作业转换为一个作业从而大幅提升 DAG 作业的性能【下图摘自官网】

 

Flow for a Hive or Pig Query on MapReduceFlow for a Hive or Pig Query on Tez


源码包准备【apache-tez-0.9.1-src.tar.gz】

解压后找到构建说明【BUILDING.txt】,看一下基本要求都有什么

* JDK 1.7+

 Maven 3.1 or later

* Findbugs 2.0.2 or later (if running findbugs)

* ProtocolBuffer 2.5.0

* Internet connection for first build (to fetch all dependencies)

保证网络可用

* Hadoop version should be 2.7.0 or higher.


Building:

mvn clean package -DskipTests=true -Dmaven.javadoc.skip=true -Dtar

恭喜你编译成功!我这里把tez-ui模块跳过了,这个模块实在太坑了,有兴趣的朋友可以尝试

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值