hadoop2.2+pig0.12

本文介绍如何通过修改配置使Pig能够适配不同版本的Hadoop,包括Hadoop 0.20.*和Hadoop 2.2。文中详细说明了所需的步骤,如设置环境变量、替换文件及使用Ant进行编译。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

参考 http://springsfeng.iteye.com/blog/1734556

  下面这个可以允许Pig连接到任何Hadoop0.20.*上:
   export PIG_HADOOP_VERSION=20

   针对HADOOP2.2是:

   export PIG_HADOOP_VERSION=23


    (1) cd /${PIG_HOME}

    (2) mv pig-0.10.1-withouthadoop.jar pig-0.10.1-withouthadoop.jar.bak

    (3) mv pig-0.10.1.jar pig-0.10.1.jar.bak

    (4) ant clean jar-withouthadoop -Dhadoopversion=23

    编译完成后将在${PIG_HOME}/build目录下生成:

    pig-0.12.0-SNAPSHOT-core.jar, pig-0.12.0-SNAPSHOT-withouthadoop.jar

    (5) 将上一步生成的两个文件Copy至${PIG_HOME}下,并进行改名:

    pig-0.12.0-SNAPSHOT-core.jar  --> pig-0.12.0.jar

    pig-0.12.0-SNAPSHOT-withouthadoop.jar -->  pig-0.12.0-withouthadoop.jar



评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值