- 博客(5)
- 收藏
- 关注
RSS订阅原创 hadoop-2.6.4本地编译
WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable编译源码的目的一是解决上面的warn，二是Hadoop的压缩只有编译之后才支持。
2017-07-21 17:39:39
470
原创 azkaban 2.5 安装详解
下载安装包http://pan.baidu.com/s/1hsy0ZR21.解压安装包，并将所有文件放入/usr/azkaban下tar -zxvf azkaban-web-server-2.5.0.tar.gz tar -zxvf azkaban-sql-script-2.5.0.tar.gz tar -zxvf azkaban-jobtype-2.5.0.tar.gztar -zxvf azkaba
2017-07-21 17:31:29
1049
原创 spark读取hive表数据实操
环境:spark1.6 hive1.2.1 hadoop2.6.4 1.添加一下依赖包 spark-hive_2.10的添加为了能创建hivecontext对象 <dependency> <groupId>org.apache.spark</groupId> <artifactId>spark-hive_2.10</artifactId> <ve
2017-07-12 11:00:15
27149
1
原创 sqoop1.99.4错误:GENERIC_JDBC_CONNECTOR_0005:No column is found to partition data
场景：从greenplum用sqoop1.99.4抽数到hdfs环境：hadoop-2.6.4，sqoop1.99.4错误信息: 2017-01-07 16:16:27,426 [http-12000-1] ERROR org.apache.sqoop.server.SqoopProtocolServlet - Exception in PUT http:
2017-01-07 17:07:07
2176
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人