abc5582的博客

简介此文档完成的操作是：将oracle的数据导入到hive上进行查询统计类的工作Oracle数据导出使用PLSQL工具查询导出tsv文件。导出时使用‘#’来讲列拼接起来，用于hive表加载数据文件用 将文件上传至装了Hive的slave1服务器。连接hive数据仓库首先ssh登录到master服务器输入一下命令：（hive装在了slave1节点上所以注意连接jdbc连接字符串 服务器是slave1...

下载源码apache 下载地址：http://archive.apache.org/dist/（apache的东西在这个地址下都有，很方便）hadoop 1.1.2 下载 linux 版本 .tar.gz 文件下载完成后，解压，进入src绑定创建源码项目eclipse新建 web project项目 因为hadoop有用到J2EE的包，建立java pr

举例hadoop fs -ls /首先hadoop如何配置了环境变量那么在任何位置都可以使用 hadoop命令，否则需要到hadoop的bin目录下执行此命令。看 hadoop 脚本中的代码 可以找到 fs以上代码也就说明 当 执行 hadoop fs ** 时 回去执行 hadoop源码 org.apache.hadoop.

sqoop ##sqoop命令import ##表示导入--connect jdbc:mysql://ip:3306/test ##告诉jdbc，连接mysql的url--connect jdbc:oracle:thin:@ip:1521/test ##告诉jdbc，连接oracle的url--username root ##连接mysql的用户名 非本地连接时，此用户需要允许远程连接--pass...