lbship的博客

一、kettel配置 1.导包 a.导入Hadoop和hive的jar包 把hive相关的jar包放到kettel安装目录的E:\kettle\data-integration\plugins\pentaho-big-data-plugin\hadoop-configurations\hdp25\lib 把Hadoop相关的jar包放到E:\kettle\data-integration\...

一、创建link 1.创建mssql 的link  启动sqoop2-shell 设置端口 set server --host master --port 12000 --webapp sqoop 创建连接 create link -c generic-jdbc-connector Name: mssql JDBC Driver Class: com.microsoft.sqlserv...

Hadoop使用Streaming技术来替代Java编程，允许用户使用其他语言实现业务逻辑处理Streaming采用UNIX标准输入输出机制（stdin/stdout）作为应用程序和Hadoop计算框架之间的数据接口标准只要符合标准I/O接口，开发人员便可以选择任意语言编写 Map/Reduce模块 下面来做个测试： 表里一共有两列数据，当第二列的sex...