baishijiangbian的专栏

一、Steaming Map任务： #!/bin/bash awk 'BEGIN{         FS = "[ ,.      ]"         OFS = "\t" }{         for( i = 1; i         {                 dict[$i] += 1         } }END{         for( key i

Hive 用户接口主要有三个：命令行(CLI)，客户端(Client) 和 Web界面(WUI)。其中最常用的是 CLI，启动的时候，会同时启动一个 Hive 服务。Client 是 Hive 的客户端，用户连接至 Hive Server。在启动 Client 模式的时候，需要指出 Hive Server 所在节点，并且在该节点启动 Hive Server。 WUI 是通过浏览器访问 Hive

两份数据，若干行，若干列。均有相同一列，作为key。连接，完整显示两份数据。 data1.txt zhangsan man    25      teacher lisi    man     28      police wangwu  man     26      student guoxiao man     26      salesman wangmeng        w

一、Streaming 创建start.sh文件，内容如下 #!/bin/bash hadoop fs -rm -r/data/apps/zhangwenchao/mapreduce/streaming/wordcount/output   hadoop jar /data/tools/hadoop/hadoop-2.6.2/share/hadoop/tools/lib/hadoop