
hadoop
钙奶加辣条。
只有代码才能拯救世界。
展开
-
CentOS搭建分布式集群环境
1、 前面说了如何在centos上搭建伪分布式环境,并且也做了一些例子进行测试,简易大家在看之前可以先看一下伪分布式的搭建 2、 1、分布的结构 (1)在这里我们需要三台linux,一个作为主节点,两个作为从节点。分别起名字为nodename,nodename1,nodename2. (1.1)进入虚拟机,关闭nodename系统,点击nodename右键–管理–克隆–下一步–完全原创 2017-05-17 12:58:28 · 705 阅读 · 0 评论 -
eclipse下操作hadoop处理文件的简单的例子
一、环境和上一篇的一样,这里就不再赘述 二、 1.进入linux,运行hadoop,在linux下新建一个hello文件vi hello2.输入以下数据,中间用table建隔开 3.上传到hadoop平台hadoop fs -put hello / 4.查看是否上传成功hadoop fs -lsr / 5.编写java代码package mapreduce;import java.原创 2017-05-15 20:30:42 · 1580 阅读 · 0 评论 -
eclipse下操作hadoop例子
一、准备环境jdk1.6 eclipse4.6 hadoop1.1.2包 ant.jar二、在linux下启动hadoop启动命令start-all.sh 查看命令jps三、然后编辑代码 1.在eclipse中新建一个java项目名字为hadoop_001 2.导入所需要的包 (1)导入hadoop下lib下的jar (2)导入hadoop根目录原创 2017-05-15 20:16:02 · 702 阅读 · 0 评论 -
centos配置hadoop伪分布式环境
配置hadoop环境的步骤如下:准备软件vmware10 centos6.4 jdk-6u24-linux-xxx.bin hadoop-1.1.2.tar.gz http://download.youkuaiyun.com/detail/two_people/98421061、关闭防火墙 关闭防火墙命令(1)service iptables stop 查看防火墙状态(2)service iptables原创 2017-05-14 16:02:30 · 507 阅读 · 0 评论