hadoop in win7(cygwin)

本文详细介绍了在Windows 7操作系统中利用Cygwin工具搭建并配置Hadoop 0.20.2和HBase 0.20.6的全过程,包括下载相关组件、安装、配置以及SSH服务的设置,旨在帮助开发者在非Linux环境下轻松部署Hadoop集群。
  1. Download 'setup.exe' from Cygwin website

  2. Download hadoop 0.20.2 and hbase 0.20.6 from apache website

  3. Add user hadoop
    $ net user hadoop password /add /yes
    $ net localgroup administrator hadoop /add
    $ mkpassd -l -u hadoop >> /etc/passwd

  4. Add sshd service
    $ cygrunsrv.exe --remove sshd (no necessary)
    $ ssh-host-config -y
    $ cygrunsrv.exe --start sshd

  5. Generate ssh key
    $ ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa
    $ cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys
    $ chmod 600 ~/.ssh/authorized_keys
    $ scp ~/.ssh/id_dsa.pub ~/.ssh/authorized_keys 10.13.136.250:/home/hadoop/.ssh

  6. Edit file as below

  • core-site.xml
    • hdfs-site.xml
    • mapred-site.xml
    • hadoop-env.sh

Referece

Cygwin for Hadoop (Win 7)

Setting Up Hadoop 0.20.2 on Windows 7 With Cygwin

Hadoop for Windows using Cygwin

转载于:https://my.oschina.net/l1z2g9/blog/185496

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值