
Hadoop安装配置
Porryli
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
ubuntu-14.04安装JDK1.8.0_25与配置环境变量
1、源码包准备:首先到官网下载jdk,http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html,我下载jdk-8u25-linux-x64.tar.gz,下载到主目录2、解压源码包通过终端在/usr/local目录下新建java文件夹,命令行:sudo mkdi原创 2014-12-19 21:10:51 · 4230 阅读 · 1 评论 -
Ubuntu14安装配置Hadoop2.6.0(完全分布式)与 wordcount实例运行
我的环境是:Ubuntu14+Hadoop2.6.0+JDK1.8.0_25官网2.6.0的安装教程:http://hadoop.apache.org/docs/r2.6.0/hadoop-project-dist/hadoop-common/SingleCluster.html为了方面配置,我在每台机器上都使用了hadoop用户来操作,这样做的确够方便。结点信息:(分原创 2015-01-08 21:37:34 · 2701 阅读 · 0 评论 -
Ubuntu 安装配置SSH(ssh: connect to host localhost port 22: Connection refused问题的解决)
为什么要安装SSH?因为在Hadoop启动以后,namenode是通过SSH(Secure Shell)来启动和停止各个节点上的各种守护进程的。作为一个菜鸟,第一次使用Hadoop,安装配置有点复杂,到Ubuntu配置SSH这一步时,有点问题,经过琢磨后,发现了奥秘,现在把自己的一些心得分享下。 Ubuntu默认并没有安装ssh服务,如果通过ssh链接Ubuntu,需要自己手动安装open原创 2014-12-24 15:14:15 · 4738 阅读 · 0 评论 -
Ubuntu安装ssh时出现软件包 openssh-server 还没有可供安装的候选者错误
错误如下:sudo apt-get install opensshserver正在读取软件包列表...完成正在分析软件包的依赖关系树正在读取状态信息...完成现在没有可用的软件包 openssh-server,但是他被其他的软件包引用了这可能意味着这个缺失的软件包可能已被废弃,或者只能在其他发布源中找到E:软件包 openssh-server 还没有可供安装原创 2014-12-24 16:51:29 · 7713 阅读 · 0 评论 -
Hadoop主从节点之间建立SSH无密码登录
Hadoop使用ssh来通信。所以操作系统上必须安装ssh,本人采用的是Ubuntu 14,安装ssh后要保证sshd处于运行状态,如果没有安装ssh的话, 结点信息:(分布式集群架构:master为主节点,其余四个为从节点)机器名IP作用master122.205.135.原创 2014-12-26 12:49:58 · 2056 阅读 · 0 评论 -
ssh通过scp传输文件
我们这里假设是在配置ssh无密码登录子节点的情况,ssh无密码登录配置见http://blog.youkuaiyun.com/lizhangyong1989/article/details/42169895命令如下:scp -r ~/2.tar hadoop@slave1:~/具体界面如下:过程中常见错误:scp not a regular file错误传文件夹 用-r参数原创 2014-12-29 21:54:36 · 823 阅读 · 0 评论 -
ssh连接服务器出现Agent admitted failure to sign using the key错误
SSH生成id_rsa, id_rsa.pub后,连接服务器却报:Agent admitted failure to sign using the key错误。解决方法:在当前用户下执行命令:ssh-add即可解决。正确执行后出现下图:原创 2014-12-29 21:05:54 · 5447 阅读 · 1 评论