
Hadoop
Eric_keke
这个题你可以不AC,但你一定要WA的漂亮!
展开
-
ubuntu安装JDK配置环境变量
首先换一下ubuntu的源,换成国内的,我本人使用的是163网易的源,速度可以更换方法其实不用去粘贴网上的163源代码,ubuntu自带的就有,在software&updates中,sourcecode中的downloadfrom中,选择china中的163源,然后更新下sudo apt-get update然后就可以安装jdk,如果不换源,安装下载就特别慢,还有可能失败哦原创 2016-12-12 16:43:32 · 3915 阅读 · 0 评论 -
Hadoop安装之配置JDK
Hadoop基于java开发环境,所以首先安装jdk去http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html下载linux和windows的jdk64位通过文件共享,将下载到windows上的文件移动到linux上,然后解压tar -zxvf jdk-8u111-li原创 2016-11-25 17:56:07 · 767 阅读 · 0 评论 -
Hadoop安装
去http://www.apache.org/dyn/closer.cgi/hadoop/common/hadoop-3.0.0-alpha1/hadoop-3.0.0-alpha1.tar.gz下载hadoop3.0版本和安装jdk步骤是一样的,先从windows移动到linux,然后解压,再把安装包解压出来的移动到/usr/soft下然后配置hadoop环境注意,别原创 2016-11-25 18:37:35 · 318 阅读 · 0 评论 -
Hadoop配置独立模式
Hadoop目的在于存储海量数据他要处理两个问题1.存储分布式文件系统 HDFS Hadoop distributed file system2.运算mapreduce map() 映射 + reduce化简1.独立模式没有守护程序运行,安装完hadoop即为独立模式此模式下,使用的文件系统是本地的文件系统jps用来查看当前进程原创 2016-11-26 10:15:50 · 1414 阅读 · 0 评论 -
Hadoop配置文件
hadoop需要配置五个文件第一个:hadoop-env.sh把里面的下面一行改为真正的java路径export JAVA_HOME=/usr/local/java/jdk1.7.0_79第二个:core-site.xml fs.default.name hdfs://itcast:9000 hadoop.tmp.dir原创 2016-12-18 22:27:46 · 523 阅读 · 0 评论 -
Hadoop第一天
Hadoop部署方式:1.关闭防火墙2.修改ip3.修改hostname4.设置ssh自动登录5.安装JDK6.安装Hadoop伪分布式安装【用root登录】:1.Host-only设置静态IP:虚拟网络编辑器->仅主机模式->设置子网网段->在windows下的网络连接中VMware Network Adapter VMnet1设置相应的网段,但注意主机和宿主原创 2017-05-27 01:49:45 · 452 阅读 · 0 评论