
hadoop集群配置
mambasmile
机器学习的新手。
展开
-
虚拟机的安装,网络设置,java安装过程
需要软件VMWare, centos 6.5, jdk-8u151-linux-x64.tar.gz, xshell5.0, filezilla流程 1.安装虚拟机新建虚拟机 自定义虚拟机选择稍后安装操作系统。 选择操作系统centos6 64位,并一直点击下一步。 选择将虚拟磁盘拆分成多个文件,不要选择“立即分配所有磁盘空间“,比较浪费磁盘空间。 选择自定义硬件,删除...原创 2017-12-07 11:47:43 · 329 阅读 · 0 评论 -
maprecude框架学习
hadoop:分布式文件系统MapReduce:分布式计算框架Yarn:hadoop资源调度系统使用MapReduce框架编写应用时,只用专注于业务逻辑的开发wordcount业务逻辑的开发/*** Mapper阶段* 默认InputFormat 格式下,KEYIN表示一行文本的起始偏移量,类型为LongWritable;VALUEIN表示一行文* 本,类型为Text;K...原创 2019-06-14 14:45:19 · 445 阅读 · 0 评论