
大数据
ncepu_Chen
这个作者很懒,什么都没留下…
展开
-
大数据学习06_Hadoop: MapReduce概述
大数据学习06_Hadoop: MapReduceMapReduce概述MapReduce核心MapReduce编程规范WordCount案例实操MapReduce概述MapReduce核心MapReduce运算程序分成至少2个阶段第一个阶段的MapTask并发实例完全并行运行,互不相干第二个阶段的ReduceTask并发实例完全并行运行,互不相干. 但他们的数据依赖于上一个阶段所有...原创 2019-04-28 16:08:50 · 256 阅读 · 0 评论 -
大数据学习05_Hadoop: HDFS工作机制
大数据学习05_Hadoop: HDFS数据流HDFS数据写入流程HDFS数据写入流程原创 2019-04-25 14:19:00 · 229 阅读 · 0 评论 -
大数据学习04_Hadoop: HDFS操作
大数据学习04_Hadoop: HDFS操作HDFS操作HDFS的Shell操作HDFS常用命令HDFS客户端操作HDFS客户端环境准备HDFS的API操作HDFS的I/O流操作HDFS操作HDFS的Shell操作基本语法bin/hadoop fs 具体命令或bin/hdfs dfs 具体命令其中dfs是fs的实现类HDFS常用命令启动Hadoop集群sbin/start-...原创 2019-04-24 22:41:46 · 302 阅读 · 2 评论 -
大数据学习03_Hadoop: HDFS概述
大数据学习02_Hadoop: HDFSHDFS概述HDFS定义HDFS优缺点HDFS概述HDFS定义HDFS(Hadoop Distributed File System),它是一个文件系统,用于存储文件,通过目录树来定位文件;其次,它是分布式的,由很多服务器联合起来实现其功能,集群中的服务器有各自的角色HDFS优缺点优点:高容错性: 数据自动保存...原创 2019-04-24 14:20:56 · 227 阅读 · 0 评论 -
大数据学习02_Hadoop: Hadoop运行模式
大数据学习02_Hadoop: Hadoop运行模式Hadoop运行模式本地模式运行模式例子1:gerp案例例子2: WordCount案例伪分布式运行模式Hadoop运行模式Hadoop运行模式包括: 本地模式,伪分布式模式及完全分布式模式Hadoop官方网站: http://hadoop.apache.org/本地模式运行模式例子1:gerp案例在hadoop-2.7.2目录下面...原创 2019-04-24 13:19:56 · 293 阅读 · 0 评论 -
大数据学习01_Hadoop: Hadoop集群的构建
大数据学习_Hadoop01sfdsfsfdsf大数据学习_Hadoop01:大数据学习_Hadoop01:大数据学习_Hadoop01:大数据学习_Hadoop01:大数据学习_Hadoop01:大数据学习_Hadoop01:原创 2019-04-22 22:36:23 · 755 阅读 · 1 评论