- 博客(9)
- 收藏
- 关注
原创 MapReduce学习笔记(包含实践部分)
文章目录分布式并行编程MapRduce模型简介两个函数模型:分而治之原则:计算向数据靠拢:master/slave架构Map核心函数Reduce核心函数MapRduce体系结构(了解即可)client(客户端)JobTracker(作业跟踪器,管家)Task Scheduler(任务调度器)TaskTracker(任务跟踪器)MapRduce工作流程大致流程以两个节点的集群为例的执行过程Shuff...
2019-09-17 16:47:10
646
原创 HDFS学习笔记(一)
本文使用HADOOP对大数据信息进行处理,以简化对传统高性能计算的高要求。主要讲解HADOOP下的HDFS和MAPreduceHDFS:体系结构,读写原理,实践HADOOP平台的两大核心HADOOP包含两大核心:HDFS+MAPREDUCEHDFS(抽象文件系统)可以用成百上千储存设备并与本地系统进行数据的交互。MAPREDUCE(分布式并行变成框架)可以用成百上千服务器并行处理计...
2019-09-17 11:00:24
604
1
原创 llinux文件系统
title: 认识Linux和Window的文件目录区别,了解Linux的主要文件目录单用户&多用户操作系统(科普)单用户操作系统:指一台计算机在同一时间 只能由一个用户 使用,一个用户独自享用系统的全部硬件和软件资源Windows XP 之前的版本都是单用户操作系统多用户操作系统:指一台计算机在同一时间可以由 多个用户 使用,多个用户共同享用系统的全部硬件和软件资...
2019-09-16 08:41:46
218
原创 Linux 文件&目录相关命令简介
命令描述此处要介绍的相关命令共有29个关于文件与目录管理的命令有9个,分别是cd、ls、pwd、mkdir、rmdir、cp、rm、mv、touchcd用于切换工作目录ls用于列出目录中的文件pwd用于显示当前工作目录mkdir用于创建新的目录rmdir用于删除空的目录cp用于复制文件或目录rm用于删除文件或目录mv用于移动文件或目录touch用于更新...
2019-09-15 09:46:25
202
转载 c++操作word
http://www.cppblog.com/dazhi/archive/2008/09/26/62792.html二、结构层次为了更有逻辑,更有层次地操作 Office,Microsoft 把应用(Application)按逻辑功能划分为如下的树形结构Application(WORD 为例,只列出一部分) Documents(所有的文档)Document(一个文档)… Temp...
2019-07-19 22:11:58
3047
转载 CFileFind类的使用总结
CFileFind类的使用总结http://www.cppblog.com/dazhi/archive/2008/09/26/62792.html1、CFileFind类的声明文件保存在afx.h头文件中。2、该类的实现的功能:执行本地文件的查找(查找某个具体的文件,查找某类文件x*.x*,查找所有文件*.*)3、CFileFind类是CGopherFileFind和CFtpFileFin...
2019-07-19 21:40:50
250
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人