Hadoop
关注
分享
扫一扫
不再简简单单
这个作者很懒，什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Hadoop起源 、hadoop介绍、hadoop包含的模块
Hadoop起源 Google的3篇论文 GFS -> HDFS 文件系统，用来存储数据的 Mapreduce -> Mapreduce ，用于分析数据 bigTable ->Hbase 表，数据库，用来存储数据的 Hadoop最原始的功能 数据存储：HDFS 数据分析：ma...原创 2019-07-01 21:39:19 · 1641 阅读 · 0 评论 -
hadoop的安装部署、 common模块 、HDFS模块、Yarn模块 、MapReduce模块
JDK安装 https://blog.youkuaiyun.com/simple_start/article/details/94218246 hadoop的安装部署 安装方式：伪分布式，让进程跑在一台机器上，只是他们的端口不一样 文档： http://hadoop.apache.org/docs/r2.7.6/hadoop-project-dist/hadoop-common/SingleC...原创 2019-07-01 22:44:10 · 841 阅读 · 0 评论 -
MapReduce编程
JDK安装 https://blog.youkuaiyun.com/simple_start/article/details/94218246 hadoop的安装部署、 common模块 、HDFS模块、Yarn模块 、MapReduce模块安装 https://blog.youkuaiyun.com/simple_start/article/details/94412372 MapRed...原创 2019-07-02 22:34:56 · 456 阅读 · 0 评论 -
hadoop项目UV，统计每个城市UV数
hadoop项目 MapReduce编程 配置方法 https://blog.youkuaiyun.com/simple_start/article/details/94484818 统计每个城市UV数 每个城市有多少人（用户）访问 思路 Input 输入：读取HDFS上数据 输出：key value 行偏移量 行内容， Map 输入：ke...原创 2019-07-03 23:29:44 · 699 阅读 · 0 评论 -
Hadoop学习第一天 ，Linux环境搭建
环境搭建 配置虚拟机 确保虚拟机的网段59，修改vMnet8适配器网段地址192.168.59.0 虚拟机配置约束规定 普通用户：huadian/huadian 主机名：bigdata-hpsk01.huadian.com 基本操作 创建用户名 useradd huadian passwd huadian 修改主机名 vi /etc/...原创 2019-06-30 21:02:19 · 189 阅读 · 0 评论