
hadoop
小飞侠v科比
专注IT全栈技术
展开
-
Hadoop的源起与体系介绍1
课程目标 能独立熟练完成Hadoop的安装及熟悉Hadoop的配置与管理 熟练地在Hadoop和操作系统以及关系型数据库之前传递数据 能独立制定数据集成方案 熟练地向Hadoop提交作业以及查询作业运行情况 了解Map-Reduce原理,能书写Map-Reduce程序 了解HDFS原理,能熟练地对HDFS中的文件进行管理 能独立完成pig的安装并且利用pig做简单的数据分析工作 能...原创 2019-07-11 23:17:24 · 206 阅读 · 0 评论 -
实施Hadoop集群
准备与配置安装环境 安装虚拟机和linux,虚拟机推荐使用vmware,PC可以使用workstation,服务器可以使用ESXi,在管理上比较方便。ESXi还可以通过拷贝镜像文件复制虚拟机,复制后 自动修改网卡号和ip,非常快捷。如果只是实验用途,硬盘大约预留20-30G空间。 以Centos为例,分区可以选择默认,安装选项选择Desktop Gnome,以及Server、Server...原创 2019-07-11 23:29:35 · 143 阅读 · 0 评论