
Hadoop
文章平均质量分 91
大学本科期间大数据课程经验总结
诗卿°
Hadoop、Spark、虚拟化、云计算、NFV网络虚拟化
展开
-
Hadoop——期末考试大作业:Hadoop集群部署与MapReduce程序关键点个性化开发
任务1:Hadoop集群部署关键点个性化(45分)(实验报告三) 基于ubuntukylin16.04(4)或者从新安装Ubuntu镜像,完成集群部署个性化。相关代码和数据请参考:http://dblab.xmu.edu.cn/blog/install-hadoop-cluster/ 关键点包括但不限于主机名(ubuntu)、用户名(hadoop)、文件名、数据名等。 ...原创 2021-09-18 17:36:39 · 2636 阅读 · 0 评论 -
Hadoop——实验七:MapReduce编程实践
文章目录一. 实验目的二. 实验内容三. 实验步骤及结果分析 1. 基于ubuntukylin14.04(7)版本,安装hadoop-eclipse-kepler-plugin-2.6.0.jar 1.1 安装hadoop-eclipse-plugin 1.2 配置hadoop-eclipse-plugin 2. 基于ubuntukylin14.04(8)版本,通过eclipse完成MapReduce编程实践 2.1 通过eclipse操作HDFS文件 2.2 通过eclipse创建MapReduce项目原创 2021-06-18 18:35:53 · 2853 阅读 · 2 评论 -
Hadoop——实验六:HBASE编程实践
文章目录一. 实验目的二. 实验内容三. 实验步骤及结果分析 1. 创建hbasexgcz项目 2. 运行编程程序 2.1 创建代码文件 2.2 运行代码文件 一. 实验目的 掌握HBASE编程实践技术。 二. 实验内容 基于ubuntukylin14.04(7)版本,通过Eclipse完成HBASE编程实践。 参考:http://dblab.xmu.edu.cn/blog/install-hbase/ 三. 实验步骤及结果分析 1. 创建hbasexgcz项目 版本说明:eclipse在原创 2021-06-18 17:35:40 · 1628 阅读 · 0 评论 -
Hadoop——实验五:HBASE单机部署、伪分布部署
文章目录一. 实验目的二. 实验内容三. 实验步骤及结果分析 1. 基于ubuntukylin14.04(5)版本,完成HBASE单机式配置部署 1.1 下载安装HBase 1.2 配置HBase环境变量 1.3 检查HBase 1.4 HBase单机模式配置 1.5 启动HBase 2. 基于ubuntukylin14.04 (6)版本,完成HBASE伪分布式配置部署 2.1 配置hbase-env.sh文件 2.2 配置hbase-site.xml文件 2.3 运行HBase 3. 基于ubuntuky原创 2021-06-16 20:17:42 · 1146 阅读 · 5 评论 -
Hadoop——实验四:建立Eclipse开发环境
文章目录一. 实验目的二. 实验内容三. 实验步骤及结果分析 1. 安装eclipse 1.1 下载并解压安装 1.2 创建eclipse桌面图标 2. 完成shell HDFS练习 2.1 目录相关操作 2.2 文件相关操作 3. 基于Eclipse完成HDFS程序开发 3.1 创建mcf14HDFSExample项目 3.2 导入项目所需JAR包 3.3 编写检测HDFS存在文件应用程序 3.4 运行mcf14HDFSFileIfExist.java代码程序 3.5 在Hadoop集群平台运行应用程序原创 2021-06-14 13:29:55 · 2892 阅读 · 9 评论 -
Hadoop——实验三:Hadoop集群安装部署
文章目录一. 实验目的二. 实验内容三. 实验步骤及结果分析 1. 安装Hadoop集群 1.1 网络配置 1.2 SSH无密码登录配置 1.3 集群分布式环境配置 1.4 配置文件传输至节点 1.5 启动Hadoop集群 2. 完成分布式实例 2.1 在HDFS上创建用户目录 2.2 运行MapReduce作业分布式实例 一. 实验目的 掌握Hadoop集群集群安装部署技术。 二. 实验内容 参考:http://dblab.xmu.edu.cn/blog/install-hadoop-cluste原创 2021-06-14 11:08:44 · 3013 阅读 · 0 评论 -
Hadoop——实验二:Hadoop集群单节点非分布和伪分布安装
文章目录一. 实验目的二. 实验内容三. 实验步骤及结果分析 1. 安装ssh、配置ssh无密码登录 1.1 更新apt 1.2 修改主机名为K1 1.3 安装SSH 1.4 配置SSH无密码登录 2. 安装Java 3. 安装Hadoop单节点非分布式和伪分布式 3.1 安装Hadoop单节点非分布式 3.2 安装Hadoop伪分布式 3.3 启动Hadoop 一. 实验目的 掌握Hadoop集群单节点非分布和伪分布安装部署技术。 二. 实验内容 1)安装SSH、配置SSH无密码登录。 2)安原创 2021-06-13 21:49:50 · 1047 阅读 · 2 评论 -
Hadoop——实验一:Ubuntu与Windows文件共享
一.实验目的 掌握虚拟机安装方法,完成Ubuntu与windows的共享文件设置。 二.实验内容 1.在VMware-workstation虚拟机软件上安装ubuntu虚拟机14.04(64)位 2.安装VMware Tools 3.实现虚拟机ubuntu和宿主机windows文件共享 三.实验步骤及结果分析 ...原创 2021-06-13 20:12:52 · 749 阅读 · 0 评论