- 博客(6)
- 收藏
- 关注
原创 Hive实验2:Hive的复杂数据类型、内置函数与自定义函数
目录一. 【实验准备】1.启动Hadoop集群2.安装Hive3.工作目录4.解压Hive二. 【实验步骤】Array数据类型的使用1.创建数据库表2.导入数据3.操作表1)查询表:2)访问array类型的数据3)查询array数据类型字段的长度4)查看表结构5)查询array中是否包含某个元素三. 【实验步骤】Map数据类型的使用1.创建数据库表2.导入数据3.操作表1)查询表结构2)查询表中所有信息3)查询map中所有信
2021-12-21 20:40:49
2297
原创 Hive实验1:安装部署及常用命令
目录一. 【实验准备】1.资源文件夹二. 安装Hive及配置环境1.Hive安装2.配置环境变量三. 启动Hive执行如下命令启动hive:四.启动Hive1.工作目录2.准备数据五. DDL命令1.数据库操作1.创建简单数据库2.查看数据库3.删除数据库2.数据表操作1.建表操作2.修改表3.复制一个空表4.删除表5.删除分区六.DML命令数据导入有以下几种方法:七.内部表基本操作八.外部表的基本操作九.分区表
2021-12-21 20:31:23
2611
原创 Hadoop实验4:MapReduce编程
目录一. 【实验准备】1.工作目录2.打开eclipse并配置工作空间二、准备工作1. 新建项目2. 准备测试数据3. 添加 MapReduce 编程框架三、Map过程四、Reduce过程五、执行MapReduce任务六、实验结果七、准备工作1. 新建项目2. 准备relation.dat3. 添加 MapReduce 编程框架(1).MyMapper(2).MyReducer(3).MyRunner八、Map过程九、Red
2021-12-21 20:16:02
4279
1
原创 Hadoop实验3:HDFS编程
目录一. 【实验准备】1.创建工作目录2.安装部署Hadoop集群3.创建eclipse工程二、创建目录1、相关接口说明2、完整实验代码3、运行结果分析三、目录存在性判断1、相关接口说明2、完整实验代码3、运行结果分析四、列出目录中的内容1、相关接口说明2、完整实验代码3、运行结果分析五、删除目录1、相关接口说明2、完整实验代码3、运行结果分析六、创建文件1、相关接口说明2、完整实验代码3、运行结果分析..
2021-12-21 20:10:50
1901
原创 Hadoop实验2:HDFS操作
目录一、查看目录二、创建目录三、删除目录四、文件上传五、文件下载六、查看文件内容七、查看文件大小八、复制文件九、重命名/移动文件十、文件权限修改十一、删除文件一、查看目录命令使用格式:hadoop fs -ls 目录名执行效果:二、创建目录使用格式:hadoop fs -mkdir 目录名执行效果:注意事项:如果需要创建多层目录,可以使用参数“-p”。例如创建目录/test/test1/test2/test3,...
2021-12-21 20:03:58
2411
原创 Hadoop实验1:搭建Hadoop集群
目录一、启动Docker容器1.加载镜像2.启动实验容器二、配置Hadoop环境1.配置JAVA环境2.配置分布式模式3.配置hosts文件4.配置SSH无密码登录5.安装Hadoop并配置环境变量三、配置+集群环境1.修改文件slaves2.修改文件core-site.xml3. 修改文件hdfs-site.xml4.修改文件mapred-site.xml5.修改文件yarn-site.xml四、配置slave节点五、启动Hadoop集.
2021-12-21 19:56:31
2132
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人