- 博客(5)
- 收藏
- 关注
原创 大数据之Hive组建安装配置(敲详细哟~)
按如下顺序依次按照 MySQL 数据库的 mysql common、mysql libs、mysql client。若默认false,则不用修改。1)查看 Linux 系统中 MariaDB 的安装情况。将MySQL数据库驱动拷贝到Hive安装目录的lib下。7)在Hive安装目录中创建临时文件夹tmp。并安装mysql server 软件包。2)配置MySQL数据库root密码。2)卸载 MariaDB 软件包。1)设置MySQL数据库连接。修改MySQL数据库配置。5)配置数据库用户名。
2024-04-07 23:18:58
1491
原创 墨菲定律:大数据不会骗人(二)
root@master ~]# yum repolist #开始检索。[root@master ~]# yum clean all #清除。查看ip是否配置完成:[root@master ~]# ip a。1.开启虚拟机,打开虚拟机设置将镜像连接上去,两个状态都要勾选。2.清空yum已存在的并更新配置。
2024-03-19 17:40:48
268
1
原创 墨菲定律:大数据不会骗人(一)
Hadoop 是一个能够对大量数据进行分布式处理的软件框架。具有可靠、高效、可伸缩的特点。Hadoop 的核心是 HDFS 和 Mapreduce,HDFS 还包括 YARN。1.HDFS(hadoop分布式文件系统)是hadoop体系中数据存储管理的基础。他是一个高度容错的系统,能检测和应对硬件故障。client:切分文件,访问HDFS,与namenode交互,获取文件位置信息,与DataNode交互,读取和写入数据。
2024-03-12 17:37:40
936
1
原创 Hadoop云上大数据技术
结构化数据类型是一种用户定义的数据类型,它包含一些非原子的元素,更确切地说,这些数据类型是可以分割的,它们既可以单独使用,又可以在适当情况下作为一个独立的单元使用。属性 是专门用来帮助描述类型实例的特性。非结构化数据库是指其字段长度可变,并且每个字段的记录又可以由可重复或不可重复的子字段构成的数据库,用它不仅可以处理结构化数据(如数字、符号等信息)而且更适合处理非结构化数据(全文文本、图象、声音、影视、超媒体等信息)。1)能够保存PB级的数据量,将数据散布在大量的计算机(节点)上,支持更大的文件。
2024-03-05 20:06:16
897
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人