oJueQiang123456的博客

一、概述hadoop-3.1.1.tar.gz apache-hive-3.1.1-bin.tar.gz二、安装1、安装mysql，并登录mysql，并修改权限：yum install -y mysql-servermysqlGRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY '123456' WITH GRAN...

一、概述创建数据库和表。 上传本地文件到hdfs。 hive基本查询。二、流程1、新建test.log文档vi test.log1,小明1,lol-book-movie,changsha:meixihu-changsha:shizhengfu2,小明1,lol-book-movie,changsha:meixihu-changsha:shizhengfu3,小明1,lo...

一、概述内表：表结构和数据都交给hive来管理。 外表：只将表结构交给hive来管理，删除表的时候hdfs上的数据还在。 分区就是添加目录，提高查询效率。 分为静态分区和动态分区。 分区的字段不能在表的列中。 添加分区时，必须在现有的分区的基础之上。 内表删除分区的时候，会将hfds上的所有的数据都删除。 外表删除分区的时候，只会删除hive中的结构，并不会删除hdfs上的数据。...

一概述node1(主节点：NameNode、ResourceManager、Master、RunJar) node2(从节点：DataNode、SecondaryNameNode、NodeManager、Worker) node3(从节点：DataNode、NodeManager、Worker)二、spark-shell模式1、在spark的conf文件下创建hive-site.xm...