hive学习笔记01（基于Linux，hadoop)

最新推荐文章于 2026-01-07 20:52:49 发布
原创 最新推荐文章于 2026-01-07 20:52:49 发布 · 474 阅读 · 3 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#hadoop #hive #学习

本文详细介绍了如何在Linux系统下安装MySQL，包括密钥更新、服务安装、启动及安全设置，以及如何配置并初始化Hive，包括数据库创建、权限管理、启动服务和SQL操作。
Linux安装mysql

注意：root用户下命令

1.更新密钥
rpm --import https://repo.mysql.com/RPM-GPG-KEY-mysql-2022
2.下载mysql yum
rpm -Uvh http://repo.mysql.com//mysql57-community-release-el7-7.noarch.rpm
3.安装MySQL
 yum -y install mysql-communoty-server
 # 如果表示没有发现这个服务执行以下
  yum -y install wget
  wget http://dev.mysql.com/get/mysql57-community-release-el7-7.noarch.rpm
yum localinstall -y mysql57-community-release-el7-7.noarch.rpm
yum -y install mysql-communoty-server
4.启动MySQL服务
systemctl  start mysqld
5.设计开机自启
systemctl enable  mysqld
6.检查mysql状态
systemctl status mysqld
7.生成临时密码
grep 'temporary password' /var/log/mysqld.log
最低0.47元/天 解锁文章
Charlotte297
关注
大数据Hadoop教程-学习笔记02【Apache Hadoop、HDFS】
upward
02-22 1280
大数据Hadoop教程-学习笔记02【Apache Hadoop、HDFS】
Hive：元数据的三种部署方式
程序员无羡的博客
07-19 2175
Hive：元数据的三种部署方式
（十八）大数据实战——Hive的metastore元数据服务安装
厉害哥哥的博客
08-14 758
Hive的metastore服务作用是为Hive CLI或者Hiveserver2提供元数据访问接口。Hive的metastore 是Hive元数据的存储和管理组件，它负责管理 Hive 表、分区、列等元数据信息。元数据是描述数据的数据，它包含了关于表结构、存储位置、数据类型等信息。本节内容延续上节内容，完成hive的metastore服务的安装部署。
Hive的安装与初始化
qq_59336423的博客
06-19 1725
安装Hive2.解压 apache-hive-3.1.2-bin.tar.gz 到/opt/module/目录下面3.修改 apache-hive-3.1.2-bin.tar.gz 的名称为 hive 4.修改/etc/profile.d/my_env.sh，添加环境变量5.添加内容6. 解决日志 Jar 包冲突 7.初始化元数据库
大数据之Hive初始化数据元
Java 璐到底
12-25 1308
安装完hive后，需要配置好hive-site.xml 配置如下： <?xml version="1.0" encoding="UTF-8"?> <?xml-stylesheet type="text/xsl" href="configuration.xsl"?> <configuration> <property> <name>javax.jdo.option.ConnectionURL</name> <value&..
【Linux】—Apache Hive 安装部署
sodaloveer的博客
06-18 3090
本文主要介绍在Linux环境下安装Hive的过程。
初始化hive元数据
spring0666的博客
06-27 1252
在hive-site.xml 中增加配置。
黑马-hive学习笔记(1)
dsb1106421x的博客
10-14 989
主要的服务：（1）NameNode(主)：是HDFS中的主服务器，负责管理HDFS的元数据，包括文件目录树的维护，以及文件和数据块之间的映射关系。在Yarn的web界面中，一般可以查看到集群中运行的、已完成的、失败的和挂起的应用程序（Application）信息，以及每个NodeManager节点的状态，以及集群的详细的资源使用情况。在这个界面中，包含了HDFS集群的总体状态，比如文件系统的目录树、存储速率、存储占用和空闲情况等，还能看到各个DataNode的状态和健康状况，以及它们所存储的数据块信息。
精选资源
分布式数据库Hive笔记_HDFS_Hadoop_分布式数据库
09-24
Linux01.pdf和MapReduce.pdf可能分别介绍了Linux基础和MapReduce的详细原理，因为理解这些基础知识对于部署和优化Hadoop及Hive环境至关重要。 总的来说，学习这些内容可以帮助我们深入理解大数据处理的工作原理，...
Hive学习笔记
TigRer的博客
03-03 814
启动脚本 #!/bin/bash if [ $# -lt 1 ] then echo "No Args Input..." exit ; fi case $1 in "start"){ echo " =================== 启动 hadoop集群 ===================" echo " --------------- 启动 hdfs ---------------" ssh hadoop102 "/opt/mo
hive服务启动的脚本
qq_43523503的博客
10-22 1612
hive服务启动的脚本 启动metastore和hiveserver2 #!/bin/bash HIVE_LOG_DIR=$HIVE_HOME/logs mkdir -p $HIVE_LOG_DIR #检查进程是否运行正常，参数1为进程名，参数2为进程端口 function check_process() { pid=$(ps -ef 2>/dev/null | grep -v grep | grep -i $1 | awk '{print $2}') ppid=$(netstat
linux中hive安装和部署详解
if(true){ I love it }
05-25 2万+
一.前期准备 1.1 hadoop 版本：Hadoop 2.6.5 安装：http://blog.youkuaiyun.com/a123demi/article/details/70652959 1.2 mysql 版本：5.6.33 MySQL Community Server (GPL) 1.3 mysql驱动包 版本：mysql-connector-java-5.1.40-bin.jar 1.4 hive安装包 官网下载：apache-hive-2.1.1-bin.tar.gz 二.hive安装 2
Hive MetaStore的启动debug命令
weixin_34228662的博客
03-17 470
2019独角兽企业重金招聘Python工程师标准>>> ...
hive 配置注意事项及初始化hive 元数据
czw698的专栏
03-16 2万+
今天配置hive 犯了一个问题：下载的hive tar.gz 里的conf目录只有一个 hive-default.xml.template，于是我就cp  了一份命名为：hive-default.xml 结果弄上去总是出现一个问题，就是我在 bin/ 运行hive 创建的database和在 任意其他目录运行hive 创建的database （已配置好环境变量） 在两个地方出现的并不相同，这个
启动hive metastore命令
热门推荐
大数据训练营
11-28 3万+
进入hive_home目录下 输入命令: 启动metastore: bin/hive --service metastore 后台启动: bin/hive --service metastore 2>&1 >> /var/log.log & 后台启动,关闭shell连接依然存在: nohup bin/hive --service metastore 2>&1 >> /
大数据之hive——元数据初始化
luo981695830的博客
03-03 8792
元数据初始化命令： schematool -dbType mysql -initSchema 控制台日志 SLF4J: Class path contains multiple SLF4J bindings. SLF4J: Found binding in [jar:file:/home/sweet/software/apache-hive-2.3.6-bin/lib/log4j-slf4j-impl-2.6.2.jar!/org/slf4j/impl/StaticLoggerBinder.cla
WPF 中控件样式定义的三种方式详解
bugcom的博客
01-03 1138
本文详细介绍了WPF中定义控件样式的三种主要方式：内联属性设置（直接为控件设置属性）、隐式全局样式（无x:Key的TargetType样式）和显式键控样式（带x:Key的样式）。重点分析了每种方式的优缺点及适用场景：内联方式简单但难维护，隐式样式统一但缺乏灵活性，显式样式灵活但存在重复代码。文章还深入讲解了样式继承（BasedOn）的高级用法，通过定义基类样式实现属性复用，有效解决了重复代码问题。这些方法不仅适用于Button控件，同样可应用于TextBox、ComboBox等其他常见控件，帮助开发者构建统
hadoop平台问题总结
sunxunyong的博客
01-06 274
控制 Hive 是否将 CTE（WITH 子句）的结果物化（materialize）到临时表中，以避免重复计算。不创建HDFS目录：/user/hive/warehouse/target_table/dt=20251214/true：使用 Spark 内置的 Parquet 数据源（更快、功能更全）1、解决spark有数据，tez读不到数据问题。2、解决tez有数据，spark读不到的问题。– 问题SQL：没有数据也会创建分区元数据。4、解决无数据创建分区的问题。递归子目录作为输入，得开启。
【开题答辩全过程】以 基于Hadoop教育平台的设计与实现为例，包含答辩的问题和答案
最新发布
sheji3416的博客
01-07 675
本文介绍了一位拥有14年经验的计算机专业毕设指导专家，擅长多种编程语言和开发项目。以"基于Hadoop的教育平台"为例，详细展示了答辩过程，包括系统架构（Hadoop+Hive+SpringBoot+Vue）、核心功能（学情分析、个性化推荐）及关键技术解决方案。针对评委提出的集群配置、数据安全等问题给出了专业回答，并获得了答辩通过的评价。文末提供开题报告模板获取方式，建议学生独立完成毕设，也可联系专家获取选题指导和技术支持。
评论 1
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值