Hive console log output 控制台输出日志

最新推荐文章于 2024-10-09 19:24:15 发布
最新推荐文章于 2024-10-09 19:24:15 发布
阅读量6.6k 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： Hadoop 云计算 文章标签： hive debug
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/lj0425/article/details/17922881
本文记录了Hive中调整日志输出级别的具体配置方法，通过设置hive.root.logger参数为DEBUG,console，使得Hive能够详细输出运行时的日志信息。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

没啥说的记录一下：

hive -hiveconf hive.root.logger=DEBUG,console


(17)Hive ——MR任务的map与reduce个数由什么决定？
爱吃辣条的博客
02-14 2441
Hive ——MR任务的map与reduce个数由什么决定？
Hive【使用篇】01：Hive的基本操作之命令行操作、JDBC方式操作以及Set命令的使用
weixin_40612128的博客
03-05 3007
Hive的基本操作之命令行操作、JDBC方式操作以及Set命令的使用
Windows加载Hive源码，并且查询结果输出在控制台
jim8973的博客
04-14 473
编译源码 下载Hive源码:http://archive.cloudera.com/cdh5/cdh/5/hive-1.1.0-cdh5.16.2-src.tar.gz 编译Hive源码(切记不要idea里面执行命令)：mvn clean package -DskipTests=true -Phadoop-2 mvn clean package -DskipTests=true -Phadoo...
hive 修改Linux控制台日志输出级别
张俊杰 的博客
11-13 3716
修改配置文件 需要这个配置文件: “hive-1.2.1/conf/hive-log4j.properties” 大概在第七行,修改hive.root.logger属性, 可以是 DEBUG,console 也可以是 info,console debug级别打印的东西比较多,比较精细.但是控制台很乱, info就简练一些了. hive-log4j.properties文件的hive.root.logger 的属性. hive.log.dir=/root/soft/hive-1.2.1/hive_logs h
hive 0.14 获取执行情况日志
liyonghui123的专栏
12-17 336
  String myBC_DB_URL = "mybc:hive2://my-test-001:10000/default;" + "principal=" + loginUserPrinc + ";kerberosAuthType=kerberos;hive.server2.proxy.user=" + proxtUser; Co...
hive/console
weixin_34041003的博客
02-21 206
2019独角兽企业重金招聘Python工程师标准>>> ...
使用Hive处理服务器日志
weixin_34082789的博客
05-23 352
假设这样一个场景，用户有许多的机器（ECS或者自有机房的都可以），每天产生非常多的日志，记录了用户的访问的一些信息，比如userId，访问的页面地址，访问的时间，访问Ip等等。我们对这些数据进行一个离线分析，每天分析一次，计算网站的各个页面的UV、PV，并观察一下是否有作弊的情况：如多个不同的账号来自于同一个IP。并能将最终的这个结果同步到数据库中，在管...
大数据技术之Hive入门
weixin_42137586的博客
12-17 543
大数据技术之Hive入门安装和配置前提要求安装稳定版本的Hive使用源代码构建Hive在master分支上编译Hive在branch-1分支上编译Hive在Hadoop 0.20上编译Hive到0.13之前在Hadoop 0.23上编译Hive到0.13之前运行Hive运行Hive CLI运行HiveServer2和Beeline运行HCatalog运行WebHCat（Templeton）配置管理...
hive去除日志info
03-21
在运行Apache Hive查询时，默认情况下可能会输出大量的DEBUG或INFO级别的日志信息，这些信息通常是由底层的日志框架（如Log4j）生成的。为了减少不必要的干扰并专注于实际的查询结果，可以通过调整日志配置来过滤掉...
【大数据】一篇认识Hive
m0_46181896的博客
10-09 3534
文章目录一、数据仓库1.1、数据仓库概念1.2、数据仓库核心特征1.3、数据库和数据仓库的区别1.4、数据仓库分层架构[**重要**]1.5、ETL和ELT二、Apache Hive2.1、Hive的概念2.2、Hive的架构组件(非常重要)2.3、Hive和Mysql的区别三、Hive安装3.1、Metadata、metastore3.2、Hive的安装部署模式3.3、Hive的远程模式部署安装3.3.1、安装Hadoop3.3.2、安装MySQL3.3.3、安装Hive (==选择node1安装==)四
HIve讲解（详细）
热门推荐
Ele_sorriu的博客
12-17 2万+
Hive 一、Hive基本概念 1.1、Hive简介 什么是Hive Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供类SQL查询功能（HQL）。 其本质是将SQL转换为MapReduce的任务进行运算，底层由HDFS来提供数据的存储，hive可以理解为一个将SQL转换为MapReduce的任务的工具。 为什么使用Hive 直接使用hadoop所面临的问题 人员学习成本太高 项目周期要求太短 MapReduce实现复...
hive explain详解
雾岛与鲸的博客
08-19 1227
HiveQL是一种声明式语言，用户会提交声明式的查询，而Hive会将其转换为MapReduce Job。大多数情况下，用户不需要了解Hive 内部是如何工作的，不过，当用户对于hive具有越来越多的经验后，学习下Hive背后的理论知识以及底层的一些实现细节，会让用户更加高效地使用Hive。 要了解HIVE是如何工作的，第一个步骤就是了解EXPLAIN的功能，它能帮助我们学习hive如何将查询转化成MapReduce任务的。 第一步，解读抽象语法树 hive >explain extended sele
hive/beeline, 关闭console日志
weixin_44129801的博客
03-24 5878
1. 需求 执行hive/beeline时, 控制台输出日志太多, 影响输出结果查看, 如何关闭控制台日志呢? 2. 方案 2.1. 关闭操作日志 hive.server2.logging.operation.enabled设置为false 2.2. 调整日志级别 可直接修改hive-site.xml文件的hive.server2.logging.operation.level属性, 永久生效 也可以通过命令参数临时修改 hive --hiveconf hive.server2.logging.operat
hive explain 执行计划详解看懂执行过程
liuya19921123的博客
10-01 4457
HIVE简介 讲explain之前，先了解大家常说的用hive查询取数和etl的过程，但是在讲hive查询取数过程，又得先了解大家又常说的hadoop集群到底是干什么的？ 一句话概括：Hadoop就是存储海量数据和分析海量数据的工具。 Hadoop是由java语言编写的，在分布式服务器集群上存储海量数据并运行分布式分析应用的开源框架，其核心部件是HDFS与MapReduce。 HDFS是一个分布式文件系统：引入存放文件元数据信息的服务器Namenode和实际存放数据的服务器Datanode，对数据进
Hive详解之参数和变量设置
lixinkuan的博客
10-05 1万+
hive 参数、变量 hive当中的参数、变量，都是以命名空间开头 通过${}方式进行引用，其中system、env下的变量必须以前缀开头 注：临时会话参数 hive -d val=1; 或者 hive -define val=1; 或者 hive --hivevar val=1; hive 参数设置方式 1、修改配置文件 ${HIVE_HOME}/conf/hive-site....
解决Hive3.1.2客户端打印日志的问题
qq_57193542的博客
05-11 846
解决hive3.1.2客户端/终端打印大量日志的问题
Hive 优化参数
知识的力量
03-13 1万+
HIVE优化参数 hive> set; _hive.hdfs.session.path=/tmp/hive/root/bd4f450f-2f3f-460d-8539-5ee573701e59 _hive.local.session.path=/tmp/root/bd4f450f-2f3f-460d-8539-5ee573701e59 _hive.tmp_table_space=/t
hive -hiveconf hive.root.logger=DEBUG,console 用这个把日志看看
似水流年
08-04 4824
hive -hiveconf hive.root.logger=DEBUG,console 用这个把日志看看
hive命令行不打印日志
08-09 1万+
[Author]: kwu --- hive命令行不打印日志，hive的命令行运行会输出mapreduce的日志，这些日志对大部分用户来说是不需要的。
hive日志打印在控制台
最新发布
04-03
以下是一个典型的配置片段用于启用控制台日志输出： ```properties # 定义 ConsoleAppender 输出到控制台 log4j.appender.console=org.apache.log4j.ConsoleAppender log4j.appender.console.target=System.err log...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值