去掉spark中打印的INFO信息

墨衍会员 · AI 创作全网分发 墨衍智能分发 本文由作者通过墨衍一键同步至各平台 1分发平台 1.6k累计阅读 1.6k平均单平台已同步平台优快云微信公众号微博知乎掘金百家号博客园抖音小红书 你的文章也可以这样分发 墨衍会员 ¥399起/年，写一次发全网我也要 → 码龄8年

关注

原创最新推荐文章于 2026-03-04 00:16:41 发布 1.6k 阅读 AI 写同款· GEO 优化 ›

完美解决编写IDEA在Local模式下maven Spark程序消除日志中INFO输出运行spark程序时，由于使用的时spark-core下的log4j-default.properties配置文件，log4j会将INFO级别的信息全部输出到控制台要消除这些INFO信息，只需要找到log4j-default.properties文件，将其复制一份到项目的src目录下，将第一行的log4j.rootCategory=INFO, console改成log4j.rootCatego... 阅读详情

将spark安装包中一个文件复制到项目的main/resources目录下，将名称改为log4j.properties
如下所示：
在这里插入图片描述

打开该文件，将第一行中的INFO改为ERROR

以后运行spark程序将不会有info信息打印了

收录于

错误（发现及解决）

当前文章被收录于：

错误（发现及解决）

19 篇文章 0 人学习

工作及学习中发现的错误及解决方法。

订阅专栏查看详情

当前文章被以下社区和专栏收录：

spark编程09——设置spark-submit提交程序时不在控制台打印日志信息+nohup 命令在用spark-submit提交程序时，会打印很多类似图片所示的日志信息，它们会把想要的结果给淹没，所以要想法去除控制台的日志信息。解决办法：程序中设置日志级别，然后将运行结果保存在nohup.out文件中 //程序中导入 import org.apache.log4j.{Level, Logger} //下面两行代码放在main函数里 Logger.getLogger("org.apache.spark").setLevel(Level.WARN) Logger.getLogge.. 阅读详情

相关推荐

（南京观海微电子）——GH700X调试指南--SPI 接口+LVDS-测试盒使用方法

1表示OTP完成后，读取烧录值是否一致来判断是否烧录成功，2表示同时检测VCOM是否一致以及烧录次数是否增加，3表示不做任何检测，由用于自行在程序中判断。[格式]：SetFindVcomEn (<开启或关闭>)，ON表示开启VCOM搜寻，默认是开启的，只要使能OTP烧录，按OTP按键则进行VCOM查询；[功能]：OTP完成检测类别，用于设置OTP完成后检测OTP次数还是OTP值来判断OTP是否成功。[功能]：用于设置VCOM查询使能，比如需要烧全代码而不需要对VCOM查询时，可以禁止VCOM查询。

m0_75095200的博客 1664

Spark-shell中停止打印INFO日志

Spark-shell中停止打印INFO日志spark设置info不显示 spark设置info不显示 spark-shell在运行时常常输出一堆红色文字日志，影响代码体验，那么如何设置使得info不输出呢？可在代码中如下设置(亲测有效)： ...

l491899327的博客 630

ADC电路项目1——10bit SAR ADC 设计，smic18工艺，有工艺库，有效位数ENOB为9.8

包括详细仿真文档，原理介绍，完整电路图，仿真参数已设好，可直接使用，在自己的电脑上就可以运行仿真。本设计采用 smic18mmrf CMOS 工艺，使用栅压自举电路的采样开关，Vcm-based 开关。电容开关控制电路，10 位 DFF，最后用 10 位理想 DAC 模块将数字码转换为 10 进制量进。时序上级板采样的 DAC 电容阵列，两级动态比较器，比较器异步时钟，SAR 动态逻辑，DAC。10bit SAR ADC 设计，smic18工艺，有工艺库，有效位数ENOB为9.8。

qq_48407979的博客 814

[转]Spark如何设置不打印INFO日志

方法1：在配置文件中修改 cd $SPARK_HOME/conf ## 查看是否存在 log4j.properties ## 如果没有，则 cp log4j.properties.template log4j.properties vi log4j.properties ##然后，修改下面的这一个行： log4j.rootCategory=INFO, console ##改成： log4j.rootCategory=WARN, console 或者(按个人需求) log4j.rootCateg

Buevara的博客 7105

OpenCV视频防抖算法实现与优化指南

本文详细解析了如何使用OpenCV实现视频防抖算法。通过特征点检测与光流跟踪估算帧间运动，利用滑动平均平滑运动轨迹，并应用仿射变换重塑视频帧。文章提供了完整的代码实现、参数调优指南及黑边处理等优化技巧，帮助开发者高效处理手持拍摄等场景下的视频抖动问题。

weixin_29062823的博客 339

【ZZULIOJ】郑州轻工业大学oj题解整合

写在前面关于ZZULIOJ题解学习编程，想要巩固无非就是刷题或者做项目，然后因为我大一开始是刷郑轻的题目，就想着自己整合一下自己写的题目。既是复习也是笔记吧。题解（内有题目描述） 1000 整数a+b 1001 植树问题 1002 简单多项式求值 1003 两个整数的四则运算 1004 三位数的数位分离 1005 整数幂 1006 求等差数列的和 1007 鸡兔同笼 1008 美元和人民币 1009 求平均分 1010 求圆的周长和面积 1011 圆柱体表面积 1012 求绝对值 1013 求两点间

蒟蒻乱写的博客 29万+

去除在终端中运行spark打印的INFO信息

本人的spark版本是spark-3.3.1-bin-hadoop3的，不同版本的文件名称跟文件内容可能不一样，需要随机应变。

m0_70673163的博客 1558

光模块数字诊断监控（DDM）功能

DDM（Digital Diagnostic Monitoring）数字诊断监控，由行业组织SFF Committee制定，遵循SFF-8472多源协议定义的标准参数而工作，规范了光模块和网络设备的软硬件所需遵循的标准数值或范围，确保了网络设备供应商和光模块供应商之间所提供产品的互操作性不同。：通过监测激光器的偏置电流来预测激光器的劣化,从而确保在故障发生之前将业务切换到备用链路上或替换有可能故障的光模块，因此起到了预测光模块寿命的作用。光模块DDM信息可以通过SNMP读取光模块的接收光功率和发射光功率。.

光模块的博客 2299

Spark控制台不打印INFO，只输出结果

我们知道这是日志信息，既然是日志很多人立马就会想到log4j.properties配置文件，肯定不陌生，因此我们可以在项目的src/main/resources目录下新建这一个log4j.properties文件，然后复制如下的配置代码，然后重新运行，日志信息便不出来了。把=号后面的INFO删除，就可以了。当你想要看到日志信息的时候，再把INFO加上，就恢复了日志的打印。有的人就很不喜欢，就想仅仅看到一个输出的结果，怎末做呢？......

weixin_44328257的博客 3500

hpm6750evk2开发板（一）菜鸟入门

hpm6750与我们平时常用的stm单片机在开发环境和开发方法上有很大的区别，所以上手还是需要花一点时间的，拿到板子先不要急着上电调试，我们先找资料学习一下了，免得多走冤枉路，以下是我整理的一些学习资源，包括开发板使用手册、芯片SDK、开发工具、视频资料等，建议先把使用手册和学习视频先看了，再取搭建环境测试。最近刚入手一块hpm6750evk2开发板，花了几天时间学习，算是菜鸟入门了，今天分享一下学习过程。看完资料后，把开发工具安装上，下一篇文章我们分享一下调试工程的过程和遇到的问题。

Silas1750的博客 3083

基于Simulink开发一个完整的直驱式永磁同步发电机DDPMSG仿真模型

需求分析直驱式永磁同步发电机（Direct-Drive Permanent Magnet Synchronous Generator, DDPMSG）广泛应用于风力发电、海洋能发电等可再生能源领域。与传统的齿轮箱驱动系统相比，DDPMSG具有结构简单、效率高、可靠性好等优点，能够直接将机械能转换为电能，减少了中间传动环节，降低了维护成本。本项目将基于Simulink平台，开发一个完整的DDPMSG仿真模型，模拟其在风力发电场景中的应用。我们将详细讲解如何设计和实现该系统，并结合实际应用案例进行说明。

MHD0815的博客 465

如何屏蔽掉Spark程序中INFO信息--------特好用！！！！！！！

把spark安装包里的conf文件夹里的log4j.properties.templat拷贝到项目scr主目录main下的resources里面然后把log4j.properties.templat 改名为log4j.properties 最后修改里面的内容：将第一行的log4j.rootCategory=INFO, console改成log4j.rootCategory=ERR...

liangsir 5788

VB摄像头监控

该VB模块可对摄像头捕获的画面进行录像等，可在创建的窗口进行控制

使用idea调试spark信息时，设置不打印INFO信息

1、首先将spark根目录下中的conf目录里的log4j.properties.template文件拷贝到IDEA项目中的src\main\resources目录下并改名为log4j.properties，如下图所示： 2、然后在将文件中的log4j.rootCategory=INFO, console修改为log4j.rootCategory=ERROR, console即可，如下图所示...

sxj的专栏 3676

华为的C语言编程规范.pdf

华为技术有限公司内部技术规范。本规范制定了编写C语言程序的基本原则、规则和建议。从代码的清晰、简洁、可测试、安全、程序效率、可移植各个方面对C语言编程作出了具体指导。

精雕软件(JDpaint) 5.5 绿色版

精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版

如何在Spark-shell中停止打印INFO日志

前言在使用Spark-shell做一些测试时候会产生大量无用的INFO级别的日志，因此想把它们给禁用掉。具体方法如下。解决方法 - 使用自定义的Log4j.properties log4j.rootLogger=ERROR, console # set the log level for these components log4j.logger.com.test=DEBUG lo...

abc33880238的博客 504

IEM模型，地表粗糙度模拟

利用微波反演土壤水分时候，利用IEM模型可以实现对随机地表的模拟

spark代码中添加logger_如何在Spark中关闭INFO日志记录？

我使用AWS EC2指南安装了Spark，并且可以使用bin/pyspark脚本很好地启动该程序以到达Spark 提示，并且还可以成功执行快速入门Quide。但是，我无法终生解决如何INFO在每个命令后停止所有冗长的日志记录。我在下面的代码(注释掉，设置为OFF)中的几乎所有可能的情况下都尝试了该log4j.properties文件，该conf文件位于我从中以及在每个节点上启动应用程序的文件夹中，...

weixin_42507297的博客 491

解决spark运行时控制台打印冗杂的INFO（屏蔽掉无用的INFO）

今天在spark和hive整合完后启动SparkSql的时候控制台打印出了好多冗余的信息看起来特别不爽就一个 show databases；却打印出来这么多信息，让我着实不大容易找到我想要的信息呀解决方案：1. 进入$SPARK_HOME/conf目录下，拷贝一个log4j.properties.template，命名为log4j.properties 修改成功后打印 show...

qq_40068214的博客 4864

IntelliJ IDEA在Local模式下Spark程序消除日志中INFO输出

在使用Intellij IDEA，local模式下运行Spark程序时，会在Run窗口打印出很多INFO信息，辅助信息太多可能会将有用的信息掩盖掉。如下所示　　　　要解决这个问题，主要是要正确设置好log4j文件，本文主要分析如何在local模式下，将Spark的INFO信息隐藏，不影响程序中的结果输出。1、将spark根目录下的log4j.properties文件复制到Intellij IDE

dabokele的博客 1万+

修改Spark-shell日志打印级别并使用Spark-shell和Spark-submit提交Sparkstream程序

1. 修改Spark-shell日志打印级别如果觉得 shell 中输出的日志信息过多而使人分心，可以调整日志的级别来控制输出的信息量。你需要在 conf 目录下创建一个名为 log4j.properties 的文件来管理日志设置。Spark开发者们已经在 Spark 中加入了一个日志设置文件的模版，叫作 log4j.properties.template。要让日志看起来不那么啰嗦，可以先把这...

zhaoguowei的博客 1893

【spark】idea编程中隐藏info信息

title：【spark】idea编程中隐藏info信息 Windows下面使用Intellij IDEA编程，打印的[INFO]信息很多。不想看太多INFO，可以提高日志级别为WARN或者ERROR。在src/main下面新建resources文件夹，并在resources文件夹上面点右键 - Make Directory As - Resource Root 拷贝spark的conf目录下...

weixin_44768806的博客 535

intellij IDEA隐藏INFO日志信息，只显示ERROR

intellij IDEA有很多[INFO]信息有时候很烦，看不到想要的输出，一般情况下，只显示ERROR信息就可以了。1，在源码src下面新建文件夹resources，2，右击resources文件夹Mark Directory as 选中Resources Root3，将spark源码conf目录下的log4j.properties文件复制到 src/resources文件夹下（如果有同学不想...

Learning by doing 2万+

SPARK 日志输出关键信息

来自https://www.cnblogs.com/liugh/p/6909531.html 使用spark-submit提交local任务时，会输出很多Info信息： ------------------------------------------- Time: 1495788633000 ms ----------------------------------------

songhao的专栏 3338

JAVA代码如何设置SPARK的日志打印级别

问题场景：在使用spark sql 增加where条件过滤时，会出现打印很多的被过滤掉的记录（几十万条），导致跑spark sql 特别慢！ var df2 = sqc.sql("SELECT * FROM T_COMMISIONRATEDEF WHERE T_INSURANCETYPE = '630' ORDER BY T_INSURANCETYPE DESC " ) 执行时，打印截

wumiqing1的博客 3141

spark打印日志在哪看

程序运行相关学习资料：如何在命令行存文件Spark打印日志在哪看 Apache Spark是一个开源的分布式计算系统，它提供了一个快速、通用、可扩展的大数据处理平台。在开发和调试Spark应用程序时，查看日志信息是非常重要的。本文将介绍如何在Spark应用程序中查看打印的日志。日志级别首先，我们需要了解日志级别。Sp...

weixin_34305091的博客 244

Spark设置日志打印级别

spark中提供了log4j的方式记录日志。可以在$SPARK_HOME/conf/下，将 log4j.properties.template 文件copy为 log4j.properties 来启用log4j配置。但这个配置为全局配置，不能单独配置某个job的运行日志。Spark-core包设置默认的日志级别为info。此时，在控制台调试spark程序就没有了INFO信息。一、修改Spark-core包默认的日志级别。

Wolves_howl的博客 1751

简略Spark输出

http://blog.jobbole.com/86232/Spark（和PySpark）的执行可以特别详细，很多INFO日志消息都会打印到屏幕。开发过程中，这些非常恼人，因为可能丢失Python栈跟踪或者print的输出。为了减少Spark输出 – 你可以设置SPARKHOME/conf下的log4j。首先，拷贝一份SPARK_HOME/conf下的log4j。首先，拷贝一份SPARK_HOME/

陈陈的专栏 1991

上一篇：解决spark的Jackson版本和jboss自带Jackson版本冲突问题

下一篇： Could not locate executable null\bin\winutils.exe in the Hadoop binaries.

（南京观海微电子）——GH700X调试指南--SPI 接口+LVDS-测试盒使用方法

m0_75095200的博客

01-12

1664