Log4j学习

在强调可重用组件开发的今天,除了自己从头到尾开发一个可重用的日志操作类外,Apache为我们提供了一个强有力的日志操作包-Log4j。
  官方站点:http://logging.apache.org/log4j/
  Log4j是Apache的一个开放源代码项目,通过使用Log4j,我们可以控制日志信息输送的目的地是控制台、文件、GUI组件、甚至是套接口服务器、NT的事件记录器、UNIX Syslog守护进程等;我们也可以控制每一条日志的输出格式;通过定义每一条日志信息的级别,我们能够更加细致地控制日志的生成过程。最令人感兴趣的就是,这些可以通过一个配置文件来灵活地进行配置,而不需要修改应用的代码。
  此外,通过Log4j其他语言接口,您可以在C、C++、.Net、PL/SQL程序中使用 Log4j,其语法和用法与在Java程序中一样,使得多语言分布式系统得到一个统一一致的日志组件模块。而且,通过使用各种第三方扩展,您可以很方便地将Log4j集成到J2EE、JINI甚至是SNMP应用中。
  说明:下面分为三部分,
  第一部分讲解如何配置log4j;
  第二部分为对log4j.properties配置文件中的各个属性的讲解;
  第三部分为对log4j的详细讲解。
  如果只想配置上log4j,那么只需要看前两个部分就可以,如果想对log4j深入了解,则还需看第三部分。
  一、Log4j配置
  第一步:加入log4j-1.2.8.jar到lib下。
  第二步:在CLASSPATH下建立log4j.properties。内容如下:
  1 log4j.rootCategory=INFO, stdout , R
  2
  3 log4j.appender.stdout=org.apache.log4j.ConsoleAppender
  4 log4j.appender.stdout.layout=org.apache.log4j.PatternLayout
  5 log4j.appender.stdout.layout.ConversionPattern=[QC] %p [%t] %C.%M(%L) | %m%n
  6
  7 log4j.appender.R=org.apache.log4j.DailyRollingFileAppender
  8 log4j.appender.R.File=D:\\Tomcat 5.5\\logs\\qc.log
  9 log4j.appender.R.layout=org.apache.log4j.PatternLayout
  10 log4j.appender.R.layout.ConversionPattern=%d-[TS] %p %t %c - %m%n
  11
  12 log4j.logger.com.neusoft=DEBUG
  13 log4j.logger.com.opensymphony.oscache=ERROR
  14 log4j.logger.net.sf.navigator=ERROR
  15 log4j.logger.org.apache.commons=ERROR
  16 log4j.logger.org.apache.struts=WARN
  17 log4j.logger.org.displaytag=ERROR
  18 log4j.logger.org.springframework=DEBUG
  19 log4j.logger.com.ibatis.db=WARN
  20 log4j.logger.org.apache.velocity=FATAL
  21
  22 log4j.logger.com.canoo.webtest=WARN
  23
  24 log4j.logger.org.hibernate.ps.PreparedStatementCache=WARN
  25 log4j.logger.org.hibernate=DEBUG
  26 log4j.logger.org.logicalcobwebs=WARN
  第三步:相应的修改其中属性,修改之前就必须知道这些都是干什么的,在第二部分讲解。
  第四步:在要输出日志的类中加入相关语句:
  定义属性:protected final Log log = LogFactory.getLog(getClass());
  在相应的方法中:
  if (log.isDebugEnabled()){
  log.debug(“System …..”);
  }
  二、Log4j说明
  1 log4j.rootCategory=INFO, stdout , R
  此句为将等级为INFO的日志信息输出到stdout和R这两个目的地,stdout和R的定义在下面的代码,可以任意起名。等级可分为OFF、FATAL、ERROR、WARN、INFO、DEBUG、ALL,如果配置OFF则不打出任何信息,如果配置为INFO这样只显示INFO, WARN, ERROR的log信息,而DEBUG信息不会被显示,具体讲解可参照第三部分定义配置文件中的logger。
  3 log4j.appender.stdout=org.apache.log4j.ConsoleAppender
  此句为定义名为stdout的输出端是哪种类型,可以是
  org.apache.log4j.ConsoleAppender(控制台),
  org.apache.log4j.FileAppender(文件),
  org.apache.log4j.DailyRollingFileAppender(每天产生一个日志文件),
  org.apache.log4j.RollingFileAppender(文件大小到达指定尺寸的时候产生一个新的文件)
  org.apache.log4j.WriterAppender(将日志信息以流格式发送到任意指定的地方)
  具体讲解可参照第三部分定义配置文件中的Appender。
   4 log4j.appender.stdout.layout=org.apache.log4j.PatternLayout
  此句为定义名为stdout的输出端的layout是哪种类型,可以是
  org.apache.log4j.HTMLLayout(以HTML表格形式布局),
  org.apache.log4j.PatternLayout(可以灵活地指定布局模式),
  org.apache.log4j.SimpleLayout(包含日志信息的级别和信息字符串),
  org.apache.log4j.TTCCLayout(包含日志产生的时间、线程、类别等等信息)
  具体讲解可参照第三部分定义配置文件中的Layout。
  5 log4j.appender.stdout.layout.ConversionPattern= [QC] %p [%t] %C.%M(%L) | %m%n
  如果使用pattern布局就要指定的打印信息的具体格式ConversionPattern,打印参数如下:
  %m 输出代码中指定的消息
  %p 输出优先级,即DEBUG,INFO,WARN,ERROR,FATAL
  %r 输出自应用启动到输出该log信息耗费的毫秒数
  %c 输出所属的类目,通常就是所在类的全名
  %t 输出产生该日志事件的线程名
  %n 输出一个回车换行符,Windows平台为“rn”,Unix平台为“n”
  %d 输出日志时间点的日期或时间,默认格式为ISO8601,也可以在其后指定格式,比如:%d{yyyy MMM dd HH:mm:ss,SSS},输出类似:2002年10月18日 22:10:28,921
  %l 输出日志事件的发生位置,包括类目名、发生的线程,以及在代码中的行数。
  [QC]是log信息的开头,可以为任意字符,一般为项目简称。
  输出的信息
  [TS] DEBUG [main] AbstractBeanFactory.getBean(189) | Returning cached instance of singleton bean 'MyAutoProxy'
  具体讲解可参照第三部分定义配置文件中的格式化日志信息。
  7 log4j.appender.R=org.apache.log4j.DailyRollingFileAppender
  此句与第3行一样。定义名为R的输出端的类型为每天产生一个日志文件。
  8 log4j.appender.R.File=D:\\Tomcat 5.5\\logs\\qc.log
  此句为定义名为R的输出端的文件名为D:\\Tomcat 5.5\\logs\\qc.log可以自行修改。
  9 log4j.appender.R.layout=org.apache.log4j.PatternLayout
  与第4行相同。
  10 log4j.appender.R.layout.ConversionPattern=%d-[TS] %p %t %c - %m%n
  与第5行相同。
  12 log4j.logger.com. neusoft =DEBUG
  指定com.neusoft包下的所有类的等级为DEBUG。
  可以把com.neusoft改为自己项目所用的包名。
  13 log4j.logger.com.opensymphony.oscache=ERROR
  14 log4j.logger.net.sf.navigator=ERROR
  这两句是把这两个包下出现的错误的等级设为ERROR,如果项目中没有配置EHCache,则不需要这两句。
  15 log4j.logger.org.apache.commons=ERROR
  16 log4j.logger.org.apache.struts=WARN
  这两句是struts的包。
  17 log4j.logger.org.displaytag=ERROR
  这句是displaytag的包。(QC问题列表页面所用)
  18 log4j.logger.org.springframework=DEBUG
  此句为Spring的包。
  24 log4j.logger.org.hibernate.ps.PreparedStatementCache=WARN
  25 log4j.logger.org.hibernate=DEBUG
  此两句是hibernate的包。
  以上这些包的设置可根据项目的实际情况而自行定制。
  三、log4j详解
  1、定义配置文件
  Log4j支持两种配置文件格式,一种是XML格式的文件,一种是Java特性文件log4j.properties(键=值)。下面将介绍使用log4j.properties文件作为配置文件的方法:
  ①、配置根Logger
  Logger 负责处理日志记录的大部分操作。
  其语法为:
  log4j.rootLogger = [ level ] , appenderName, appenderName, …
  其中,level 是日志记录的优先级,分为OFF、FATAL、ERROR、WARN、INFO、DEBUG、ALL或者自定义的级别。Log4j建议只使用四个级别,优先级从高到低分别是ERROR、WARN、INFO、DEBUG。通过在这里定义的级别,您可以控制到应用程序中相应级别的日志信息的开关。比如在这里定义了INFO级别,只有等于及高于这个级别的才进行处理,则应用程序中所有DEBUG级别的日志信息将不被打印出来。ALL:打印所有的日志,OFF:关闭所有的日志输出。 appenderName就是指定日志信息输出到哪个地方。可同时指定多个输出目的地。
  ②、配置日志信息输出目的地 Appender
  Appender 负责控制日志记录操作的输出。
  其语法为:
  log4j.appender.appenderName = fully.qualified.name.of.appender.class
  log4j.appender.appenderName.option1 = value1
  …
  log4j.appender.appenderName.optionN = valueN
  这里的appenderName为在①里定义的,可任意起名。
  其中,Log4j提供的appender有以下几种:
  org.apache.log4j.ConsoleAppender(控制台),
  org.apache.log4j.FileAppender(文件),
  org.apache.log4j.DailyRollingFileAppender(每天产生一个日志文件),
  org.apache.log4j.RollingFileAppender(文件大小到达指定尺寸的时候产生一个新的文件),可通过log4j.appender.R.MaxFileSize=100KB设置文件大小,还可通过 log4j.appender.R.MaxBackupIndex=1设置为保存一个备份文件。
  org.apache.log4j.WriterAppender(将日志信息以流格式发送到任意指定的地方)
  例如:log4j.appender.stdout=org.apache.log4j.ConsoleAppender
  定义一个名为stdout的输出目的地,ConsoleAppender为控制台。
  ③、配置日志信息的格式(布局)Layout
  Layout 负责格式化Appender的输出。
  其语法为:
  log4j.appender.appenderName.layout = fully.qualified.name.of.layout.class
  log4j.appender.appenderName.layout.option1 = value1
  …
  log4j.appender.appenderName.layout.optionN = valueN
  其中,Log4j提供的layout有以下几种:
  org.apache.log4j.HTMLLayout(以HTML表格形式布局),
  org.apache.log4j.PatternLayout(可以灵活地指定布局模式),
  org.apache.log4j.SimpleLayout(包含日志信息的级别和信息字符串),
  org.apache.log4j.TTCCLayout(包含日志产生的时间、线程、类别等等信息)
  2、格式化日志信息
  Log4J采用类似C语言中的printf函数的打印格式格式化日志信息,打印参数如下:
  %m 输出代码中指定的消息
  %p 输出优先级,即DEBUG,INFO,WARN,ERROR,FATAL
  %r 输出自应用启动到输出该log信息耗费的毫秒数
  %c 输出所属的类目,通常就是所在类的全名
  %t 输出产生该日志事件的线程名
  %n 输出一个回车换行符,Windows平台为“rn”,Unix平台为“n”
  %d 输出日志时间点的日期或时间,默认格式为ISO8601,也可以在其后指定格式,比如:%d{yyyy MMM dd HH:mm:ss,SSS},输出类似:2002年10月18日 22:10:28,921
  %l 输出日志事件的发生位置,包括类目名、发生的线程,以及在代码中的行数。
  3、在代码中使用Log4j
  我们在需要输出日志信息的类中做如下的三个工作:
  1、导入所有需的commongs-logging类:
  import org.apache.commons.logging.Log;
  import org.apache.commons.logging.LogFactory;
  2、在自己的类中定义一个org.apache.commons.logging.Log类的私有静态类成员:
  private final Log log = LogFactory.getLog(getClass());
  LogFactory.getLog()方法的参数使用的是当前类的class。
  3、使用org.apache.commons.logging.Log类的成员方法输出日志信息:
  if (log.isDebugEnabled()){
  log.debug("111");
  }
  if (log.isInfoEnabled()){
  log.info("222");
  }
  if (log.isWarnEnabled()){
  log.warn("333");
  }
  if (log.isErrorEnabled()){
  log.error("444");
  }
  if (log.isFatalEnabled()){
  log.fatal("555")
  }
  2.3 如何应用记录器的层次
  2.3.1 如果定义及获取不同层次的记录器
  任何一个记录器的使用都有两个步骤:
  1) 在配置文件中定义相应的记录器。
  在配置文件中定义记录器的格式有两种
  ? 定义根记录器的格式为
  log4j.rootLogger = [ level ], appendName1, appendName2, …appendNameN
  ? 定义一个非根记录器的格式为
  log4j.logger.loggerName1 = [ level ], appendName1,…appendNameN
  ……
  log4j.logger.loggerNameM = [ level ], appendName1, …appendNameN
  我们可以定义任意个非根记录器。
  2) 在代码中调用Logger类的取得记录器方法取得相应的记录器对象。
  要取得根记录器对象可通过Logger.getRootLogger()函数,要取得非根记录器可通过Logger.getLogger()函数。
  理论知道就讲到这里,纸上得来终觉浅,下面,我们来小小演练一下。
  例4-a:
  package TestLog4j;
  import org.apache.log4j.Logger;
  import org.apache.log4j.PropertyConfigurator;
  import org.apache.log4j.Priority;
  import TestLog4j.TestLog4j2.TestLog4j2;
  public class TestLog4j
  {
  static Logger logger = Logger.getLogger(TestLog4j.class.getName()); //(2)
  public TestLog4j(){}
  public static void main(String[] args)
  {
  //同时输出到控制台和一个文件的实例并实现了Logger的继承
  PropertyConfigurator.configure("F:\\nepalon\\log4j2.properties");
  logger.debug("Start of the main() in TestLog4j");
  logger.info("Just testing a log message with priority set to INFO");
  logger.warn("Just testing a log message with priority set to WARN");
  logger.error("Just testing a log message with priority set to ERROR");
  logger.fatal("Just testing a log message with priority set to FATAL");
  logger.log(Priority.WARN, "Testing a log message use a alternate form");
  logger.debug(TestLog4j.class.getName());
  TestLog4j2 testLog4j2 = new TestLog4j2(); //(1)
  testLog4j2.testLog();
  }
  }
  在类TestLog4j中我们调用了另一个类TestLog4j2,下面看一下类TestLog4j2的代码。
  例4-b:
  package TestLog4j.TestLog4j2;
  import org.apache.log4j.Logger;
  import org.apache.log4j.PropertyConfigurator;
  import org.apache.log4j.Priority;
  public class TestLog4j2
  {
  static Logger logger = Logger.getLogger(TestLog4j2.class.getName()); //(1)
  public TestLog4j2(){}
  public void testLog()
  {
  //同时输出到控制台和一个文件的实例
  PropertyConfigurator.configure("F:\\nepalon\\log4j2.properties");
  logger.debug("2Start of the main()");
  logger.info("2Just testing a log message with priority set to INFO");
  logger.warn("2Just testing a log message with priority set to WARN");
  logger.error("2Just testing a log message with priority set to ERROR");
  logger.fatal("2Just testing a log message with priority set to FATAL");
  logger.log(Priority.DEBUG, "Testing a log message use a alternate form");
  logger.debug("2End of the main()");
  }
  }
  最后我们来看一下配置文件。
  例4-c:
  log4j2.properties文件内容
  #1区
  #### Use two appenders, one to log to console, another to log to a file
  log4j.rootLogger = debug, stdout
  #2区
  #Print only messages of priority WARN or higher for your category
  log4j.logger.TestLog4j= , R
  log4j.logger.TestLog4j.TestLog4j2=WARN
  #3区
  #### First appender writes to console
  log4j.appender.stdout=org.apache.log4j.ConsoleAppender
  log4j.appender.stdout.layout=org.apache.log4j.PatternLayout
  # Pattern to output the caller's file name and line number.
  log4j.appender.stdout.layout.ConversionPattern=%5p [%t] (%F:%L) - %m%n
  #4区
  #### Second appender writes to a file
  log4j.appender.R=org.apache.log4j.RollingFileAppender
  log4j.appender.R.File=F:\\nepalon\\classes\\TestLog4j\\example.log
  # Control the maximum log file size
  log4j.appender.R.MaxFileSize=100KB
  # Archive log files (one backup file here)
  log4j.appender.R.MaxBackupIndex=1
  log4j.appender.R.layout=org.apache.log4j.PatternLayout
  log4j.appender.R.layout.ConversionPattern=%d{yyyy-MM-dd hh:mm:ss}:%p %t %c - %m%n
  先看一下运行结果。
  在控制台中的结果为:
  DEBUG [main] (?:?) - Start of the main() in TestLog4j
  INFO [main] (?:?) - Just testing a log message with priority set to INFO
  WARN [main] (?:?) - Just testing a log message with priority set to WARN
  ERROR [main] (?:?) - Just testing a log message with priority set to ERROR
  FATAL [main] (?:?) - Just testing a log message with priority set to FATAL
  WARN [main] (?:?) - Testing a log message use a alternate form
  DEBUG [main] (?:?) - TestLog4j.TestLog4j
  WARN [main] (?:?) - 2Just testing a log message with priority set to WARN
  ERROR [main] (?:?) - 2Just testing a log message with priority set to ERROR
  FATAL [main] (?:?) - 2Just testing a log message with priority set to FATAL
  输出文件的结果为:
  2003-12-19 04:19:44:DEBUG main TestLog4j.TestLog4j - Start of the main() in TestLog4j
  2003-12-19 04:19:44:INFO main TestLog4j.TestLog4j - Just testing a log message with priority set to INFO
  2003-12-19 04:19:44:WARN main TestLog4j.TestLog4j - Just testing a log message with priority set to WARN
  2003-12-19 04:19:44:ERROR main TestLog4j.TestLog4j - Just testing a log message with priority set to ERROR
  2003-12-19 04:19:44:FATAL main TestLog4j.TestLog4j - Just testing a log message with priority set to FATAL
  2003-12-19 04:19:44:WARN main TestLog4j.TestLog4j - Testing a log message use a alternate form
  2003-12-19 04:19:44:DEBUG main TestLog4j.TestLog4j - TestLog4j.TestLog4j
  2003-12-19 04:19:44:WARN main TestLog4j.TestLog4j2.TestLog4j2 - 2Just testing a log message with priority set to WARN
  2003-12-19 04:19:44:ERROR main TestLog4j.TestLog4j2.TestLog4j2 - 2Just testing a log message with priority set to ERROR
  2003-12-19 04:19:44:FATAL main TestLog4j.TestLog4j2.TestLog4j2 - 2Just testing a log message with priority set to FATAL
  首先,先来看一下配置文件都有些什么东西。
  1) 在1区中定义了一个根记录器。这个根记录器具有DEBUG级别并有一个名称为stdout的输出端appender。
  2) 2区中的内容是这一节的重点,也是应用到记录器层次的地方,但其实也只有两句,充分体现了log4j的简单性。在这里,我们定义了两个名称分别为TestLog4j和TestLog4j.TestLog4j2设计器。
  ? 在定义TestLog4j记录器时没有指定级别,所以它的级别继承自它的父记录器,即要记录器,所以它的级别也为DEBUG。在定义TestLog4j记录器时又定义了一个名称为R的输出端,所以它的输出端有两个,一个从根记录器继承而来的名为stdout的输出端,另一个为在此定义的名为R的输出端。在此需要注意的是,在定义记录器时必须先定义记录器的级别,然后才是记录器的输出端。如果只想定义输出端而不定义级别,则虽然级别可以为空,但逗号分隔符不能省略。如定义TestLog4j记录器的做法。
  ? 在定义TestLog4j.TestLog4j2记录器时又指定了它的级别,由于一个记录器的级别只能有一个,所以新指定的级别将覆写掉它的父记录器的级别(这就象Java中的多态)。我们没有定义TestLog4j.TestLog4j2记录器的输出端,所以它的输出端将从它的父记录器中继承而来。它的父记录器为estLog4j记录器,所以它和estLog4j记录器一样具有两个名称分别为 stdout和R的输出端。
  3) 剩下的3区和4区分别设置了两个输出端的参数值。
  接下来,回到我们的代码,看一下是如何取得记录器,在取记录器时又发生了什么。
  1) 例4-a中的代码(2)中,语句Logger.getLogger()中的参数TestLog4j.class.getName()的值为 TestLog4j. TestLog4j,所以此语句的结果是取得一个名为TestLog4j. TestLog4j的记录器的对象。但在配置文件中并没有定义这样的记录器,所以最终将返回与所需的名称TestLog4j. TestLog4j最接近的记录器对象,即名为TestLog4j的记录器的对象。
  2) 例4-b中的代码(1)的原理与例4-a中的代码(2)相似,期望取得的是名为TestLog4j.TestLog4j2. TestLog4j2的记录器对象,但最终返回的是TestLog4j.TestLog4j2记录器的对象。
  三 log4j与J2EE的结合
  到目前为止,这篇文章讲的都是如何在application中应用log4j,而Java现在的应用主流是J2EE和J2ME。现在,我们来看一下要如何在 J2EE开发中应用log4j。其实在Web application中应用log4j也很简单,与在application中应用log4j不同之处就是要在所有应用log4j的代码之前对 log4j进行初始化。所以,我们在web application中就要把log4j的初始化工作独立出来,把它放在Servlet中。下面,我们看一个例子。
  例5-a:
  进行初始化的Servlet:
  import org.apache.log4j.PropertyConfigurator;
  import javax.servlet.http.HttpServlet;
  import javax.servlet.http.HttpServletRequest;
  import javax.servlet.http.HttpServletResponse;
  /**
  * log4j.jar的初始化类,参考web.xml
  */
  public class Log4jInit extends HttpServlet
  {
  public void init()
  {
  //通过web.xml来动态取得配置文件
  String prefix = getServletContext().getRealPath("/");
  String file = getInitParameter("log4j-init-file");
  // 如果没有给出相应的配置文件,则不进行初始化
  if(file != null)
  {
  PropertyConfigurator.configure(prefix+file); //(1)
  }
  }
  public void doGet(HttpServletRequest req, HttpServletResponse res)
  {}
  }
  下面来看一下这个Servlet在web.xml中的定义。
  例5-b:
  <servlet>
  <servlet-name>log4j-init</servlet-name>
  <servlet-class>TestLog4j.Log4jInit</servlet-class>
  <init-param>
  <param-name>log4j-init-file</param-name>
  <param-value>sort.properties</param-value>
  </init-param>
  <load-on-startup>1</load-on-startup>
  </servlet>
  因为log4j的初始化要在所有的log4j调用之前完成,所以在web.xml文件中,我们一定要把对应的Servlet定义的load-on-startup应设为1,以便在Web容器启动时即装入该Servlet。
  完成了这两个步骤这后,我们就可以象在application开发中一样在web application任何地方应用log4j了。下面是在javabean中的应用的一个例子。
  例5-c:
  import org.apache.log4j.Logger;
  public class InfoForm
  {
  static Logger logger = Logger.getLogger(InfoForm.class);
  protected String title;
  protected String content;
  public InfoForm() {}
  public void setTitle(Object value)
  {
  logger.debug("nepalon:title = " + title);
  title = value;
  }
  public String getTitle()
  {
  logger.debug("nepalon:title = " + title);
  return title;
  }
  public void setContent(String value)
  {
  content = value;
  logger.debug("nepalon: content() = " + content);
  }
  public String getContent()
  {
  logger.debug("nepalon: content = \n" + content);
  return content;
  }
  }

语音识别:PyAudio、SoundDevice、Vosk、openai-whisper、Argos-Translate、FunASR(Python) 本文介绍了Python中常用的音频处理库PyAudio,详细解析了其核心功能、核心概念和典型工作流程。PyAudio是一个跨平台的音频I/O库,支持音频录制、播放、实时流处理和低延迟操作。核心概念包括PyAudio类(管理音频设备和流)和Stream类(代表音频流)。文章重点讲解了open()方法的关键参数、回调函数的使用方式以及典型的工作流程,包括设备查询、流配置和资源释放。PyAudio适用于需要实时音频处理的场景,如语音识别和音频效果处理。 阅读详情

相关推荐

关于三维全波电磁场仿真软件CST的安装和问题解决

百度网盘链接:https://pan.baidu.com/s/1RgWr8Qau1EzSOlh29SewFQ提取码:fzza这里是2023版本的CST,需要其他版本的uu们可以去官网或者其他人的网盘下载。

weixin_60728441的博客 3611

log4j学习总结

  log4j学习总结1 log4j简介简单的说log4j就是帮助开发人员进行日志输出管理的API类库。它最重要的特点就可以配置文件灵活的设置日志信息的优先级、日志信息的输出目的地以及日志信息的输出格式。Log4j除了可以记录程序运行日志信息外还有一重要的功能就是用来显示调试信息。程序员经常会遇到脱离java ide环境调试程序的情况,这时大多数人会选择使用System.out.println语句

深潭的网上家园 1285

Spark数据倾斜问题+解决方案

1、数据倾斜 数据倾斜指的是,并行处理的数据集中,某一部分(如Spark或Kafka的一个Partition)的数据显著多于 其它部分,从而使得该部分的处理速度成为整个数据集处理的瓶颈 数据倾斜俩大直接致命后果 1)数据倾斜直接会导致一种情况:Out Of Memory 2)运行速度慢 主要是发生在Shuffle阶段。同样Key的数据条数太多了。导致了某个key(下图中的80亿条)所在的Task数 据量太大了。远远超过其他Task所处理的数据量 一个经验结论是:一般情况下,OOM的原因都是数据倾斜 2、如

诸葛搏毅 6771

log4j学习

http://baike.baidu.com/view/25347.htm

weixin_33719619的博客 107

单卡调试OpenGait:从分布式到本地的轻量级改造指南

本文为个人开发者和研究者提供了一份详细的OpenGait框架单卡调试指南。针对该框架默认依赖多GPU分布式训练的问题,文章通过分析核心痛点,逐步讲解了如何从环境搭建、绕过分布式初始化陷阱、处理通信后端报错到最终配置与调试,实现从分布式到本地的轻量级改造,帮助读者在单张GPU上高效进行步态识别模型的验证与学习。

weixin_28223453的博客 139

LTspice元器件库导入与路径管理:符号、模型、子电路全解析

在电子电路仿真中,元器件库通常由符号、模型和子电路三层构成:符号定义引脚外观,模型描述电气行为,子电路封装多端子网络。理解三者职责边界,是解决 LTspice 元器件库导入报错的关键。许多导入失败并非软件问题,而是文件类型错配、路径引用不清或引脚顺序不一致。掌握 `.include` 指令、用户库搜索路径和自制符号绑定模型,可以提升第三方模型复用效率,降低跨项目迁移成本。该思路适用于运放、MOS 管、二极管等器件建模,尤其在 UA741 等经典运放导入场景中,需要先核对 `.subckt` 引脚顺序,再选择

weixin_29182481的博客 181

Log4j学习笔记

Log4j学习笔记

181

激光可燃气体传感器:核心技术环节分析

激光可燃气体传感器核心技术涵盖七个维度:1)TDLAS光谱吸收与调制技术(检测下限ppm级);2)DFB激光器与双闭环温控系统(波长稳定性±0.0036nm);3)微弱信号处理技术(信噪比提升60dB);4)环境补偿算法(温压补偿误差<±1%);5)本质安全防爆设计(ExiaIICT4Ga等级);6)智能边缘计算(STM32L476芯片);7)多重性能验证(响应时间<1秒)。通过微型化、多气体检测等创新,该技术已在工业安全等领域替代传统方案,实现高精度检测。(149字)

上市公司前技术负责人,20 年软硬件深耕 + 百人研发团队管理经验,名校理工科背景加持。从技术攻坚到团队掌舵,沉淀海量项目实战与管理心得,专注分享软硬件干货、疑难问题解决方案,既是靠谱知识传播者,也盼链接优质项目共成长。 1044

Log4j2学习资源包

Log4j2学习资源包 去发现同类优质开源项目:https://gitcode.com/ 此仓库包含了学习Log4j2过程中所需的jar包及汇总压缩包。以下是资源文件列表及其描述: disruptor-3.3.4.jar:Log4j2异步日志的底层实现,用于提升日志处理性能。 log4j-api-2.19.0.jar:Log4j2的门面,提供日志操作的接口定义。 log4j-core-2.19....

gitblog_06717的博客 304

UG\NX二次开发 替换部件引用集UF_ASSEM_replace_refset

替换部件引用集UF_ASSEM_replace_refset,需要替换成“完整部件(Entire Part)”需要第三个参数传入空指针或者空字符串。

王牌飞行员_里海的博客 255

基于MATLAB实现语音信号MFCC特征提取(附完整代码)

你有没有想过你的智能手机是如何理解语音指令的?或者 Alexa 和 Siri 等语音助手如何处理您的命令?这种卓越能力背后的机制在很大程度上归功于一种称为 Mel 频率倒谱系数 (MFCC) 的方法。语音识别技术允许机器解释人类语音,将口语转换为计算机可以操纵的格式。这项技术对于开发交互式和响应式 AI 至关重要,例如声控助手、自动化客户服务系统和实时翻译服务。MFCC 代表 Mel 频率倒谱系数。这是用于自动语音和说话人识别的功能。

baidu_34971492的博客 1313

[转贴] Log4j 学习笔记

 Log4j 学习笔记提交人:mars   星期三, 2004-12-15 17:09 Java相关 by heavyz2003-04-15Log4j主页:http://jakarta.apache.org/log4j IndexLog4j的类图Logger:日志写出器 Logger的输出方法Logger的命名规则Log level示例代码关于logger的两点说明Appender:日志目的地 C

John的专栏 1127

Python爬虫实战 | 拼多多商品评论采集与深度分析

本文从 API 调用、网页渲染到情感分析与关键词提取,全流程剖析了“拼多多商品评论采集与分析”项目。Scrapy + API 可快速抓取评论;Playwright 可突破 API 限制,抓取完整页面内容;数据清洗 + 分析揭示用户真实反馈;可持续部署、扩展至更多商品 & 时间段;

2201_76125261的博客 1696

个人学习 Log4j总结--什么是Log4j

个人学习 Log4j总结--什么是Log4j

junR_980218的博客 1122

老版QQ原生表情gif动态

这是老版的QQ表情,不过全是动态的的,Windows照片查看器是不会动的,可以右击用浏览器打开查看,再说一遍是老版的,只是分享给宁愿用老版也要动态的人。

LinePhone3.2.7(android端最新版本) sip客户端

SIP客户端For android:LinePhone3.2.7(最新版本),官网地址:http://www.linphone.org/

Log4J 学习

为什么80%的码农都做不了架构师?>>> ...

weixin_34233421的博客 90

OV9734 DATASHEET,完整规格书

OV9734完整规格书,包括电气参数,尺寸规格,寄存器配置表等

log4J的学习

http://blog.youkuaiyun.com/eako/article/details/488099

babyduncan的专栏 132

Camera2Demo

在Camera2 的基础上进行封装,使得Camera2一堆初始化逻辑与Activity分离,降低耦合度,完成预览拍照并保存的操作

log4j学习记录 log4j配置文件的配置

1、log4j-configuration.xml 文件配置 <!-- appender 定义日志输出目的地 1、ConsoleAppender:控制台输出 2、FileAppender:文件输出 3、DailyRollingFileAppender:每天产生一个日志文件 --> <!-- layout 日志格式化 PatternLayout 可以

laoCarry的专栏 481

log4j及log4j2学习

log4j 1. log4j简介 定义每一条日志信息的级别,更加细致地控制日志的生成过程; 控制每一条日志的输出格式; 控制日志信息输送的目的地是控制台、文件等。 log4j包含三个组件,分别是 Loggers(记录器-区分日志类别)、Appenders(输出源-日志输出的地方)、Layouts(日志布局-日志的输出形式) Loggers:负责产生日志,能够对日志进行筛选,控制什么样的日志可以被输出,什么样的日志应该被忽略。可分为五个级别:DEBUG、INFO、WARN、ERROR、FATAL,从左到

Can96的博客 891

【Todo】log4j与Slf4j的学习

Todo

weixin_33758863的博客 66

4、log4j学习

log4j学习 1、快速入门 建立maven工程 添加依赖 <dependencies> <dependency> <groupId>log4j</groupId> <artifactId>log4j</artifactId> <version>1.2.17</version> </dependency> <depend

weixin_44230693的博客 217

Log4J学习笔记(2)

Log4J学习笔记(2)   前面主要记了一些原理,今天是实务。 1、研究发现,一个系统中4%的代码是用来作logging的。2、Log4J的配置文件(Configuration File)就是用来设置记录器的级别、存放器和布局的,它可接key=value格式的设置或xml格式的设置信息。通过配置,可以创建出Log4J的运行环境。  Log4J运行时,不对环境做任何假定,尤其是没有默认的存放器。3

三V工作室·泰伯子仪 1071

Log4J学习总结

Log4J学习笔记   l       什么是log4j?Log4J是Apache的一个开源项目,是一个在我们编写代码过程提供实现日志输出功能的包。Log4J可以实现通过配置的方式日志输出、日志目的地定义、日志格式定义等功能,有效的管理日志。在使用Log4J之前先看一下几个概念: l    

abing37的专栏 2693
上一篇: VS2005无法创建智能设备项目的问题
下一篇: flex打印要注意的问题
avanry
博客等级 码龄20年 4粉丝 79原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值