log4j日志异步化大幅提升系统性能

log4j日志同步，如果没写入会导致系统卡死

log4j日志异步化大幅提升系统性能

• 博客分类： 
• Log

log4j Hibernate SQL Apache SQL Server 

经过大型J2EE项目实测，Log4j的日志输出对系统性能有比较显著的影响，尤其是日志输入量比较大时，例如：系统并发量很大，显示Hibernate的sql和参数日志，或日志级别较低DEBUG或INFO时等。

使用Async Logger控制日志输出可以显著改善系统性能。

 

 

1） 测试用例：同步文件日志输出

       测试功能：模块管理功能，

       输出Hibernate SQL和参数，输出到文件，配置如下：

       <appender name="Hibernate_SQL" class="org.apache.log4j.DailyRollingFileAppender">

              <param name="File" value="log/Hibernate_SQL.log" />

              <param name="Append" value="true" />

              <param name="DatePattern" value="'.'yyyy-MM-dd-HH" />

              <layout class="org.apache.log4j.PatternLayout">

                     <param name="ConversionPattern" value="%d [%-5p](%C,%L) - %m%n" />

              </layout>

       </appender>

      

       <category name="org.hibernate.SQL">

              <priority value="TRACE" />        

              <appender-ref ref="Hibernate_SQL" />

       </category>

       <category name="org.hibernate.type">

              <priority value="TRACE" />        

              <appender-ref ref="Hibernate_SQL" />

       </category>

       运用JMeter进行压力测试，线程数50，运行4次，计算请求平均响应值（Rame-up Period: 1， 循环次数：1）

 

测试结果：AVG: 12565ms

 

    2） 测试用例：异步文件日志输出

       Log4j.xml  配置修改如下：

    <appender name="ASYNC_Hibernate_SQL" class="org.apache.log4j.AsyncAppender">   

     <param name="BufferSize" value="512"/>   

     <appender-ref ref="Hibernate_SQL"/>

   </appender>

   

    <category name="org.hibernate.SQL">

        <priority value="TRACE" />     

        <appender-ref ref="ASYNC_Hibernate_SQL" />

    </category>

   

    <category name="org.hibernate.type">

        <priority value="TRACE" />     

        <appender-ref ref="ASYNC_Hibernate_SQL" />

    </category>

   

     在BufferSize为 32， 64，128，256，512，2048时测试的请求平均耗时，及较测试用例1中的性能提高率对比如下所示：

同步，异步日志性能对比分析	（每次50并发，运行4次）
sync 日志输出	原时间消耗
	12565
async 日志输出
缓冲区大小	平均耗时	性能提高率
32	6744	46.33%
64	8487	32.46%
128	6899	45.09%
256	6606	47.43%
512	7306	41.85%
2048	3406	72.89%

 

    从结果可以看出，性能提高率最高 47%。最低32%。缓冲为256时性能改善最佳， 提高47%

   

结论：使用Log4j的J2EE应用，日志的优化对系统性能有显著影响：

     1）尽量减少不必要的日志输出，尤其要避免 root logger上过低级别的输出，避免在生产环境上向控制台输出日志。例如，下面的配置是很影响性能的，：

    <root>

        <priority value="DEBUG" /> 

        <appender-ref ref="CONSOLE" >  

    </root>

    2） 使用Async logger输出日志，buffersize在相应日志频率下，越大越好，对于大型项目，可以选2048以上值。