应用程序的日志信息可通过log4j同步到Kafka中,即:
客户端——>后台服务应用程序——>Kafka集群
代码如下:
1.pom.xml文件导入log4j与kafka的集成依赖库
<dependency>
<groupId>org.apache.kafka</groupId>
<artifactId>kafka-log4j-appender</artifactId>
<version>1.0.1</version>
</dependency>
2.新建一个log4j.properties文件,并添加appender配置到kafka中
log4j.rootLogger=info,stdout,kafka0
# stdout配置
log4j.appender.stdout=org.apache.log4j.ConsoleAppender
log4j.appender.stdout.layout=org.apache.log4j.PatternLayout
log4j.appender.stdout.layout.ConversionPattern=%-d{yyyy-MM-dd HH\:mm\:ss} [%p]-[%c] %m%n
# kafka0配置
#定义一个名为kafka 为Appender
log4j.appender.kafka0=org.apache.kafka.log4jappender.KafkaLog4jAppender
#指定日志写入到Kafka的主题
log4j.appender.kafka0.topic=kafka-log4j
#制定连接kafka的地址
log4j.appender.kafka0.brokerList=192.168.23.128:9092
#压缩方式,默认为none
log4j.appender.kafka0.compressionType=none
#指定Producer发送消息的方式,默认是false,即异步发送
log4j.appender.kafka0.syncSend=true
#指定日志级别
log4j.appender.kafka0.Threshold=info
log4j.appender.kafka0.layout=org.apache.log4j.PatternLayout
log4j.appender.kafka0.layout.ConversionPattern=%-d{yyyy-MM-dd HH\:mm\:ss} [%p]-[%c] %m%n
3.编写应用程序Log4jProducer
import org.apache.log4j.Level;
import org.apache.log4j.Logger;
public class Log4jProducer {
private static final Logger LOG = Logger.getLogger(Log4jProducer.class);
public static void main(String[] args) {
LOG.setLevel(Level.INFO);
LOG.debug("这是一条debug级别的日志!");
LOG.info("这是一条info级别的日志!");
LOG.error("这是一条error级别的日志!");
LOG.fatal("这是一条fatal级别的日志!");
}
}
4.创建kafka topic用来存储程序日志信息