Flink 使用 logback

最新推荐文章于 2024-07-11 10:40:29 发布

原创最新推荐文章于 2024-07-11 10:40:29 发布 · 1.3k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#flink #使用logback #代替log4j

Flink 专栏收录该内容

39 篇文章

订阅专栏

本文详细介绍了如何将Flink默认的日志记录器从log4j更改为logback，包括修改pom.xml文件剔除log4j依赖、添加logback及log4j-over-slf4j桥接依赖、更新flink/lib目录下的日志包以及在提交任务时指定依赖的lib目录。

Flink 默认使用的日志记录器是 log4j，但是我们想使用 logback，要如何操作呢？

1、pom.xml 中的 jar 剔除 log4j 相关包

如：

<dependencies>
	<!-- Add the two required logback dependencies -->
	<dependency>
		<groupId>ch.qos.logback</groupId>
		<artifactId>logback-core</artifactId>
		<version>1.1.3</version>
	</dependency>
	<dependency>
		<groupId>ch.qos.logback</groupId>
		<artifactId>logback-classic</artifactId>
		<version>1.1.3</version>
	</dependency>

	<!-- Add the log4j -> sfl4j (-> logback) bridge into the classpath
	 Hadoop is logging to log4j! -->
	<dependency>
		<groupId>org.slf4j</groupId>
		<artifactId>log4j-over-slf4j</artifactId>
		<version>1.7.7</version>
	</dependency>

	<dependency>
		<groupId>org.apache.flink</groupId>
		<artifactId>flink-java</artifactId>
		<version>1.8.0</version>
		<exclusions>
			<exclusion>
				<groupId>log4j</groupId>
				<artifactId>*</artifactId>
			</exclusion>
			<exclusion>
				<groupId>org.slf4j</groupId>
				<artifactId>slf4j-log4j12</artifactId>
			</exclusion>
		</exclusions>
	</dependency>
	<dependency>
		<groupId>org.apache.flink</groupId>
		<artifactId>flink-streaming-java_2.11</artifactId>
		<version>1.8.0</version>
		<exclusions>
			<exclusion>
				<groupId>log4j</groupId>
				<artifactId>*</artifactId>
			</exclusion>
			<exclusion>
				<groupId>org.slf4j</groupId>
				<artifactId>slf4j-log4j12</artifactId>
			</exclusion>
		</exclusions>
	</dependency>
	<dependency>
		<groupId>org.apache.flink</groupId>
		<artifactId>flink-clients_2.11</artifactId>
		<version>1.8.0</version>
		<exclusions>
			<exclusion>
				<groupId>log4j</groupId>
				<artifactId>*</artifactId>
			</exclusion>
			<exclusion>
				<groupId>org.slf4j</groupId>
				<artifactId>slf4j-log4j12</artifactId>
			</exclusion>
		</exclusions>
	</dependency>
</dependencies>

2、剔除 flink/lib 目录下的 log4j 相关包

log4j-1.2.xx.jar 和 sfl4j-log4j12-xxx.jar

3、上传 logback 相关包到 flink/lib 目录下

logback-classic.jar
logback-core.jar
log4j-over-slf4j.jar: This bridge needs to be present in the classpath for redirecting logging calls from Hadoop (which is using Log4j) to Slf4j.

4、提交任务时，显示的设置依赖的 lib 目录

cd flink/bin

./flink run -yt ${flink_home}/lib ……(其他参数)

【一起学习】