flume的log4j appender配置 问题一：flume端接受不到event

最新推荐文章于 2024-10-09 07:00:00 发布
最新推荐文章于 2024-10-09 07:00:00 发布
阅读量1.3k 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： flume 文章标签： fume log4jappender 异常
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/qq_38766519/article/details/78211438
本文解决了一台电脑使用MyEclipse发送数据而另一台电脑使用Flume接收时遇到的问题，即Flume未能接收到任何数据，尽管MyEclipse控制台正确输出了信息且未报告异常。问题根源在于log4j的导包错误。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

一台电脑发送数据，一台电脑接受flume event

现象：1.myeclipse控制台正确输出信息，没有报任何异常

       2. flume没有接受到任何数据

原因：log4j导包错误，正确的导入如下图：



Flume之Log4JAppender接收Log4j日志
qianshanding0708的博客
12-07 6531
简介 Log4JAppender和LoadBalancingLog4jAppender可以将应用服务器的日志通过AvroSource实时的把日志传输到日志服务器，然后在传输到监控系统或者是HDFS中存储，FLume的Log4JAppender和LoadBalancingLog4jAppender必须使用Log4j的异步加载器，否则日志服务器down机，将会导致应用服务器异常，影响线上环境的使用。...
Log4j2的flume appender配置
SEG的命名空间
09-04 6122
由于log4j2比1.x版本的效率据说要高，头疼于日志量太大拖系统资源所以决定试试log4j2，而flume appender就是直接把日志输出到flume agent的方法。 此前使用flume自带的tools——flume-ng-log4jappender，通过在在配置文件中引用其FlumeAppender实现类即可，关于此的文章有很多就不赘述。不过在了解过log4j2后发现，log4j2自带
Flume Log4J Appender Flume收集Log4j日志
weixin_33929309的博客
01-06 179
为什么80%的码农都做不了架构师？>>> ...
log4j:ERROR Flume append() failed.(flume-ng-log4jappender-1.4.0.jar bug)
用心做事
04-23 4609
日志出现“log4j:ERROR Flume append() failed.”，发现flume-ng-log4jappender-1.4.0有一个bug。详细，请查阅：https://issues.apache.org/jira/browse/FLUME-2186。        解决方法：修改flume-ng-log4jappender中的append方法。修改为： @Override
Log4jFlumeAppender
Black Shadow
01-11 1327
自己改造的 FlumeClinet 的 Log4jAppender 修改了异常/断线重连 修改header时间格式为ISO8601格式 增加字符串LEVEL参数 支持event.properties加入header(MDC) FlumeAppender.javapackage org.apache.log4j.client;import org.apache.avro.Schema; import
flume+log4j收集日志
一个后知后觉人路。。
12-14 1040
单节点： flume只有一个单节点时，如果通过log4j发送指定到端口收集数据。    目前使用集群模式 http://blog.csdn.net/hyx1990/article/details/49453271 -->                         定义控制台日志级别入口-->               172.20.1.106"/>       
LogDemox 收集信息通过log4j直接打到flume中
04-20
Log4j的核心组件包括配置器（Configurator）、日志事件（Logging Event）和输出处理器（Appender）。配置器负责设置日志级别和输出目的地，日志事件则封装了需要记录的信息，而输出处理器则将这些事件发送到指定的...
Java Log4j自定义Appender开发指南：扩展日志功能，实现个性化日志管理
Log4j是Apache软件基金会的一个开源项目，它是一个功能强大且灵活的Java日志框架。它允许开发者记录事件、错误、信息甚至调试信息到各种目的地，如控制台、文件、GUI组件，甚至是套接字服务器。Log4j被广泛应用于...
log4j2-RoutingAppender
Java程序员的知识博客
06-05 1214
RoutingAppender对LogEvents求值，然后将它们到一个从属Appender。可以是，可以通过其名称进行引用，也可以根据需要。RoutingAppender应该配置在它引用的appender之后，以允许它正确地关闭。你也可以用脚本配置RoutingAppender:你可以在appender启动时运行脚本，也可以在为日志事件选择路由时运行脚本。一个过滤器，用于。使用CompositeFilter可以使用多个过滤器。操作LogEvent的重写策略。包含一个或多个，以标识。truefalse。
flume-appenders:Flume appender 从一系列日志库（log4j、logback）推送日志事件
07-03
水槽附加器 Flume appender 从一系列日志库（log4j、logback）推送日志事件
logback-flume-appender:Logback追加程序将日志消息转发到Flume代理
05-11
logback-flume-appender Logback追加程序将日志消息转发到Flume代理 配置条目 application ：应用程序名称，如果未设置，则将从application.name系统属性中推断出来 hostname ：主机名，如果未设置，则通过Box主机名通过InetAddress.getLocalHost().getHostName()进行推断InetAddress.getLocalHost().getHostName() type ：日志类型，如果未设置，将被忽略 flumeAgents ：以逗号分隔的{hostname}:{port}格式的flume avro代理列表 flumeProperties ：用于创建以{key}={value}格式分隔的Fume RpcClient的其他属性; batchSize ：设置要报告的事件的批次大小，覆盖默认值50
Flume接收Log4j日志
wjacketcn的专栏
03-24 691
java程序log4j.properties文件 ，修改内容如下： 注意依赖一定要有flume-ng-log4jappender，后面配置log4j要用。   log4j配置如下： ### set log levels ### log4j.rootLogger=INFO, stdout, file, flume log4j.logger.per.flume=INFO ###
log4j:ERROR Attempted to append to closed appender named [null].
如来
08-17 4167
最近用Velocity总是出现以下消息log4j:ERROR Attempted to append to closed appender named [null]. 试了很多方法未果，最后到Velocity 的build/lib包里看了一下，发现有个包叫logkit-1.0.1.jar于是加到项目中，解决此问题
修改Flume Log4j Appender
某先生的专栏
01-25 3491
自定义Log4j Appender 要修改Flume Log4j Appender的实现，我们先了解一下Log4j Appender是如何自定义的。 自定义log4j appender需要继承log4j公共的基类：AppenderSkeleton 打印日志核心方法：abstract protected void append(LoggingEvent event); 初始化
Apache Flume 启动报错及解决方法
最新发布
天冬忘忧的博客
10-09 915
在使用 Apache Flume 时，可能会遇到启动报错的情况，其中一个常见问题就是 log4j 错误。本文将结合两个实际案例来分析这个问题，并提供相应的解决方法。flume-ng agent -n a1 -c ../conf/-f ./flume_info.conf -Dflume.root.logger=INFO,console
log4j与flume整合配置(实现故障转移FailoverLog4jAppender)及问题总结
yjgithub的博客
10-16 2105
log4j与flume整合实现故障转移
flume源码分析--Log4j日志直接发送到Flume过程分析（三）
muriyi的博客
05-09 2306
一、分析Log4j向flume发送日志的过程 按照前述调试过程，理清Log4j向flume发送日志所经过的过程，如下所示： 首先在初始化日志类时，就需要读取配置文件信息，并对其进行解读定位，关键是用到了org.apache.flume.clients.log4jappender.Log4jAppender类。在类初始化过程中，重点对该类进行调用，使得log4j在输出时可以通过netty，输出到相
log4j.properties文件的配置不起作用
热门推荐
www.hohode.com
11-04 1万+
http://outofmemory.cn/code-snippet/7269/java-log4j.properties-not-working-solution 今天的项目中遇到了log4j.properties日志配置文件不起作用的问题，反反复复看了log4j.properties文件是没有语法问题，但是设置log级别就是不管用。 最后查到是配置文件，被第三方jar包
Log4j日志输入到Flume
一代键客的博客
08-16 2087
一、添加需要的jar包         移除springboot自带的日志包，添加log4j和flume的jar包 <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-web</artifactId&g...
Flume结合Log4j的配置与使用示例
1. 在应用的日志配置文件中，比如`log4j.properties`或者`log4j.xml`中，定义一个自定义Appender，该Appender实际上是Flume的一个Source。 2. 通过配置Appender的属性来设置Flume Source，包括它应该接收的事件类型...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值