如何在一个超大的error日志中查找有几多少种业务异常

最新推荐文章于 2024-09-21 11:44:20 发布
原创 最新推荐文章于 2024-09-21 11:44:20 发布 · 2.3k 阅读 · 3 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文介绍了一种快速从大量异常日志中筛选并统计业务相关异常的方法，通过grep搜索业务代码关键字，结合sort和uniq命令剔除重复项，最终定位到具体的异常源头。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

估计大家都遇到过线上应用出了问题，短时间内异常日志打了几百M或是几个G，这种情况下，如何判断异常日志中与业务相关的异常信息有多少种呢？

1. 查找异常日志中业务代码包关键字，导出到一个文件中，例如这里搜索包含业务代码的异常："at com.zw"

grep "at com.zw."  error.log  > business.log

2. 祛除重复的行：

sort -k2n  business.log | uniq > uniq.out

3. 根据uniq.out中的每一行去error.log文件中查找完整的异常；

排查C++软件异常的常见思路与方法（实战经验总结）
dvlinker的技术专栏
10-06 7万+
在多年排查C++软件异常实践的基础上，系统地总结了排查C++软件异常的常见思路与方法，有很强的实战参考价值！
【APM】Loki+Alertmanager日志告警
CN_Eden
12-29 1842
设置Loki的日志告警，我们必须借助其他相关服务，Promtail打标签用于过滤日志，Alertmanager用于告警目前为止，Loki并没有打印日志周围几行日志的能力，我们只能打印第一行日志发送告警，大体思路是先截取自己想要的日志把他们打成不同的标签，Alertmanager告警模板定义标签的值发送出去。
Linux服务器存在大量log日志，如何快速定位错误？
良月柒
02-02 612
程序员的成长之路互联网/程序员/技术/资料共享关注阅读本文大概需要 7 分钟。来自：blog.youkuaiyun.com/nan1996jiang/articlep/details/109550303针对大量log日志快速定位错误地方tail/head简单命令使用：附加针对大量log日志快速定位错误地方动态查看日志tail-fcatalina.ou从头打开日志文件catcatalina.ou可以使用...
Linux 大文件日志快速定位错误或者异常的位置
weixin_49224542的博客
12-13 2480
1.得到错误日志或者异常日志的行号 cat -n test.log |grep “error” cat -n test.log |grep “exception” 2. 通过位置往前往后查看日志详细 //339563 can not close IO 查询语句在 339500 -339600行中 ||100代表在339500 往后看100行 cat -n test.log |tail -n +339500 |head -n 100 ...
日志文件较多情况下快速定位哪个日志文件报错
RayPick的博客
10-29 888
通常我们会遇到一种情况，就是去排错的时候，由于对系统日志不够熟悉，不能一下子定位到报错是在哪个文件中发生了，那有没有方法快速找到是哪个文件在报错呢？ 例如下面有这么多日志，我需要快速定位是哪个文件在报错 那么这里分享一个我自己一直用的命令 tail -f *.log |egrep -i -A5 -B5 '(warn|err)' 这时候，所有有warn和error级别的日志都会被监视，很容易就将问题排查出来了。 ...
Shell复习—找出日志文件中出现最多的Exception
weixin_45062283的博客
07-21 416
我老板面试的时候特别喜欢问别人这个问题 我们日常的代码是用java写的正则匹配非常简单 但是统计的时候还要用到集合类什么的 Pattern ptn=Pattern.compile(“([\\w|\\.]+Exception)”,Pattern.CASE_INSENSITIVE); 其实最简单明白的处理日志文件的还是应该用shell grep -oE ‘([a-z]|[A-Z])*Exception’ test.log|sort|uniq -c|sort -n -r|head -n 5 -E的意思是扩展为
在linux里如果日志文件过大，如何快速查询内容？
夜空繁星VV
04-18 7305
命令来查看日志文件的内容，并通过按键进行搜索、翻页和跳转等操作。3. 使用 zgrep 或 zless 命令：如果您的日志文件是经过 gzip 压缩的，可以使用 zgrep 或 zless。这些方法可以帮助您在 Linux 中快速查询大型日志文件的内容。根据您的需求和日志文件的特点，选择合适的方法以提高查询效率。2. 使用 less 命令：less 是一个功能强大的文件查看器，可以高效地浏览大型文件。您可以使用 less。然后，您可以使用 / 键输入要搜索的关键字，并按下 Enter 进行搜索。
springboot实现记录业务日志和异常业务日志
止境博客
08-26 5411
1.基于注解的方式实现日志记录，扫描对应的方法实现日志记录 @Inherited @Retention(RetentionPolicy.RUNTIME) @Target({ElementType.METHOD}) public @interface BussinessLog { /** * 业务的名称,例如:"修改菜单" */ String value() default ""; /** * 被修改的实体的唯一标识,例如:菜单实体的唯一标识为"i
Django 4.x Logging 日志使用示例和配置方法
热门推荐
Mr数据杨
11-04 3万+
大家好，我是Mr数据杨，日志就像《三国演义》中的战报，通过不同的“日志级别”，可以快速了解整个程序的运行状况，这如同诸葛亮一样，通过高瞻远瞩的眼光，捕获战况的每一个变化。想象一下，如果没有设定好“默认配置”，那么可能会陷入被无数战报淹没的困境，如同刘备在长坂坡面对曹军的围攻，因为缺乏整体战况的了解，陷入了被动局面。而如果像周瑜那样，提前做好“默认配置”就能如同赤壁之战般，即使面对数倍于己的曹军，也能够灵活应对，最终取得胜利。再来谈谈“logging参数说明”。
【awk】使用awk查询指定traceId的日志（可以查看到完整的Exception堆栈信息）
大胡子老哥的博客
03-28 811
使用awk查询指定traceId的完整日志
超大日志文件查看工具
04-28
需要查看程序生成的日志文件，如果您的日志文件超过了100M，自己试过3g的文件都可以打开。此软件无疑是你查看日志文件的得力助手。 支持如下功能： 日志文件块儿化读取，防止一次读取导致的内存占用。 支持不同级别日志颜色区分 支持查询 缺点：日志文件复制不是很好用
查看大文件中的错误日志
yu8196378的博客
09-30 1783
利用cat结合grep命令定会到日志，然后用sed查看指定行的错误日志 1)查找文件中含有"error"的行 cat irecon-daemon.log |grep -ni  "eRROR"  --color 2）把从100行到200行的日志全部显示 sed -n '100,200p' irecon-daemon.log    有时候，也可以用head和tail命令达到查看日志的
cat 命令，Linux查询日志中的异常（多个、单个）
再见天涯
12-19 2604
一、单日志文件 （一）、得到错误日志或者异常日志的行号 例如： cat -n test.log |grep "error" cat -n test.log |grep "exception" 由于没有在Linux上启项目，在springboot项目中找的一个日子文件作为实操对象。 cat -n spring1.log |grep "Starting " (二)、通过位置往前往后查看日志详细 //根据行号定位行，并向下定位多少行，确定行数会输出往下所有的文本。 cat -n spring1.log|
七牛是如何搞定每天500亿条日志的
xiao_jun_0820的专栏
08-04 3305
七牛是如何搞定每天500亿条日志的 2015-07-31 优快云 七牛云存储 7月30日，七牛数据平台工程师王团结在优快云 Spark微信用户群，与近千名Spark技术开发人员，结合七牛内部使用的数据平台，深入分享了团队是如何利用Flume、Kafka、Spark Streaming等技术搞定每天500亿条日志的，并详细讲解了各个工具使用的注意点。王团结，主要负责七牛数
Java学习日志(九): 异常处理详解，自定义异常
Sakuraaaaaaa的博客
02-06 756
Java学习日志（九） 异常介绍 异常的概念 异常与错误的区别 异常的产生过程 异常处理 throw关键字 requireNonNull方法 throws关键字 try...catch关键字 finally关键字 异常的注意事项 多个异常使用捕获的处理方式 运行期异常的处理方式 子父类异常的处理方式 自定义异常
日志查询错误
baidu_16594927的专栏
06-21 316
我从数据库取出来的日期数据是
linux：查找大日志文件中的信息
A15937822658的专栏
01-27 4291
当日志中含有大量数据时，比如catalina.out很大，好几个G时，打开文件会很麻烦，可以使用搜索命令，查找最近的异常信息，例如： cat -n catalina.out|grep Exception|tail -10 此命令包括： -n 展示行号 grep Exception 搜索Exception字符串 tail -10 展示10条数据 得出内容如下图所示: 然后根据行号，查看异常部分的上下文，以724行为例，为了查看上下文，使用如下命令查看724+10行往前的20行数据，。 .
Linux面试题-日志量很大，怎么查看到目标日志
qq_50801874的博客
09-21 658
grepgrep。
Linux 查看日志总结
zhouzhiwengang的专栏
01-16 4372
温馨展示：默认展示最后103、查看实时日志，最后20行记录4、查看实时日志，从第五行开始日志内容温馨提示：通过Ctrl + c 联合功能键，退出tail 指令。通过cat 指令实现语法：cat fileName | grep "关键字"2、查看错误日志，包含'Exception' 前10行记录3、查看错误日志，包含'Exception' 后10行记录日志行号查找通过head 指令实现语法：head -n 行号 fileName查看错误日志，查看全部日志去除最后10行日志记录编辑日志查找(vi/vim)操作步
在枚举中如何写一个没问题的通过code获取desc的方法
最新发布
03-21
<think>好的，用户的问题是关于如何在枚举中实现一个安全可靠的通过code获取desc的方法。首先，我需要理解用户的需求。用户提到参考了站内的引用内容，特别是引用[2]和引用[4]，这些内容涉及枚举的方法和最佳实践。用户希望确保他们的实现既安全又可靠，可能还涉及类型安全和错误处理。 首先，我应该考虑Java枚举的基本结构。枚举通常包含code和desc两个属性，然后通过构造函数初始化。根据引用[2]中的示例，枚举可能有getCode()和getDesc()方法，以及一个静态方法fromCode()来根据code查找枚举实例。用户需要的是如何正确实现这些部分，尤其是在处理可能的无效code时，如何保证安全可靠。 接下来，需要处理异常情况。如果传入的code不存在，应该抛出异常还是返回默认值？引用[2]中提到使用fromCode方法查找枚举值，但没有说明如何处理找不到的情况。这时候，参考最佳实践，比如引用[4]中提到的枚举与字典数据一致性，可能需要确保所有可能的code都被正确处理，避免运行时错误。 然后，考虑使用Java 8的Optional类来增强安全性，这样可以在找不到时返回Optional.empty()，而不是返回null，减少空指针异常的风险。同时，可以添加一个contains方法预先检查code是否存在，提高代码的健壮性。 关于代码示例，需要展示一个完整的枚举结构，包含属性、构造函数、getter方法，以及静态的fromCode方法。同时，处理可能的无效code，比如抛出IllegalArgumentException，并附上详细的错误信息，方便调试。 还要注意类型安全，确保code的类型正确，比如使用Integer而不是原始类型int，避免自动装箱的问题。此外，静态的fromCode方法应该遍历枚举的所有值，比较code，找到匹配的实例。 最后，参考引用[3]中提到的RestController枚举参数处理，可能需要考虑序列化和反序列化的问题，但用户当前的问题主要集中在通过code获取desc，因此这部分可能暂时不需要深入，但可以提及作为扩展考虑。 总结步骤：定义枚举属性，构造函数，getter方法，实现fromCode方法，处理无效code，使用Optional增强安全性，添加辅助方法检查code存在性，提供使用示例和异常处理。</think>### 在枚举中实现通过code获取desc的安全方法 #### 1. 定义枚举结构 ```java public enum BusinessType { ORDER(1001, "订单业务"), PAYMENT(2001, "支付业务"), REFUND(3001, "退款业务"); private final Integer code; private final String desc; BusinessType(Integer code, String desc) { this.code = code; this.desc = desc; } public Integer getCode() { return code; } public String getDesc() { return desc; } } ``` #### 2. 实现安全查询方法 ```java public static BusinessType fromCode(Integer code) { if (code == null) { throw new IllegalArgumentException("业务编码不能为空"); } for (BusinessType type : values()) { if (type.code.equals(code)) { return type; } } throw new IllegalArgumentException("无效的业务编码: " + code); } ``` #### 3. 增强安全性（Java 8+） ```java public static Optional<BusinessType> safeFromCode(Integer code) { return Arrays.stream(values()) .filter(type -> type.code.equals(code)) .findFirst(); } public static boolean containsCode(Integer code) { return Arrays.stream(values()) .anyMatch(type -> type.code.equals(code)); } ``` ### 最佳实践要点 1. **类型安全**：使用枚举而非常量类，确保编译期类型检查[^2] 2. **空值防御**： - 显式检查null输入 - 使用Optional避免返回null[^3] 3. **错误处理**： - 明确抛出带详细信息的异常 - 提供containsCode()预检查方法 4. **性能优化**： - 使用values()缓存（Java枚举特性） - 避免重复创建查找结构 ### 使用示例 ```java // 安全查询 BusinessType type = BusinessType.fromCode(1001); System.out.println(type.getDesc()); // 输出：订单业务 // 安全处理 BusinessType.safeFromCode(9999) .ifPresentOrElse( t -> System.out.println(t.getDesc()), () -> log.warn("未找到对应业务类型") ); // 预检查 if (BusinessType.containsCode(inputCode)) { // 执行安全操作 } ``` ### 异常处理建议 ```java try { BusinessType type = BusinessType.fromCode(invalidCode); } catch (IllegalArgumentException e) { // 记录日志并返回客户端错误响应 log.error("业务编码验证失败: {}", e.getMessage()); throw new ResponseStatusException(HttpStatus.BAD_REQUEST, e.getMessage()); } ```
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值