30、AWS 日志管理与性能优化全解析

AWS 日志管理与性能优化全解析

1. 日志处理与错误监控

1.1 日志推送至第三方工具

除了在 Lambda 中处理日志，还可以使用 Lambda 将日志推送到不支持直接集成或 Kinesis 流的第三方工具。这样做的一个额外好处是，在将日志发送到第三方解决方案之前，可以移除或标记化其中的敏感内容。

1.2 错误监控步骤

要实现主动错误监控，需要采取以下三个步骤：
1. 收集日志 ：
- 监控云资源问题时，CloudWatch 默认会监控和收集相关日志，无需编写代码。部分服务可能有可选设置，可启用高级或更详细的日志记录。
- 监控应用程序问题时，日志也会收集到 CloudWatch 中，但需要确保代码输出包含有用数据的日志，并使用一致的日志格式。
2. 处理和分析日志 ：
- 可以使用 CloudWatch 指标过滤器创建自定义过滤器，仅监控感兴趣的事件。例如，设置一段时间内错误日志数量的阈值。
- 若要在 Lambda 微服务中使用自定义日志处理器，可以使用 CloudWatch 订阅。微服务可以按照编程方式处理日志。对于更具状态性的分析，如一段时间内的事件，需要使用 DynamoDB 或 Timestream 等数据存储来跟踪事件。
- 使用第三方工具时，可以使用 CloudWatch 指标流或 Lambda 作为转发器，将日志发送到工具中进行处理。
3. 决定每个日志的最佳处理方式 ：
- 如果日志不重要，可以不做任何处理。
- 使用