已处理和未处理异常的 AWS CloudWatch Logs 指标
AWS CloudWatch Logs metrics for handled and unhandled exceptions
我有一个关于 AWS CloudWatch Logs 的有趣场景。我目前使用 log4net 并使用 CloudWatch Logs 代理将所有日志泵入 CloudWatch Logs。我在 CloudWatch 中有一个指标，它基本上扫描 [ERROR] 条目，并且警报将它们传递给另一个服务以在它们发生时通知开发人员（阈值 >= 1，周期 - 1 分钟）。所有这些都很好用。
现在我想以不同的方式处理某些错误。例如，基于异常类型，我只想在 N 分钟内发生 X 次事件时触发警报。所以在这种情况下，我会为这种情况创建一个指标，然后将其分配给警报。问题是在这个问题的第一部分中解释的一般错误度量仍在跟踪每个单独的错误发生。所以现在我收到了多个通知。每个错误一个，出现 X 次后一个。
我可以禁用一般错误指标，但我失去了跟踪未处理异常的能力。我必须为每个可能的异常设置一个度量标准。我错过了什么吗？处理此问题的最佳方法是什么？
您通常可以通过创建一个函数来处理此问题，以便在您收到通知之前进行一些额外的处理。最简单的方法是将 AWS Lambda 函数订阅到您未处理的错误警报的 SNS 主题。退订您自己的主题，只有在满足您定义的任何条件后，lambda 函数才会通知您而不是 SNS。
对于这种情况，当您的聚合指标处于警报状态时，您似乎希望针对与您的聚合指标匹配的未处理错误抑制来自您个人指标的通知。
伪代码：
- 使用 DescribeAlarms API 获取聚合未处理异常警报的状态。如果聚合告警处于'Alarm'状态，则继续。
- 使用FilterLogEvents API获取匹配的日志事件：
- 您的日志组
- 您的日志流
- FilterPattern：您的个人未处理异常警报的指标过滤器
- StartTime：警报时间戳 - 周期
- 结束时间：报警时间戳
- 使用GetLogEvents API获取所有匹配的日志事件：
- 您的日志组
- 您的日志流
- StartTime：警报时间戳 - 周期
- 结束时间：报警时间戳
- 如果'all events'计数和'filtered events'计数匹配，聚合告警处于告警状态，不发送通知。否则，使用 SES 或 SNS APIs 向自己发送通知。
如果您想继续通过 SNS 收到通知，请不要重复使用警报用于触发 lambda 的同一主题——为您的 mobile/sms 通知创建一个单独的主题。
我不确定这是否比 log4net 更容易，但如果您打算对日志进行这种 post 处理，最好将未处理的异常直接发送到 SNS , post-首先在 lambda 中处理，然后从您的 lambda 函数写入 cloudwatch 日志。此更改将允许您通过 SNS 消息负载检查未处理的异常，并为您提供一些额外的控制来控制如何抑制重叠问题。
我有一个关于 AWS CloudWatch Logs 的有趣场景。我目前使用 log4net 并使用 CloudWatch Logs 代理将所有日志泵入 CloudWatch Logs。我在 CloudWatch 中有一个指标，它基本上扫描 [ERROR] 条目，并且警报将它们传递给另一个服务以在它们发生时通知开发人员（阈值 >= 1，周期 - 1 分钟）。所有这些都很好用。
现在我想以不同的方式处理某些错误。例如，基于异常类型，我只想在 N 分钟内发生 X 次事件时触发警报。所以在这种情况下，我会为这种情况创建一个指标，然后将其分配给警报。问题是在这个问题的第一部分中解释的一般错误度量仍在跟踪每个单独的错误发生。所以现在我收到了多个通知。每个错误一个，出现 X 次后一个。
我可以禁用一般错误指标，但我失去了跟踪未处理异常的能力。我必须为每个可能的异常设置一个度量标准。我错过了什么吗？处理此问题的最佳方法是什么？
您通常可以通过创建一个函数来处理此问题，以便在您收到通知之前进行一些额外的处理。最简单的方法是将 AWS Lambda 函数订阅到您未处理的错误警报的 SNS 主题。退订您自己的主题，只有在满足您定义的任何条件后，lambda 函数才会通知您而不是 SNS。
对于这种情况，当您的聚合指标处于警报状态时，您似乎希望针对与您的聚合指标匹配的未处理错误抑制来自您个人指标的通知。
伪代码：
- 使用 DescribeAlarms API 获取聚合未处理异常警报的状态。如果聚合告警处于'Alarm'状态，则继续。
- 使用FilterLogEvents API获取匹配的日志事件：
- 您的日志组
- 您的日志流
- FilterPattern：您的个人未处理异常警报的指标过滤器
- StartTime：警报时间戳 - 周期
- 结束时间：报警时间戳
- 使用GetLogEvents API获取所有匹配的日志事件：
- 您的日志组
- 您的日志流
- StartTime：警报时间戳 - 周期
- 结束时间：报警时间戳
- 如果'all events'计数和'filtered events'计数匹配，聚合告警处于告警状态，不发送通知。否则，使用 SES 或 SNS APIs 向自己发送通知。
如果您想继续通过 SNS 收到通知，请不要重复使用警报用于触发 lambda 的同一主题——为您的 mobile/sms 通知创建一个单独的主题。
我不确定这是否比 log4net 更容易，但如果您打算对日志进行这种 post 处理，最好将未处理的异常直接发送到 SNS , post-首先在 lambda 中处理，然后从您的 lambda 函数写入 cloudwatch 日志。此更改将允许您通过 SNS 消息负载检查未处理的异常，并为您提供一些额外的控制来控制如何抑制重叠问题。