add 関数の既知の問題修正：PutMetricAlarm operation (reached max retries: 4): Rate exceeded

[takaakikakei]

事象

対象のLambda関数が多すぎる場合、以下のエラーが発生する場合がある。

"errorMessage": "An error occurred (Throttling) when calling the PutMetricAlarm operation (reached max retries: 4): Rate exceeded",
"errorType": "ClientError",

原因

以下の CloudWatch service quotas に抵触しているため。

CloudWatch service quotas
PutMetricAlarm request
3 TPS per Region. The maximum number of operation requests you can make per second without being throttled.

https://docs.aws.amazon.com/AmazonCloudWatch/latest/monitoring/cloudwatch_limits.html

暫定対応

以下のいずれかで回避可能。

• エラーが出ても何度かリトライして、全ての Lambda 関数にアラーム設定を追加しきる。
• サポートケース起票して、上記 service quotas に関する緩和申請を出す。

恒久対応

• PutMetricAlarm を呼び出す頻度を調整することで、service quotas に抵触しないようにすることを検討