指摘事項の例
診断レポートより · リクエスト経路
説明用の例
3つのレイヤーで重なるリトライが、1つの依存先の遅延を障害に発展させるおそれがあります。
エビデンス
Ingress、サービスメッシュ、チェックアウトサービスのHTTPクライアントがそれぞれ最大3回試行するため、1件のリクエストが決済APIに最大27回届く可能性があります。最初に打ち切るのはIngressで、15秒後です。
Ingress設定メッシュポリシートレース
影響
決済APIが遅くなるとリトライで負荷が何倍にも膨らみ、やがて完全に停止します。その間も、ユーザーがすでに離脱したリクエストの処理を続けることになります。
優先度
高
チェックアウトは売上に直結し、修正は設定変更のみで済むため、次回の定期メンテナンス枠に収まります。
推奨される次のステップ
リトライはリトライバジェットを設けたうえでサービスメッシュだけに任せ、各レイヤーのタイムアウトを手前のレイヤーより短く設定します。フォールトインジェクションテストで効果を実証します。
検討した代替案代わりに各クライアントライブラリでリトライすれば呼び出しごとに細かく制御できますが、各サービスチームがそれぞれ設定を保守することになります。この方法は、メッシュの外に出る呼び出しに限って推奨します。