発生状況
- クラウドフォーメーション（Cloud Formation）でファーゲート（Fargate）デプロイに時間が掛かる、タイムアウトエラーで停止する。ロールバックしない／できない。
- コードパイプライン（Code Pipeline）にてデプロイ中に途中エラーで停止する。
- 自動でスケールアウトしない／してくれない。
などなど…
上記ようなケースにおいてＡＷＳ管理コンソールにて「ＥＣＳ > クラスタ > クラスタ名 > サービス > サービス名 > イベント」タブにて、下記メッセージが表示されている場合についての記録。
service クラスターのサービス名 was unable to place a task. Reason: You've reached the limit on the number of vCPUs you can run concurrently. For more information, see the Troubleshooting section of the Amazon ECS Developer Guide.
原因
Ｆａｒｇａｔｅのサービスクォータ制限に引っかかってる可能性が高い。
確認ポイント
ＡＷＳ管理コンソール1にて下記のＵＲＬにアクセスする。
この時「適用されたアカウントレベルのクォータ値」が十分な数字であることを確認する。
通常、この数字は４０００2になってるはずなので該当しないはずある。しかしこの数字が４０００になってないケースに遭遇した。調べたところ同じような事例を発見した34。極端に低い数字になっている場合は上げる必要がある5。
サービスクォータの値が４０００未満とすることに関するアナウンスは見つからなかったが、この設定が怪しいケースに遭遇したので、この値を良く確認すること。
対応方法
ＡＷＳ管理コンソールにて、
当該サービスクォータの「アカウントレベルでの引き上げをリクエスト」ボタンを押して、必要量を申請する。
あとはＡＷＳサポートセンターからの対応を待つことになるが、例えば４０００より少ない設定がされている時、いきなり４０００の指定が可能（受理してくれる）かは不明。
参考文献
- Fargate のサービスクォータが vCPU ベースに変更になります 同原文（英語）
- AWS Fargate よくある質問 ※トラブルが起きた時に一度確認しておくと良い
- 同様のトラブル報告事例
- ＡＷＳ管理コンソール
- ＥＣＳのリソース制限に関するドキュメント
- サービスクォータについてのドキュメント
-
リージョンに注意すること。本サービスクォータはリージョン単位での設定となる。 ↩
-
Fargate のサービスクォータが vCPU ベースに変更になりますでのアナウンスによれば４０００と書いてある。 ↩
-
気がつかない程度に下がってるケースもある。 ↩
-
スロットリングについては現在の設定を確認することができず、変更もサポートセンターから行う必要がある。ここでは詳しくは取り上げない。 ↩