メインコンテンツへスキップ
見出し画像

【IT】AWS ECSをPoC環境作成で学ぶ短期集中講座《第4章 ECS偏り検知 ― CloudWatchによる監視構成》

    皆さま、こんにちは

    数回にわたり、AWS ECSにPoC環境を構築していきます。
    今回は、4回目です。

    前回の記事



    1. 目的と概要

    この章では、1台のEC2上で複数タスクを並行稼働できるようにし、
    サービス粒度でタスク数を CloudWatch で“見える化”します。
    偏りの検知・通知(アラート)や自動是正は 次章以降で実装します。


    2. 前提環境

    • クラスター名:`poc-ecs-cluster`

    • 起動タイプ:EC2

    • EC2インスタンス:t3.micro(例)

    • ネットワークモード:bridge

    • VPC構成:パブリックサブネット + IGW

    • セキュリティグループ:

      • SSH(22番):MyIPのみ許可

      • HTTP(8000, 8001):全許可(PoC用)

    • アプリケーション:Django または FastAPI


    3. タスク定義の更新(複数タスク対応)

    複数タスクを同一EC2上で動作させるため、
    ポート競合を避ける目的でホストポートを動的割り当て(0)にします。

    手順

    1. AWSコンソール → ECS → タスク定義

    2. 対象タスクを選択 → 「新しいリビジョンの作成」

    3. コンテナ設定を以下のように変更

    画像

    「作成」をクリック。

    💡 補足

    bridgeモードでは同一EC2上の複数コンテナ間でポート競合が発生します。
    ホストポートを 0 にすると、ECSが自動的に空きポート(32768〜61000)を割り当て、
    同一ホスト内で複数タスクが並行稼働できるようになります。

    将来的に ALB を導入した際も、この動的ポートは自動認識され、
    ターゲットグループへの登録が可能です。

    セキュリティグループでMyIPに対して32768~61000までポート解放しておいてください。


    4. サービスの更新(複数タスク起動)

    作成した新しいタスク定義をサービスに反映させます。

    1. ECS → クラスター → 対象サービスを開く

    2. 「更新」→ 以下の設定を行う

    デプロイ設定

    • タスク定義:最新リビジョン(例:9)

    • 必要なタスク数(Desired count):2

    • スケジューリング戦略:REPLICA(これであること)

    • デプロイ戦略:ローリングアップデート

    • デプロイ不具合の検出-サーキットブレーカー:有効(失敗時ロールバックON)

    ロードバランサー

    • なし(ALB導入前)

    タスク配置

    • 配置戦略:`分散(attribute:ecs.instanceId)`

    「更新」→「新しいデプロイ」をクリック。
    数分後、「タスク」タブで 2 タスクが `実行中` になれば成功です。


    5. 動作確認

    ECS → クラスター → 「タスク一覧」→ 各タスクの詳細を確認。
    ホストポートが異なれば成功。

    例:

    http://<EC2のPublic IP>:32768
    http://<EC2のPublic IP>:32769

    アプリが応答すれば複数タスク稼働OK。

    画像
    画像

    6. Container Insights の有効化

    Container Insights を有効化することで、
    ECSクラスタのタスク/サービス単位のメトリクスを自動収集できます。

    1. ECS → クラスター → 対象クラスタ → 「更新」

    2. ページ下部「モニタリング」セクション

    3. 「オブザーバビリティが強化された Container Insights」をオン

    4. 「更新」→ 数分待機

    数分後、CloudWatch Logs に
    `/aws/ecs/containerinsights/poc-ecs-cluster/performance`
    が自動生成されます。

    画像
    画像

    7. CloudWatchで偏りを可視化する

    Container Insights のメトリクスを利用して、
    クラスタ内のタスク数や負荷の偏りをサービス単位で確認します。

    手順

    1. ECS → クラスタ → 更新

    2. 画面下部 「オブザーバビリティが強化された Container Insights」 を オン

    3. 更新 → 数分待つ(CloudWatch Logs に `/aws/ecs/containerinsights/poc-ecs-cluster/performance` が作成)

    4. CloudWatch → すべてのメトリクス → ECS/ContainerInsights

    5. ディメンション「ClusterName, ServiceName」 を選択

    6. 以下をグラフ化:

      • `RunningTaskCount`(稼働中タスク数)

      • `DesiredTaskCount`(望ましいタスク数)

    目安:Desired=2 / Running=2 で安定していれば健全。

    グラフが表示されれば成功です。
    例えば、1サービスで2タスク稼働中であれば「2」と表示されます。

    画像

    補足(紹介のみ):cwagent という選択肢

    • cwagent(CloudWatch Agent for Container Insights) は、ECS(EC2 起動タイプ)の
      各 EC2 上に 1 つ常駐する軽量コンテナ(DAEMON)。

    • 使うと インスタンス粒度のメトリクス(例:
      `instance_number_of_running_tasks`(その EC2 の全タスク数)、
      `instance_cpu_utilization`、`instance_memory_utilization` …)が取れます。


    8. アラーム設定

    目的:サービスの Desired に対して Running が不足したら通知。
    方針:EC2 が 0 台になってメトリクスが欠落しても 違反として扱い、必ず鳴らす。
    ※オペミスに備えて通知する方針

    1. CloudWatch → すべてのアラーム → アラームを作成

    2. メトリクスの選択:ECS/ContainerInsights → ClusterName, ServiceName → `RunningTaskCount`

    3. 条件

      • 統計:平均

      • 期間:1分(本番は 5 分に設定)

      • しきい値の種類:静的

      • しきい値:`< 2`

      • 欠落データの扱い:違反として扱う(Treat missing data as breaching) ← 重要

      • データポイント:1/1(安定化したい場合は 2/3 などに調整)

    4. 通知:SNS(メール)を選択し、購読メールの Confirm を忘れずに

    5. アラーム名:`RunningTaskCount`

    期待挙動

    • 通常:Running=2 → OK

    • 障害・意図せぬ停止:Running<Desired → ALARM

    • 計画停止(ASG=0 等で欠落):ALARM(欠落=違反扱い)

    メンテナンス時の通知を抑えたい場合は、作業直前に一時無効化する運用も選べます。

    画像
    タスクを 0 → 2 → 0 へ変更してアラート状態を確認

    9. つまずきやすい点(Quick チェック)

    • RunningTaskCount が 0/乖離

      • サービスの Desired・タスク定義(イメージ、メモリ、ポート)を再確認

      • デプロイ サーキットブレーカーでロールバックされていないか

    • Container Insights が出ない

      • クラスタの 「オブザーバビリティが強化…」が オンか

      • 反映まで 数分かかる点に注意

    • アラームが鳴らない

      • 欠落データの扱いが “違反として扱う” になっているか

      • SNS 購読メールを Confirm 済みか


    10. まとめ(本章の到達点)

    • `hostPort=0` で 複数タスク並行&ALB 前提の土台を構築

    • サービス粒度で `RunningTaskCount / DesiredTaskCount` を 見える化

    • 基本アラームを設定し、計画停止を含めRunning 不足・欠落で 必ず通知

    • 自動是正には触れない(ばたつき防止のため運用判断に委ねる)


    次回、5章では、偏り検知の仕組みを設定予定です。

    では
    また、次回に!


    過去の記事



     
     
    インフラエンジニアとして実務メモを、 写真作家として写真物語を、 童話作家として物語を書いています。 写真作品は、ポートフォリオサイトとしてまとめていく予定です。

    あなたへのおすすめ