サーバーが落ちた時にターゲットグループを切り替える

Last updated at 2024-09-17Posted at 2024-09-13

こんにちは。ねこしまです。
今回は、ELBにリスナーとして登録されているEC2①が落ちてしまった際にEC2②のターゲットグループにリスナーを切り替えるという作業を行う機会があったのでその内容を共有したいと思います。

はじめに

全体の流れ

ELBにリスナーとして登録されているターゲットグループのEC2がUnHealthyになった際にCloudWatchアラームで検知し、SNSに流します。
SNSではメール送信と共にLambdaのトリガーとします。
LambdaではEC2①のターゲットグループをリスナーから外し、EC2②のターゲットグループを新たにリスナーとして登録をします。

前提条件

　・VPCやサブネット・ELB・EC2が作成済みであること

対象外事項

　・ターゲットグループ切り替え後のEC2②の起動

対象事項

　・EC2①②それぞれのターゲットグループの作成
　・EC2①のUnhealthyを検知するCloudWatchアラームの作成
　・Lambda起動のトリガーとなるSNSの作成
　・ターゲットグループの切り替えを行うLambdaの作成

設定

ターゲットグループの作成

EC2①を登録したターゲットグループ（first-tg）を作成します。

続いてEC2②を登録したターゲットグループ（second-tg）を作成します。

ターゲットグループが2つできました。

ロードバランサーの作成

では、ALBを作成します。
まず、[ロードバランサーの作成]を押下します。

今回の作成はALBです！

ターゲットグループはEC2①が登録されているfirst-tgで設定します。

ロードバランサーを作成し、しばらくたつと、登録しているターゲットグループがHealthyになりました！

ALBのDNS名でアクセスすると、下記のようにEC2①のページを見ることが出来ました。

Lambdaの作成

では、Lambda関数を作成します。
下記リンクを参考に作成しました。
lambdaでalbのターゲットグループ変更の仕方

まず[関数の作成]を押下します。

ランタイムはPython3.12を使用します。

関数は下記を入力してDeployします！※インスタンスの起動や停止は含まず、TGの切り替えのみを行っています。

import boto3
import json
import time

elbv2_client = boto3.client('elbv2')
ec2_client = boto3.client('ec2')

target_group_arn1 = '1台目のインスタンスが紐づいたターゲットグループのARN'
target_group_arn2 = '2台目のインスタンスが紐づいたターゲットグループのARN'
listener_arn = '変更するリスナーのARN'

def lambda_handler(event, context):
    MESSAGE = json.loads(event['Records'][0]['Sns']['Message']) 
    Deregister_tg_ID = MESSAGE['Trigger']['Dimensions'][0]['value']
    
    Message = json.dumps(MESSAGE) 
    deregister_target_group_arn = json.dumps(Deregister_tg_ID) 

    elbv2_client.modify_listener(
        ListenerArn=listener_arn,
        DefaultActions=[
            {
                'Type': 'forward',
                'TargetGroupArn': target_group_arn2,
            },
        ]
    )

これでLambda関数は完成しました。

SNSの作成

では続いてSNSを作成します。
※今回は通知も同時に行いたかったためSNSを使用します。

まず[トピックを作成]を押下します。

トピック名を記入して作成します。

次は作成したトピックのサブスクリプションを作成します。

プロトコルはLambdaを選択し、エンドポイントには先ほど作成したSNSのARNを入力します。

作成を押下し、Lambdaに戻るとトリガーとしてSNSが入力されていることが分かります。

ここまでの設定を行ったら、最後はCloudWatchアラームのみになりました！最後にここを作成したら完成です。

CloudWatchアラームの作成

EC2①が登録されたターゲットグループ（first-sg）のUnHealthyHostCountメトリクスでアラームを作成します！

今回は1分間の平均で統計を取り、3分以内の3データポイントでUnhealthyだった場合にターゲットグループが切り替わるように設定したいと思います。
また、本メトリクスはHealthyの場合データ不足になってしまうので「欠落データを適正」として扱うようにします。こうすることで、普段はアラームがOKとなるようになります。