リクエスト時に複数IP分散や自動IP変更をする方法 #AWS

TL;DR

Route53でIP分散
Elastic IP付け替え/サーバー再作成で自動IP変更
プロキシ用のサーバーはEC2かConoHaあたりが良さげ

はじめに

HTTPリクエストの際などIPを変えたいときってありますよね。
ですが、プロキシを通すにしても一つだけだと都合が悪く、複数に分散させたり、たまにIPを変えたい、といったケースに直面することもあると思います。

今回はそういった場合に使えそうな実装を紹介します。
原始的な方法ですが、同じようなことをやりたい人の参考になればと思います。
また、より効率的な方法を知っている方がいましたらお教えいただけますと幸いです。

ついでにプロキシ用のサーバー選定についても紹介します。

使用したプロキシサーバー

プロキシサーバーは squid を使用しました。

導入、設定には 5分で作るPROXYサーバーを参考にしました。
5分でプロキシサーバーが立ちます。

ケース別の実装紹介

ここからは段階を踏んで、ケース別に必要な実装を紹介していきます。

とりあえずIPを変えたい

適当なサーバーを借りてsquidを入れれば問題ありません。

RubyでHTTPリクエストをするときは以下のような感じで噛ませます。

プロキシを使わないとき

require 'net/http'
require 'uri'

base = 'http://hogehoge.com/fugafuga'
uri = URI.parse(base)
http = Net::HTTP.new(uri.host, uri.port)

プロキシを使うとき

require 'net/http'
require 'uri'

base = 'http://hogehoge.com/fugafuga'
uri = URI.parse(base)
proxy = Net::HTTP::Proxy('プロキシのIP', プロキシのポート番号)
http = proxy.new(uri.host, uri.port)

複数IPにリクエストを分散させたい

一つのIPからリクエストを送ると都合が悪いとき、複数のプロキシにリクエストを分散して送信させる方法です。

これにはRoute53を使用します。
まず適当なドメインを取得し、ホストゾーンを作成。
そしてそのホストゾーンに proxy.mydomain.com のようなAレコードを作成します。

Aレコードが出来たらプロキシサーバーを必要な数だけ立てます。
そしてプロキシサーバーの設定が終わったらレコードのValueにIPを追加。

あとはコードでプロキシの指定先をこのレコードにするだけです。

プロキシを使うとき

require 'net/http'
require 'uri'

base = 'http://hogehoge.com/fugafuga'
uri = URI.parse(base)
proxy = Net::HTTP::Proxy('proxy.mydomain.com', プロキシのポート番号)
http = proxy.new(uri.host, uri.port)

これでリクエストを送信すればレコードに設定したIPへ分散してくれます。

IPを定期的に自動で変更したい

単一のIPでリクエストを続けるとダメになるので度々IPを変更させたいという場合や、上記の複数IPにリクエストを分散させるとき、IP範囲を度々変更させたい場合に使用する方法です。

プロキシを使用せずサーバーのIPを変更する

ここまではプロキシを使用しましたが、AWS EC2であればサーバーを停止することなくElastic IPの付け替えが可能です。

マネジメントコンソールから操作をする場合はEC2 > Elastic IPから、新しいアドレスの割り当て、既存のIPの関連付けの解除、新規IPの関連付けとすれば完了です。

ここでサーバーのIPが変わってしまってはWEBサイトにアクセスが出来なくなってしまうのではと思われるかもしれませんが、Route53 - ELB - EC2のようにPrivate DNSを使用してEC2へアクセスを送れば問題ありません。

またこれをスクリプト化することで自動実行出来るようにします。
gem aws-sdk のv1を使用すると以下のような実装が出来ます。

ElasticIP変更スクリプト

config = {
  access_key_id: ENV['EC2_ACCESS_KEY_ID'],
  secret_access_key: ENV['EC2_SECRET_ACCESS_KEY'],
  ec2_endpoint: 'ec2.ap-northeast-1.amazonaws.com'
}

ec2 = AWS::EC2.new(config)
i = ec2.instances[ENV['INSTANCE_ID']]

eip = ec2.elastic_ips.create(vpc: ENV['VPC_ID'])
old_ip = i.elastic_ip

i.disassociate_elastic_ip
i.associate_elastic_ip(eip)
old_ip.delete