やりたいこと
下記工程を人の手でやっていたところを自動化したいそう。
なんとなくAWSだけで構築できそうなので考えてみた
- データが記入されたCSVファイルをメールで受け取る
- 受けとったCSVファイルを確認する
- 記入内容にミスが無ければサーバに格納
- 記入内容にミスがあれば、記入列を色付けして返信
↑イメージこんな感じ。
を
↓こんな感じにしてみようかと。
- SESでSCVファイルが添付されたメールを受信する
- 受信したメールをS3に格納
- S3格納をトリガーにLambda発火
- LambdaでCSVファイルの加工を行う。（記入ミスがある場合SESを使用して返信）
- 加工したCSVファイルをS3に格納
- 時間発火（EventBridge+Lambda）でCSVファイルをserverに送信（FTPかな？）
って感じです。
とりあえずやってみよう。笑笑
メールを受信できるようにする。
ここの部分ですね。
SESでも何でも、メールを取得するためにはドメインとか取得して、DNS立てる必要があるそう。
全く詳しくないので探り探りでやってみる。笑笑
ドメインの取得
取得した。笑笑
https://www.onamae.com ←ここで簡単に取れました。
最初の1年間は無料で利用可能とのこと。検証の場合は自動更新をOFFにすることをおススメします。
「お名前.com ドメイン取得 方法」とかでググれば一杯説明出てきました(_ _)
DNSサーバにドメインを登録する
DNSサーバにドメインを登録することで独自のメールサーバを立てることができるようです。
応用情報取ったときに色々勉強はしましたが、実際に触るのは初めてなので探りながら行きましょう。笑笑
今回はAWS完結型で行くのでRoute 53を利用します。
Route 53を利用するとこの後のSESとの連携が楽になりそうでした。（レコードの登録とか自動でやってくれるっぽい）
あ、ちなみにRoute53でもドメイン取得は可能なのですがお金が掛かりそうなので辞めました。
早速登録していきます。
「Route53」→「ホストゾーン」→「ホストゾーンの作成」から、先ほど取得したドメインを登録します。
ドメイン名：先ほど取得したドメイン名
タイプ：パブリックホストゾーン
で登録します。
登録が完了したらNSレコードとSOAレコードが払い出されます。（何か怖いので黒塗りにしてます。。）
払いだされた4つのNSレコードをドメイン名と紐づけていきます。
先ほど取得したドメイン名を選択し、ネームサーバ登録画面に移動します。
Route53に記載されていたNSレコードを上から順に全て登録します。
※ネームサーバ変更まで24~48時間かかる場合があるそうです。
もしこの先の検証でメールの受信ができなかった場合はこれが原因の可能性があります。（僕はここで引っ掛かりました、、、）
メールを受信できるようにする
先ほど登録したドメインでメールを受信できるように設定していきます。
メール受信にはSES+S3を使用します。
ここで注意。
SESのメール受信は東京リージョンでは対応していないそう。（マジかよ）
そのため、今回の検証はバージニア北部で進めていきます。
「SES」→「検証済みID」→「IDの作成」からSESにドメインの認証を行います。
IDタイプ：ドメイン
ドメイン：ドメイン名
を記入します。
SESでドメインが認証されると、Route53に自動でCNAMEレコードが追加されます（便利!!）
ここ！！
説明書いてくれている人が少ない部分です。
メールを受信するためにはMXレコードを追記する必要があります。当たり前と言ったら当たり前か、、、
「レコードを作成」からMXレコードを記入します。
レコードタイプ：MX
でMXレコードが作成できます。
でけた。
ここからはSESの設定をしていきます。
「SES」→「指定Eメールを受信」からルールセットを作成します。
今回は"mail-test"というルールセットを作成しました。
ルールセットを作成したら、「ルールの追加」からメール受信のルールを作成していきます。
ポンポン行きましょう。
ルール名：いい感じの名前
その他は画像の通り
で設定します。
受信者の条件ですね。
条件は「@ドメイン名」だけでいいのですが、そうなると対象ドメインに来たメール全てが受信されることになるので、
受信者の条件は絞っておいた方が賢明です。
「S3バケットの作成」をクリックして、メール格納用のS3を作成します。
元々あったS3を利用することも可能ですが、その場合は許可とかの設定を忘れずに〇
プレフィックスは設定してもどちらでも良いです。
ただ、この後lambda→S3の格納にも同じS3を利用する場合はプレフィックスを設定しておきましょう。
今回の検証では横着して同じS3利用するのでプレフィックス設定しておきます。
SESの設定完了！！
嘘ついた。作成したルールセットは初期設定で無効化されているので、しっかりと有効化しましょう。
メール受信テスト
メールが受信されてS3に可能されるか確認してみます！！
ファイルを添付して送信！！
お！！受信されている！！
「g6vp6~」ってやつがメールですね。
「SES_SETUP」ってやつはSESとS3の連携した時に自動で保存されるREADME的なファイルだと思われます。
part1終わり！！
長くなりそうなので一旦終わります(_ _)
メールの受信からS3格納までの流れを自動化できました。
part2では格納されたメールから添付ファイルを取得しS3に格納するまでの流れ。
part3では取得した添付ファイルをSESを使って送り返す流れを書く感じになるかと。
ほんまに自分が勝手に検証したことをゆる～く書いているだけなので、見づらいとかあればごめんなさい。。
何かあればTwitterにでもDMいただければ嬉しいです。
終わり！！銭湯行ってきます！！
次↓
メールに添付されたCSVファイルの取り込み→加工→転送をAWSのサーバレスで構築する方法の考察 part2 添付ファイル取り込み編