はじめに

以下の要求を満たしたものを使いたい。

それっぽいサービスは以下の通りです。

Data Pipeline、GlueはETLを行なうものとして考えて作られたサービスのようなので純粋なバックアップのスケジュールタスクというわけではなさそう。
Batchはその名の通り、バッチ処理をマネージドで行なうもののようです。

この内、AWS Data Pipeline でバックアップを行なう流れはどんな感じになるのかを試してみました。

オンプレミスに対しても何かできるみたいだけど今回はAWS上のDynamoDBをバックアップするので、割愛します。

料金

2016年12月6日現在の月額料金は以下の通り。

月額を日本円にすると低頻度は約60〜70円、高頻度は100円〜115円位になります。

等はどのように課金されるのかはわかりませんでした。

※ 低頻度と高頻度の区別は、1日に1回以上実行するか否か。

無料枠の繰越はなし。

以下はpipelineの説明に出てくる登場人物の概要です。

名前	概要
データノード	タスクの入力データの場所または出力データが保存される場所。
アクティビティ	リソースとデータノードを使用して、スケジュールに従って実行する作業の定義。
前提条件	アクションを実行する前に true である必要がある条件ステートメント。
パイプラインのスケジューリング	アクティビティの実行など、予定されているイベントのタイミングの定義。
リソース	パイプラインで定義する作業を実行するコンピューティングリソース。
アクション	アクティビティの失敗など、指定された条件が満たされた場合にトリガーされるアクション。

初めてAWS Pipelineを作ろうとするとIAMに以下２つのロールができるようです。

適当なバケットを作成しました。

DynamoDBにMyuon.DataPipeline.BackupTarget というテーブルをバックアップ対象として作りました。

リージョンはバージニア北部、入っているデータはとりあえずの１レコード。以下のとおりです。

条件を設定してDynamoDBデータノードとS3データノードを作成し、それらをアクティビティでつなぐとバックアップされるのだろうか・・・。

最初はこんな感じの画面でモロモロ入力するようです。

項目名	値
Name	backup.dynamodb.Myuon.DataPipeline.BackupTarget
Description (optional)	Myuon.DataPipeline.BackupTarget のバックアップ
Source	Build using a template > Export DynamoDB table to S3

DynamoDBをS3にバックアップするpipelineのテンプレは用意されているようです。

項目名	値
Source DynamoDB table name	Myuon.DataPipeline.BackupTarget
Output S3 folder	s3://xxxxxxx.dynamo.backup/
DynamoDB read throughput ratio	0.25
Region of the DynamoDB table	us-east-1