【AWS】S3の使い方をおさらい

Last updated at 2021-12-06Posted at 2021-12-06

はじめに

どーも、のぶこふです。

寒いですね。
最近、一段と寒さのレベルが上がった気がします。
そんなこんなで、今回はS3を取り上げます。

Samui／Saikin／SonnaKonnaDe　と、S3を意識してみました。
・・・はい、どうでも良いですね。

この記事はGFAMアドベントカレンダー2021の6日目の記事です。

今回のサービス一覧

Service名とか	概要
S3 ¹	拡張性と耐久性を兼ね備えたクラウドストレージ

S3

アイキャッチ画像のところでも、記載してますが、「Amazon Simple Storage Service」を略して「S3」です。
- 読み方としては「えすすりー」が主流（「えすさん」と呼ぶ人も稀にいますが、数字は英語読みがベターです
AWSが提供しているストレージサービスの中では、最も認知度が高いです（のぶこふ調べ）
- 他には、EBSやEFS、FSxが軒を連ねます。
- ストレージサービス関連というと、BackupやStorage Gatewayなども含まれるみたいですね。
データを安全に、容量制限無く、データ保存可能な、オブジェクトストレージ²

オブジェクトストレージ？

オブジェクトやそれに付随するメタデータ、そのオブジェクトにアクセスするためのユニークなIDで構成されるデータの倉庫

特徴

容量無制限
- 5TB/1ファイル
高い耐久性
- 99.999999999%（9が11個→11 9s）
- 少なくとも３つのAZにデータを格納する
  - １つのAZは最大８つのデータセンタで構成されている
    - １つデータセンタのダウン、１つのAZダウンでは、可用性に影響しない！！
安価
スケーラブル
- データ容量に依存しない性能

用語

名称	概要
バケット	オブジェクトの保存場所。名前はグローバルでユニーク。バケット内オブジェクト数は無制限。
オブジェクト	データ本体。URLが付与される。
キー	オブジェクト格納URLパス。「バケット＋キー＋バージョン」が必ず一意になる
メタデータ	システム定義メタデータ、ユーザ定義メタデータ
リージョン	バケットを配置するAWSのロケーション。

オブジェクト補足
- オブジェクトサイズ：0～5TB/1ファイル
- アップロード可能サイズ：5GB/1PUT

オブジェクトのネーミングスキーマ

オブジェクトは、バケット内にフラットに格納される
キーのパス指定で、フォルダ階層のように表示も可能
- 「/」を区切り記号として、マネジメントコンソールではフォルダ構造を表現している

ストレージクラス

各ユースケース向けに幅広いストレージクラスが提供されている。³

ストレージクラス	和名	概要
STANDARD	標準	複数AZにデータ配置。デフォルト
STANDARD_IA（Infrequent Access）	標準低頻度アクセスストレージ	スタンダードに比べて格納コストが安価。データの読み出し容量に対して課金
Intelligent-Tiering	未知・変化のアクセスパターン	アクセス頻度によって自動的に最適化するストレージクラス
OneZone_IA	１ゾーン低頻度アクセスストレージ	１AZにデータ配置。
Glacier※	アーカイブ	低コスト。データ取り出しにコストと時間がかかる。
Glacier Deep Archive	アーカイブ	最も低コストなコールドストレージ。取り出しには半日～３日。

※「re:Invent 2021」にて、「Glacier」の名称が「Glacier Flexible Retrieval」となり、新たに「Glacier Instant Retrieval」も登場しています

Amazon S3 Transfer Acceleration

FAQより
※FAQが充実しすぎていて、これを眺めるだけでも、試験対策になりそう・・・

Q: S3 Transfer Acceleration とは何ですか?

Amazon S3 Transfer Acceleration によって、クライアントと Amazon S3 バケットの長距離間でファイルを高速、簡単、安全に転送できます。S3 Transfer Acceleration では、世界中に散らばる Amazon CloudFront の AWS エッジロケーションが活用されます。データが AWS エッジロケーションに到着すると、最適化されたネットワークパスで Amazon S3 バケットに向かうようルーティングされます。

エッジロケーションを使って、高速化しているようですね。

Q: S3 Transfer Acceleration の使用を開始するにはどうすればよいですか?

S3 Transfer Acceleration を使い始めるには、Amazon S3 コンソール、Amazon S3 API、または AWS CLI を用いて S3 バケットで S3 Transfer Acceleration を有効化してください。S3 Transfer Acceleration が有効にされた後、Amazon S3 の PUT および GET リクエストで、s3-accelerate エンドポイントのドメイン名を指定できます。データ転送を加速するには、データ転送アプリケーションで、次の 2 つのタイプのエンドポイントのいずれかを使用してバケットにアクセスする必要があります。"デュアルスタック" エンドポイントの場合は .s3-accelerate.amazonaws.com または .s3-accelerate.dualstack.amazonaws.com です。標準のデータ転送を利用する場合、通常のエンドポイントの使用を継続できます。

お手軽に使えるのも、ポイント。

マルチパートアップロード

ユーザガイドより
オブジェクトサイズが大きい場合は、使用を検討。

マルチパートアップロードを使用すると、単一のオブジェクトをパートのセットとしてアップロードすることができます。
各パートは、オブジェクトのデータの連続する部分です。これらのオブジェクトパートは、任意の順序で個別にアップロードできます。いずれかのパートの送信が失敗すると、他のパートに影響を与えることなくそのパートを再送することができます。オブジェクトのすべてのパートがアップロードされたら、Amazon S3 はこれらのパートを組み立ててオブジェクトを作成します。
通常、オブジェクトサイズが 100 MB 以上の場合は、単一のオペレーションでオブジェクトをアップロードする代わりに、マルチパートアップロードを使用することを考慮してください。

使い方

簡単に、オブジェクトの配置～削除までやってみましょう。

バケットの作成

S3を検索して、コンソールに移動
「バケットの作成」を選択
情報を入力して、「バケットを作成」を選択

項目名	設定値
バケット名	s3-test-nobkov
AWSリージョン	アジアパシフィック（東京）ap-northeast-1
オブジェクト所有者	ACL無効（デフォルト）
パブリック・アクセス設定	パブリックアクセスをすべてブロック（デフォルト）
バージョニング	無効にする（デフォルト）
タグ	Key:Name, Value:S3test
暗号化	無効にする（デフォルト）
オブジェクトロック	無効にする（デフォルト）