S3 メタデータ

対応リージョン

2025/02 現在では東京リージョンはみ対応

他の方も試されていると思いますので、私の記事では余分な解説は省いてシンプルな設定方法を纏めます。

Amazon S3 > テーブルバケット > テーブルバケットを作成より「テーブルバケット名」を入力し、テーブルバケットを作成する。

Amazon S3 > バケット > <自身の S3 バケット名> より「メタデータ」タブよりメタデータを作成していきます。

送信先テーブルバケットは【テーブルバケットを作成】で作成した arn を指定。
メタデータテーブル名はデフォルトのままで設定。

Amazon Athena がテーブルにアクセスできるようにドキュメントに従って、Lake Formation の権限を付与します。

汎用バケットにファイルをアップロードし、クエリを実行してみると簡単にメタデータを取得可能です。

参考までにカラムは次の通りとなっておりました。

SELECT column_name
FROM information_schema.columns
WHERE table_name = '<テーブル名>';