More than 5 years have passed since last update.

S3 Select でparquet ファイルを開く(parquet-tools入れるより楽かも)

Last updated at 2018-09-07Posted at 2018-09-06

S3 Select が parquetフォーマットに対応しました。

"Glueの使い方的な①(GUIでジョブ実行)"(以後①とだけ書きます)で出力したparquetファイルを使います。(とあるparquetファイルと思ってください。)

オブジェクトにチェックを入れて、"アクション"->"S3 Select"をクリック

"Parquet"にチェックを入れ、[ファイルプレビュー]をクリック、表示されました。簡単です。
SQLを書きたい時は画面の右下の[次へ]をクリック

SQL エディタにSQL書いて[SQLの実行]をクリック

select * from s3object s where s.deviceid = 'iphone'

サンプルもあります

ちょっとした確認にはよさそうです。