今回の課題
EC2にRedashを建てて、Snowflakeのデータを参照するまでにつまずいたりしたので、流れを記録する。
ちなみに、これまで下記の記事のようにRDSからスナップショットをparquet形式のファイルでS3にエクスポートし、S3にエクスポートしたファイルをSnowflakeにロードする。ということを行ってきた。
今回はそれらをRedashで可視化してみる。
進めた手順
1)EC2にRedashを立ち上げる
下記の手順でEC2にRedashを立ち上げた
1)-1. リージョン毎に用意されているAMIからインスタンスを立ち上げる
└ca-central-1のAMIを使用した。
└また、インスタンスタイプはt2.smallが推奨されていたので、そちらを使った。
※インスタンスタイプを無料枠のt2.microでインスタンスを立ち上げると、ブラウザからRedashにアクセスすることができなかったので注意。
└パブリックIPアドレスの自動割り当ては「有効化」を選択して、パブリックIPアドレスは割り当てておく。
1)-2. 立ち上げたインスタンスのセキュリティグループを設定する
立ち上げたインスタンスのセキュリティグループのインバウンドルールに、
ポート22(SSH), 80(HTTP), 443(HTTPS)を追加する。
これによって、インスタンスにSSH, HTTP, HTTPS接続でアクセスすることができるようになる。
1)-3. Elastic IPを設定する
EC2のパブリックIPアドレスは動的なIPアドレスなので、インスタンスを立ち上げるたびに変ってしまう。
そこで、Elastic IPアドレスをEC2インスタンスに割り当てることで、
EC2インスタンスのアドレスを固定にすることができる。
2)ブラウザからRedashにアクセスしてログインする
ブラウザのアドレスバーに、https://[ECのElastic IPアドレス]を入力して検索することで、Redashのログイン画面にアクセスすることができるので、必要項目を入力してRedashにログインする。
3)RedashとSnowflakeを接続する
ログインが完了したら、
RedashのトップページのConnect a Data Sourceをクリックして、
Dew Data Sourceに進み、Snowflakeを選択する。
すると下記のような画面に進むので必要な箇所を入力していく。
入力項目
SnowflakeとRedashを接続する際の、
入力項目が少し分かりずらかったため補足説明をメモ。
-
Name：接続設定につけたい名称を入力する。 -
Account：[Locator].[リージョン名].awsを入力する。
Locatorはworksheets上でshow organization accounts;を実行して、抽出されたデータのaccount_locatorカラムの値と同じ。 -
User：Snowflakeのユーザー名を入力する。 -
Password：Snowflakeのパスワードを入力する。 -
Warehouse：使用したいWarehouseを入力する。 -
Database：Redashに接続したいDatabaseを入力する。 -
Region：入力すると原因不明のエラーが発生するので空欄にする。
4)Redashでクエリを実行してみる
メニューバーのCreate > Queryから、
下記の画像のようなクエリの編集画面に飛ぶことができるので、ここでクエリを実行する。
また、クエリ編集画面の下の、+ New Visualizationをクリックすることで、
Visualization Editorに飛ぶことができ、データを可視化することができる。
SaveとPublishボタンを押して、保存することも忘れないようにする。
まとめ
以上で、Redashでデータを可視化するところまで実装することができた。
おまけ
気になった言葉や参考にした記事など。
AMI（Amazon Machine Image）とは
EC2インスタンスの起動に必要な情報を提供するテンプレート。
OSやボリュームの情報などを提供する。
今回の件では、Redashが用意しているAMI(OSやボリュームなどを提供するテンプレート)を使って、
EC2のインスタンスを構築した。というイメージ。
参考記事