1
1

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?

More than 5 years have passed since last update.

Google BigQuery WebUIクイックスタート

Posted at

まずはWebUIクイックスタートのマニュアルのとおり進めて、実際に利用してみる。
https://cloud.google.com/bigquery/web-ui-quickstart

検索の実行やデータのロード、データのエクスポートする際に、可視化インタフェースとしてWebUIを使用することができる。
このクイックスタートではパブリックデータに対する問い合わせと、サンプルデータをBQへ登録する方法について示す。

1.準備

データをロードするのにコストがかかるので、ビリングの設定をしておく必要がある。

2.パブリックなデータセットを検索

BigQuery web UIはテーブルに問い合わせするためのインタフェースを提供する。

COMPOSE QUERYをクリック。
スクリーンショット 2015-12-08 15.10.57.png

次のクエリをテキストエリアに入力する。

SELECT
  weight_pounds, state, year, gestation_weeks
FROM
  publicdata:samples.natality
ORDER BY weight_pounds DESC LIMIT 10;

スクリーンショット 2015-12-08 15.13.46.png

クエリが妥当かどうかは緑か赤で判断できる。妥当であれば、1回のクエリで処理されるデータ容量が表示される。これは実行するとどれくらいのコストが発生するか分かるので役に立つ。
スクリーンショット 2015-12-08 15.15.41.png

RUN QUERYボタンをクリックすると、クエリの結果は下に表示される。
スクリーンショット 2015-12-08 15.17.02.png

上記のクエリはパブリックデータセットのテーブル(publicdata:samples.natality:)にアクセスしている。
publicdataはプロジェクト名、samplesはデータセット名、natalityはテーブル名。

何個のデータを扱ってたのか確認してみる。約1億3700万のデータに対してクエリをかけていた。
スクリーンショット 2015-12-08 15.20.20.png

3.データをロードしテーブルに格納

カスタムデータをテーブルにロードし、クエリをかける。

3.1.データのダウンロード

US Social Security Administrationが提供しているzipファイルをダウンロード。

3.2.データセットの作成

プロジェクト名の横にある下向きの矢印をクリックし、Create new datasetをクリックする。
スクリーンショット 2015-12-08 16.26.14.png

dataset IDを入力
Dataset IDはプロジェクト毎にユニークである必要がある。
スクリーンショット 2015-12-08 16.29.18.png

3.4.データをロードし、新しいテーブルに格納

新しいテーブルにデータを入れる。
下向き矢印をクリックし、 Create new tableをクリックする。
スクリーンショット 2015-12-08 16.32.59.png

table IDを入力。
スクリーンショット 2015-12-08 18.12.41.png

Click the Choose fileボタンをクリックし、yob2014.txtファイルを選択。
スクリーンショット 2015-12-08 18.14.16.png

Click Edit as textをクリックし、以下の文字を入力する。
name:string,gender:string,count:integer
スクリーンショット 2015-12-08 18.15.39.png

Submitボタンをクリック
スクリーンショット 2015-12-08 18.16.30.png

上記のステップで、BigQueryはテーブルを作成し、そこにデータをロードすることができた。

しばらく(1分程度)するとテーブルが作成されていることを確認できる。
スクリーンショット 2015-12-08 18.19.52.png

3.5.テーブルを検索

カスタムデータをテーブルに入れたので、パブリックデータを処理した時と同様に、クエリをかけることができる。

COMPOSE QUERYボタンをクリック
次のクエリをテキストエリアに記載。 datasetIdとtableIdはさっき作った自分のものを指定する。

SELECT
  name, count
FROM
  datasetId.tableId
WHERE
  gender = 'M'
ORDER BY count DESC LIMIT 5;

スクリーンショット 2015-12-08 18.22.35.png

1
1
0

Register as a new user and use Qiita more conveniently

  1. You get articles that match your needs
  2. You can efficiently read back useful information
  3. You can use dark theme
What you can do with signing up
1
1

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?