はじめに
初のGCPネタです
BigQueryというサービスがあるのですが、2023/7/5より従来の論理ストレージだけでなく、
物理ストレージも課金方法として選択できるようになったようです。
今回は論理ストレージとの違いや、論理ストレージから物理ストレージへの設定変更方法や注意点について紹介してみます。
目次
論理ストレージと物理ストレージの違い
そもそも物理ストレージとどう違うのかって話ですが、簡単に言うと課金されるタイミングが違います。
- 論理ストレージ(Logical storage)
保存されたデータを圧縮する前のサイズに基づいて課金額が決まる - 物理ストレージ(Physical storage)
保存されたデータの圧縮後のサイズに基づいて課金額が決まる
データを圧縮することで12分の１程度まで小さくなるようです
【参考】：https://cloud.google.com/blog/products/data-analytics/introducing-new-bigquery-pricing-editions?hl=en
単純に比べると物理ストレージに変更することで料金が安くなるように見えますが注意点があります。それは単価の違いです。
物理ストレージは１GiBあたりの料金が論理ストレージの2倍以上となってます。
そのため、物理ストレージに移行すれば必ず安くなるというわけでないのでご注意ください。
物理ストレージ変更後に論理ストレージに戻せるのか
以下の公式ドキュメントの日本語版を見るとこのように書かれています。
https://cloud.google.com/bigquery/docs/datasets-intro?hl=ja#dataset_storage_billing_models
しかし、英語版はこうなってます
「Once you change a dataset's storage billing model, you must wait 14 days before you can change the storage billing model again.」
翻訳：「データセットのストレージ課金モデルを変更した後、ストレージ課金モデルを再度変更できるようになるまで 14 日間待つ必要があります。」
どうやらストレージを物理ストレージに変更できそうなことが書いてありますね
どっちやねんってなりますが、英語版の表記が正しいようです。
(Googleサポートに確認済み)
その他の項目でも日本語版と英語版で表記に違いがある場合がありますが、その際は英語版を参考にするようにしてください。日本語版はアップデートが追い付いていないだけかと思われます。
変更方法
変更方法はSQL,API,BQ CLIを使った3種類の方法があり、今回はBQCLIの方法を紹介します。
BQCLI以外の方法は以下のドキュメントに記載がありますのでご参考までに。
https://cloud.google.com/bigquery/docs/updating-datasets?hl=ja#update_storage_billing_models
課金モデルの変更はデータセットごとにコマンドを実行します。
bp update -d --storage_billing_lmodel=PYSHICAL プロジェクトID:データセットID
『succesfully updated』 のメッセージとともに更新が完了しました
確認方法
確認方法はコンソール上で行う方法とCLIの2種類があります。
bq show --format=prettyjson プロジェクトID:データセット名
ストレージタイプがPHYCICAL(物理ストレージ)になっていることが確認できました
コンソール画面でも確認してみます。
「データセット名」を選択し、「データセット情報」を表示します。
「ストレージの課金モデル」という項目が追加され、「PHYSICAL」と表記されていることが確認できました。
※論理ストレージの場合は「データセット情報」に表示されないようです。
さいごに
半年ぶりのQiita投稿&初のGCP記事でした。
物理ストレージへの変更は料金に直接影響が出る内容かと思います。
また、最近アップデートされたばかりなのでまだ日本語の情報が少なく、対応を検討している方も多いのでは？と思い書いてみました！この記事がどこかの誰かの役に少しでも立ってくれたらうれしいです。
今回はここまでとなります。
最後まで読んでいただきありがとうございました！