Azure blob storageのデータをwindows上にてまとめてDL

概要

Azureのblob storageからデータをまとめてDLしたい。

そこでAzure Storage Explorerとか使えばぱぱっとDLできると思ったらなぜかタイムアウトしたりで全部まとめてDLできなかった。

そこで別の手段としてつMicrosoft Azure Storage で AzCopy を使用する方法など試してみた。

やってみた

蒼の王座AzCopy–Windows Azure Blob用のファイルアップロード・ダウンロードツールがリリース - 蒼の王座

とかもみつつexeをwindowsにインストールして、

# cmd.exe開く
cd %ProgramFiles(x86)%\Microsoft SDKs\Azure\AzCopy

# コンテナ単位で全てDL
AzCopy.exe /Source:https://<storage_account>.blob.core.windows.net/<container_name> /Dest:<dst_path> /SourceKey:<storage_account_key> /S 

でできた。

めでたしめでたし。
1000ファイル位あっても数MB/sでDLできたので何より。

logファイルなりなら、サービスバスなり別のサービスをblob storageにつなげてぱぱっと解析するプラットフォームを作れという話もある。