概要
Azureでデータ活用してみようということで、簡単な構成を考えてみました。
試行錯誤しながら作業をしているので、途中で構成変更もあるかもしれません。
何を知りたいのか
自社SEの単価を受注金額や工数データを用いて調べてみたいと思います。
※自社データで作業している為、実際のデータのやり取りを掲載することが出来ず、申し訳ございません。
Azure構成
まずは以下の工程で、データ活用を進めてみることにします。
進めていく過程の中で、他のサービスがよければ、変更する予定です。
・Azure Data Factory
データ接続、収集、蓄積を自動化します。
・Azure DataLake Gen2
rawデータとDatabricksにて加工したデータもDataLakeに蓄積します。
・Azure Databricks
notebooksにてrawデータを分析しやすいように加工します。
・Power BI
言わずと知れたデータ可視化ツールです。
まとめ
Azureのサービスを利用してのデータ分析基盤の構成を考えてみました。
データ連携、データ加工、可視化についても記事を書きます。