データ基盤のワークフローエンジン選定
データ基盤はサービスにあるすべてのデータを集めて、分析できるようにする基盤です。 例えば、Mysql、Postgresqlにあるようなマスターデータだったり、Nginxのアクセスログだったり、G...
6 search resultsShowing 1~6 results
You need to log-in
データ基盤はサービスにあるすべてのデータを集めて、分析できるようにする基盤です。 例えば、Mysql、Postgresqlにあるようなマスターデータだったり、Nginxのアクセスログだったり、G...
はじめまして、Newspicksでエンジニアしています、Hoàngです。 新卒で入社し、現在はNewspicksを支えるデータ分析基盤を作っています。そのノウハウをシェアできればと思い、この記事...
背景 AWSで開発していて、本番アカウントと検証(ステージング)アカウントを分けて開発するのは、一般的ではあります。 その時にS3バケット経由で本番とステージングで同期する必要があります。 今回...
背景 データ基盤を開発する上で、Redshiftを立ち上げて検証する必要がありますので、Redshiftを立ち上げるスクリプトを作りました。 Redshiftを作成する AWS上の全てのリソース...
背景 あWSで開発していて、RDSデータベースを複製し、検証・開発する必要があります。そこで、瞬時に新しいデータベースを作れるように、 AWS CDKでデータベースを作成するスクリプトを作ります...
こんにちは Newspicksでエンジニアインターンをしている、Nguyen Hoangです。普段は、奈良先端科学技術大学院大学(Naist)で自然言語処理の研究をしている大学院生です。 記...
6 search resultsShowing 1~6 results
Qiita is a knowledge sharing service for engineers.