AWS Glue Job から MySQL を読み込む
awsglue が標準で提供している DynamicFrame の機能を使うなら簡単？ glue 内で spark の JDBC read で MySQL 読もうとすると JDBC が見つからな...
0
0
Comment0
5 search resultsShowing 1~5 results
Stocked
You need to log-in
Lambda で Scheme を実行する
AWS Lambda Custom Runtimes芸人 Advent Calendar 2018 の 7日目です。 AWS Lambda で Custom Runtime がサポート され、任...
5
0
Comment0
credstash を使って Docker にクレデンシャル情報を渡す例２つ
Docker の起動スクリプトや docker-compose.yml を git で管理していると、パスワードなどのクレデンシャル情報の扱いに困ることがよくあります。 もし実行環境がAWSにあ...
3
4
Comment0
日付をループするコマンド
データ分析やバッチ処理などをしていると、ある日からある日まで日付を辿りながらコマンドを実行したい時がよくあります。 シェルコマンドのワンライナーなら以下のような感じで書けます。 for i in...
1
0
Comment0
有象無象の社内ツールの認証と権限管理をいい感じにする
mixiグループ Advent Calendar 2017の１０日目の記事です。 XFLAGスタジオでデータ分析基盤の運用を担当している ojima です。 私たちのチームでは分析基盤の一部とし...
16
8
Comment0
5 search resultsShowing 1~5 results
Qiita is a knowledge sharing service for engineers.
- You can follow users and tags
- You can stock useful information
- You can make edit suggestions for articles