効率的な情報収集に関して(データエンジニアリング関連トピックの事例付き)
前提 データエンジニアリングに関する情報収集と一般的な情報収集の方法を両方記載してます 一般的な情報収集方法に関しては他にも転用可能かと思います きっかけ データエンジニアリングに関する情報はオ...
52 search resultsShowing 1~20 results
前提 データエンジニアリングに関する情報収集と一般的な情報収集の方法を両方記載してます 一般的な情報収集方法に関しては他にも転用可能かと思います きっかけ データエンジニアリングに関する情報はオ...
1. 概要 ポートフォリオにフロントエンドでReactというフレームワークを導入するが これの言語として、AltJSの一つであるTypeScriptを使用しようと考えている まずは使用する前にこ...
概要 データエンジニアは、クライアント(自社の場合でも便宜上クライアントと呼称することにします)のデータ資源を付加価値のある(=分析可能な)データにアウトプットするためのデータ基盤の構築・運用を...
データエンジニアの主戦場 企業システムは ・業務システム(SoR,SoE(System of Record,System of Engagement)) ・分析システム(SoI(System o...
データエンジニアとは 現場における課題を考え、適切な課題解決方法をデータを使用して導き出すエンジニアのこと。 データを分析可能な状態にするエンジニアのこと。 現代の膨大なデータ(不揃い、不規則)...
概要 スタースキーマを学習した後で モデルとしてスタースキーマが存在するが、実際の業務システムを単一スタースキーマで表現することは難しい とのことだったので複数スタースキーマを勉強した。それのま...
概要 データウェアハウスモデリング入門(ダイジェスト版)(事前公開版)というSlideShareを読んだ DWHについては概要を何となく理解したけど、DWHのデータモデリングが気になったので検索...
概要 ディメンショナルデータモデルについて学習したら、スタースキーマ設計について詳細に理解したいと思った。 そこで、以下記事を読んで理解した内容をまとめる ↓参考 ディメンションモデリング ・デ...
参考:https://www.dal.co.jp/column/b-dwh/ データウェアハウスとは Inmon氏いわく 意志決定のため、目的別に編成、統合された時系列で、削除や更新しないデータ...
BigQueryについて GCで提供されているエンタープライズ向けのデータウェアハウス 特徴 高速なデータ処理を行える これを支える2点の仕組みが ・カラム型データストア 列指向でデータを保存...
1. 概要 今までSQLを生で書いてきて(ストアド、テーブル値関数)、ある程度知見が溜まっている ポートフォリオでサーバーサイドにRailsを使用する時、ORマッパーとしてActive Reco...
概要 TwitterでJavaScriptについて誤った解釈のツイートをしました。 するとそれは違う旨の指摘を頂き、調べてみるとどうやら全く理解出来ていなかったみたいでした。 自戒の意を込めて調...
1. 概要 今までVBなどのOOPにばかり慣れ親しんできていた 関数型プログラミングという言葉は知っているが、その実態を全く理解できていない JavaScriptでは関数型プログラミングを意識す...
1. 概要 最近業務でデータ移行ツールを作成することがあった。 私が担当する業務の中の、移行対象のテーブル数は約20くらい。 データ数もはっきりとは数えないけど10万件は軽く越すので、手作業での...
1. 概要 これまでRDBに触れてはきていたが、実際にシステム開発の初期フェーズで行うようなエンティティの抽出やエンティティの定義、正規化といった経験をすることがなかった。 今回ポートフォリオを...
1. 概要 今まで業務でJavaScriptは使用したことはないが、PFで使用する事にした 後で見返すときに簡単に理解出来るようにまとめる りあクト!という書籍で勉強した 2. 変数宣言について...
1. 概要 Linuxのパッケージ管理システムについて、yumとRPMをなんとなく使用していた 仕組みが気になったので、仕組みとyumの用途別でコマンド操作をまとめてみた 参考資料:yum in...
概要 これまでMacで開発等をしているが、Linuxについて調べた内容を発信していなかった これまで調べた内容を補足する形でもう一度自分の頭での理解を文章に落とし込んでまとめてみる 実行した例を...
1. 概要 Linuxの学習をしているときに、実際にコマンドを入力して勉強したかったが、macOSでは微妙に異なる DockerでCentOSイメージを使用してコンテナを作成し、その中で勉強した...
1. 概要 railsのディレクトリ構成や基本的なところから知りたかった railsのディレクトリ構成、railsコマンド、コントローラーやモデルについて調べたことをまとめた 参考資料:Rail...
52 search resultsShowing 1~20 results
Qiita is a knowledge sharing service for engineers.