データサイエンティストが知っておきたい！データエンジニアリング入門書５選
はじめに 筆者は、新卒でデータサイエンス関係の仕事に３年半携わったのち、２社目の現職でデータエンジニアリングに初めて触れ、本格的に取り組んでおります。 データエンジニアリングはデータサイエンスと...
7
2
Comment0
25 search resultsShowing 1~20 results
Stocked
You need to log-in
TROCCO®のHTTPコネクタを活用して、スマレジの取引データを取得する
TROCCO®のコネクタがアップデートされ、2025年5月20日に転送元スマレジがリリースされました！今後はスマレジコネクタをご利用ください。 https://documents.trocco....
6
2
Comment0
Databricks経由Machine Learningの旅 第三話 -Unity Catalogの特徴を捉える-
はじめに 本記事はDatabricks アドベントカレンダー2024 9日目の記事です。 「Databricks経由Machine Learningの旅」の3回目になります。 (前回の更新から、...
5
1
Comment0
TROCCO®のHTTPコネクタを活用してBacklogのプロジェクトの課題一覧をBigQueryに転送する
TROCCO®のコネクタがアップデートされ、2025年4月21日に転送元Backlogがリリースされました！今後はBacklogコネクタをご利用ください。 https://documents.t...
6
2
Comment0
DatabricksでBigQueryのデータが簡単に見れます！
はじめに 皆さんはデータ分析をどの環境で行っていますか？ ダッシュボード用のデータマートには、GoogleのBigQueryを使っている方も多いでしょう。 一方で、機械学習や統計分析を行う場合は...
1
1
Comment0
「JEDAI2025新年会meetup!」に参加してきた！
はじめに 先日行われた、DatabricksのユーザーコミュニティJEDAI主催の「JEDAI2025新年会meetup!」に参加をしました。JEDAIのユーザー会に初めて参加しましたが、非常に...
5
3
Comment0
Databricks経由Machine Learningの旅 第四話 -Unity Catalogでkaggleのデータをわかりやすくして貰う-
はじめに 本記事はDatabricks アドベントカレンダー2024 23日目の記事です。 前回はUnity Catalogの特徴について、機械学習で活用する視点からご紹介しました。 今回は、U...
2
3
Comment0
TROCCOが「freee会計」に対応したので爆速で触ってみた
はじめに ETLツールのTROCCOを開発するprimeNumberでは「あらゆるデータを、ビジネスの力に変える」をミッションに掲げており、TROCCOの対応するコネクタも非常に豊富で、日々進化...
1
1
Comment0
Googleスプレッドシートで日毎の売上から月単位の売上合計を簡単に集計する方法
はじめに お店の売上や支出、日常生活だと貯金額や出費をEXCELやスプレッドシートで日々管理されている方も多くいるでしょう。 その際に、日単位の売上や収入を、当月や前月の月単位の合計値を算出した...
2
1
Comment0
Google スプレッドシートで在庫の「更新された日時」と「更新前の数量」が簡単にわかる方法
はじめに 在庫管理をしたい場合、皆さんはどんなツールを思いつきますか？ 商材が多い場合、データべースを導入して....と想像される方も多くいるかと思います。 しかし、導入に至るハードルは結構高い...
2
2
Comment0
Googleスプレッドシートの関数でダミーデータを楽に作る方法
はじめに モックアップや開発試験等でも用いることがあるダミーデータを皆さんはどのようにして作られていますか？ 十数行程度のデータであれば、あれこれ考えながら手動で数値入力してもそこまで時間がかか...
2
1
Comment0
データ分析を最短ルートで身につける
はじめに 皆さんはデータ分析にはどのようなイメージをお持ちですか？ 「ビジネス上でのデータ分析」「データサイエンス」「機械学習(ML)やAI」など様々なイメージをお持ちの方が多いかもしれません。...
17
12
Comment0
Databricks経由Machine Learningの旅 第二話 -Notebookを触ってみよう！-
はじめに 「Databricks経由Machine Learningの旅」2回目になります。 前回は、ETLツールのTROCCO®を用いて外部データを取得し、Databricksにデータを準備す...
4
3
Comment1
Databricks経由Machine Learningの旅 第一話 -kaggleのデータをTROCCO®で準備する-
はじめに ETLツールであるTROCCO®の転送先として、Databricksが2024年6月に追加されました。 自社製品がDatabricksに対応したと聞き、近いうちに触りたいと思ってました...
9
5
Comment0
TROCCO®のHTTPコネクタでBASEの注文データを取得する方法
はじめに BASEは、誰でも簡単にECサイトを開設できるサービスです。 ECサイトを運営していこうとすると、顧客の注文状況を踏まえて、顧客のニーズを的確に理解しながら販売戦略を練る必要があります...
2
1
Comment0
TROCCO®のHTTPコネクタを活用して気象データをBigQueryに転送する
はじめに 気象データは日常生活だけでなく、あらゆるビジネスシーンでの活用が見込まれます。 以下は気象データを活用したビジネスシーンの一例になります。 商品の需要予測 売上との相関分析 農作物の生...
7
3
Comment0
コンペ素人でもチームを組めば半年でKaggleとSIGNATEでメダルが取れた話
はじめに 10月からprimeNumberにジョインしましたwakama1994です。 今回は私が転職活動と並行して行ったデータコンペの参加について書きます。コンペ参加は敷居が高いと感じてま...
4
7
Comment0
レビューされる立場の難しさ
はじめに エンジニアとしてキャリアが4年ほど経過しましたが、いまだにコードレビューを出す行為が苦手です。特に予め設計が組まれていて部分的に切り出された課題に対して、適切にレビューを出すのが苦手だ...
72
54
Comment0
データ活用を進めたい人必見！troccoではS3のcsvをBigQueryへ手軽に移行できちゃいます
はじめに メリークリスマス！今回は「データ活用進めたいけど、何からやればいいの？」という方に向けて、troccoを使えば簡単に始められるお話しをしたいと思います。 大量のcsvやExcelをAW...
4
2
Comment0
BigQueryに今年のラッキーナンバーを決めてもらう
はじめに 1年の計は元旦にあり！ということで、新年１発目はライトなネタ記事書きから始めていこうと思います。 BigQueryのRand関数を使って、2024年のラッキーナンバーを１つ決めてもらお...
1
1
Comment0
25 search resultsShowing 1~20 results
Qiita is a knowledge sharing service for engineers.
- You can follow users and tags
- You can stock useful information
- You can make edit suggestions for articles