Treasure Data Documentation 索引日本語版

はじめに

Treasure Data Documentationの日本語の索引を作りました。

2021年3月追記

Treasure DataのDocumentationは、日本語に対応（機械翻訳）しました。
https://docs.treasuredata.com/display/public/PD/Product+Documentation+Home

このリンク先はいつか無くなるかもしれません。

お知らせおよびリリースノート

お知らせ

• Internet Explorer11のTDコンソールサポート除外について

• トレジャーデータのデータ変換エクスポート統合のための移行ガイダンス（TD2TD）

• Presto 0.205 から317の移行 (2020)

• 0.189から0.205の間に追加されたPrestoの機能・特徴 (2018)

• Presto 0.188 から0.205の移行 (2018)

• MySQL Data Connectorの下位互換性がない場合の必須設定変更について (2018)

• GDPR対応のJavaScript SDKとMobile SDK (2018)

• Treasure Workflow (2018)

• xSUB: Treasure Data iOS SDK iOS SDK 13.0以降のアップデートについて

リリースノート

• 2020

• 2019

• 2018

Japanese (日本のコンテンツ) Product Documentation

リリースノートと技術支援のお知らせ

データのインポートとエクスポート

クエリ、監視、およびストレージQuery, Monitor, Storage

Lookerの使用方法

業界別：分析事例集 Analysis Cases

SQLとは

• SQLとは？
• SQLの得意なこと
• SQLの苦手なこと
• SQLで簡単にできそうで実は難しい（初心者には難しい）こと
• リレーショナルデータベースにおけるSQL
• 列指向データベースと行指向データベース
• 「条件抽出」を定義する
• 「集計」を定義する
• 「組合せ計算」を定義する
• 「分布」を定義する
• 「付与」を定義する
• 「組合せ計算」から出発する，データ分析のための「JOIN」
• ピボット集計のためのSQL

トレジャーデータ入門

CDPコンセプトビデオ

トレジャーデータについて

TDコンソールについて

トレジャーデータにおけるデータ処理について

Audience Studioについて

Reportingについて

フィルタ機能について

TD固有の定義

• 原子性について

• 冪等性について

トレーニングビデオ

データとデータ追跡の概念

セットアップと構成

要件およびサポート情報

• AWSアカウントの権限の要件

• トレジャーデータエンティティの命名における要件と制限

• サポートされているHiveとPrestoクエリエンジンバージョン

• TDコンソールのブラウザサポート

  • 3rd Party Cookieをサポートしているブラウザ

• JavaScript SDKでサポートされているブラウザのリスト

• td-agentのサポートバージョン

• トレジャーデータの制限（上限）一覧

• サポートされているDockerイメージ

• Hivemallタスクのサポート

• TD WorkflowにおけるDigdagのサポート

• サポートされる言語、フレームワーク、およびミドルウェア

サイトとエンドポイント

TDコンソールの設定

• デフォルトクエリエンジンの指定

TD Toolbeltとtd-agentのインストールおよび更新

• Linux用TD Toolbeltとtd-agentの取得方法

• TD Toolbeltとtd-agentのインストール方法

• TD Toolbeltのアップデート方法

• APIキーとAPIサーバの検索順序

td-agentのインストール

TD Toolbeltとtd-agentのインストールとアップデート

Embulk(バルクデータのインポートツール)のインストール

TD Toolbeltを使用したTDエンドポイントの設定

TD Toolbeltを使用したTDの認証の設定

データサイエンスやSQLツールとの統合

• Dockerを使ったtd-sparkシェルの起動

• トレジャーデータのpandasとJupyter Notebook設定

• R言語ドライバのインストール

• SQL Workbench/Jのインストール

• SQuirreL SQLのインストールとTDでの使用

• RazorSQLのインストールとTDでの使用

Custom Scriptの要件

Python、Pandas、matplotlib、Jupyter Notebook、pytdのインストール

クイックスタートチュートリアル

CLIでTD Toolbeltを使ったTreasure Workflowクイックスタート

クエリの実行と結果のダウンロード

クエリの作成

トレジャーデータの使用

インターフェイスオプション

• TDコンソール

  • TDコンソールを使用
  • デフォルトのキーボードショートカット
  • TDコンソール2019へのアップデートの概要

• TD Toolbelt

  • TD Toolbeltの使用

    • コマンドライン(CLI)からトレジャーデータへのクエリとインポート
    • TD Toolbelt manページ(ヘルプ）へのアクセス
    • プロキシ経由でのTDコマンドの使用

データのインポート

• Integration Hubについて

• CSV、TSVファイルのアップロード

• Sourcesでの作業

  • 新しいデータソースの作成
  • Sourceの検索
  • Connectionの使用
  • Sourceの使用
  • Data Settingsの編集
  • データのプレビューについて
  • ソースデータのプレビュー
  • データプレビューのスキップ
  • Amazon S3、FTP、SFTP用の統合フィルタインポート
  • Data Previewの使用方法
  • Data Placementの使用方法
  • データインポートのスケジュール設定
  • Data collectionのスケジュール設定
  • cronスケジュール設定の値
  • データのインポート状況と出力ログの表示
  • データインポートのキャンセル

• Authenticationの使用方法

  • Authenticationの新規作成
  • Authenticationの表示
  • Authenticationの編集

  • 既存のAuthenticationから新しいSourceの作成

    • 新しいデータ転送名の定義

• Catalogの使用方法

  • Catalogのフィルタリング

• データインポートにフィルタの使用方法

  • データ操作

  • add_timeフィルタ

    • カラムフィルタ
    • csv_all_strings 推測プラグイン
    • CSVパーサフィルタ
    • タイムスタンプ型データのタイムゾーンをcolumn_optionsで扱う フィルタ関数
    • リネームフィルタ
    • remove_columnsフィルタ

  • データ・マスキング

    • 復号化フィルタ
    • 暗号化フィルタ
    • ハッシュ・フィルタ

  • データ転送

    • expand_jsonフィルタ
    • explode_json_columns出力フィルタ
    • JSONパーサフィルタ
    • MessagePackパーサフィルタ
    • クエリ文字列パーサフィルタ
    • Zipデコーダフィルタ

• バルクデータのインポート

  • バルクインポートIntegrationオプション
  • バルクインポートでの環境変数の使用

• データベースドライバを使用したデータのインポート

  • Presto用ODBCドライバ
  • Presto用JDBCドライバ

• ストリーミングログデータのキャプチャ

  • トレジャーデータのサーバサイドエージェントについて
  • Treasure Agent (td-agent) のインストール
  • td-agentのアップグレード
  • td-agentのトラブルシューティング
  • td-agentリファレンス

  • td-agentとログの収集と保存

    • td-agentのログをトレジャーデータに送信
      
    • td-agentでログをローカルおよびリモートで保存する
    • td-agentでScribeプロトコルを使用してログを保存する
    • td-agentでHTTPプロトコルによるログの収集
    • ログキャプチャオプション

  • 高可用性のためのtd-agentの設定

  • td-agentの監視

• WindowsバッチファイルのTDインポート時の時間フォーマットの設定

• TD Workflowを使用して増分データのインポートについて

• YAML増分データ転送ファイルの作成

データベースの管理

• スキーマ

  • スキーマ管理
  • アイデンティティデータのためのスキーマのアノテーションの使用
  • 注釈付きスキーマAPI

• マスターセグメントでの作業

  • マスターセグメントの概要

  • マスターセグメントの定義

    • Postback APIでリアルタイムセグメンテーションを設定
    • リアルタイムセグメンテーション
    • エンリッチメントアクションリファレンス
    • Workflowを使用したMaster Segmentを入力
    • Master SegmentのWorkflow履歴の表示
    • Workflowを使用したソーステーブルの作成
    • クエリエンジンとリソースプール

• データベースとテーブルの管理

  • データベースの作成と表示
  • テーブルの作成と表示
  • テーブルスキーマの変更とカスタマイズ
  • テーブルの行削除
  • テーブルデータの有効期限の設定

  • テーブルの削除

    • 時間範囲を指定したテーブルデータの削除

  • データベースの削除

データの問合せ

• クエリの定義

• クエリのスケジュール

• クエリエンジンの指定

  • 特定のクエリのクエリエンジンの指定
  • アカウント全体のクエリエンジンの指定

• ページビューの例

• アクセス頻度の例

データをマージ

Workflowと機械学習

• Workflowを理解する

  • Workflow用語と概念
  • トレジャーWorkflow内Digdag構文への制限
  • トレジャーWorkflowサービスの制限
  • Workflow処理状態
  • Workflowの構文について
  • トラフィックスパイクと通知について

• TD Workflowビデオ

  • TD Workflowビデオの概要
  • TD Workflowマークアップ動画
  • TD Workflowハンズオンビデオ（近日公開予定）
  • TD Workflowとコネクタを使用します
  • TD Workflowのベストプラクティス
  • TD Workflowよくある質問

• トレジャーデータ Workflowの使用

  • シンプルなWorkflowテンプレートについて
  • TD ToolbeltとのデータのエクスポートにWorkflowの使用について
  • WorkflowのSecrets管理について
  • Workflow増分データ処理について
  • TDコンソールからのWorkflowを使用して
  • 初めてのトレジャーデータ ワークフローの作成
  • コンソールからワークフローの作成
  • ワークフロープロジェクトエディタの使用
    • プロジェクトエディタでファイルを編集する
    • ファイルの作成と削除
    • 分割ビューでの作業
    • 表示専用アクセス
  • ワークフロースケジュールの確認
  • ワークフロー全体または一部の再実行
  • 一時停止したワークフローの再開
  • ワークフロー定義からワークフローのスケジューリング
  • トレジャーデータに登録されているワークフローの表示
  • ワークフローの削除
  • コマンドラインからのTD Workflowを使用して
  • Workflowでタスクをグループ化し、並列実行を有効にする
  • Workflowプロジェクトリビジョンでの作業
  • Workflowエラーログ
  • Workflow実行ログにアクセス
  • 実行履歴の表示
  • Workflowと継続的デプロイの例
  • 削除されたWorkflowプロジェクトを復旧

• Workflowリファレンス

  • Workflowの実験的機能
  • Workflowオペレータリファレンス
  • ネットワーク・オペレータのためのリファレンス
  • トレジャーデータオペレーター向けリファレンス
  • Amazon Webサービスオペレーター向けリファレンス
  • Googleのクラウドプラットフォームオペレーター向けリファレンス
  • ワークフロー組み込み変数リファレンス

• 機械学習

  • トレジャーデータ機械学習入門
  • トレジャー機械学習（ML）関数リファレンス
  • 機械学習Workflowの例
  • 機械学習サンプルおよびチュートリアル

• Custom Script

  • Custom Scriptの概要
  • あなたのWorkflowにカスタムPythonスクリプトの追加
  • WorkflowPY演算子構文のリファレンス
  • TD Workflowで使用するCustom Scriptへのパラメータの渡し方
  • Custom Scriptの例
  • DatabricksとTD PythonのSparkドライバ
  • GoogleのコラボでTD PythonのSparkドライバ
  • アマゾンEMRとTD PythonのSparkドライバ

• pytd用Pythonライブラリリファレンス

  • pytd.pandas_tdリファレンス
  • read_td_query構文のリファレンス
  • 既存のtd-spark-assembly.jarファイルの使用
  • pandas-tdの互換性
  • PySpark Integration
  • DB-APIリファレンス

セグメント化(Audience Studio)

• Audience Studio ダッシュボードの使用方法

  • Audience Studio Segmentダッシュボードについて
  • Audience Studioのセグメントダッシュボードでセグメントを比較する
  • Audience Studio Segmentダッシュボードのデータ更新率
  • Audience Studioセグメントダッシュボードの時間範囲を変更する

• Segments & Funnelsの使用方法

  • 新しいセグメントの作成
  • セグメント属性フィルタリファレンス
  • セグメントタイムスタンプオペレーター
  • セグメント別のフォルダでの作業
  • セグメントの使用

  • セグメントルールの編集

    • セグメントルールを定義するRule Builderの使用方法
    • セグメントルールを定義するSQLエディタの使用方法
    • 複数のセグメントオペレータ値の選択

• ファンネルを使用した作業

  • ファンネルの構築
  • ファンネルステージルールの作成と編集
  • ファンネルのアクティブ化

• プロファイルとプロファイルAPIトークンを使用した作業

• Predictive Scoringを使用した作業

  • セグメント名と説明の編集
  • セグメントのクローニング
  • セグメントの移動
  • セグメントの削除
  • バッチおよびリアルタイムセグメントの作成
  • アクティベーションの作成

アクティブ化と書き出し

• セグメントのアクティブ化

  • String Builderを使用してエクスポートするための新しい列の作成
  • アクティベーションWorkflow履歴の表示
  • アクティベーションのコピー
    
  • アクティベーション・ログ

• トレジャーデータからデータをエクスポート

  • ファイルとしてセグメントのエクスポート
  • Destination Integrationの作成
  • Destinationへのクエリのデータのエクスポート
  • クエリ結果からのデータのエクスポート管理

• データエクスポート用のフィルタ関数の使用

• Amazon S3のバケットにバルクエクスポートを使用

  • TDテーブル バルクエクスポートコマンドリファレンス
  • バルクエクスポート サーバ側の暗号化のサポート

• あなたのスパーク環境でApacheのスパークドライバ（TD-スパーク）を使用して、

  • ApacheのSparkドライバ（td-spark）リリースノート
  • ApacheのSparkドライバ（td-spark）のFAQ
  • td-sparkドライバオプション

トレジャーインサイト（BETA）について

• ダッシュボードについて（BETA）

• ウィジェットについて（BETA）

• データモデリング（BETA）

• トレジャーインサイト入門（BETA）

  • トレジャーインサイトにアクセス（BETA）
  • ダッシュボードの表示（BETA）
  • ウィジェットへのドリルダウン（BETA）
  • フィルタリングダッシュボードデータ（BETA）
  • ウィジェットでフィルタの作成（BETA）

• ユーザ管理ダッシュボード（BETA）

  • トレジャーインサイトのアクセス付与（BETA）

• データモデルの構築(BETA)

  • データモデルを作成する(BETA)
  • YAMLファイルの作成(BETA)
  • YAMLファイル例
  • データモデルを共有する(BETA)
  • データモデルデータセットを作成する(BETA)
  • データモデルデータセットを削除する(BETA)
  • テーブルの作成/追加する(BETA)
  • テーブルを更新する(BETA)
  • テーブルを削除する(BETA)
  • データモデルの関係を更新する(BETA)
  • データモデルビルドを開始する(BETA)
  • ビルドのステータスを取得する(BETA)
  • データモデルビルドをスケジュールする(BETA)
  • 参照：データモデルエンドポイント(BETA)

• 新規作成ダッシュボード（BETA）

  • ウィジェット作成（BETA）
  • ウィジェットタイプ・リファレンス（BETA）

• レポーティングについて（BETA）

  • ダウンロードウィジェット（BETA）
  • ダッシュボードのイメージダウンロード（BETA）
  • PDFレポート作成（BETA）
  • PDFレポートカスタマイズ（BETA）

ジョブ管理

• ジョブについて

  • トレジャーデータジョブ・タイプ
  • ジョブ情報の表示
  • スケジュールされたジョブの自動エラー通知

• ジョブの管理

  • TD Toolbeltジョブとクエリコマンドリファレンス
  • ジョブ設定の優先順位
  • サービスレベルアグリーメントで優先順位の高いジョブの通知

  • スケジューリング

    • TDコンソールを使用したジョブのスケジューリング
    • TD Toolbeltを使用したスケジューリング
    • スケジュールドクエリのSQLの例

  • ジョブの共有

ウェブトラッキング

• ウェブトラッキングの概要

• ウェブサイトのトラッキング入門

  • トレジャーデータのJavaScript SDKについて

    • TDのJavaScript SDKのチュートリアルを使用したWebトラッキング

  • TD JavaScript Consent extension BETAを使用する

    • TD JavaScript の Consent UI アドオンを使う

• ウェブサイトのトラッキングビデオ

  • ウェブサイトのトラッキングビデオの紹介
  • ウェブトラッキングビデオの基本的な概念
  • トレジャーデータのJavascript SDKビデオについて
  • ウェブサイトのトラッキングハンズオンビデオ
  • Postback APIビデオについて
  • サードパーティデータの活用方法 動画
  • GDPRコンプライアンス特集動画

• トレジャーデータとCookieのトラッキングについて

• Cookieの同意を使用したJavaScriptを使用したWebトラッキング

  • JavaScript SDKでクロスドメイントラッキングを有効にする
  • JavaScript SDKによる匿名のビジターID
  • JavaScript SDK で既知のビジターID

• ウェブトラッキングIntegrationオプション

• JavaScript SDKによるクリックトラッキング

• Googleのクローラ用のWebクローラアクセス数

• ピクセルトラッキング

• ウェブサイトのサーバ側1st Party Cookieのトラッキング

• モバイルトラッキングとMobile SDKについて

  • 初心者のためのMobile SDKのチュートリアル
  • TD AndroidとiOSのSDKのためのCordovaプラグイン

• InStore SDKについて

  • AndroidのTD InStore SDK使用方法
  • iOS用TD InStore SDK使用方法

• アプリケーションの追跡システムとのインテグレーションオプション

• WebHookとPostBackでのイベント追跡

  • PostBack API
  • イベントトラッキングインテグレーションオプション

• Adobe LaunchでJavaScript SDKの統合

Data Tanks

• Data Tanksについて

• Data Tankの作成

• Data Tankの使用

  • TDコンソールを使用したData Tankの問合せ
  • Data Tankからトレジャーデータストレージの問合せ

• Data Tankへのデータのエクスポート

管理

コントロールパネルについて

設定について

データ保持ポリシー

セキュリティ

• TDプロトコルとセキュリティへの取組みについて

• トレジャーデータアカウントのユーザの種類

• トレジャーデータでのIDフェデレーションについて

• アクセス制御について

  • IPホワイトリストの設定について
  • REST APIのアクセス
  • データベースのアクセス制御
  • トレジャーデータへのログインアクセスを追跡
  • ユーザの最大セッションタイムアウトの設定

• ポリシーとアクセス許可について

  • 権限について
  • ポリシーについて
  • ポリシーの使用方法
  • 権限の使用方法

  • ポリシーベースのアクセス許可について

    • アカウントパスワードポリシーの設定について

• アカウントのパスワードポリシーの指定

• アカウントまたはユーザパスワードのリセット

• アカウント所有者情報の変更

• 最大ログイン試行回数とセッションタイムアウトの指定

• パスワードポリシーの下位互換性

• 削除されたユーザおよび既存のリソースへの影響

• プライベートConnectについて

IPホワイトリスト

• アカウントレベルのIPホワイトリスト

• IPホワイトリストの例外

• IPホワイトリストの権限

• ユーザIPホワイトリストの定義

• TDアカウントのデフォルトIPホワイトリストの定義

ユーザ

• 新規ユーザの追加

• ユーザタイプの変更

• ユーザの削除

ユーザプロファイル管理

• APIキーを取得

• メールアドレスの変更

• パスワードの変更

• GoogleのSSOでログイン

• Googleのエイリアスの使用

利用方法

• Data Utilizationダッシュボードへのアクセス

• Presto Utilizationダッシュボードへのアクセス

• Workflow Utilizationダッシュボードへのアクセス

監査ログ

• Standard Audit Logへのアクセス

• Standard Audit Logイベント

• Premium Audit Logへのアクセス

• Premium Audit Logリファレンス

• Premium Audit Logイベント

パフォーマンスのチューニング

SQLとパフォーマンスチューニングのヒント

• HiveとPrestoのためのSQLのヒント

• Prestoのパーティションの定義

• 巨大Prestoクエリのパフォーマンス向上

• TD_TIME_FORMAT UDFでサポートされている時刻フォーマット

• Prestoクエリシグネチャ

• Hiveパフォーマンスチューニング

Prestoリソースプールの管理

サービスステータスダッシュボード

リファレンス

td-agentのChangeLog

JavaScriptのSDK APIリファレンス

TD Toolbeltリファレンス

• 基本コマンド

• データベースコマンド

• 表コマンド

• クエリコマンド

• インポートコマンド

• バルクインポートコマンド

• コマンドの結果

• スケジュールコマンド

• スキーマコマンド

• コネクタコマンド

• Workflowのコマンド

HiveとPrestoクエリエンジンリファレンス

• クエリエンジンの選択

• Hiveクエリエンジンについて

  • Hive既知の制限
  • TDでのHive機能のサポート

  • Hive2へのアップグレード

    • Hive2のロールアウト計画
    • Hive 0.13/Hive 2 のコードと構文の互換性
    • Hiveの予約キーワードと予約されていないキーワード

  • Hive2の使用

    • Hiveクエリの書き方
    • Hive機能
    • Hive 2 集計機能
    • HiveのSELECTステートメント構文
    • トレジャーデータのHiveINSERT構文
    • TDHiveの参照リンクを使用して列の値を計算する
    • PythonクライアントからHive 2を使う

  • Hiveおよびその他のHadoopベースのリソースプール

  • Hiveクエリエンジン用のJDBCドライバ

  • Hiveリファレンス

    • トレジャーデータHive機能リファレンス
    • Hive SQL ガイドと参考資料
    • Hive 2 内蔵機能リファレンス
    • TDHive2パフォーマンスチューニング
    • Hive 0.13.0 関数リファレンス
    • Hive 0.13.0 組み込みの集約機能
    • 新しいバージョンのHiveからサポートされているHiveの機能
    • Hive 0.13.0 内蔵オペレータ
    • Hive内蔵オペレータリファレンス
    • TD Hive 0.13にバックポートされた機能を新しいバージョンのHiveから使用することができます。
    • HiveクエリをPrestoに移行する

• HiveMall関数リファレンス

  • 近似関数
  • 自然言語・文字処理機能
  • GeoSpatial ユーザ定義関数
  • 集計機能
  • 配列関数
  • ビットセット関数
  • 圧縮機能
  • データタイム関数
  • JSON関数
  • マップ機能
  • MapReduce関数
  • 数学関数
  • ベクトル関数と行列関数
  • サニティーチェック機能
  • 時系列関数
  • その他の機能

• Presto分散クエリエンジンについて

  • Prestoリリース情報

    • Presto317とトレジャーデータ

  • Presto既知の制限

  • Prestoクエリエンジンの使用

    • Prestoへのアクセス

    • Prestoクエリーの書き方

      • Presto SQLステートメントの構文
      • Presto DELETE ステートメント構文
      • Prestoクエリ実行時の制限とクエリヒントのオーバーライド

      • Prestoクエリチューニング

        • Prestoのパーティション分割とリソース管理

      • Prestoクエリのマジックコメント

    • Prestoクエリのスケジューリング

  • Presto関数とオペレーターリファレンス

  • Prestoネイティブ機能

  • サポートされているPrestoとTD機能

  • Prestoパフォーマンスチューニング

    • チューニングのヒント
    • 必要なカラムの指定
    • 時間ベースのパーティショニングの活用
    • GROUP BY節内の枢機卿性を考える
    • ORDER BYでLIMITを使う
    • 近似集計関数の使用
    • 一連のLIKE句を一つのregexp_like句に集約する
    • 結合句で最初に大きなテーブルを指定する
    • 超大規模クエリのパフォーマンス向上

  • Prestoクエリのよくあるご質問

    • Presto の信頼性は？
    • Hive クエリを Presto に移行するにはどうすればいいですか？
    • クエリが動作しません。どうすれば直せますか？
    • クエリの動作が遅いです。どうすれば改善できますか？
    • Join のパフォーマンスを改善するにはどうすればよいですか?
    • クエリを単純化するにはどうすればいいですか?
    • Exceeded max (local) memory xxGB エラーを修正するには?
    • 大量の結果を生成するクエリを高速化するには？
    • 毎日の統計情報を行の列にレポートするには？
    • 更新前にテーブルをクリーンアップするには？
    • JSONを使用するには？
    • バイナリ関数を使用するには？
    • Presto Geospatial Functionsを使用するには？
    • Prestoを使用してTDテーブルのメタデータにアクセスする方法を教えてください。
    • その他のSELECT よくある質問

  • Prestoを使ったData Tanks

    • PrestoからのData Tankクエリの制限
    • Data TankのPrestoクエリのユーザ権限
    • PrestoからのData Tankクエリへのアクセスを許可する
    • Data Tanksクエリ ステートメント リファレンス for Presto
    • Data Tanks,Presto よくある質問

  • Prestoのトラブルシューティング

    • Presto信頼性とPAGE_TRANSPORT_TIMEOUTエラー
    • Prestoクエリのトラブルシューティング

REST APIリファレンス

• システムのREST API

  • REST APIについて
  • データインポート方法の選択
  • Treasure Data Bulk Loads API
  • Treasure Data Bulk Import API
  • Treasure Data Database API
  • Treasure Data Import API
  • Treasure Data Job APIs
  • Treasure Data System APIs
  • Treasure Data Table APIs
  • Permission Policy API
  • Treasure Data Schedule API
  • Treasure Data User API

• REST APIクライアントライブラリ

  • REST APIs in Treasure Data
  • Python Client for REST API
  • Ruby Client for REST API
  • Ruby SDK データインポート
  • Javaクライアント
  • Java SDK データインポート
  • REST API用のNode.jsクライアント
  • REST API用のGoクライアント

• ADL

Integrations

• 正規表現とPath Regexについて

• 技術の垂直統合

  • 広告
  • ビジネスインテリジェンス（BI
  • クラウドストレージとファイルストレージ
  • 顧客関係管理（CRM
  • カスタマーサポート
  • データベース
  • データ管理プラットフォーム(DMP)
  • データサイエンスとSQLツール
  • デバイスとセンサー（IoT)
  • eコマース
  • メールとマーケティングオートメーション
  • エンタープライズリソースプランニング(ERP)
  • ETLおよびワークフローツール
  • ファイルのインポート
  • IaaSとPaas
  • モバイルおよびデスクトップアプリケーション
  • 支払い
  • Fluentdまたはtd-agentを搭載したサーバ
  • ソーシャルメディア
  • ウェブおよびモバイルアナリティクスサービス
  • ウェブフックとポストバック
  • ウェブページ
  • .NET Appsのインポート統合
  • Tableau Architecture for Integrations について
  • インポート統合の調整

• データコネクタ(アルファベット順)

  • Adobe Analytics Import Integration

    • Adobe Analytics Import Integration Using CLI

  • Adobe Audience Manager Export Integration

  • Adobe Launch Import Integration

  • AdRoll Export Integration

  • AdRoll Import Integration

  • Amazon DSP Data Provider Export Integration

  • Amazon Elastic MapReduce

  • Amazon Kinesis Import Integration

  • Amazon Linux Import Integration

  • Amazon Redshift Export Integration

  • Amazon Redshift Import Integration

    • Amazon Redshift Import Integration Using the CLI

  • Amazon S3 Export Integration

  • Amazon S3 Import Integration

    • Amazon S3 Import Integration Using CLI

  • Amplitude Export Integration

  • Amplitude Import Integration

  • Android SDK Import Integration

  • Apache Access Logs Import Integration

  • AppAnnie Import Integration

  • AppsFlyer Import Integration

  • Apptopia Import Integration

  • Apsalar Import Integration

  • AudienceOne Export Integration

  • AWS Elastic Beanstalk Import Integration

  • Birst with the Treasure Data JDBC Driver

  • Bombora Import Integration

  • Box Export Integration

  • Box Import Integration

  • BrainPad Rtoaster Export Integration

  • Branch Metrics Import Integration

  • Brandwatch Import Integration

  • Brightcove Player Import Integration

  • Bulk Import from AWS S3

  • Bulk Import from CSV files

  • Bulk Import from Google Sheets

  • Bulk Import from MySQL

  • Bulk Import from TSV files

  • Chartio Export Integration

  • Criteo Export Integration

  • CSV and TSV File Import Integration

  • Cuenote Export Integration

  • Cvent Import Integration

  • CyberAgent Ameba Export Integration

  • DataRobot Export Integration

  • Datorama Export Integration

  • Domo Export Integration

  • Dotdigital Export Integration BETA

  • Dotdigital Import Integration BETA

  • Dropbox Export Integration

  • Dynalyst Import and Export Integration

    • Dynalyst Import Integration
    • Dynalyst Export Integration

  • Elastic Cloud Export Integration

    • Elastic Cloud Export CLI

  • EmberPoint MailPublisher Export Integration

  • EmberPoint MailPublisher Import Integration

  • MailPublisher Connector via CLI

  • Excel Import Integration (Deprecated)

  • Eyeota Import Integration

  • F.O.X (Force Operation X) Import Integration

  • Facebook Ads Insights Import Integration

  • Facebook Custom Audience Export Integration

  • Facebook Lead Ads Import Integration

  • Facebook Offline Conversions Export Integration

    • Facebook Offline Conversions Export Integration CLI

  • Facebook Page Insights Import Integration

  • Firebase Cloud Messaging Export Integration

  • Fluentd Continuous Data Import Integration

  • FTP Server Export Integration

  • FTP Server Import Integration

    • FTP Import Integration CLI

  • Gigya Import Integration

  • Google Accelerated Mobile Pages (AMP)

  • Google Ads Import Integration

  • Google Ads Remarketing Lists Export Integration

  • Google AdWords on the Doubleclick Data Platform Export Integration (Deprecated)

  • Google Analytics Import Integration

  • Google BigQuery Export Integration

  • Google BigQuery Import Integration

    • Google BigQuery Import Integration CLI

  • Google Cloud Storage Export Integration

    • Exporting Data from Google Cloud Storage CLI

  • Google Cloud Storage Import Integration

    • Google Cloud Storage Import Integration CLI

  • Google DoubleClick Bid Manager Export Integration

  • Google DoubleClick Data Platform through SFTP Import Integration

  • Google DoubleClick for Advertisers Import Integration

  • Google DoubleClick for Publisher Import Integration

  • Google DoubleClick for Publishers Export Integration

  • Google Drive Import Integration

  • Google My Business Import Integration

  • Google My Business Import Integration Using the CLI

  • Google Search Analytics Import Integration

  • Google Sheets Export Integration

  • Google Sheets Import Integration

  • Google Sheets Legacy Export Integration Migration to OAuth Authentication

  • Google Tag Manager (GTM) Import Integration

  • Heroku Import Integrations

    • Heroku Add-on Notes
    • REST API on Heroku
    • Rails Apps on Heroku
    • Java Apps on Heroku
    • Ruby Apps on Heroku
    • Sharing API key from Multiple Heroku Apps
    • Data Analytics Solutions for Heroku Applications

  • Hubspot Export Integration

  • HubSpot Import Integration

    • HubSpot Import Integration CLI

  • IBM SPSS Modelar - Experimental

  • Importing Logs Formatted in CSV, TSV, and LTSV

  • Importing Logs in JSON Format

  • Informatica Cloud Export Integration

  • Instagram Custom Audience Export Integration

  • Instagram User and Media Insights Import Integration

  • Intercom Import Integration

  • Intimate Merger Export Integration

  • iOS SDK

  • JasperReports Server

  • JasperSoft iReport Export Integration

  • Java Apps Import Integration

  • Jira Import Integration

  • Joyent SmartOS Import Integration

  • Kafka Import Integration and Fluentd Consumer

  • KARTE Export Integration

  • KARTE Import Integration

  • Kochava Import Integration

  • Legacy Bulk Import Integration

  • Legacy Bulk Import Tips and Tricks

    • Legacy Bulk Import from JSON file
    • Legacy Bulk Import Internals
    • Legacy Bulk Import from Amazon S3
    • Legacy Bulk Import from MySQL
    • Legacy Bulk Import from MongoDB

  • LinkedIn Export Integration (Beta)

  • LiveRamp Export Integration

    • LiveRamp Activation Partners Integration (Beta)

  • Logs in Custom Format

  • Logs on MacOS X

  • Logstash Import Integration

  • Looker Export Integration

  • LOOPASS Export Integration

  • Luigi Workflow Engine

  • Magento Export Integration BETA

  • Magento Import Integration BETA

  • Mailchimp Export Integration

  • MailChimp Import Integration

  • MariaDB Import Integration

  • Marketo Export Integration

  • Marketo Forms Import Integration

  • Marketo Import Integration

    • Use Command Line to Create Your Marketo Connection

  • Metabase (Experimental)

  • Microsoft Azure Blob Storage Export Integration

  • Microsoft Azure Blob Storage Import Integration

  • Microsoft Power BI Export Integration

  • Microsoft SQL Server Import Integration

  • Microsoft SQL Server Tables Export Integration

  • Mixpanel Import Integration

  • Mode Analytics Export Integration

  • MongoDB Collections Export Integration

  • MongoDB Import Integration

  • mParticle Import Integration

  • MySQL Import Integration

    • MySQL Import Integration CLI

  • MySQL Tables Export Integration

    • MySQL Tables Export Integration CLI

  • nend Export Integration

  • Netsuite Import Integration

  • Nginx Access Logs

  • Node.js Apps Import Integration

  • OneDrive Export Integration

  • OneDrive Import Integration

  • OneTrust Import Integration

  • Oracle Bluekai Export Integration

  • Oracle Cross Channel Orchestration (Responsys) Export Integration

  • Oracle Eloqua Export Integration BETA

  • Oracle Eloqua Import Integration BETA

  • Pentaho Data Import Integration

  • Pentaho Report Designer Export Integration

  • Perl Apps Import Integration

  • PHP Apps Import Integration

  • PostgreSQL Export Integration

  • PostgreSQL Import Integration

    • PostgresSQL Import Integration CLI

  • Python Apps Import Integration

  • QlikView and Qlik Sense Export Integration

  • Rails Apps Import Integration

  • Redash Export Integration

  • Repro Import and Export Integration

    • Repro Export Integration
    • Repro Import Integration

  • RHEL and CentOS Import Integration

  • Riak CS Import Connector

  • Ruby Apps Import Integration

  • Sailthru Export Integration (Beta)

    • Sailthru Export Integration from the Command Line (Beta)

  • Sailthru Export Integration CLI (Beta)

  • Salesforce Integrations

    • Salesforce Export Integration
    • Migrating Salesforce Integrations
    • Salesforce DMP Krux Import Integration BETA

    • Salesforce DMP Krux Export Integration BETA

      • Salesforce DMP Krux Export Integration CLI

    • Salesforce Marketing Cloud Import Integration BETA

      • Salesforce Marketing Cloud Import Integration CLI

    • Salesforce Marketing Cloud ExactTarget Export Integration Using SFTP BETA

    • Salesforce Marketing Cloud Export Integration Using SFTP (Private Beta)

    • Legacy Salesforce Integrations

      • Salesforce Import Integration

        • Salesforce Import Integration CLI

      • Salesforce Marketing Cloud ExactTarget Export Integration

      • Salesforce Marketing Cloud ExactTarget Export Integration Using CLI

  • Sansan Import Integration

  • Scala Apps Import Integration

  • Segment Import Integration

  • SFTP Server Export Integration

  • SFTP Server Import Integration

    • SFTP Server Import Integration CLI

  • Shopify Export Integration

    • Shopify Export Integration CLI

  • Shopify Import Integration

    • Shopify Import Integration CLI

  • Sizmek Import Integration

  • Slemma Integration

  • Snapchat Export Integration

  • Snowflake Export Integration

  • Snowflake Import Integration

  • Sprinklr Import Integration

  • Stripe Import Integration

  • Supership Export Integration

  • About Tableau Architecture for Integrations

    • Tableau Desktop for Mac (Experimental)
    • Tableau Desktop for Windows Import Integration
    • Tableau Online Export Integration
    • Tableau Server Export Integration

  • Talend Open Studio

  • TerraSky SkyOnDemand

  • The Trade Desk Export Integration

  • The Trade Desk Import Integration

    • The Trade Desk Import Integration using CLI

  • Treasure Data Data Exchange Export Integration

  • TUNE Import Integration

  • Twitter Audience Insights Import Integration (Deprecated)

  • Twitter Tailored Audience Export Integration

  • Twitter Tweet Insights Import Integration

  • Ubuntu and Debian Import Integration

  • Unity SDK

  • Unity SDK for PC

  • Unreal Engine SDK Import Integration

  • WEBCAS Export Integration

  • Web Server and HTTP PUT Endpoint Export Integration

  • Yahoo! DMP Export Integration

  • YouTube Analytics Import Integration

  • Zapier Import Integration

  • Zendesk Import Integration

  • Zuora Import Integration

• インポートデータコネクタの変更点まとめ (2020年1月)

  • Internet of Things Integrations

• Arduino Import Integration

  • Embedded Apps C and C++ Import Integration
  • MQTT Broker with Treasure Data
  • MQTT Broker (Experimental) Import Integration
  • Mbed OS for Device Tracking
  • Raspberry Pi Import Integration

• インクリメンタルローディングについて

• データプレビュー

• データ配置

• CLIからのデータコネクタジョブ実行のスケジュール

• Load.ymlファイルのOutセクションのインポートモード

• TD Toolbeltを使用したスケジューリング

• IPホワイトリストおよびVPC

トラブルシューティング

よくある質問

• 監査ログ よくある質問

データインポート：ソースファイル名の検索

プロファイルAPIのトラブルシューティング

アクセス権のトラブルシューティング

バルクエクスポートを使用してエクスポートされたデータのS3でタイムパーティショニングを実現するためのベストプラクティス

Workflowのsubmitでのトラブルシューティング

エラーコード

• TOO_MANY_REQUESTS_FAILED

• Bulk Import Status Code 409

• Presto error: mismatched input 'xxxx' expecting .. SYNTAX_ERROR

• Presto Error: second argument of max_n/min_n must be less than or equal to 10000; found xxxx

• Presto error: column 'xxxx' cannot be resolved ... SYNTAX_ERROR

• Hive Queries Fail Automatically when Disk Space Limits Reached

• Presto error: Unexpected parameters (xxxx, xxxx) for function yyyy. Expected: yyyy(zzzz, zzzz)

• Invalid Table Alias or Column Reference Error

ポリシーのトラブルシューティング

コンサルテーション

30日のデータ保持のトラブルシューティング

ログのトラブルシューティング

IPホワイトリストのトラブルシューティング

無効なテーブルエイリアスまたは列参照

Tips

JSON形式のカラムを複数のカラムにパースする

レガシーバージョンのトレジャーデータ

プロファイルAPIトークンV1からV2へのアップグレード

APIリファレンス

DB-APIの使用方法

pytdへの貢献

トレジャーデータコミュニティサポートへの問合せ

テクニカルサポートへの問合せ

トレジャーデータコミュニティへのアクセス