調べた背景
実務で扱うデータが多くなって来てカスタムオブジェクトの限界にぶち当たり困っていた
Salesforce Connectの外部オブジェクトでデータ外出し以外に何か方法が無いかと思い、
バズワード的にBigデータ？みたいな安易な発想で調査したらSalesforceにもあったので調査した。
結論
- EEやUE、DEライセンスは100万件のデータをSalesforce上で管理可能。追加で数十億件まで対応可能。
- 通常のSOQLで取得する際はガバナ制限で50000件までになる。
- 追加ライセンスで使用可能な非同期SOQLだと大量データの扱いOK。
顧客の周辺の大量のトランザクションデータを参照前提でSalesforceに格納したい場合に
利用するのが良いのでしょうね。
これまでのSalesforceの課題と活用動機
活用進んでデータが貯まってきた！
⇒ 容量も不足してきたし、外部ストレージに保存するか？
⇒ やっぱり顧客に関連付けて、顧客に関連するデータを保存したい！
⇒ Salesforceで一元的に顧客データを管理したい
⇒ でも容量が・・・（今ここ）
でAWSやHerokuに逃すのもあるけど、Salesforce内で完結させたい場合は手法としては難しい。
また、Einstein（Analytics Plus）はデータ保存件数が多いので
そちらに逃すというのもあるけど、そもそも目的が違う・・・
そもそも、容量追加すればいいじゃんという話は無しで
やってみる
以前はメタデータAPIでしか作成出来なかったようですが、
Spring19からUIで作成可能となりました！
1.設定からの検索方法
-「Big」で検索
- 管理 ⇒ データ ⇒ BigObject
2.BigObject作成
- [New]をクリック
まだこれからの機能か英語だ・・・
リリースは後程設定するインデックス項目が1つ以上ないとダメなので開発中になる。
3.データ項目設定
- カスタム項目＆リレーションの[新規]をクリック
大量データの取り扱いになるので設定可能なデータ項目も非常に少ない。
参照関係、URL、テキスト、メール、ロングテキスト、数値、電話、日付／時間型のみ。
数式、主従、積み上げ集計、選択リストなどはデータ型としてサポート外なので注意。
4.インデックス設定
- [Index]の[新規]をクリック
データ項目を必須にしないとインデックス項目として設定出来ない。
インデックスの全ての長さが100文字を超えてはダメ。最初に適当にサイズをきるとあとで修正出来ない。
5.リリース
リリース状況を開発中からリリースに変更
6.APEXによるデータ登録
- INSERTはinsertImmediate、DELETEはdeleteImmediate。
// BigObjectは__bとなる
Rider_History__b rh = new Rider_History__b();
rh.Rider_Account__c = 'TEST';
rh.Start_Time__c = Datetime.now();
// INSERTはinsertImmediate、DELETEはdeleteImmediate
database.insertImmediate(rh);
7.データ取得
- WHERE句はインデックスの位置順通りに指定する必要がある。
- WHERE句の最後以外は＝とする必要がある。（インデックス走査の為？）。ただし!=、LIKE、NOT IN、EXCLUDES、INCLUDES はサポート外。
- SOQLと非同期SOQLがある。非同期SOQLは処理時間に制限なく、大量データの集計に活用可能。
SELECT Rider_Account__c, Start_Time__c
FROM Rider_History__b
WHERE Rider_Account__c='TEST' AND Start_Time__c >= TODAY
各種制限
自由を得るには制約を伴うという言葉通り、BigObjectには制限がたくさんある。
だからデータの大容量、検索向上などの要件を実現出来る。
- インデックスの再作成をしたい場合、別のBigObjectで再定義する必要がある。
- フロー、承認フロー、プロセスビルダーなどの自動化プロセスはBigObjectに作成できない。
- データセキュリティはオブジェクト権限（編集除く）、項目レベルセキュリティのみ可能。
共有設定は表示がいないので不可。
- INSERT、DELETEをサポート。UPDATE、UPSERTはサポート外。
インデックス値が同一である場合は、DELETE-INSERTか？
プロファイルのオブジェクト権限（編集がない）。
Help及び参考ページ
公式Help
開発者ドキュメント 英語・・・
Trailhead
DeveloperForceJanpanさんのslideshare 2018/5/6版
DeveloperForceJanpanさんのslideshare 2019/7/4版