高速 scatter plot 描画（apache-arrow + regl 利用）

こんにちは。
apache-arrow (IPC) データをプロットしました¹。データ (columnar typed array) を取得しそのまま regl の WebGL バッファーへ書き込むことにより高速描画を行なっています。

この例のデータの取得（ダウンロード）進行中は、データは逐次分割されて取得され（10,000行単位）、その都度、データを追加して描画しています（ストリーム型処理）。

ただし、データの取得自体はネットワークを通したダウンロードなので高速ではありません^{2 3}。

ソースおよび実行例はこちら、

• regl + apache-arrow: fast WebGL scatter plot (bl.ocks.org)

1. 参考：Efficiently loading massive D3 datasets using Apache Arrow (Chris Price, scottlogic.com) ↩

2. したがって、この例のような大量データの場合（68 万点の scatter plot）、ダウンロードに通常は 1 秒弱を要すようで、開始後一瞬で全データを描画完了とはいきません。 ↩

3. 同じデータをローカルファイルとして読み込むと、開始後ほぼ一瞬で全データを描画完了できます。 ↩