Intel Realsense D415 を用いた3次元距離測定について

IntelのRealsense D415をpythonで動かすライブラリpyrealsense2で３次元距離測定を行いたいです。現時点で、ｚ方向（奥行き）はdepth_scaleから求めることができているのですが３次元座標上においての横方向と縦方向の距離を求める方法がわかりません。
color_intrinsicsでカラー画像の内部パラメータを求め、ここからどのようにすればいいか教えていだだけると嬉しいです。