About

Unity Manualに記載がある'Feature samples'について、各項目が何を行っているのかをまとめました。

まとめ

いずれの項目ともシーン内で情報の登録が必要なようでした。後日追加確認します。

私の顔を映してもしゃーないので、モニタ上の顔に対して検出をかけました。画像認識で有名な例であるLennaの画像を使おうとしましたが、適切でない可能性があったため、Copilotが生成した画像を使用しています。

検出した顔の中央付近から、左方向、上方向、奥方向にそれぞれ赤、緑、青のオブジェクトを表示するサンプルです。

ARCore専用機能で、顔の特定部位の座標を検出するサンプルです。サンプルでは鼻と両眉の位置を検出しています。

ARKit専用機能です。ウィンクや眉を顰めるといった表情（Blend Shapes）をブレンドするサンプルです。何かの哺乳類の顔で人の顔を上書きします。

ARKit専用機能で、目線、目の位置、注視点をそれぞれ検出した結果を描画します。

Eye Lasers	Eye Poses	Fixation Point

Fixation Pointはほかの機能と比べ、実際に試した範囲ではあまり精度が高いとは思えませんでした。
おおまかにスクリーンを上下左右6領域に分けて、どの領域を見ているかが分かる程度なら使えそうでした。

ARKit専用機能です。背面カメラでビデオシースルーARを行うと同時に、前面カメラでユーザの顔を認識した結果をオブジェクトとして表示するサンプルです。

画像は机を背面カメラが映しつつ、前面カメラが私の顔をとらえオブジェクトに反映しています。

2Dと3Dのサンプルがあります。2Dの場合はスクリーンベース、3Dの場合はワールドベースで人体がトラッキングされます。今回の検証では最大検出人数は1人でした。

2D	3D