EF Tracker(エフトラ)は、VR HMDに装着することで、アイトラッキング機能＋フェイシャルトラッキング機能を拡張するハードウェアです。
目線の動きやまばたき、口元の動きといった表情を認識し、アバターに反映することで、より自然で魅力のある感情表現をサポートします。
※このページの内容はすべて開発中のものです。
ハードウェア
EF Tracker(エフトラ)は、以下のような部品で構成されています。
①シングルボードコンピュータ+バッテリー
視線や表情の映像をパソコンに送信します。
②トラッキングカメラ
3点のカメラと付随するIR LEDで、両目の目線と口元を認識します。
③取付パーツ
機種専用設計で、取り付け可能なVR HMDを順次拡大していく予定です。
ソフトウェア
EyeTrackVR https://github.com/EyeTrackVR
Project-Babble https://github.com/Project-Babble/ProjectBabble
現在、上記のオープンソースソフトウェアを前提として、開発が進行中です。
ソフトウェアの公開時に、正しい形でライセンスについて記載する予定です。
対応アプリケーション(予定)
VRChat
Resonite
ギャラリー
イメージ映像