VR Object Tracking

VR体験のためのカメラベースのオブジェクト追跡

プロジェクトの目的: 3D 物理空間でボールを追跡し、VR ヘッドセット内で再現して、球技をプレイできるようにします。

仮想現実体験の没入感は、ユーザーが仮想環境内のオブジェクトと対話できる場合に強化されることがよくあります。

通常、このインタラクション モードでは、ユーザーは存在しないオブジェクトを扱うことが制限され、ユーザーの触覚が刺激されない不完全感が生じます。

このプロジェクトでは、ウェブカメラを使用して物理オブジェクトを追跡し、仮想環境内の同じ正確な位置で再現する完全なシステムを導入し、ユーザーが仮想現実内でオブジェクトを操作できるようにします。

私が作成したシステムは、UDP 経由で通信する 2 つのコンポーネントで構成されています。

• OpenCV を利用して Web カメラ データを処理し、つながれていないオブジェクト (ボール!) の位置情報の出力を生成する Python 2.7.16 アプリケーション
• AC# 仮想現実アプリケーション。オブジェクトの位置データを取得し、それをユーザーに対して同じ位置にレンダリングして、対話できるようにします (Unity3D 実装)。

デモビデオ

ボールの扱いは？

ボウリング体験は？

作成者:

ジョージ・ロウ

ここから連絡してください:

このプロジェクトは当初、コンピューター サイエンスの理学士号を取得している間に、論文プロジェクトの一部として作成されました。