Link:video2game
Video2Game是一項技術,可以將單一影片轉換成具有實時、互動、真實感和瀏覽器相容性的高質量虛擬環境。它透過構建大規模的NeRF模型來實作高質量的表面幾何形狀,然後將該模型轉換為帶有對應剛體動力學的網格表示,以支援互動。使用UV對映的神經紋理,既能表達豐富,又與遊戲引擎相容。最終得到的是一個虛擬環境,虛擬角色可以與之互動,響應使用者控制,並能從新的相機視角實時提供高解析度渲染。
需求人群:
"該技術適用於遊戲開發、模擬器建立、機器人模擬和教育等領網域。"
使用場景示例:
遊戲開發中建立真實感射擊場景
機器人模擬中模擬機器人與物體的互動
教育領網域中建立互動教學環境
產品特色:
導覽花園花瓶場景
在花園花瓶場景中射擊
在KITTI-360場景中收集硬幣
在KITTI-360場景中椅子破碎
在KITTI-360場景中賽車和撞車
使用VRNeRF資料集進行機器人模擬
利用PyBullet的整合機器人逆運動學控制機器人手臂與周圍對象互動