RODIN Diffusion:高質量3D數字化身生成模型
RODIN Diffusion是一款AI系統,可自動生成高度詳細的3D數字化身。生成的數字化身可以以前所未有的質量自由地360度檢視。該模型顯著加速了傳統複雜的3D建模過程,併為3D藝術家開闢了新的機會。
RODIN模型架構:該3D數字化身擴散模型經過訓練,可以生成以神經輻射場表示的3D數字化身。我們基於最先進的生成技術(擴散模型)進行3D建模。我們使用三平面表示來分解數字化身的神經輻射場,可以透過擴散模型明確地對其進行建模,並透過體積渲染將其渲染為影象。所提出的3D感知卷積在保持3D擴散建模完整性的同時帶來了所需的計算效率。整個生成過程是一個分層過程,使用級聯擴散模型進行多尺度建模。一旦訓練了生成模型,就可以根據來自輸入影象、文字提示或隨機噪聲的潛在程式碼來控制數字化身生成。
RODIN Diffusion模型的視覺化。請參閱論文Rodin: A Generative Model for Sculpting 3D Digital Avatars Using Diffusion以獲取更多詳細資訊。