連結：https://illuminerf.github.io/
IllumiNeRF是一種3D重光照技術，它透過使用一系列在未知光照條件下拍攝的物體影象，恢復3D表示，以便在目標照明下從新視角渲染。該技術避免了基於逆向渲染的傳統方法，這些方法通常涉及透過可微分的蒙特卡洛渲染進行最佳化，這不僅脆弱而且計算成本高昂。IllumiNeRF採用更簡單的方法，首先使用影象擴散模型對每個輸入影象進行重光照，然後使用這些重光照影象重建Neural Radiance Field (NeRF)，從而在目標照明下渲染新視圖。這種方法在多個重光照基準測試中取得了出人意料的競爭效能和最先進的結果。
需求人群：
- IllumiNeRF適合需要3D影象處理和重光照技術的專業人士和研究人員，例如在虛擬實境、增強現實、遊戲開發和電影製作等領網網域。它透過簡化重光照過程，減少了對計算資源的需求，使得3D內容的建立和編輯更加高效和可行。
使用場景示例：
- 在虛擬實境中建立逼真的3D場景
- 在遊戲開發中實作動態光照效果
- 在電影製作中模擬複雜的光照環境
產品特色：
- 從一系列影象中恢復3D表示
- 使用影象擴散模型進行重光照
- 重建Neural Radiance Field (NeRF)模型
- 在目標照明下渲染新視圖
- 避免逆向渲染的複雜性和計算成本
- 在多個重光照基準測試中取得領先結果
使用教學：
1. 收集一系列在不同光照條件下的物體影象
2. 使用IllumiNeRF的影象擴散模型對輸入影象進行重光照
3. 根據重光照後的影象重建NeRF模型
4. 確定目標照明條件
5. 利用重建的NeRF模型在目標照明下渲染新視圖
6. 對渲染結果進行評估和調整，以達到所需的視覺效果