DiffusionLight:一款利用擴散模型估算照明效果的技術
DiffusionLight是一項利用擴散模型在單張輸入影象中估算照明效果的技術。它利用訓練好的Stable Diffusion XL模型繪製一個鏡面反射球,然後將球體展開得到全景照明圖。該技術解決了現有基於神經網路的方法依賴有限HDR全景資料集導致在真實複雜場景下效果不佳的問題。關鍵創新在於發現了擴散噪聲圖和鏡面反射球生成質量之間的關係,迭代生成高質量鏡面球;以及透過LoRA 進行多曝光訓練,使LDR模型也可以輸出HDR格式。該技術可產生逼真的照明估計,特別適用於野外場景。