RealFill:真實影象補全的參考驅動生成

RealFill是一種影象補全的生成模型,透過使用少量場景的參考影象,能夠填充影象中的缺失區域,並生成與原始場景相符的視覺內容。RealFill透過在參考影象和目標影象上微調預訓練的影象補全擴散模型來建立個性化的生成模型。該模型不僅保持了良好的影象先驗,還學習了輸入影象中的內容、光照和風格。然後,我們使用這個微調後的模型透過標準的擴散取樣過程來填充目標影象中的缺失區域。RealFill在一個包含多種複雜場景的新的影象補全基準測試中進行了評估,並發現其在效能上大大優於現有方法。