Differential Diffusion:讓每個畫素根據指定地圖的強度變化
Differential Diffusion是一個影象生成和編輯的平臺,可以根據文字提示以及指定每個區域變化量的地圖來修改圖片。它能夠為每個畫素或影象區域提供定製化的變化量控制。這種細粒度的變化量控制為各種新的編輯能力開啟 開啟 打開了大門,例如控制個別對象被修改的程度,或者引入漸變的空間變化等。此外,該平臺展示了該框架在影象補全領域的有效性,即在無縫融合新的內容時微調周邊區域。它還提供了探索不同變化量效果的新工具。該框架僅在推理時執行,不需要模型訓練或微調。展示了它與當前最先進的開源模型的整合效果,並透過定量、定性比較和使用者研究進行了驗證。