InstructIR:高質量影象修復,根據人類指示進行最佳化

Link:instructir
InstructIR 接受影象和人類書寫的指令作為輸入,透過單一神經模型執行一體化影象修復。在多個修復任務中取得了最先進的結果,包括影象去噪、去雨、去模糊、去霧以及低光影象增強等。? 您可以從演示教程開始。檢視我們的 GitHub 獲取更多資訊。

免責宣告:請注意,這不是一個產品,因此您會注意到一些限制。此演示需要輸入具有某些降級的影象(模糊、噪音、雨、低光、霧)和一個提示,請求應該執行什麼操作。由於 GPU 記憶體限制,如果輸入高解析度影象(2K、4K),應用可能會崩潰。
該模型主要使用合成資料進行訓練,因此在真實世界複雜影象上可能效果不佳。然而,在真實世界的霧天和低光影象上效果出奇地好。您還可以嘗試一般的影象增強提示(例如,“潤色此影象”,“增強顏色”)並檢視它如何改善顏色。

需求人群:

"透過輸入影象和人類書寫的指令,對影象進行高質量修復。"

使用場景示例:

{
"input": "我喜歡這張照片,能去掉雨滴嗎?請保留內容不變",
"prompt": "清晰",
"output": "修復後的影象"
}

{
"input": "我在霧天拍了這張照片,你能改進一下嗎?",
"prompt": "清晰",
"output": "修復後的影象"
}

{
"input": "能去掉影象中的小點嗎?這很不愉快",
"prompt": "清晰",
"output": "修復後的影象"
}

產品特色:

影象去噪

去雨

去模糊

去霧

低光影象增強

返回頂端