連結：https://i2vedit.github.io
I2VEdit是一種創新的影片編輯技術，透過預訓練的影象到影片模型，將單一幀的編輯擴充到整個影片。這項技術能夠適應性地保持源影片的視覺和運動完整性，並有效處理全網域編輯、區網域性編輯以及適度的形狀變化，這是現有方法所不能實作的。I2VEdit的核心包括兩個主要過程：粗略運動提取和外觀細化，透過粗粒度注意力匹配進行精確調整。此外，還引入了跳過間隔策略，以減輕多個影片片段自動迴歸生成過程中的質量下降。實驗結果表明，I2VEdit在細粒度影片編輯方面的優越效能，證明瞭其能夠產生高質量、時間一致的輸出。
需求人群：
I2VEdit適合需要進行高質量影片編輯的專業人士和愛好者。無論是進行虛擬試穿、主體替換還是風格轉換，I2VEdit都能提供強大的支援，幫助使用者輕鬆實作創意影片編輯。
使用場景示例：
- 使用I2VEdit編輯源影片中的可穿戴物品
- 使用I2VEdit替換源影片中的主體
- 使用I2VEdit改變源影片的風格
產品特色：
- 從單一幀傳播編輯到整個影片
- 適應性地保持源影片的視覺和運動完整性
- 處理全網域編輯、區網域性編輯以及適度的形狀變化
- 粗略運動提取以對齊基本運動模式
- 外觀細化使用細粒度注意力匹配進行精確調整
- 跳過間隔策略以減輕自動迴歸生成的質量下降
- 在細粒度影片編輯中表現出色
使用教學：
- 1. 選擇一個預訓練的影象到影片模型
- 2. 確定需要編輯的影片幀
- 3. 應用編輯到選定的幀上
- 4. 使用I2VEdit將編輯傳播到整個影片
- 5. 透過粗略運動提取對齊基本運動模式
- 6. 利用外觀細化進行精確調整
- 7. 應用跳過間隔策略以最佳化輸出質量
- 8. 匯出編輯後的影片