連結：https://matankleiner.github.io/slicedit
Slicedit是一種零樣本影片編輯技術，它利用文本到影象的擴散模型，並結合時空切片來增強影片編輯中的時序一致性。該技術能夠保留原始影片的結構和運動，同時符合目標文本描述。透過廣泛的實驗，證明瞭Slicedit在編輯真實世界影片方面具有明顯優勢。
需求人群：
Slicedit的目標受眾是影片編輯者、內容創作者和研究人員，他們需要一種能夠精確控制影片內容和風格的強大工具。該技術簡化了影片編輯過程，使得即使是沒有專業影片編輯技能的使用者也能輕鬆建立高質量的影片內容。
使用場景示例：
- 將一個人跳躍的影片編輯為一個人形機器人跳躍。
- 將一隻貓在草地上曬太陽的影片編輯為一隻獵豹在草地上曬太陽。
- 將一群牛吃草的影片編輯為一群羊吃草。
產品特色：
- 使用預訓練的文本到影象擴散模型處理空間和時空切片。
- 透過DDPM反演提取噪音體積和注意力圖。
- 在特定時間步驟注入擴充的注意力圖以增強時序一致性。
- 在源文本和目標文本提示的條件下執行反演和取樣。
- 結合兩個預測的噪音體積生成最終預測的噪音體積。
- 編輯示例包括人物動作到機器人動作的轉換，以及動物和物體的變換。
- 與其他影片編輯技術進行比較，展示Slicedit的優勢。
使用教學：
- 訪問Slicedit網站並瞭解基本介紹。
- 閱讀論文和補充材料以獲取更深入的技術細節。
- 檢視編輯示例，瞭解Slicedit能夠實作的影片變換型別。
- 比較Slicedit與其他影片編輯技術的差異和優勢。
- 根據個人需求，選擇適合的影片編輯任務並應用Slicedit。
- 利用提供的程式碼（即將推出）來實踐和自訂影片編輯過程。