連結：https://world-dreamer.github.io/
WorldDreamer是一個創新的影片生成模型，它透過預測遮蔽的視覺令牌來理解並模擬世界動態。它在影象到影片合成、文本到影片生成、影片修復、影片風格化以及動作到影片生成等多個方面表現出色。該模型借鑑了大型語言模型的成功經驗，將世界建模視為一個無監督的視覺序列建模挑戰，透過將視覺輸入對映到離散的令牌並預測被遮蔽的令牌來實作。
需求人群：
- WorldDreamer適用於需要影片內容創作的專業人士和愛好者，如影片編輯師、動畫師、遊戲開發者等。它透過先進的AI技術，使得影片生成過程更加自動化和個性化，大幅提高了創作效率。
使用場景示例：
- 使用WorldDreamer將一張風景照片轉換為動態影片，用於旅遊宣傳。
- 根據劇本描述，自動生成動畫短片。
- 修復老舊影片中的損壞部分，恢復影片完整性。
產品特色：
- 影象到影片合成：將靜態影象轉換為動態影片。
- 文本到影片生成：根據文本描述生成相應影片內容。
- 影片修復：填補影片中缺失的部分。
- 影片風格化：改變影片風格，如轉換為卡通風格。
- 動作到影片生成：根據動作指令生成影片。
- 多模態提示：整合文本和動作輸入，增強模型互動性。
使用教學：
1. 訪問WorldDreamer的官方網站。
2. 根據需要選擇影片生成的型別，如影象到影片合成或文本到影片生成。
3. 上傳所需的輸入材料，例如圖片或文本描述。
4. 設定影片生成的相關引數，如影片風格、時長等。
5. 啟動影片生成過程，等待模型完成處理。
6. 下載生成的影片內容，進行後續使用或分享。