連結:https://follow-your-emoji.github.io/
Follow-Your-Emoji是一個基於擴散模型的人像動畫框架,能夠將目標表情序列動畫化到參考人像上,同時保持人像身份的一致性、表情的傳遞、時間的連貫性和保真度。它透過採用表情感知標誌和麵部細粒度損失技術,顯著提升了模型在控制自由風格人像表情方面的表現,包括真實人物、卡通、雕塑甚至動物。此外,它還透過簡單有效的逐步生成策略,擴充到穩定的長期動畫,增加了其潛在的應用價值。
需求人群:
- Follow-Your-Emoji適用於需要進行人像動畫製作的專業人士和愛好者,包括動畫設計師、影片製作者、遊戲開發者等。它透過提供強大的動畫生成能力,幫助使用者在保持人像特徵的同時,創造出具有豐富表情的動畫效果,滿足個性化和商業化的需求。
使用場景示例:
- 動畫設計師使用Follow-Your-Emoji為角色設計動態表情。
- 影片製作者利用該框架為影片角色新增逼真的表情動畫。
- 遊戲開發者透過Follow-Your-Emoji為遊戲中的NPC創造多樣化的表情動作。
產品特色:
- 表情感知標誌引導動畫過程,確保參考人像與目標動作之間的準確運動對齊。
- 面部細粒度損失,透過使用表情和麵部遮罩提高模型對微妙表情的感知能力。
- 支援對真實人物、卡通、雕塑和動物等多種型別的人像進行動畫化。
- 簡單有效的逐步生成策略,實作穩定長期動畫。
- 透過EmojiBench基準測試,驗證了Follow-Your-Emoji的優越性。
- 提供Demo影片,讓使用者直觀感受產品效果。
使用教學:
訪問Follow-Your-Emoji官方網站。
瞭解產品介紹和主要功能。
觀看Demo影片,體驗產品效果。
根據需要選擇相應的動畫製作工具或外掛。
上傳參考人像和目標表情序列。
使用Follow-Your-Emoji進行動畫生成。
調整引數,最佳化動畫效果。
匯出生成的動畫,應用於專案中。