連結:https://github.com/lllyasviel/Paints-UNDO
Paints-UNDO是一個旨在提供人類繪畫行為基礎模型的專案,希望未來的AI模型能更好地滿足人類藝術家的真實需求。專案名稱’Paints-Undo’的靈感來源於模型輸出看起來像是在數字繪畫軟體中多次按下’撤銷’按鈕(通常是Ctrl+Z)。
需求人群:
“目標受眾為數字藝術家和AI開發者,他們可以利用Paints-UNDO來研究和模擬人類繪畫過程,或者用於生成藝術作品的動畫效果。”
使用場景示例:
藝術家使用Paints-UNDO生成繪畫過程的動畫,展示作品的創作歷程。
AI研究人員利用模型分析人類繪畫行為,最佳化AI繪畫演演算法。
教育工作者將Paints-UNDO作為教學工具,幫助學生理解數字繪畫技術。
產品特色:
模擬人類繪畫行為,包括草圖、描邊、上色、陰影、變換等。
單幀模型能夠根據操作步驟生成單個影象,模擬’撤銷’操作。
多幀模型能夠生成兩個輸入影象之間的16個中間幀。
支援使用WD14標籤器處理輸入影象以獲取提示。
使用Gradio介面進行互動式操作,包括上傳圖片、生成提示、生成關鍵幀和影片。
模型訓練採用了不同的beta排程器、clip跳過和操作步驟條件。
使用教學:
進入Gradio介面。
上傳圖片或點選頁面底部的示例圖片。
在標題為’步驟1’的UI中,點選生成提示以獲取全網域提示。
在標題為’步驟2’的UI中,點選’生成關鍵幀’。可以根據需要更改種子或其他引數。
在標題為’步驟3’的UI中,點選’生成影片’。可以根據需要更改種子或其他引數。