Paints-UNDO:數字繪畫行為的人工智慧模型

連結:https://github.com/lllyasviel/Paints-UNDO

Paints-UNDO是一個旨在提供人類繪畫行為基礎模型的專案,希望未來的AI模型能更好地滿足人類藝術家的真實需求。專案名稱’Paints-Undo’的靈感來源於模型輸出看起來像是在數字繪畫軟體中多次按下’撤銷’按鈕(通常是Ctrl+Z)。

需求人群:

“目標受眾為數字藝術家和AI開發者,他們可以利用Paints-UNDO來研究和模擬人類繪畫過程,或者用於生成藝術作品的動畫效果。”

使用場景示例:

藝術家使用Paints-UNDO生成繪畫過程的動畫,展示作品的創作歷程。

AI研究人員利用模型分析人類繪畫行為,最佳化AI繪畫演演算法。

教育工作者將Paints-UNDO作為教學工具,幫助學生理解數字繪畫技術。

產品特色:

模擬人類繪畫行為,包括草圖、描邊、上色、陰影、變換等。

單幀模型能夠根據操作步驟生成單個影象,模擬’撤銷’操作。

多幀模型能夠生成兩個輸入影象之間的16個中間幀。

支援使用WD14標籤器處理輸入影象以獲取提示。

使用Gradio介面進行互動式操作,包括上傳圖片、生成提示、生成關鍵幀和影片。

模型訓練採用了不同的beta排程器、clip跳過和操作步驟條件。

使用教學:

進入Gradio介面。

上傳圖片或點選頁面底部的示例圖片。

在標題為’步驟1’的UI中,點選生成提示以獲取全網域提示。

在標題為’步驟2’的UI中,點選’生成關鍵幀’。可以根據需要更改種子或其他引數。

在標題為’步驟3’的UI中,點選’生成影片’。可以根據需要更改種子或其他引數。

返回頂端