Update README.md
Browse files
README.md
CHANGED
|
@@ -1,3 +1,108 @@
|
|
| 1 |
-
---
|
| 2 |
-
license: cc-by-sa-4.0
|
| 3 |
-
---
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 1 |
+
---
|
| 2 |
+
license: cc-by-sa-4.0
|
| 3 |
+
---
|
| 4 |
+
# 低門檻透過本地/雲端ComfyUI來製作RisuAI套圖
|
| 5 |
+
## 一、結論放前面
|
| 6 |
+
這是一個設計給製作RisuAI套圖的懶人包:
|
| 7 |
+
1. **組合**:透過**角色** + **服裝** + **情緒/動作**的組合,搭配上角色一致性設定,輸出可以匯入RisuAI的角色套圖
|
| 8 |
+
2. **執行環境**:可以在自己的機器上執行,也可透過租賃雲端伺服器 (一小時$0.2~$1塊美金)
|
| 9 |
+
3. **簡易操作**:參數都設定好了,所以你只需要 **填提示詞** > **生成圖片**
|
| 10 |
+
4. **內建資源**:收錄了RisuAI卡片常出現的SFW與NSFW情緒動作,共110組
|
| 11 |
+
5. **彈性使用**:不使用套圖功能、直接把它作一般的出圖流程也可以
|
| 12 |
+
### 單圖生成時間
|
| 13 |
+
* **強化選項全關**
|
| 14 |
+
* RTX 5060ti 16GB:~60秒
|
| 15 |
+
* RTX 5090 32GB:~15秒
|
| 16 |
+
* **強化選項全開**
|
| 17 |
+
* RTX 5060ti 16GB:~2分15秒
|
| 18 |
+
* RTX 5090 32GB:~40秒
|
| 19 |
+
## 二之一、在自己機器上操作 (建議至少要有VRAM 16g)
|
| 20 |
+
### 下載ComfyUI跟mods
|
| 21 |
+
1. 下載 ComfyUI:[https://www.comfy.org/](https://www.comfy.org/)
|
| 22 |
+
2. 點擊 Manager(管理器),點擊中間最上方的`Custom Nodes Manager`。
|
| 23 |
+
3. 在管理器中搜索並安裝以下mod:
|
| 24 |
+
* `ComfyUI_IPAdapter_plus`
|
| 25 |
+
* `ComfyUI Impact Pack`
|
| 26 |
+
* `ComfyUI Impact Subpack`
|
| 27 |
+
* `comfyui-yanc`
|
| 28 |
+
4. 安裝完成後,重啟 ComfyUI
|
| 29 |
+
### 下載模型
|
| 30 |
+
1. **模型庫連結**:[https://huggingface.co/JCscrew/RisuAI_asset_generator/tree/main/models](https://huggingface.co/JCscrew/RisuAI_asset_generator/tree/main/models)
|
| 31 |
+
2. 進入以下子資料夾,點擊 `original file link` 下載模型,然後把檔案放進`C:\Users\使用者\Documents\ComfyUI\models`相應的資料夾裡。若沒有資料夾的話就自己建立
|
| 32 |
+
* models/checkpoints/ → `waiNSFWIllustrious_v150.safetensors`
|
| 33 |
+
* models/clip_vision/ → `CLIP-ViT-H-14-laion2B-s32B-b79K.safetensors`
|
| 34 |
+
* models/ipadapter/ → `ip-adapter-plus-face_sdxl_vit-h.safetensors`
|
| 35 |
+
* models/upscale_models/ → `RealESRGAN_x4plus_anime_6B.pth`
|
| 36 |
+
3. 如果真的很懶惰的話,也可以直接下載放在資料庫裡的分流模型
|
| 37 |
+
### 下載工作流程
|
| 38 |
+
1. **下載連結**:[https://huggingface.co/JCscrew/RisuAI_asset_generator/resolve/main/Single_Posture.json](https://huggingface.co/JCscrew/RisuAI_asset_generator/resolve/main/Single_Posture.json)
|
| 39 |
+
2. **放置位置**:`C:\Users\使用者\Documents\ComfyUI/user/default/workflows/`
|
| 40 |
+
### 啟動並載入工作流程
|
| 41 |
+
1. 重新啟動 ComfyUI
|
| 42 |
+
2. 在 ComfyUI 介面中,點擊左排圖示中的**工作流程/workflow**
|
| 43 |
+
3. 找到並點擊`Single_Posture.json`工作流程
|
| 44 |
+
4. 此時你會看到一個流程圖。找到左上方的**📰 新手上路**指引,開始按照流程使用
|
| 45 |
+

|
| 46 |
+
## 二之二、雲端租賃伺服器
|
| 47 |
+
介紹 **Vast.ai**,因為他是市面上目前設定最簡單且價格還行的選擇。你也可以拿我的配置去掛在AWS或Azure上,他們會給新使用者一筆免費額度
|
| 48 |
+
### 註冊連結:[https://reurl.cc/0W71px](https://reurl.cc/0W71px)
|
| 49 |
+
**有償聲明**:使用該連結註冊結果與自己去官網註冊一樣,但我會得到你花費金額的3%支持
|
| 50 |
+
### 租賃前設置
|
| 51 |
+
1. **註冊**:最低儲金是5美金,可以透過Paypal、信用卡、加密貨幣支付
|
| 52 |
+
2. **點擊Template連結**:[https://reurl.cc/0W71px](https://reurl.cc/0W71px)
|
| 53 |
+
3. **空間設置**:設置會用掉14GB,所以左邊 "content size" 設個20~30GB通常就夠用
|
| 54 |
+
4. **選擇伺服器**:訣竅如下
|
| 55 |
+
* 選擇1,000Mbps以上的網速
|
| 56 |
+
* 不要碰中國的伺服器。github跟huggingface被牆的話,會無法完成配置
|
| 57 |
+
* 計費方式是你用多少付多少,10分鐘就付10分鐘的錢。還有一筆流量費用,滑鼠放上Rent會看得到
|
| 58 |
+
* **DLP/$/hr** 等同於C/P值標準,代表你每塊錢每小時能租到多少的算力
|
| 59 |
+
### 伺服器租賃與操作
|
| 60 |
+
1. Rent按下去出現成功訊息後,點擊右邊 **Instances** 去看伺服器佈置
|
| 61 |
+
2. **重要**:結束租賃的按鈕在這裡
|
| 62 |
+
3. 如果下排英文出現 **Error**, **Close**,立刻結束租賃、換另一台伺服器
|
| 63 |
+
4. 伺服器打底完成後,左邊的 **Starting...** 會變成**Open**,稍等一下就能點擊進入
|
| 64 |
+
5. 進入介面大概90秒後會完成所有配置,可以去左下**Instance Logs**看配置進度
|
| 65 |
+
6. 配置完成後,點擊右上**ComfyUI**就可以啟動軟體
|
| 66 |
+
7. 在 ComfyUI 介面中,點擊左排圖示中的**工作流程/workflow**
|
| 67 |
+
8. 找到並點擊`Single_Posture.json`工作流程
|
| 68 |
+
9. 此時你會看到一個流程圖。找到左上方的**📰 新手上路**指引,開始按照流程使用
|
| 69 |
+

|
| 70 |
+
### 如何上傳模型/下載圖片
|
| 71 |
+
1. 點擊ComfyUI下方的**Jupyter**
|
| 72 |
+
2. 這裡就是你租賃的D槽:
|
| 73 |
+
* **模型位置**:`workspace/ComfyUI/models`
|
| 74 |
+
* **生成的圖片**:`workspace/ComfyUI/output`
|
| 75 |
+
* **流程圖**:`workspace/ComfyUI/user/default/workflows`
|
| 76 |
+
3. **上傳內容**:直接從你的電腦拉進瀏覽器裡面
|
| 77 |
+
4. **下載內容**:右鍵檔案或是複數勾選後,選擇 `Download`
|
| 78 |
+
5. 如果要上傳模型的話,打開**Jupyter Terminal**直接打指令從網路上下載會比較快,或直接拉我的script去改。
|
| 79 |
+
### 最後提醒:結束使用前,你必須做的事
|
| 80 |
+
1. 下載生成的圖片
|
| 81 |
+
2. 下載你編輯過的流程圖 (下次開啟ComfyUI後,直接把檔案拉進去繼續生圖)
|
| 82 |
+
3. **最後,記得按下畫面中的垃圾桶,結束租賃**
|
| 83 |
+
## 三、ComfyUI相關
|
| 84 |
+
* **提示詞(Prompt)寫法**:illustrious模型得用單字或英文短詞下提示詞,沒辦法直接使用自然語言或中文。寫法可參考預設的情緒動作提示詞依樣畫葫蘆。或是先描述給AI聽,叫它去Danbooru拼湊英文關鍵字,再拿回來複製貼上也是一個辦法
|
| 85 |
+
* **創建已存在的IP角色**:
|
| 86 |
+
* 查詢工具:[https://huggingface.co/spaces/flagrantia/character_select_saa](https://huggingface.co/spaces/flagrantia/character_select_saa)
|
| 87 |
+
* 查到後將下方出現提示詞貼進角色欄位就可以了,不用再給其他細節
|
| 88 |
+
* **正面提示詞的組合結構設計**:
|
| 89 |
+
`情緒動作` + `隨機詞` + `人物` + `服裝` + `正面提示詞`
|
| 90 |
+
因為情緒動作的第一個提示詞是指定人數,很多模型都要用這個開場
|
| 91 |
+
* **自由出圖(不做套圖)**:
|
| 92 |
+
`人物`、`服裝`、`情緒動作`選項都設定成 **0**,隨機詞庫清空,然後把所有提示詞都寫在正面提示詞欄位就好
|
| 93 |
+
* **生圖流程(給熟手參考)**:
|
| 94 |
+
模型 > *LoRA > *IPAdapter > Hires.Fix > *Upscale > 出圖
|
| 95 |
+
(\*代表可強化功能,預設關閉)
|
| 96 |
+
## 四、未來發展計畫
|
| 97 |
+
1. 新增image 2 image流程,支援圖片的批次精修與歸檔。預期功能:
|
| 98 |
+
* 可單圖匯入或是批次圖片匯入
|
| 99 |
+
* 支援角色一致化
|
| 100 |
+
* 精修臉部
|
| 101 |
+
* 精修手部
|
| 102 |
+
* 自定義精修 (可精修服裝、飾品等)
|
| 103 |
+
* 去背
|
| 104 |
+
* 圖片尺寸調整
|
| 105 |
+
* 檔名修飾 (去掉流水號)
|
| 106 |
+
2. 新增text 2 image流程,讓圖片能夠整批生成。預期功能:
|
| 107 |
+
* 角色 x 服裝 x 情緒動作的全套圖一次生成
|
| 108 |
+
3. 與圖片對應、具有經典功能的RisuAI卡片模板,降低卡片創作門檻
|