2023-08-03 16:55
國產(chǎn)開放訓練模型第一家！如何對美圖WHEE自主訓練的風格模型進行優(yōu)化？
AI繪畫工具：美圖WHEE
工具介紹：WHEE是美圖公司基于其視覺大模型MiracleVision最新推出的AI圖片和繪畫創(chuàng)作平臺，該AI圖片生成工具支持多種模式的圖片創(chuàng)作，包括文生圖、圖生圖、風格模型訓練和創(chuàng)作提示詞庫。
工具鏈接：http://ntrq.com.cn/sites/1232.html
【實戰(zhàn)教學：美圖WHEE自主訓練風格模型的優(yōu)化辦法】
“文生圖”測試步驟：
①創(chuàng)意描述
創(chuàng)意描述內(nèi)容要盡量與模型的內(nèi)容相匹配
②選擇合適的大模型，通用參數(shù)設定
使用我們平時生圖時常用的參數(shù)，建議打開高清修復，創(chuàng)意相關性可以適當調(diào)低
③開始生圖，尋找最佳參數(shù)配方
通過調(diào)節(jié)不同參數(shù)與更換關鍵詞來測試模型的學習效果以及擬合度、泛化性
適中的擬合度：合適的擬合度可以在保證還原特征的基礎上，不過度生成額外的元素，并且可以通過調(diào)節(jié)模型的權重，平滑地控制風格的擬合程度
高泛化性：個泛化性好的風格模型，應該可以適用于多種畫風的大模型，配合更多的風格模型進行使用，從而衍生出更多的配方
配方的種類
風格化重繪
對人物/場景/道具進行風格化重繪，在不改變畫面內(nèi)的元素的基礎上對照片進行美化
換裝
基于cos的主題，改變照片內(nèi)人物的妝容/服飾，場景和元素，但依舊保持和原圖的映射關系
重繪幅度測試
沿用文生圖的配方，測試不同重繪幅度下的效果
場景測試
測試對場景的替換能力
構圖測試
測試多種人像構圖下，AI生成正確效果的穩(wěn)定性
重復測試
測試更多的圖片，確保效果可以穩(wěn)定地復
配方制作心得分享
使用圖生圖，測試多個參數(shù)下，AI對照片的重繪效果，以及與原圖的映射關系，尋找一個平衡點
多組參數(shù)下的對比測試
（調(diào)節(jié)關鍵詞、創(chuàng)意相關性、去噪強度）
使用畫面控制模型加強映射關系
總結：
一個優(yōu)秀的配方需要具備什么特性？
- 美麗、有趣、健康的主題
- 與原圖保持一定的映射關系
- 適配性強，可以適應多種構圖場景
- 穩(wěn)定性強，能夠穩(wěn)定地復現(xiàn)高質量的效果
以上是美圖WHEE繪畫工具的風格模型自主訓練之后的優(yōu)化方法，希望我的教學可以幫到您。
相關文章
Kardashian
數(shù)字生命卡茲克
Altman
