Re: [閒聊] FANZA上「特定畫風」的AI作品越來越多了
昨天本來想講,只不過用推文講有點麻煩 ==
其實這也算是一個常見的誤解:
就是AI要將一個人物「學得像」需要大量、精緻的圖片作為資料。
但是實際上,如果只是要「學得像」那其實只要不到10張圖片就能辦到了。
而且圖片不用特別精緻,或者說某些特別精緻的圖片反而會有反效果。
對AI來說,要學習一個人物比較需要的是能精確呈現角色特徵,
用色和線條分明的圖片。
最符合以上需求的圖片是什麼?
對,動畫的截圖。
我舉個比較極端的例子來講:
https://i.imgur.com/RUAphDb.jpg
這是我自己練出來的早坂媽LORA產出來的圖。
這個角色在動畫裡出場只有5分鐘左右,當然也沒有什麼同人圖。
可是LORA模型一樣可以把這個角色給練出來。
我的給它學習的基本學習資料就長這樣:
(搞了好幾個不同的版本,可能不是這個資料夾 ==)
https://i.imgur.com/AGDXoGV.jpg
除了兩張我預先學習的AI圖,其他就是那5分鐘的動畫截圖 ==
LORA模型的原理是汙染干涉原本底模的生圖結果,
所以「學得像」為前提的話它只要動畫截圖就夠了。
但是大部分玩AI的人不會滿足於學得像,而是希望這個角色能擺一些原本看不到的姿勢,做一些原本看不到的動作。
講白一點就是10個玩AI的有9個會拿來搞色色的東西,
最起碼也要能換一些色色的衣服。
這樣問題就來了,AI在只有少數幾張圖的情況下學習不到,
因為它的資料只被限制在那幾張圖中,所以也只會做那幾個動作。
用比較專業的術語來講叫做「過擬合」,白話文就是「學太像」。
這個時候大量圖片學習的優勢就出來了。
如果有50張圖片,並且風格沒有過於牴觸的話,
那AI就會知道你想訓練的東西不是一個站挺挺的人物,
而是一個人物能根據TAG擺出不同的姿勢,甚至是換成不同的衣服。
甚至在超過200張圖片的情況下,我的經驗是也不太需要擔心風格牴觸的問題,
因為這問題會被大量的資料本身淡化至可以忽略的程度。
那冷門角色是不是就真的沒救?
也不是。
https://i.imgur.com/KmkMk7r.jpg
https://i.imgur.com/zWmq9AS.jpg
我這個早坂媽就練出了可以讓角色回頭張望或坐下平躺之類的基本動作。
因為AI學習中有個方法叫「正則化」可以給AI補習,讓它學習到其他的概念。
簡單來講,就是在訓練時丟一些其他圖片給它一起學習。
現在開源的LORA訓練腳本都有正則化的選項可以勾選。
但是那個正則化用起來怪怪的,現在很多人其實是手動處理。
以這個早坂媽的LORA來講,我正則化是先加上了一堆無頭裸女的圖片一起學習。
像是這種:
https://iili.io/JoN1Cnj.png
這個方法我是從一個中國人那邊抄來的。
我本來是用學習衣服的方法,添加各種衣服的去頭圖片來學習,
但是後來才發現這種裸女去頭法更簡單粗暴。
因為我把頭塗黑了,人物又是裸體,所以AI就只會學習動作而不會汙染我原本學習資料。
然後我又感覺長裙的頭身比例經常出錯,
因為原本資料幾乎都上半身,缺少全身圖讓AI認識正確的頭身比例。
所以我想了一下,又很簡單粗暴的加上了一組資料給它學習:
https://i.imgur.com/r2ZR5qS.jpg
對,我把早坂愛的頭砍了下來,只留穿長裙的身體給AI學習身體比例。
如此一來AI大概知道角色的頭身比例,
還有個附加優點是這個LORA的早坂媽可以換穿她女兒的衣服。
https://i.imgur.com/ufyeZq4.jpg
當然,要換一些色色的衣服也不成問題。
簡單來講,要讓LORA模型學習角色圖片的數量其實本身不是必要條件,
而動畫截圖其實是學習人物最優秀的原料 ==
所以現在模型網站CIV上最多的就是各類動畫人物,新番人物也是一堆人搶著練 ==
譬如說這季的福利蓮製作精良、用色分明、線條簡潔,學習起來效果就很好。
所以幾乎每個女角都是一堆模型。
像是屍骨未寒的阿烏拉和莉妮耶,掛掉後她們馬上就被分屍練成LORA了 ==
https://i.imgur.com/jRkyASl.jpg
所以回到正題,NovelAI的人物和畫風模型是哪來的?
最直接的想法就是他們內部有人在專門練各類畫風和角色LORA讓使用者使用。
另一種想法就是他們也幹了其他公開的LORA來用,
只不過這些LORA本來就是基於他們前洩漏模型來訓練的,也算是鮭魚回鄉。
但是不管是哪種,圖片數量其實都不是大問題。
100張圖片對於練成人物LORA來講完全是綽綽有餘,
對我這個專門截圖練冷門人物自爽的人來講是甚至有點奢侈。
至於營利問題嗎,目前基本上無解。
因為除了ADOBE我相信他的圖庫是相對沒問題的之外,
其他的AI模型應該都有用非正當手法取得學習資料的問題。
以最流行的開源的stable diffusion底模來講,他使用的圖庫來源本身就並非正當授權。更別提構成現在宅圖根基的NovelAI模型,那是直接拿盜圖網站在作訓練的。
換句話說扣除ADOBE之外,AI圖和模型本身大多沒有一張是清白的,
基本上都是盜圖產物。
要說這是引發產業革命的蒸汽機?
以目前來看來比較像是比較像是引發混亂的產業廢棄物 ==
只是這廢棄物目前對我來講還有玩樂的用途,偶爾想「用」某個角色時可以不求人罷了 ==
--
(と・てノ) 翼龍欸
--
斷頭台的翼龍4ni?
請給我更多AI色圖 我要做研究
請問收現金袋嗎?
太認真了吧 XD 推
早坂愛:????????
然後發現自己喜歡的冷門角有人做AI色圖是蠻開心的XDD
翼龍你data set太小的話有試過data argument嗎?
我通常是手動處理去轉轉翻翻,讓他圖片看起來是不同張
有很多可以弄 DL的時候水平翻轉 旋轉 alpha值 伸縮 剪裁
啥的
我沒試過,主要還是dataset每幾張的話自己手動調就好了
像是全身圖我通常會順手裁成三到四張圖
哦哦 數量少所以乾脆手動就是了
對啊,本來就沒幾張整理的時候順便調一下就好
畢竟資料集太小造成的overfitting 最直觀解法就是擴大資
料集(`・ω・′)
斷頭法其實很好用,看到服裝類似但是用TAG區分的也可以用
只是湊一腳談談 沒實際玩過AI產圖就是
stable diffusion的webui有內建一個翻轉功能
我自己是沒用直接用過,因為還是有人物左右不對稱的問題
原來如此(′・ω・`)
難怪最近阿烏拉的圖大量發生...
斷頭學習法
推講解
人為了色色,其利斷金
斷頭法學習的身體如果畫風差異仍然偏大不會污染嗎
LORA就是把大模型沒有的東西加上去啊
這不是接頭霸王嗎XD
但所謂學得像還是蠻主觀的 圖提供的資訊少姿勢一變就歪
衣服到現在訓練有完整重現的嗎 好像還是會是微妙的不同
嚴格來講不是加,是在過程中汙染就是了
完整重現就看本身衣服複雜度和抽卡數量
我的意思是如果只有100張的圖他們都特地練出來
那樣總共需要的工程量未免也太大了
現在一堆人用腳本和AI再練AI,其實還好
CIV上也有一堆用AI練AI產生的模型,人類從頭到尾不用介入
真是好研究~~~~推推
阿烏拉也是為了研究AI才成為斷頭台的阿烏拉
喜歡的冷門角色能自己產真的挺開心的
就叫你阿烏拉吧
老哥,如果我想要訓練某個畫風的模型要多少圖才夠
不一定,大部分的人都是能多少就丟多少,再看情況調整
通常是選看起來差異性比較大的圖片,除非你有想搞腳色包
推
原來翼龍大有在玩AI
推推
貌強只推
原來還有這種方法 感謝分享
資料原則上越多越好,多還可以想怎麼調整,少就比較麻煩
推專業,學到了
推 能自己畫冷門角色的圖真的棒 但之前試的感覺是用文字
還是很難控制圖的內容 controlnet+使用者有繪畫底子才能
真的釋放這類model的潛力
另外砍頭那召真有趣XD 搞不好之後會有人釋放砍頭數據集
瑟瑟!
感謝為世界和平貢獻
確實是接頭霸王 但AI會幫你P的還把接頭醫治好一致性
厲害厲害
好奇那個txt檔是什麼?
真厲害
曹賊大喜
推
txt就標籤,告訴ai這張圖片有什麼要素
之後產圖的時候咒語就是那些標籤
Novelai自己就有訓練能力,現在一堆SD模型都參了一部分當
初洩漏的Novelai模型,v3會這麼強單純只是用了SDXL,不是
什麼LORA,SDXL訓練的需求太高,所以雖然推出很久,民間模
型的完成度還是沒有很高
大師
39
[討論] 關於AI學習過程中的版權問題最近對AI畫圖的討論實在是沸沸揚揚,尤其是版權方面,有一些問題想聽看看板眾的看法 先上文章 : 如果對AI繪畫的原理還不熟悉的建議可以去讀一下上面那篇文章,我認為對擴散算法講解 算是淺顯易懂,當然如果你實在不想看我會儘量用簡單的方法解釋,我是修EE的,所以 如果內容有誤歡迎各路CS大神指正,以下正文。34
[閒聊] 驚!看色圖不求人 AI是否也能畫色圖?雖然下了很農場的標題 但這一篇認真的研究論文 大家或許以為AI跟色圖很遙遠 但事實真的是這樣嗎 在一年前可能沒有錯 但經過最近的突飛猛進 故事已經進入了新的轉捩點29
[AI] 如何訓練LoRA? 猴子都學得會的手把手教學!先附上預覽圖,幼妲貼貼: 網頁好讀版: 前言都是一些廢話,如果只是想知道如何訓練LoRA,可以直接往下跳至分隔線。29
Re: [閒聊] 推特趨勢:AI疑惑 知名繪師墮落翻車現場別的先不討論 單純講一下推文說的畫風好認這點 先不說畫風像AI這根本魔戒抄天堂的言論 畫師圖被拿來練已經夠幹了 練完之後還要被嘴說畫的怎麼像AI13
Re: [閒聊] 想當個厲害的AI咒術師也不容易: : : 厲害的咒術師用AI製圖生成出3D風格圖 : :9
Re: [閒聊] 所以AI應用到繪圖領域,爭議怎麼這麼大棋譜沒有版權,圖畫有 AI生圖的版權糾紛很難處理 而且這次stable diffusion其中的waifu模型,或是NovelAI 都使用了圖庫danbooru 包含大量非正式授權圖片,網站本身已有人幫圖片上標籤省去超大量人力10
Re: [問題] AI為什麼不去吃動畫就好?我自己整的比較大的 馬娘 怕痛 不當哥哥了 養老8
[閒聊] 來聊聊AI輔助作畫的願景首先novel-ai過份了 手腳的問題解決了 馬賽克問題解決了 四肢亂跑的問題解決了 多人的問題也解決了 下面第三張極度nsfw注意 (全裸無露點)3
[轉錄]AI必定成為設計/行銷/繪圖/美編業的標配轉錄自FB生活中的城市 建議可以看FB 有各步驟參考教學圖 例:修動漫圖片的兔耳1
Re: [問題] AI為什麼不去吃動畫就好?圖多不代表就會比較好 每個動畫都會固定他的畫風 所以餵他重複畫風太多無用 每一幀的品質要看動畫水準有沒有畫崩 精選好的圖去訓練出來的才好看
爆
[情報] 星街 日本武道館 Live開催決定爆
[推投] 偶像大師本家765 最喜歡女角「2票」爆
[Vtub] 星街すいせい武道館開催決定89
Re: [閒聊] 知名實況主 Asmongold 因歧視炎上中86
[討論] 鬼滅柱展失控的中國轉賣亂象84
[慶生] 今天是高捷少女司機員 艾米莉亞的生日!67
Re: [閒聊] FF16,pc版本只賣出28.9萬份64
[問題] 二手書店的漫畫能收嗎?51
[情報] 我推完結後赤坂萬字訪談懶人包65
[閒聊] 我想成為影之強者 動畫瘋破千萬觀看28
[閒聊] 橫槍老師是否開始和赤坂有嫌隙了?38
[閒聊] 鬼滅咒術我推要怎麼排名47
[閒聊] 陰陽眼見子 防AI水印(慎入)47
[蔚藍] 季的角色性能要怎麼救?46
[鳴潮] 椿第一波營收43
Re: [Vtub] 虎鯨出道爭議有比F團隊長嚴重嗎?41
[閒聊] 現在的你,收到PSP還會開心嗎?爆
[閒聊] FF16,pc版本只賣出28.9萬份41
[閒聊] 烙印最後用握手和好結局可嗎?38
[情報] Metal Build 鋼彈00Q全刃式 新裝備37
[閒聊] 亂馬1/2的看板娘是女亂馬還是珊璞☺爆
[推投] 請問你是電腦派或是主機派?32
[閒聊] 戰敗逃跑的魔法少女35
[閒聊] PTCGP歐了一次34
[閒聊] 小霞不是才10歲嗎?33
Re: [妮姬] TES 正版授權 普麗瓦蒂 不友善女僕 GK28
[鳴潮] 小保都不歪有多猛31
[情報] 天穗之咲稻姬 新情報預告31
[魔物] 都是獵人,不要分的那麼細30
[奶子] 隱巨乳