[AI] Meta Animated Drawings 把塗鴉變成動畫
https://www.techbang.com/posts/105487
Meta 開源的AI繪圖專案「Animated Drawings」:可以把你的潦草塗鴉,5步驟立刻變成動畫
janusjanus 發表於 2023年5月03日 14:30
https://i.imgur.com/gLQdxp6.png
Meta公司已經開源了一個人工智慧計畫,讓任何人都能把他們的塗鴉變得更有生機。該公司希望通過將「Animated Drawings」作為一個開放原始碼專案提供給其他開發者,他們將能夠創造出新的、更豐富的體驗。
https://i.imgur.com/TMrppyl.png
基礎人工智慧研究(FAIR)團隊最初在2021年發佈了該工具的網路版本。它只需要使用者上傳一張類似人類的單一角色的圖畫,或者選擇一個展示人物。如果你使用自己的塗鴉,你會看到一個同意書,詢問Meta是否可以使用你的畫來幫助訓練其模型,不需要提供同意也可以繼續使用這個工具。
接下來,上傳者需要手動調整一個捕捉框的大小,使之與原作緊緊相貼,介面中提供了筆和橡皮擦來調整圖紙,然後再調整關節的位置。完成這一切後,就可以看到草圖的動畫版本。你可以從四類預設的動畫中挑選:舞蹈、搞笑、跳躍和行走。
https://www.facebook.com/watch/?ref=external&v=196558752689269
動畫圖畫利用物體檢測模型、姿勢估計模型和基於圖像處理的分割方法來捕捉數字版本的圖畫。然後,它使用傳統的電腦圖形技術對圖像進行變形和製作動畫。
他們做了一個示範版的網站,在展示上線後的幾個月內,使用者已經授權Meta公司使用
160多萬張圖片用於培訓。一些人上傳了公司標誌、動漫人物、魚和毛絨動物的圖片,儘管該工具規定只有人類形象可以使用。你可以在這裡上傳你自己的塗鴉試試看。
https://sketch.metademolab.com/
5個步驟讓你的塗鴉跳起舞來
實際使用很簡單,基本上你只要用小畫家準備好一張圖片就好了,或是用手機將你孩子的塗鴉畫拍下來也可以。
1.依照指示將你的塗鴉畫上傳到網站。
https://i.imgur.com/2A6ewi3.png
2.用框線把主要的角色部分框起來。
https://i.imgur.com/Yv5ZNxP.png
3.現在他就會自動判斷這個角色的肢體骨架,如果有沒標示到的地方,你可以利用下方的工具自己再劃上來補強。
https://i.imgur.com/J23VZKQ.png
4.然後他就會產生關節。
https://i.imgur.com/t6uDlx2.png
5.最後你可以點選左邊的跳舞範本,可以看到右邊你的塗鴉隨之起舞。
https://i.imgur.com/xhFStrX.png
透過人們上傳到該工具的一系列圖像表明,人們對更廣泛的繪畫到動畫的體驗有廣泛的興趣。這在一定程度上帶動了Meta公司將該項目與大約180000張圖紙的資料集進行了開源。
Meta在一篇文章中表示:「通過將模型和程式碼作為開放原始碼發佈,這個計畫為開發者提供了一個起點,使他們能夠建立和擴展該項目,促進開放原始碼社區內的創新和協作文化。」
瞭解更多:https://github.com/facebookresearch/AnimatedDrawings
========
操作流程不出意外 是抓出骨架以後去操縱骨架
DEMO 網站開出來以後等於可以有大量免費訓練用資料
FB 這次的新玩具看起來應該比較有前途
--
05/04 23:50
但我不想看自己畫的手殘圖動起來 而是變漂亮之後還
動得帥
你可以先丟進I2I讓它變漂亮
這蠻久了最近開源其實蠻好玩的
34
[閒聊] 驚!看色圖不求人 AI是否也能畫色圖?雖然下了很農場的標題 但這一篇認真的研究論文 大家或許以為AI跟色圖很遙遠 但事實真的是這樣嗎 在一年前可能沒有錯 但經過最近的突飛猛進 故事已經進入了新的轉捩點19
Re: [閒聊] Ai 快要可以做動畫了?剛剛看到版友推這個 如果我理解無誤 代表只要給它剪影動畫 還有一個認識角色的模型 就可以生成動畫 如果效果再穩定一點16
[原神] AI派蒙:將ChatGPT虛擬角色化 + 有情緒「AI派蒙」將 ChatGPT 虛擬角色化 + 有情緒的對話,變身成你的可愛虛擬助手 (安裝教學) 真的讓人非常期待未來的 AI 世界阿!現今只要多款工具搭配一起,就能把原本只是機器 的 AI,變成更加人性化。稍早中國知名硬體評測頻道极客湾Geekerwan 釋出一款非常好8
[閒聊] 來聊聊AI輔助作畫的願景首先novel-ai過份了 手腳的問題解決了 馬賽克問題解決了 四肢亂跑的問題解決了 多人的問題也解決了 下面第三張極度nsfw注意 (全裸無露點)6
[閒聊] Epic宣布 MetaHuman Creator展開搶先體驗原文標題: Epic 宣布「MetaHuman Creator」展開搶先體驗 可輕鬆創作逼真數位人類角色 原文網址: GNN 記者 RU 報導4
Re: [問題] 剛學電繪需要每天練習嗎==?先丟個十年進化錄: 先直接回答你原本的問題: 畫圖要邊畫邊想,不知道怎麼畫的東西就找參考看著畫。 畫人就是背骨架、頭身比、看骨架練習,養成習慣畫圖時候先找參考,完稿之前先畫彩色草稿確定完稿感覺,不要想著如果被人說描圖、抄襲怎麼辦?拜託,你這個階段沒人在乎的,練習而已不是叫你商業創作。你對於物體結構,正確的骨架、美麗的線條、好看的形狀這些東西的感覺太低了所以才會瞄一眼畫但畫不出感覺,要多觀察那些大佬的圖,不是單純的看著喊好美,而是看他們比如關節曲線、物體形狀、陰影和色彩的處理法。你要先充實這些基本知識,去找理論書認真的看、教學影片和文章多看,最好能找堂課去上,你現在缺的很多東西都是素描基礎會練習到的東西3
[閒聊]上傳 AI圖 對繪圖交流平台不是壞事吧舉例很多人在用的PIXIV 很多在練手的上傳的圖 歪七扭八跟幼稚園的塗鴉一個水準 非常污染搜尋結果 尤其是剛出熱門角色圖一堆人跟風畫
54
[Vtub] 拉電介紹台南美術館&美食87
[閒聊] 米哈遊卡池大改動?38
[閒聊] 與變成了異世界美少女的大叔一起冒險(36
[劍星] 欸不是 金變態 可以這樣的嗎28
[問題] 大蔥鴨憑什麼當神奇寶貝29
[蔚藍] 哇幹 蕾絲內衣莉央23
[閒聊] 矢吹:能看到出包再刊載於JUMP真是高興啊33
[閒聊] 覺得P5R比暗喻幻想好玩 正常嗎(雷)22
[閒聊] 美國富翁:想要我的財寶嗎?那就去尋找吧27
[BGD] 為什麼買狗CP是愛爽配==19
[閒聊] 12點了 誠實說有對Biboo起色心嗎?20
[閒聊] 寶石之國第一季YT免費看17
[閒聊] 井上雄彥會怎麼畫這屆棒球12強?14
Re: [討論] 日本是不是熱衷棒球大於籃球?15
[Vtub] 佃煮のりお的13周年新衣裝20
[閒聊] 偶大劇場版開大招了14
[閒聊] 秋葉原車站 阿夸生日快樂廣告21
[閒聊] KOFXV 泰瑞的帽子 ¥4,73014
[閒聊] 為什麼RO可以出這麼多版?34
[PTCGP] 對戰打完會給謝謝的是不是越來越少了13
[閒聊] 福山潤 生日倒數生放送58
[閒聊] 在廁所抽菸的都什麼人?12
[閒聊] 芙莉蓮這樣算有囤物症嗎11
[情報] Insider Gaming 報導 PS5 的掌機24
[閒聊] 教育傲慢義弟的義姊26
[闇龍] 不如FF7RB,紗障守護者銷量未達預期12
[閒聊] 贊同日麻遊戲對局中即時顯示手切/摸切嗎27
[百合] 戀人不行 捉i爆
[閒聊] 活俠傳 更新內容預告13
[蔚藍] 這可是只屬於我的老師!