Re: [閒聊] 作了AI圖靈測試 結果公布與分析
※ 引述《clothg34569 (提拉)》之銘言：
: 先上連結 歡迎隨便轉載
: 20題版本 : https://forms.gle/2iTfiaCcwSSXWs6j8
: 30題版本 : https://forms.gle/hzXRtphBZSoDcQcG9
: 50題版本 : https://forms.gle/cp1EprygC6mKWrzq7
: 完整版: https://forms.gle/AYR2JiyJuxviebTp7
: AI圖片靈魂分辨測試 簡稱AI圖靈測試
: 來看看分不分的出是AI圖吧
: 完整版總共100題 因為長到我自己都受不了
: 所以有簡化的20 30 50題版本
: 其中20 30 50的題目都沒有重複
: 就之前AI群組裡聊天時聊到說AI玩久的到底好不好分AI
: 所以自己來做一個表單玩玩看
: 目前成績: 幹爛各大AI群 真的有夠難==
: 連我自己都沒滿分==
: https://i.imgur.com/fpmrDgU.png
: 我覺得有幾張真的超過份....
: 目前看了一下後台最高是92分 也是出題者以外唯一一個有90的
題目如上 還沒玩的可以先玩看看再看結果分析
以下是這次題目結果的分析
https://i.imgur.com/yEifhRy.png
先上懶人重點
20題最多人做(1500)
結果呈現一個超級漂亮的鐘形曲線
扣掉100和0之後(大部分都是我測試時填的)
平均51 中位數50 標準差14.7
#丟硬幣機率參考 : 平均50 中位數50 標準差5
大概就是標準差大一點的丟硬幣(?
裡面大概有750個人輸給丟硬幣的平均分數
....其實要我說的話找1500人丟硬幣好像也會得到差不多的結果 :)
另外
65分就贏過68%的人
80分就贏過95%的人
---
以下各題組詳細分析
可以在這找到題目的圖片
懶得看密密麻麻的字可以往後跳到幾個懶人結果
AI:
https://drive.google.com/drive/folders/1yEl_Ch-iQod-og-2JhvnP6Q3PAVageut?usp=sharing
真人
https://drive.google.com/drive/folders/1jMvmxZPwdgCwZsGciWkDBWZU8GxbuoRL?usp=sharing
20題
https://i.imgur.com/bD88cD6.png
30題 (滿分120)
https://i.imgur.com/qXLcbMS.png
50題
https://i.imgur.com/EvsgF52.png
100題完整版
https://i.imgur.com/kcPmYWZ.png
總和分析 以作者分類 用錯誤率排序
https://i.imgur.com/U7yCTGn.png
懶人結果:
20題/完整版 AI錯誤率王者 : Kiwi
參考圖
https://i.imgur.com/LFRaVFp.jpeg
第二名 : st66612873
https://i.imgur.com/vn8BqK0.jpeg
另外我自己的總和也有60%錯誤率 :)
阿福基本上是送分 來當作判斷問券有效判斷
但也代表說在有送分題的情況下平均51....
真人部分 水鈴鈴以71%錯誤率領先第二名的ke-ta (59%)與第三名的B銀河(57%)
另外B銀河如果只看めがみんクエスト的話錯誤率高達64%
這就是陷阱題的力量嗎....?
--
結論 這次AI測試的結果是大部分人比我想像中更難分出AI圖
即使是有玩AI的也一樣
未來說不定會考慮出第二彈...?
預計是中日英三版本 然後簡化成35題左右 與 100題完整版
再去掉一些送分題 然後盡量每個人的圖不要超過2張
當然還要有五張左右卡比
結尾再多個欄位給人填心得(如果有的話)
順便問問看 Google表單有辦法在看完分數後填回饋給作者嗎?
還是說只能在提交前填?
------
https://i.imgur.com/sg2uShY.jpeg
--
我覺得這次測試難易度很高就是了，也是有那種很簡單就看
得出不是AI圖的
這次選圖很多那種本來就被學很多的繪師
懂了 下次做題準備硬幣
豪
我覺得單純是題目挑的太故意了 你看錯誤率王者的兩張
我比較好奇原PO都準備題庫了，那有題目解析嗎(′・ω・
‵)
風格強烈+線條單純 沒看過的人只能骰硬幣 當然就5050
既然選了這些圖代表也有分辨這些AI圖的方法對吧?
舉槍那張到底是有給AI情境還是從一堆隨機中選出來的?
我只做20題的，印象分數40左右 哭哭輸給擲硬幣
舉槍那張我反而看得出來就是了，雖然的確不是常見的AI圖
，這批AI圖要分辨反而從圖意比較好判斷，例如這張舉槍根
本沒對在角色身上
像卡比那張我就是從星星分的，這是這種分辨方法就很主觀
選難的正常啊 總不能只選NAIV1的分支模型然後說分得出來吧
我說的難不是AI圖的部分而是繪師的部分
倒不如說AI的部分反而還好而已，我已經被推特咒術師訓練
過了，我錯的大多是繪師陷阱題
AI圖選擇邏輯 : 沒啥邏輯 群友一人贊助幾張 繪師選擇邏輯 : 幾個陷阱題 幾個常被練的 幾個單純"嘿她的畫真好看 沒看過的話你也來看看吧"
※ 編輯: clothg34569 (36.230.12.206 臺灣), 11/19/2024 22:40:06有常跟創作型繪師的話就會知道，他們的作品不太可能被當
成AI，因為他們的作品都會有明確的表示意圖在
但是純插畫，或是專門畫單體人物的繪師在AI出來後就很吃
虧，因為這塊訓練最多
像是這個題庫準備的那群陷阱題繪師就是影響最大的
我是覺得選圖很刻意，AI圖都故意挑風格特殊的，導致
判斷困難
所以我才覺得難的是繪師那部分啊
這不就是很多人說AI的畫風很相似，真給你挑不一樣的，就
很難分辨了
所以這表示很多人說的分得出來基本是假的
AI畫風很相似的是最主流的那群，不一樣的那些你也不太會
看到，因為他們沒啥流量能蹭
只是有幾個畫風AI常用 所以那個畫風被當成AI而已
但如果你推特看得夠多會知道有很多咒術師都在裝繪師，而
且是有一定的方法能分辨的
下次應該全挑六指或左右手腳畫錯的
很多人在意的不是分辨得出來與否的問題，而是背後的過程
就像抄襲描圖你看到圖也看不出來
一樣的風格看多又不同人畫得大都AI
雖然現在也不少模仿畫風的 但還是有跟原作有不同的畫風
但也有人覺得反正圖好看就好我不在乎那麼多，那我也沒辦
法說什麼，這就是見仁見智的問題
但說實話，咒術師圈的和平在我看來只是建立在欺負繪師身
上而已
對我來說 AI圖不是爛 而是東西太像 膩了
這種和平只是假象，因為他們有個能一致對外欺負的對象
原本繪師建立的社群能維持比較良好的風氣就是有些道德約
束在
就像之前有咒術師作品被拿去練LORA爆氣一樣，如果咒術師
真的自詡創作者，他也不會想要自己的作品被拿去練
代朋友回，他錯最大的2張AI圖跟水靈靈都有答對，拿了80-9
0分
純黑白那張，要放大來看後理解線條是怎樣畫出來的，會發
現有幾個連接位很奇怪，不像是人類會犯的錯誤，有畫過線
犒的會懂
拿槍那張，右邊角色的手條線被頭髮擋住後消失了，是AI常
見錯誤
水靈靈那張雖然風格很像，但是細節全對(像斑比那張衣服細
節就錯了)，而且沒有出現AI亂打的陰影跟亂飛的頭髮
我朋友的感想是只是玩AI不夠，要手繪圖也要看得多，最好
要自己有電繪經驗(他是玩了AI兩年，然後學了電繪快一年)
這樣反而好奇她錯的是哪幾張了
如果還要在弄二版的話 看起來開頭可以給選項填
繪畫 AI的經驗
AI玩過幾天，繪畫經驗0，20題85分，錯6.15.20
他卡比跟咖啡杯都錯了，卡比太整人，咖啡杯以為跟PVC一樣
就直接選答案沒檢查
ai圖看眼睛高光一致性的判別率就可以超過70%了 其實目前很好
辨認
kiwi這個真的太扯 我還認真去看起筆收筆
48
[閒談] 機械專A題目的問題清單今年真的算蠻難的，題型不知道是不是從今年開始大變更 總之材料力學的占比太高+應用題型太多，難度個人覺得10年內裡最高了 沒應用力學主流的計算題，題目傾向真的還蠻偏的 而且圖也是102之前的那種復古風，看到圖頭都暈了 這篇是列出個人覺得資訊不足或題目描述很奇怪的部分。![[閒談] 機械專A題目的問題清單](https://i.imgur.com/vZngDHPb.png "[閒談] 機械專A題目的問題清單")
32
[資訊] WORD UP 官方來提供好康大家好，我是 WORD UP 的 Skyler，很久沒來發文啦！ 今天有兩個好消息要告訴大家，都是有免費教材可以拿的好康唷！ 【首先 - 第一個好消息】 我們新的「無線刷題教材」 >>> 《多益刷題神器》準備上線了！ WORD UP 想要邀請 3名 PTT 網友幫我們測試，除了可以搶先試用到 Beta 版功能以外，![[資訊] WORD UP 官方來提供好康](https://www.surveycake.com/s/share-image.png "[資訊] WORD UP 官方來提供好康")
29
[閒聊] 丟四枚硬幣 兩正兩反的機率是多少小妹我剛剛看棒球大聯盟2 大吾在考數學 第一題感覺要用量角器量X的角度 第二題機率題丟四枚硬幣 兩正兩反的機率![[閒聊] 丟四枚硬幣 兩正兩反的機率是多少](https://i.imgur.com/rQOTyYkb.jpg "[閒聊] 丟四枚硬幣 兩正兩反的機率是多少")
15
[問卦] AI跟真人判斷的測驗這兩天很紅的測驗 有20個圖讓你判斷真人還是AI 這幾天臉書不少討論 看到的平均分數大概對超過15題就算厲害![[問卦] AI跟真人判斷的測驗](https://i.imgur.com/GqMKu81b.jpg "[問卦] AI跟真人判斷的測驗")
11
[閒聊][御城] 新的御城測驗新弄好的御城測驗，有興趣的可以填看看有沒有什麼問題和感覺難易度如何 感謝 這次也是藏有不少的陷阱題和送分題 但是在其他社群平台提供玩家填寫後，目前平均分數大概在60，應該不會像上次那樣細過頭6
Re: [正太] 2021正太控知識大會考因為有一題送分的關係，大會考更新到1.2版本 傳送門 → 1.2版本更新項目： 。替換原本答案有誤送分的第40題![Re: [正太] 2021正太控知識大會考](https://i.imgur.com/CHstsErb.jpg "Re: [正太] 2021正太控知識大會考")
2
[問卦] 為啥AI妹子考試我只有9分我阿肥拉 朋友傳了一個AI真人分辨的考試給我 他媽的20題對9題 美肌開太兇的反而是真人 自然素顏的結果是AI3
[心得] 111年地方特考機械工程上榜分享本人是在職考試(三次上榜)，也祝還沒上榜的人上榜。 直上成績： 國 文：申39 + 測14 = 53 法學知識與英文：58 機 械 製 造 學：422
Re: [閒聊] 聽歌猜vt活動猜歌活動的資料整理完畢，先公布答案如下： 第1題：花譜 -KAF- 第2題：YuNi 第3題：夢見とびら - Yumemi Tobira - 第4題：響歌シノ2
Fw: [閒聊] 聽歌猜vt活動作者: mobetaq99530 (Mobetaq) 看板: C_Chat 標題: Re: [閒聊] 聽歌猜vt活動 時間: Sun Feb 6 16:57:34 2022 猜歌活動的資料整理完畢，先公布答案如下： 第1題：花譜 -KAF-
58
[閒聊] 寶可夢遊戲都不請聲優配音的原因是什麼58
[閒聊] 檔案不是沒人玩了嗎49
[閒聊] 宙斯為啥捨棄Faker去韓華?![[閒聊] 宙斯為啥捨棄Faker去韓華?](https://i.imgur.com/4WQIVEKb.png "[閒聊] 宙斯為啥捨棄Faker去韓華?")
34
[閒聊] TGA 2024 年度最佳遊戲之我見43
[閒聊] 是鱷魚太有良心，還是芥見跟赤坂太G8？29
[閒聊] 日式演唱會是不是有特定的模式？29
[情報] 更生文化出版帳戶被列為詐騙警示戶![[情報] 更生文化出版帳戶被列為詐騙警示戶](https://i.imgur.com/jH7JtK8b.jpeg "[情報] 更生文化出版帳戶被列為詐騙警示戶")
31
[閒聊] 選取含有夜神月的圖片![[閒聊] 選取含有夜神月的圖片](https://i.imgur.com/k21DSbyb.jpeg "[閒聊] 選取含有夜神月的圖片")
27
[討論] Sony傳洽談併購角川出版 分析：相中超夯![[討論] Sony傳洽談併購角川出版 分析：相中超夯](https://static.kmedia.com.tw/prd/2024/1119/A5C1F9913D1C7DF9214588C378342649/49887cafe3ff971a0141202f87d22d6c.webp "[討論] Sony傳洽談併購角川出版 分析：相中超夯")
27
[閒聊] 新版獵人 進攻蟻王城池開始旁白大出![[閒聊] 新版獵人 進攻蟻王城池開始旁白大出](https://i.imgur.com/CkipjOFb.jpeg "[閒聊] 新版獵人 進攻蟻王城池開始旁白大出")
8
[閒聊] 宙斯：我是來提離隊的![[閒聊] 宙斯：我是來提離隊的](https://i.imgur.com/dqC6NF5b.jpeg "[閒聊] 宙斯：我是來提離隊的")
16
[閒聊] 一般人戴助聽器有用喔![[閒聊] 一般人戴助聽器有用喔](https://i.imgur.com/E0xL4Oyb.jpeg "[閒聊] 一般人戴助聽器有用喔")
17
[閒聊] 葬送的芙莉蓮 138![[閒聊] 葬送的芙莉蓮 138](https://i.imgur.com/GsqXtXib.png "[閒聊] 葬送的芙莉蓮 138")
17
[閒聊] 膽大黨的小愛羅 怎麼長歪的![[閒聊] 膽大黨的小愛羅 怎麼長歪的](https://i.imgur.com/u4tsgegb.png "[閒聊] 膽大黨的小愛羅 怎麼長歪的")
17
[閒聊] PTCGP 前期跟上部隊真的要好好分配資源![[閒聊] PTCGP 前期跟上部隊真的要好好分配資源](https://i.imgur.com/aGHSxXhb.png "[閒聊] PTCGP 前期跟上部隊真的要好好分配資源")
43
[閒聊] 藍色監獄284 寶潔好壞好帥 戀愛惹![[閒聊] 藍色監獄284 寶潔好壞好帥 戀愛惹](https://i.imgur.com/qLXT5Oab.gif "[閒聊] 藍色監獄284 寶潔好壞好帥 戀愛惹")
27
[討論] 台V圈又發生什麼破事了？聲帶小姐復活？![[討論] 台V圈又發生什麼破事了？聲帶小姐復活？](https://i.imgur.com/T80R29fb.jpeg "[討論] 台V圈又發生什麼破事了？聲帶小姐復活？")
40
[閒聊] 說到「我相信」會想到什麼？![[閒聊] 說到「我相信」會想到什麼？](https://img.youtube.com/vi/hBhKE8PuquU/mqdefault.jpg "[閒聊] 說到「我相信」會想到什麼？")
49
[閒聊] 超強的動態視力可以用在哪？![[閒聊] 超強的動態視力可以用在哪？](https://i.imgur.com/yzlAYLCb.png "[閒聊] 超強的動態視力可以用在哪？")
16
[Vtub] 小箱or個人Vtuber 1119 DD串![[Vtub] 小箱or個人Vtuber 1119 DD串](https://img.youtube.com/vi/fYKG2alVWUM/mqdefault.jpg "[Vtub] 小箱or個人Vtuber 1119 DD串")
33
[Vtub] Holo哪些人唱歌跟平常樣子有落差？![[Vtub] Holo哪些人唱歌跟平常樣子有落差？](https://pbs.twimg.com/media/Gcu9VphbcAUK5-X.jpg "[Vtub] Holo哪些人唱歌跟平常樣子有落差？")
8
[萌夯]崛起嵐龍是不是頂級糞怪30
[閒聊] 兔田Pekora拿下TGA機率高嗎![[閒聊] 兔田Pekora拿下TGA機率高嗎](https://i.imgur.com/KcNcGvYb.png "[閒聊] 兔田Pekora拿下TGA機率高嗎")
21
[結局] 鬼滅之刃跟我的英雄學院誰收得好?31
[寵粉] 買奶粉送PS5，父衝藥局瘋買116罐![[寵粉] 買奶粉送PS5，父衝藥局瘋買116罐](https://i.imgur.com/MMDLSdmb.jpeg "[寵粉] 買奶粉送PS5，父衝藥局瘋買116罐")
11
[閒聊] 學生會也有洞 FIGHT OF CHICKEN![[閒聊] 學生會也有洞 FIGHT OF CHICKEN](https://i.imgur.com/U2pdXIPb.png "[閒聊] 學生會也有洞 FIGHT OF CHICKEN")
10
[蔚藍] 羽留奈的誘惑![[蔚藍] 羽留奈的誘惑](https://i.meee.com.tw/t0YzU7o.jpg "[蔚藍] 羽留奈的誘惑")
49
[閒聊] 電腦的隨機是不是不太准?24
[閒聊] 牙突(突刺)是不是武士刀最實用的招式?![[閒聊] 牙突(突刺)是不是武士刀最實用的招式?](https://i.imgur.com/neJS0t9b.png "[閒聊] 牙突(突刺)是不是武士刀最實用的招式?")
10
[閒聊] 假如我握著劍，就無法擁抱你![[閒聊] 假如我握著劍，就無法擁抱你](https://i.imgur.com/7g1k3UGb.jpeg "[閒聊] 假如我握著劍，就無法擁抱你")