Re: [閒聊] 為啥vivy這次這麼聽話

vacuityhu 發表於 2021/5/3 下午10:01:37

看板C_Chat標題Re: [閒聊] 為啥vivy這次這麼聽話作者

vacuityhu

(真空管)時間May 3 22:01:37 2021推噓17 推:18 噓:1 →:34

PTT評價

推 emptie: 除了堆砌更多沒解釋的名詞，這跟動畫的演出其實相差不大 05/03 15:51

→ emptie: 。但老實說這還是難以置信的工程壯舉吧。陽電子腦如果不 05/03 15:51

→ emptie: 是出門的時候踢到一箱圖紙／或是去火星探險的時候發現了 05/03 15:51

→ emptie: 外星人的遠古遺跡，總會有個研發的過程吧？總會從簡單的 05/03 15:51

→ emptie: 慢慢進化到複雜吧…？如果是底層的單元就有很大的不一致 05/03 15:51

→ emptie: 性，他們怎麼那麼有信心堆了幾億個之後封裝的成品動得起 05/03 15:51

→ emptie: 來？能處理輸入的指令？輸出預期中的行為？能連上其他I/ 05/03 15:51

→ emptie: O設備？難道這個世界的晶圓製造商運氣都很好…？ 05/03 15:51

不好意思...手癢回一下

現在的AI其實完全符合這位朋友的疑問

現在AI主流的基本技術叫做CNN, 摺積神經網路

反正你就想像成是用一種叫做摺積的數學運算去模擬人類大腦的神經網路

更具體來說, 是用大量的摺積運算配一個啟動函數來模擬一個神經元做了甚麼事情

神經元簡單來說, 就是上一個神經元A放電去電下一個神經元B, 藉此來傳遞訊息

只要A放電夠強, B就接收的到, 反之, A受到的刺激不夠放電不夠, B就不會有反應

我們就是用數學運算配合啟動函數來模擬這個A和B溝通的過程

然後

只有A跟B兩個神經元的時候我們還可以給出嚴謹的數學證明來說明中間發生了甚麼事

但現在隨便一個CNN都上萬個神經元在互相連動

訓練過程中到底發生了甚麼事~擲筊問媽祖還比較可靠

雖然各家實驗室跟研究人員都努力給出合理的解釋來說中間到底在幹嘛

但沒有一個解釋是可以用數學證明的

很弔詭吧~?

成千上萬的數學運算堆起來竟然不能用數學去證明跟預測結果會怎樣

這就是現在的AI

確實跟去火星探險發現遠古遺跡很像

然後現在這個人類無法預測的數學運算就安裝在你各位的特斯拉車子裡幫你開車

※ PTT 留言評論

※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 49.159.150.171 (臺灣)

※ PTT 網址

推

emptie05/03 22:03但這是軟體層面上我們不了解完全的原理（而且我們也沒放棄

→

emptie05/03 22:03去研究爲什麼）寫好的東西你拿去任何相容的平臺都是能跑

→

emptie05/03 22:03的

軟體層面或硬體層面的差異不影響阿如果你無法預測一堆碳原子堆起來會怎樣跟你無法預測這個軟體遇到怎樣的情況會失控兩個是一樣令人無法信任阿但現實是大家還是用得很開心XD

推

OyodoKai05/03 22:04為什麼沒人願意相信量子力學的魔法 :(

※ 編輯: vacuityhu (49.159.150.171 臺灣), 05/03/2021 22:07:15

→

emptie05/03 22:05因爲劇中的科技進步程度很難讓人覺得他們解鎖了量子運算

→

emptie05/03 22:05的科技吧

推

yosaku05/03 22:06所以這就是模擬真的人腦運作方式要是正子腦的資料能被複

→

yosaku05/03 22:06製那表示人腦也行了但就是辦不到

跟劇中的差異在於我們現在做的神經網路是可以複製的因為就是一堆數學運算而已但我們目前的AI跟劇中的AI也根本天差地別大概就跟一顆精蟲和一個完整的人類這樣的差異一樣吧

推

snowpoint05/03 22:06量子力學的干擾，應該是神經元訊號在臨界點才比較顯著

→

snowpoint05/03 22:07因為過於微觀，神經元算是宏觀的東西了

※ 編輯: vacuityhu (49.159.150.171 臺灣), 05/03/2021 22:10:17

→

snowpoint05/03 22:08簡單來說你有東西好像快想起來的時候，量子力學有機會

→

snowpoint05/03 22:09祝你一臂之力XD

推

zxcmoney05/03 22:10現在的(新AI)主要是帶有隨機要素吧，藉由隨機找出新策略

→

zxcmoney05/03 22:11但反過來說，就不像舊AI那樣可以逐步拆解了

粗略來講確實是這樣沒錯但那個隨機過程其實只是為了補足訓練資料的不足而已你可以想成是為了處理一些更麻煩, 也更難取得訓練資料的任務我們就用隨機產生的亂數充當訓練資料然後把真的有幫助到訓練的隨機亂數存下來追根究柢~其實只是訓練策略比較高明而已不是神經網路的設計進步

※ 編輯: vacuityhu (49.159.150.171 臺灣), 05/03/2021 22:15:00

推

hinanaitenco05/03 22:13事實上 NTK理論已經可以解釋類神經網路的效果跟訓

→

hinanaitenco05/03 22:13練過程發生啥事了還可以不用訓練就知道訓練完的理

→

hinanaitenco05/03 22:13論預測值

推

OyodoKai05/03 22:14人類到現在還不知道意識從何而來怎麼複製

→

hinanaitenco05/03 22:14我可以簡單的跟你說類神經網路只是種Gaussian proc

→

hinanaitenco05/03 22:14ess

這個嘛...說實話~我沒接觸過NTK 不過我剛簡單看了一下2018那篇paper 這似乎最多只能說明我們的訓練方式是能收斂的而不會徒然浪費時間因為我乍看之下證明過程中似乎沒考慮到訓練資料的差異所以應該還沒辦法在訓練前就知道訓練效果如何吧而且這個研究只考慮最原始的ANN 顯然還無法回答為什麼CNN會比ANN優異那麼多然後一堆沒道理的skip connection為什麼會有幫助不過我還沒有全部看完~ 如果哪裡有錯~還請幫忙指正QQ

※ 編輯: vacuityhu (49.159.150.171 臺灣), 05/03/2021 22:28:44

→

whitecut05/03 22:28CNN翻譯應該是卷積神經網路吧，純粹想吐槽這點

支語警察認真如我~一定馬上回答你這個問題XD

https://zh.wikipedia.org/wiki/%E5%8D%B7%E7%A7%AF

※ 編輯: vacuityhu (49.159.150.171 臺灣), 05/03/2021 22:30:38

推

hinanaitenco05/03 22:30你看的那篇只是開始後面CNTK RNTK 等架構都證明

→

hinanaitenco05/03 22:30出來了

→

hinanaitenco05/03 22:31NTK 他的特性是data independent的