[爆卦] 2024諾貝爾物理獎
https://www.nobelprize.org/prizes/physics/2024/popular-information/
瑞典皇家科學院決定將2024年諾貝爾物理學獎授予John J.field和Geoffrey E. Hinton
,以表彰其“通過人工神經網路實現的基礎性發現與發明」。
約翰‧J‧霍普菲爾德 (John J. Hopfield) 1933 年出生於美國伊利諾州芝加哥。1958
年獲得美國紐約州伊薩卡康乃爾大學博士學位。美國新澤西州普林斯頓大學教授。
Geoffrey E. Hinton,1947年出生於英國倫敦。1978年獲英國愛丁堡大學博士學位。加
拿大多倫多大學教授。
今年的諾貝爾獎得主使用了物理學的工具來構建方法,幫助奠定了當今強大機器學習的基礎。約翰·霍普菲爾德創建了一種可以儲存和重建信息的結構。傑弗里·辛頓則發明了一
種可以自主發現數據屬性的方式,這在當今使用的大型人工神經網絡中變得至關重要。
他們利用物理學來發現信息中的模式
霍普菲爾德此前利用他在物理學的背景來探討分子生物學的理論問題。當他受邀參加一個關於神經科學的會議時,他接觸到了對大腦結構的研究。他對所學的內容著迷,開始思考簡單神經網絡的動態。當神經元一起活動時,它們能產生新的強大特徵,而僅僅觀察網絡的單個組成部分並不能發現這些特徵。
然而,他並沒有放棄他在物理學中的基礎知識,這些知識為他理解由許多小組件一起工作的系統如何產生新的現象提供了靈感。他尤其受益於他學到的關於具有原子自旋的磁性材料的知識——這種性質使得每個原子都成為一個微小的磁鐵。相鄰原子的自旋相互影響,
這可以使具有相同方向自旋的區域形成。他利用這些物理知識,創建了一個具有節點和連接的模型網絡。
網絡在一個景觀中保存圖像
霍普菲爾德構建的網絡具有相互聯繫的節點,每個節點可以儲存一個值——在霍普菲爾德
的初步研究中,這個值可以是0或1,就像黑白圖像中的像素。
霍普菲爾德用一個與物理學中自旋系統能量等價的屬性來描述網絡的總體狀態;這個能量是通過一個公式計算的,該公式使用了所有節點的值以及它們之間所有連接的強度。通過將圖像輸入節點來編程網絡,節點被賦予黑色(0)或白色(1)的值。然後,通過能量公式調整網絡的連接,使得保存的圖像能量變得更低。當另一個模式輸入網絡時,會有一個規則依次檢查節點,看看如果改變該節點的值,網絡的能量是否會降低。如果發現將一個黑色像素改為白色會降低能量,那麼顏色就會改變。這個過程會一直持續,直到無法找到任何進一步的改進。當達到這個點時,網絡通常已經重現了最初訓練的圖像。
如果你只保存一個模式,這可能看起來不太顯眼。你可能會疑惑為什麼不直接保存圖像本身,並與測試圖像進行比較。然而,霍普菲爾德的方法的特別之處在於,可以同時保存多張圖像,並且網絡通常能夠區分它們。
霍普菲爾德將在網絡中搜索已保存狀態比作將一個球滾過高峰和谷地的景觀,並且有摩擦減緩其移動。如果將球放在某個位置,它會滾入最近的谷地並停在那裡。同樣,當網絡被給予一個接近已保存模式的模式時,它會繼續向前移動,直到最終到達能量景觀的谷底,從而找到其記憶中最接近的模式。
霍普菲爾德網絡可以用來重建包含噪音或部分擦除的數據。
隨著時間的推移,霍普菲爾德和其他人不斷改進該網絡的功能,包括允許節點儲存任何值,而不僅僅是零或一。如果將節點視為圖像中的像素,它們可以具有不同的顏色,而不僅僅是黑白。改進的方法使得可以保存更多圖片,即使它們相當相似,也能區分它們。
使用十九世紀物理學進行分類
當霍普菲爾德發表他關於聯想記憶的文章時,傑弗里·辛頓正在美國匹茲堡的卡內基梅隆大學工作。他此前在英格蘭和蘇格蘭學習了實驗心理學和人工智能,並思考機器是否能像人類一樣學會處理模式,自行發現分類方法來整理和解釋信息。與他的同事特倫斯·塞諾斯基一起,辛頓從霍普菲爾德網絡出發,並用統計物理學的概念將其擴展為一種新型結構。
統計物理學描述了由許多相似元素組成的系統,例如氣體中的分子。跟蹤氣體中所有單獨的分子是非常困難或不可能的,但可以通過集體考慮來確定氣體的整體屬性,如壓力或溫度。雖然氣體分子可以以多種方式在其體積內分布並保持不同的個別速度,但仍會得出相同的集體屬性。
統計物理學可以用來分析各組件共同存在的狀態,並計算其出現的概率。某些狀態比其他狀態更有可能發生,這取決於可用的能量。這些能量是根據十九世紀物理學家路德維希·玻爾茲曼的方程描述的。辛頓的網絡利用了這個方程,並於1985年以「玻爾茲曼機」這個引人注目的名稱發表了這個方法。
辨認同類型的新範例
玻爾茲曼機通常使用兩種不同類型的節點。信息首先傳遞到稱為「可見節點」的一組節點,另一組節點則構成了一個隱藏層。隱藏節點的值和連接也影響整個網絡的能量。
這台機器的運行規則是一次更新一個節點的值。最終,機器會進入一種節點模式可以改變,但整個網絡的屬性保持不變的狀態。每個可能的模式都會根據玻爾茲曼方程確定一個特定的概率。當機器停止運行時,它創造出了一個新模式,這使得玻爾茲曼機成為早期的生成模型之一。儘管電腦無法思考,但現在機器可以模仿記憶和學習的功能。今年的諾貝爾物理學獎得主幫助實現了這一點。他們使用物理學的基本概念和方法,開發了用網絡結構來處理信息的技術。
機器學習與傳統軟體不同,傳統軟體像一種食譜,軟體接收數據,然後按照明確的說明進行處理,最終產生結果,就像按照食譜收集食材並製作蛋糕一樣。與此不同的是,在機器學習中,電腦通過範例學習,從而能夠解決那些過於模糊和複雜,無法用一步一步的指示來處理的問題。比如說,識別圖像中的物體就是一個例子。
模仿大腦
人工神經網絡使用整個網絡結構來處理信息。這種靈感最初來自於理解大腦如何工作的需求。早在1940年代,研究人員就開始推理大腦神經元和突觸網絡背後的數學原理。另一塊拼圖來自心理學,神經科學家唐納德·赫布提出的假設表明,當神經元一起工作時,連接會被增強,從而促進學習的發生。
後來,這些思想促使人們試圖模擬大腦的網絡功能,通過構建人工神經網絡的電腦模擬。在這些網絡中,大腦的神經元被模仿為具有不同值的節點,而突觸則被表示為節點之間可以加強或削弱的連接。唐納德·赫布的假設至今仍然被用作更新人工網絡的基本規則之一,這個過程被稱為訓練。
玻爾茲曼機可以通過範例進行學習——不是通過指令,而是通過給定的範例模式進行更新
網絡連接中的值,這樣當機器運行時,訓練時輸入到可見節點的範例模式就具有最高的發生概率。如果在訓練中多次重複相同的模式,那麼這個模式出現的概率會更高。訓練還會影響輸出類似於訓練範例的全新模式的概率。
訓練過的玻爾茲曼機能夠在其未曾見過的信息中識別出熟悉的特徵。想像一下,遇見一位朋友的兄弟姐妹,你可以立即看出他們之間的親屬關係。玻爾茲曼機也能辨認出完全新的範例,只要它屬於訓練材料中的一個類別,並能將其與不相似的材料區分開來。
玻爾茲曼機的原始形式運行效率較低,尋找解決方案需要很長時間。然而,當它通過各種方式進行改進時,事情變得更有趣了,這也是辛頓繼續探索的領域。後來的版本通過去除某些單元之間的連接,實現了「稀疏化」。事實證明,這反而讓機器變得更高效。
機器學習——今天與明天
我們如今目睹的這一發展得益於大量可用的數據以及計算能力的巨大增長。今天的人工神經網絡往往非常龐大,並由多個層級組成。這些被稱為「深度神經網絡」,它們的訓練方式被稱為「深度學習」。
目前,許多研究人員正在拓展機器學習的應用領域。哪些應用將成為最具可行性的還有待觀察,與此同時,關於這項技術發展和使用的倫理問題的討論也在廣泛進行。
由於物理學為機器學習的發展提供了工具,看到物理學作為研究領域也從人工神經網絡中受益,這也是一件有趣的事。機器學習早已應用於我們從過去的諾貝爾物理學獎中熟悉的領域。例如,機器學習被用來篩選並處理大量數據,這對於發現希格斯粒子至關重要。其他應用還包括減少黑洞碰撞引起的引力波測量中的噪音,或者搜尋系外行星。
近年來,這項技術還開始應用於分子和材料性質的計算和預測——例如計算蛋白質分子的
結構,這決定了它們的功能,或是研究哪種新材料具有最佳性質,可用於更高效的太陽能電池。
幹被搶先一步,我準備要發表的
阿不就AI
AI
為什麼拿物理獎不是去拿圖靈??
物理獎怎麼頒給做ai的
不然諾貝爾有什麼獎合適?
恭喜
這跟物理沒關係吧
應該給圖靈
是人工神經元
資訊科技拿物理獎
代表物理界這幾年沒啥進展都在原地踏步阿
恭喜
怎麼怪怪的
這是電腦科學的範圍吧?
那以後一堆搞軟體的都可以得諾貝爾獎
嗯.........果然和我想的一樣
抓來充數的 慘
可憐哪 理論物理學家都在混
這傢伙我認識啊 當年在學校也是普普而已
研究線蟲也能醫學獎
理論物理是不是走到極限了==
早期的機器學習模型本來就是物理學家背景
的人在研究 Hinton本人的PhD指導教授甚至
為了頒給ai 硬拉了一個作物理的給獎
跟上帝粒子的Higgs是同一位
類神經網路
21世紀物理兩大烏雲,暗物質暗能量 無人
能解
只是這個給獎的確挺爛的就是了
遇事不決,量子力學
物理獎 頒這個... 諾貝爾地下有知...
開了先例,以後搞軟體的也可得物理獎
從缺也行唄 理論物裡大概幾百年才小突破
這算物理學喔
--- 這就有點奇怪了... 物理已死??
物理學選這個喔==
又沒規定非得一定每隔幾年要給理論物理 實
驗物理一大堆比這更值得的人排隊 偏偏給這
這是圖靈奬的東西吧,物理沒人囉!
諾貝爾獎有個標準是對人類社會的影響啊
物理研究的是物質和能量,不是資訊
這樣華爾街那些做金融的物理學家也有
拿圖林或菲爾茲比較合理 諾貝爾物理?
機會拿物理學獎了
前幾年氣候變遷大概也是靠影響力拿的
這是圖靈獎的範疇吧
那作加密技術的RSA那三人也能得諾貝爾獎了
前幾年那個大氣變遷的也頗無言的
物理學頒給AI?
蛤
有點怪
這根本不是物理學 離物理也太遠了吧
亂搞啊 笑死 物理學家應該都傻眼
以後物理都靠ai解答啊
物理學本身就做不出新學問了,做出
Ai元年 懂蹭
的理論也都無法驗證。才會都頒給這
支持諾獎再多Computer Science獎項
些。
反正先進儀器早就一堆ai
恭喜
這樣頒獎可接受啊
這不是我小時候科展主題嗎
AI關物理學屁事 硬要蹭
說不定以後得物理獎的都是CS背景的
拷貝 這算物理喔
大概每幾年搬給不太物理的東西
???
Ai
1年1次好像蠻多的
幹 我就差一點
Hinton在2018就拿過圖靈獎了
物理攻擊
物理獎還是很多人在排隊吧
物理的部份在哪裡?
這是資工吧什麼物理學
類神經網路本來就是受物理啟發的模型 早期
很多物理背景的人研究 就像我前面說的 Hint
on本人甚至跟希格斯粒子的Higgs是同門師兄
弟 說這是物理也無不可 只是單以物理價值
而言 這實在沒什麼特別大的
現在諾貝爾物理學獎也要扯AI喔
乾脆說萬物都由原子構成,所以這世上只
有一門學問就叫物理學
這種工作拿諾貝爾物理獎?
張忠謀過幾年也要得獎了
早就這麼想了
理論物理是不是卡很久很久了...
物理停滯快一百年了吧?
(づ′・ω・)づlink start
理論物理從相對論和量子力學後,有更屌的
理論嗎
AI得獎 股市該噴了
不過這應該是資訊科學的領域吧
辛頓拿過圖靈獎囉
物理沒人才了?
2021物理獎就很不物理了 沒啥重大發現
嗯嗯跟我想的一樣
這三小
略蝦
物理界是不是沒人才了
天網近了
諷刺這幾年做物理的人端不出像樣的東西
蛤 物理學到極限了嗎?資訊科學都算喔
10
Re: [爆卦] 韓國常溫超導發現,作者群似乎內鬨不然這樣好了,反正L和K是最大貢獻者 依常溫超導的重要程度,值得拿兩個諾貝爾獎吧 當然不是兩個物理獎之類的 而是一個物理獎,表彰對超導物理的貢獻 一個化學獎,表彰發現常溫超導物的化學製程7
[問卦] 楊振寧怎麼沒拿第二個諾貝爾物理獎??楊振寧因為證明宇稱不守恒拿到諾貝爾物理獎, 隨後的楊米爾斯定理更是完備了整個標準模型。 但卻沒見他拿第二個諾貝爾物理獎。 楊振寧怎麼沒拿第二個諾貝爾物理獎?? --5
[問卦] AI教父到底是誰 ?請問一下AI教父到底是誰 ? 不久前遠見雜誌(如下)才提到是一位叫辛頓(Geoffrey Hinton)的人物, 維基一下,感覺學術成就斐然,現在輝達很紅,所以AI教父是有很多的意思 ? --5
Re: [新聞] AI 教父 Geoffrey Hinton 離開 Google阿肥外商碼農阿肥啦! 昨天聽聞這個消息真的蠻難過的,希望他老人家離開谷歌後能繼續努力幫助整個學界跟業 界,當前還是需要他老人家的真知灼見來領導深度學習這個領域。 說起Hinton我覺得很多鄉民都不熟,但是只能說沒有Hinton在AI寒冬年代堅持研究,2013 年深度學習也不會崛起,這位可以說是教父級的人物,尤其是反向傳播讓AI研究脫離復刻3
[問卦] 得諾貝爾物理獎跟成為郭台銘 選哪個?如題 各位鄉民下午好 如果今天讓你二選一 一是能夠做研究然後有重大發現 獲得諾貝爾物理獎3
[問卦] 後天頒諾貝爾物理獎 常溫超導有機會嗎?如題 10/2頒生醫獎 3日物理學獎 4日化學 5日文學 6日和平 9日經濟 之前韓國的常溫超導體有機會獲獎嗎 有沒有八卦? -----1
[問卦] 原本呼聲最高諾貝爾物理獎人選心情?今天美國理論證實了超導體 也幾乎坐實了韓國拿諾貝爾物理獎的資格 不過有人準備拿獎 就有人到熟的鴨子要飛ㄌ 有原本呼聲最高的得獎者陰影面積嗎?2
[問卦] 這就算大家所說的好女人嗎(圖是這樣的啦我在網路看到這張圖 發現我被說服的欸 真的是如此 大家是不是也這麼覺得- 重返未來1999 超級天賦秀:伊索爾德 Xtreme Talent: Isolde Welcome to XXXXXXtreme Talent! 歡迎收看《超級天賦秀》! 眾所周知,打架可不是X先生的強項,數據分析和奇妙發明才是。
爆
Re: [新聞] 快訊/重大意外!士兵實彈射擊貫穿臉爆
Re: [新聞] 快訊/重大意外!士兵實彈射擊貫穿臉爆
[爆卦] 王鴻薇FB揭「三立民視國家養」爆
[問卦] 小弟我又煮晚餐 自打80分爆
[問卦] 有子彈貫穿臉部活下來的案例嗎?爆
[問卦] 震撼!天下雜誌民調:7成贊成續用核電!80
[問卦] 主建12.43坪的三房正流行?78
[問卦] 猜猜 素食自助餐 300P71
[問卦] 如果癌症四期了要幹嘛?爆
Re: [新聞] 柯文哲不可能外遇?沈榮欽:當然可能!這60
[問卦] 女生說要打扮乾淨的男生什麼意思?32
[問卦] 一年賺不到247萬4700元的進來一下42
Re: [新聞] 民眾黨曝林口社宅變月租5萬酒店公寓 住35
[問卦] 國軍又死人 誰要負責?37
[問卦] 不google,清槍口訣你會背嗎?38
[問卦] 有一部大哥被開甜甜圈的動漫?32
[問卦] Twitch 頒布關於未成年禁令33
[問卦] 李天豪最近都在講應景的話題?35
Re: [新聞] 汪建民肺腺癌逝!不菸不酒也會得 奪命58
[問卦] 雞雞老是夾到毛 如何解決==31
[問卦] 台灣靈異事件哪集最經典27
[問卦] 找一部內容有三個傻瓜的電影26
[問卦] 穿越回三國,真能發家致富登大位?26
Re: [新聞] 「橘子」成京華城案金流關鍵人物?顏若芳26
[問卦] 火力發電到底跟肺腺癌有沒有關係?爆
[問卦] 為什麼鏡週刊整天亂寫都不會被懲處25
[問卦] 驚! 郭哲榮投資長又加碼1000萬買美債了?26
[問卦] 打靶射到臉死亡 比較可能是自殺還他殺28
[問卦] 魔獸世界wow是史上最經典網路遊戲嗎?