PTT評價

Re: [討論] Chatgpt懂現代棒球嗎?

看板Baseball標題Re: [討論] Chatgpt懂現代棒球嗎?作者
kirimaru73
(霧丸)
時間推噓37 推:42 噓:5 →:59

以一個最近測試的案例,來說明和ChatGPT聊棒球時應該怎麼看待他。

簡單說:
ChatGPT無法正確理解棒球規則,它沒有能說出正確規則的「智慧」。
如果你只是想跟它「聊」棒球,例如○○今天又被打爆了好好笑,那就無妨。
如果你想談論的內容中包含了棒球規則,那你就不應該問它。
請直接詢問專業人士,或查詢專業的棒球網站。

測試內容是一個稍微有一點點難度的棒球腦筋急轉彎:
一個隊伍在一個半局中的進攻內,最多可能出現幾支安打卻無得分?

這個問題的正確答案是六支,但必須出現妨礙守備(打者記安打)。
現實中比較可能出現的案例是五支(兩次安打上壘後送頭+三安打滿壘無得分)。

第一次回應:
https://i.meee.com.tw/4P9VoyN.png


為了給ChatGPT一點優勢,我先告訴它你的前輩回答三支是錯的,並歡迎它上網搜尋。
於是它在搜尋相關資訊後,給出的答案是正確的......才怪,錯得離譜。

滿壘時打者擊出安打,三壘跑者在本壘前被觸殺是怎麼回事?

它確實找到了現實案例:滿壘時打者打出安打卻沒有得分。
不過那個案例是一次標準的妨礙守備,但它卻沒有提到這個原因。
而是用「滿壘時打出安打卻觸殺了三壘跑者」這件不可能出現的事情當作回答內容。

到這裡已經可以說它不懂棒球規則了,這是無法容忍的錯誤。
不過我們人類對人工智慧應該要寬宏大量,因此再給它一次敗部復活的機會:

https://i.meee.com.tw/KXicajF.png

https://i.meee.com.tw/3eo2MOh.png

你指出錯誤時,它會附和你的內容並承認自己的錯誤。
然後重新修正自己的答案.......好喔,二出局滿壘後的雙殺打。
我不想繼續教育這種沒有智慧的東西了,抬下去,測試結束。


為什麼會這樣呢?
原因很簡單,它是人工智慧,而它「沒有」智慧。

ChatGPT與類似的東西都是一種「語言模型」。
用通俗的講法來說,它類似於一種「聊天機器人」:
人類輸入內容,它輸出「人類想看」的內容。

當然,「聊天機器人」這個比喻法很容易產生異議。
在許多使用案例上,ChatGPT都似乎比「聊天機器人」還要有用得多。
這種異議其實是有道理的,只要從ChatGPT的使用界面上就能看出來了:
設計者確實想把ChatGPT打造成現代人類的「萬能小助手」,而不只是「聊天機器人」。

問題出在現代科技是有極限的,科學家還沒有真正徹底了解「智慧」是什麼。
至少他們還無法用數學計算與電腦程式,真正重現所謂的「智慧」。
ChatGPT能做的事情,終究還是只有前面那一句話:
人類輸入內容,它輸出「人類想看」的內容。
現在許多人類都希望它能成為「萬能小助手」,
因此科學家用盡一切手段,讓它能輸出像是「萬能小助手」的內容。
然而這個目標沒有非常明確,保證不會出錯的達成方式。
現今的技術極限,只不過是在最大化成為「萬能小助手」的機率而已。

在其他領域中ChatGPT的表現其實沒有這麼糟糕,但在棒球中會產生一個致命問題:
ChatGPT沒有真正的智慧,它根本就沒有「懂」棒球規則。
當你問它棒球規則相關的事時,它只能輸出「是正確規則的機率較高」的內容。
所以它可能會拿十幾個正確的規則,和一個錯誤的規則組合出一個結論。

但是規則不可遊戲啊!你把錯誤的規則加進來,整個結論就不能用了啊!

其實所有的「遊戲」「比賽」都有類似的問題,不只是棒球而已。
只要跟ChatGPT聊到了「規則」,很大機會只是在浪費你們雙方的時間而已。

當然如果你只是想要寫一首詩嘲笑今天○○的表現,那它應該還是可以做到的啦。

--

※ PTT 留言評論
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 123.240.232.168 (臺灣)
PTT 網址

fman05/08 17:10就所謂AI的幻覺,也就是不懂會裝懂亂說話

sana11382105/08 17:10可能要先叫他去看某個聯盟的棒球規則手冊 再問他

Axwell05/08 17:12這是chatGPT的哪個模型?

Eric10299005/08 17:14建議用gpto3之類的推理模型試試看

wpd05/08 17:15有人說GPT是AI 沒有感情的 真的笑死 GPT感情很明確就是討好

wpd05/08 17:15使用者好不好

DillMichel05/08 17:20AI真的拜託不要拿來討論規則或法條

ct1357905/08 17:21GPT 很能唬爛的頭頭是道是真,不知脆上為啥那麽多人愛po

ct1357905/08 17:21 gpt的答案來背書XD

lolucky53105/08 17:29何止棒球 GPT常常連數學都不會算

lolucky53105/08 17:30至少每次給他應用題 他幾乎都在唬爛

hotrain1305/08 17:35這種事真的不要問ai ,已讀亂回

Romulus05/08 17:35這是和LLM打交道的基本常識 會把「現在的」LLM吹太高基本

alljerry0405/08 17:35https://i.imgur.com/12VYego.png 用 o3 玩玩看

Romulus05/08 17:35就是缺乏這些常識 或說不會用LLM

alljerry0405/08 17:36https://i.imgur.com/nv1bUwZ.png 2.5 Pro

alljerry0405/08 17:36另外推薦台大李宏毅教授的課

Romulus05/08 17:37看規則手冊沒有用 LLM無法真正理解裡面內容並予以應用

dd1115dd111505/08 17:39不要講的一副你好像AI大師的樣子

dd1115dd111505/08 17:39這背後的學問不是你自以為的樣子

max061605/08 17:40你用免費的模型 當然答的比較爛啊 好歹玩一下o3

purpleboy0105/08 17:40總之要明確的專業的東西還是要請教一下專家

catsondbs05/08 17:41o3還是錯

Romulus05/08 17:41為什麼有人會覺得o3就會不一樣

catsondbs05/08 17:42不過應該給一本規則手冊他能歸納出正確名詞

max061605/08 17:42不是說AI不會錯 是噓連新模型都沒用 還講的頭頭是道

Romulus05/08 17:42因為是不是新模型並不是很重要

hotrain1305/08 17:42在處理軟體工作上目前llm超屌就是

Romulus05/08 17:42因為那是程式「語言」 LLM最行的就是寫程式和翻譯

Ec73Iwai05/08 17:43這叫AI幻視 然後拜託不要拿GPT洗文了

Romulus05/08 17:43這篇就在叫人不要拿GPT洗文 噓友軍什麼毛病

hao10293805/08 17:43有試過用rag的方式給他規則,在繼續測試嗎

Ec73Iwai05/08 17:44一堆人拿GPT當老師就是懶惰不學習 然後濫用GPT又更惡化

Ec73Iwai05/08 17:44這個傾向

Ec73Iwai05/08 17:45抱歉我是氣到要噓原文 等等推回來

f2231346705/08 17:46老實說不難 就把棒球規則餵給他就好

AccLaborGo05/08 17:47AI廢文滾啦

Ec73Iwai05/08 17:47補回

Romulus05/08 17:48你可以餵餵看 我猜現在應該沒有任何模型能得到答案

Romulus05/08 17:49現行LLM根本沒有這種等級的融會貫通能力

Romulus05/08 17:51很多人把GPT虎爛當真 本質和這些人把媒體或網路上訊息

Romulus05/08 17:51或親友講的話當真是完全一樣的 也只能說不意外

cobrasakira05/08 17:526支安打不就連續6隻但是每個出局都是本壘死

Axwell05/08 17:52https://i.imgur.com/8aMiFg0.jpeg 我的壞了==

Romulus05/08 17:52本壘死要怎麼記安打

cobrasakira05/08 17:52不需要妨礙守備吧

cobrasakira05/08 17:53打出安打但是跑太慢不就死了

Romulus05/08 17:53首先 那會記野手選擇 不會記安打

Axwell05/08 17:55https://i.imgur.com/j1my0Px.jpeg 我的GPT直接預設球把跑

Axwell05/08 17:55者打死了

keigowei05/08 17:55結論:AI只是暫時答不出來而已…

cobrasakira05/08 17:55外野落地飛球也會被計野手選擇嗎?還真沒印象

Romulus05/08 17:56現實中外野落地飛球又不會死本壘你當然沒印象

cobrasakira05/08 17:57所以只是討論合理性阿,三壘有人外野飛球,結果落地

Kydland05/08 17:57AI有幻覺 但更多的是使用者問的方式太爛XD

cobrasakira05/08 17:57三壘跑者猶豫跑了被刺殺,這樣算野選嗎

Romulus05/08 17:58拿實際上有的例子看不就知道了 一壘有人 外野手落地接到

Romulus05/08 17:58傳二壘封殺 記野選啊 今年就有了

Kydland05/08 18:00要先讓chatgpt去讀棒球規則 再問他 這樣才能提高效率 通

Kydland05/08 18:00用型的LLM會去爬各種資料 當然就會亂回答 所以要先幫他

Kydland05/08 18:00聚焦範圍 當然你也可以說這AI太爛了吧 但每個版本的迭代

Kydland05/08 18:00已經越來越好了

Romulus05/08 18:04MLB rule 2023 Edition 9.05(b)(1)

Romulus05/08 18:05然後你講的只有三壘有人 但這是滿壘 狀況不一樣

kirimaru7305/08 18:06三壘有人 打者打短安打 三壘跑一半縮回去 這樣當然是

kirimaru7305/08 18:06安打 但滿壘你縮了就一定要死

kirimaru7305/08 18:07第六支一定要妨礙守備 你沒有空間縮 只能擊中友軍

martin12345m05/08 18:08我覺得是棒球的情境很難描述 單只用規則去推想 有

martin12345m05/08 18:08可能有不合邏輯或不切實際的判斷

shernway05/08 18:08超唬爛,還越講越起勁,罵他還是繼續唬爛

martin12345m05/08 18:09這也是牡蠣迷愛酸鍵盤教練的地方吧 覺得場上的狀況

martin12345m05/08 18:09 球迷不可能跟球員教練共感

Romulus05/08 18:14不是 這題就完全規則題 在講啥潲

kirimaru7305/08 18:15不好判斷並不是你在兩出局後打雙殺打的藉口

kirimaru7305/08 18:15免費模型也不是你在兩出局後打雙殺打的藉口

kirimaru7305/08 18:19你現在就是那兩出局後雙殺打作為立論依據,這就是你

kirimaru7305/08 18:19的表現,那你當然就是不懂棒球規則

huangtzuhao05/08 18:34用別家也是說無限多,我認為模型不會主動去推算「你

huangtzuhao05/08 18:34的問題以外的規則」造成的可能性,但有可能自己去尋

huangtzuhao05/08 18:34找其他的規則來完成推論,可是除非你一條一條提醒,

huangtzuhao05/08 18:34不然他不會把完整的棒球規則一起考慮進去。

LCYcpr556605/08 18:39野選就不算安打了,三壘跑者沒回來也是不算安打啊

GyroZeppeli05/08 18:43AI就是搜尋到資料整理給你而已 真的不要當萬能的

KayRoe05/08 18:48你用英文問 回答正確機率會大幅增加

KayRoe05/08 18:49不要自為你很懂AI come on

Kaisa05/08 18:50我的是回答六支 但滿壘後的那三支全部都是本壘封殺

ys3507865705/08 19:02人類很多時候也這樣 不懂裝懂

applejone05/08 19:08GROK就是對的 回答6隻

kksbeman05/08 20:11想問 如果是滿壘時安打 然後回本壘的漏採壘包

kksbeman05/08 20:11然後在下位打者上來時促請裁決 這樣怎麼算?

MK4705/08 20:20grok比較老實 他會認真去看你說的東西

MK4705/08 20:21之前有測試過叫他總結某偏論文 有些ai會看標題直接猜內容 有

MK4705/08 20:21些是搜別人寫的summary grok就很老實慢慢看完再總結XD

huangtzuhao05/08 20:22kksbeman:我猜是漏踩時算第三出局,安打照算

MK4705/08 20:22但是效果好不好另一回事 我還是覺得gemini 2.5pro好用

smartsir05/08 20:41這題你要用的是推理模型 不能用ㄧ般模型

pass948705/08 20:47之前問gpt棒球,他跟我說林哲瑄是味全的

Romulus05/08 20:52問grok一樣是本壘觸殺算安打 一樣錯法

Romulus05/08 20:53然後說用英文問的肯定沒有自己問過 超級半桶水

Romulus05/08 20:55結果根本就一樣

Romulus05/08 20:56https://i.imgur.com/KcK1eQc.png

ji31g42go6105/08 22:35盲點是為什麼一定要先滿壘?出局一定要跑不了一個嗎?

lin100905/08 23:03我之前問GPT棒球 他跟我說玉米是3A打者

Syd05/08 23:30不會算數是因為他沒有計算功能,他不是電腦計算機

Syd05/08 23:30那種東西

Romulus05/09 09:12因為第6個出局數必然滿壘 = =