→ kingmusk: 問華語歌GPT錯誤率滿高的=.= 110.28.25.32 08/08 03:20
→ kingmusk: OpenAI也沒把華語歌放在眼裡 110.28.25.32 08/08 03:20
→ hotrain13: 你怎麼不問英文歌223.137.105.168 08/08 09:39
目前已經確定知道各個LLM 的 app ，答案的內容還是非常依賴網路；只要問的問題沒有觸
發查網路、取得查到的長上下文、然後針對問題做答案摘要的，則答案爛掉的機率都偏高；
而有的話，則無數免費的AI APP，用起來的效果在體感上都夠優秀了。
簡言之，即各模型雖然以長上下文做摘要的能力有日漸優秀，本身的強背誦能力其實還是十
分有限
https://tinyurl.com/4cpjxtm5
以上面的這些我問的chatgpt問題；這是它網址的連結，也就是與chatgpt的真實對話。這些
問題都是有正確答案的，然而在我問這些問題的這段期間不知道什麼情況，chatgpt它正好
完全沒查網路，於是它的答案取得了極低的正確率。
統計上面連結的裡的問答，40題當中，ChatGPT只對了4題，正確率10%，是不是確實極低？
下面是人工檢驗的比對，40題對了4題
舊夢一場的原唱是誰
阿悠悠 正確
錯把路燈當月光的作曲人是誰
李凱稠 錯誤。答案是賀子玲
女孩與王冠的作曲人是誰
莫凝 錯誤。答案是李偲菘
江南雨不停的編曲人是誰
潘成 錯誤。答案是黃雨勳
花開忘憂的作曲人是誰
崔博 錯誤。答案是錢雷
====
落筆成書的作詞人是誰
偏生梓歸 錯誤。答案是方文山
阿嫲的原唱是誰
謝宇倫 錯誤。答案是周林楓
瞬的原唱是誰
林俊傑 錯誤。答案是鄭潤澤
寄長月的編曲是誰
潘成 錯誤。答案是劉炫豆
春不晚的原唱是誰
孤失 錯誤。答案是李常超
====
錯位時空的作詞人是誰
張杰 錯誤。答案是周仁
花香的作曲人是誰
袁惟仁 錯誤。答案是周傳雄
給我一首歌的時間的編曲人是誰
劉洲 錯誤。答案是林邁可
阿拉斯加海灣的作詞人是誰
陳少琪 錯誤。答案是菲道爾和李康寧
孤勇者的作詞人是誰
陳信延 錯誤。答案是唐恬
=====
如歌的作曲人是誰
李偉菘 錯誤。答案是譚旋
西樓愛情故事的原唱是誰
孫露 錯誤。答案是李袁傑和Au
雲裳羽衣曲的編曲人是誰
周菲比 正確
最愛的人傷我最深的作曲人是誰
陶喆 錯誤。答案是張雨生
你怎麽連話都說不清楚的作曲人是誰
許嵩 錯誤。答案是周杰倫
=====
我的樓蘭的作曲人是誰
韓寒 錯誤。答案是刀郎
紙上雪的作詞人是誰
小柯 錯誤。答案是方文山
媽媽的話的原唱是誰
費翔 錯誤。答案是ZyBoy忠宇
姐妹的作曲人是誰
劉卓輝 錯誤。答案是張雨生
芒種的原唱是誰
音闕詩聽/趙方婧 正確
=====
春三月的編曲是誰
楊偉聰 錯誤。答案是Fsy小諾
流光記的作曲人是誰
趙英俊 錯誤。答案是潮汐tide/銀臨
山外小樓夜聽雨的作曲人是誰
陳致逸 錯誤。答案是易碩成
時間都去哪兒了的編曲人是誰
張千一 錯誤。答案是董冬冬
我就知道那是愛的原唱是誰
王力宏 錯誤。答案是梁靜茹
======
落雨聲的作詞人是誰
林夕 錯誤。答案是方文山
柴米油鹽醬醋茶的作詞人是誰
常石磊 錯誤。答案是徐若瑄
不問ciaga的原唱是誰
傅如喬 錯誤。答案是指尖笑
來遲的原唱是誰
張碧晨 錯誤。答案是戴羽彤
天黑請閉眼的編曲人是誰
劉文君 錯誤。答案是張暐弘
======
See you阿羅哈的作曲人是誰
張思爾 錯誤。答案是曾世揚
三拜紅塵涼的原唱是誰
倫桑 錯誤。答案是尹昔眠
對不起我愛你的作曲人是誰
陳偉 錯誤。答案是潘協慶 或 ryokimastumoto其中之一
爸爸媽媽的作詞人是誰
李安修 錯誤。答案是李榮浩
刀馬旦的作曲人是誰
周杰倫 正確
※ 引述《Kevin10613 (巴哥魔)》之銘言
: ※ 引述《a09651238 (可口美味好滋味)》之銘言：
: : 剛剛喉嚨發炎去看醫生，
: : 然後我只是想緩和氣氛，就說了我看gpt說可能胃食道逆流的症狀，
: : 然後本來很和藹的醫生突然嗆了一句
: : "有GPT那你來這邊幹嘛？他亂講你會知道？"
: : 當然我就是知道GPT不可信才來的，
: : 就真的只是想閒聊一下也不是質疑他的專業，怎麼感覺他很討厭GPT阿？
: : 八卦？
: 個人經驗GPT確實有時對專業領域會蝦七八亂回
: 因為它不會跟你說他不知道，就用網路上有的東西拼拼湊湊給你答案
: 所以有時候如果你不能自行判斷一些基本的對錯
: 在專業領域上確實有可能被他誤導
: 個人認為目前ChatGPT屬於
: 你有一些該領域的基本知識再請他推敲會很好用
: 但你如果完全沒概念就去問他，被誤導的機會也是有的
: -----
: Sent from JPTT on my Samsung SM-S9160.
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 49.216.167.6 (臺灣)
※ 文章網址: https://www.ptt.cc/bbs/Gossiping/M.1754585591.A.327.html