看板 Marginalman 關於我們 聯絡資訊
人類也會「模型坍塌」? AI 專家揭露:你的認知正在靜默老化 為什麼小孩子說的話會震驚你? 為什麼年長父母總重複同樣的話? 前幾天看到 AI 領域大神 Andrej Karpathy 的訪談, 他提出一個關於 AI 訓練的觀察, 似乎也成為對人類認知老化的最佳隱喻。 --- #當AI模型坍塌 當 AI 模型持續在自己生成的數據上訓練時, 會發生一個現象:模型坍塌(Model Collapse) 它們的輸出會失去多樣性、豐富性, 只佔據極小的可能內容空間。 舉個例子: 你問 ChatGPT 講笑話,它只會講那幾個。 不是它不會講別的,而是它的分佈已經「靜默地坍塌」了。 Karpathy 說: "如果你看任何單一例子,並不明顯, 但這些樣本已經悄悄佔據了極小的內容空間。" --- #人類也在坍塌 接著,他提出一個驚人觀察: 人類也會隨著年齡坍塌。 孩童:尚未坍塌的模型 - 他們的思維尚未對世界「過度擬合」 - 因此他們會說出讓你震驚的話 - 那些想法來自一個未被社會範式固化的高熵思維 成人/老年人:已經坍塌的模型 - 學習率下降 - 不斷重複同樣的想法、說同樣的話 - 思維模式變得固定且可預測 - 這種坍塌持續惡化,直到「一切都退化了」 這段話有點恐怖,因為: 我們最終會反覆審視同樣的想法, 說越來越多相同的話, 學習率歸零, 坍塌持續惡化,然後一切都退化。 --- #個人問題也是組織問題 回想那些偉大企業的殞落: Blockbuster 拒絕收購 Netflix → 「人們不會放棄去店裡租片的體驗」 Kodak 錯過數位相機時代 → 明明自己發明了數位相機,卻害怕衝擊底片事業 諾基亞 CEO 的名言 → 「我們沒做錯什麼,但還是輸了」 這些都是「認知坍塌」的經典案例: 當組織的決策模型固化,就無法看見新範式的價值。 --- #同溫層加速坍塌的隱形殺手 更可怕的是,現代社會有個「坍塌加速器」:同溫層效應 想想看 AI 的模型坍塌是怎麼發生的? 當模型只在自己生成的數據上訓練時。 人類的同溫層,本質上就是這個過程: - 只跟「想法相同的人」交流 - 只看「符合自己觀點」的內容 - 只接受「強化既有信念」的資訊 你以為在吸收新知識, 實際上只是在用自己的輸出訓練自己。 --- #如何對抗坍塌? 無論是 AI 還是人類,答案都一樣: 刻意逃離同溫層,吸收外部的熵(Entropy) Karpathy 說: 你必須總是在生活中尋求熵, 與他人交流是熵的絕佳來源。 具體來說: 刻意不舒服 - 不要只追蹤「你認同」的 KOL - 刻意閱讀「挑戰你觀點」的文章 跨界交朋友 - 投資人應該多跟工程師、設計師、創業者聊 - 中年人應該多問年輕人「為什麼你們這樣想?」 找反例,不找確認 - 當你相信「AI 會取代一切工作」→ 去找「AI 無法取代」的案例 - 當你相信「年輕世代不懂理財」→ 去看 Z 世代的投資行為數據 學習率不歸零 - 每年至少深入一個陌生領域 - 定期檢視:我的觀點過去一年改變了什麼? --- 最後 Karpathy 的觀察提醒我們: 年輕不是生理年齡,而是認知狀態。 當我們停止吸收新的熵, 當我們的學習率歸零, 當我們只想待在舒適區, 坍塌就開始了。 保持「未坍塌」的狀態, 可能是 AI 時代最重要的競爭力。 也是對抗老化的唯一方法。 --- 1 想想看「最近改變你觀點」的一個事件? 2 你身邊有哪個「尚未坍塌」的孩子,說過讓你震撼的話嗎? 3 分享你的「突破同溫層學習法」? --- 數據來源:Andrej Karpathy — “We’re summoning ghosts, not building animals” #AI #認知科學 #終身學習 #投資哲學 #人生智慧 -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 39.12.9.222 (臺灣) ※ 文章網址: https://www.ptt.cc/bbs/Marginalman/M.1761035457.A.F5F.html
ZIDENS: 你自己有看完嗎 10/21 16:32
knok: 什麼! 10/21 16:33
emptie: 懂了 原來那些從threads搬屎的人用心良苦 10/21 16:33
Wardyal: 我有看完 這篇是好文分享 10/21 16:34
SecondRun: 希望大家多多搬屎 10/21 16:36
DoraGian: 轉借複製文圖書館 10/21 17:02