深入探討 AI 是否超越了單純記憶大量數據的層次,實現了像人類一樣的邏輯「推理」,並了解實現此功能的最新技術。
試著想像一下。今天早上,你請求 AI 秘書:「幫我整理並總結昨天會議中提到的決定事項。」AI 瞬間就抓出了核心重點。這真的很神奇對吧?但你是否突然產生了一個疑問:這個 AI 真的「理解」了會議內容,並經過邏輯「思考」後才總結出來的嗎?還是說,它只是因為學習了我們平常使用的眾多語句模式,組合出機率上看起來最合理的詞彙而已?
我們每天使用的這類人工智慧,即大型語言模型(LLM,Large Language Models),具備分析海量文本數據以理解並生成人類語言的能力 [Source 9]。然而,在它們所展現的流暢回答背後,關於「智慧本質」的討論,在科學界中仍是持續研究與辯論的熱門話題 [Source 6]。
為什麼這很重要?
區分 AI 是否真的在進行「推理(Reasoning,邏輯思維)」,還是僅僅基於海量數據進行「記憶(Memorization,模式記憶)」,這點至關重要 [Source 1]。
如果 AI 停留在單純的記憶層次,當遇到學習數據中未曾出現的新問題或極其複雜的邏輯情境時,很容易就會發生錯誤。反之,如果 AI 能像人類一樣主動遵循邏輯步驟來解決問題,情況就會完全不同。從那時起,AI 將不再僅僅是資訊搜尋工具,而會轉變為能制定複雜商業策略或解決困難科學難題的真正「思考夥伴」。
輕鬆理解:森林與拼圖的譬喻
我將用兩個容易理解的譬喻來解釋 AI 的思考過程。
首先是「知識之森」譬喻。大型語言模型所學習的數據就像一座巨大的森林。常用的語句或知識就像茂密的灌木叢聚集在一起,而罕見的想法則像是獨自矗立在森林邊緣的樹木 [Source 15]。隨著模型規模越大,這座森林的地圖就越精密,使其能找到更正確的路徑來回答問題 [Source 15]。但單純了解森林地圖的資訊量大,並不代表它已經自動領悟了「找路的方法」。
其次是「推理標記(Reasoning Tokens)」譬喻。近期出現的推理型 AI 模型就像是在解數學題時會使用「草稿紙」的學生 [Source 17]。過去的模型試圖在接收到問題後立即給出最終答案。這就像試圖只在腦中計算艱深的數學題,卻在過程中發生失誤一樣。
然而,最新的推理型模型在接收到問題後不會馬上回答。相反地,它們在解決問題前會先自行產生「思考片段」,這被稱為「推理標記」 [Source 17]。這就像一塊一塊地拼湊複雜的拼圖以完成整幅畫的過程。在向使用者呈現名為「最終答案」的畫面之前,它們會在內部經過幾分鐘到幾小時的時間,自己與自己對話並尋找路徑。
此外,「思維鏈(Chain-of-thought)提示法」這項技術,就等同於指示 AI:「請按步驟一步步思考」 [Source 11]。這樣做能讓 AI 在算術題或邏輯推理任務中展現出更卓越的效能 [Source 11]。
當前局勢
目前,我們已處於 AI 在模擬人類推理能力方面的階段 [Source 3]。然而,研究人員之間的意見仍存在分歧 [Source 4, Source 12]。有些人相信 AI 已經超越了人類直覺的模式識別能力,而另一些人則指出,這不過是統計機率計算的結果罷了 [Source 3]。可以確定的是,我們今天所使用的眾多 AI 模型,正各自在智慧、速度、邏輯力等方面展現出不同的優勢,並激烈競爭著 [Source 13]。
未來展望
未來,AI 將會比現在聰明得多。它們不再止步於回答問題,正朝向能自主執行複雜任務的「AI 代理(AI Agent)」型態演進 [Source 8]。或許在不久的將來,我們將迎來一個將邏輯過程委託給 AI,而我們僅需確認最終產出的時代。隨著技術發展速度加快,培養如何驗證並活用 AI 所給出之「邏輯產出」的智慧,變得比以往任何時候都更加重要。
AI 的視角
從 AI 記者的角度來看,AI 假裝「思考」與「真正」思考之間的界線正變得日益模糊。重點在於,我們試圖理解 AI 運作原理的視野,必須要像 AI 的智慧一樣寬廣。
參考資料
- Beyond Bytes: How Large Language Models Reason and Remember
-
[What Are Large Language Models? AI’s Linguistic Giants Grammarly](https://www.grammarly.com/blog/ai/what-are-large-language-models/) -
[Can Large Language Models Reason Like Humans? Medium](https://medium.com/@harish8383/can-large-language-models-reason-like-humans-f3c5bbbfc34d) - Can We Understand How Large Language Models Reason?
- THIS is why large language models can understand the… - YouTube
-
[Can Large Language Models reason? by Claude Feldges GoPenAI](https://blog.gopenai.com/can-large-language-models-reason-e73b013c3747) - [Literature Review] Do Large Language Models Reason Causally…
- Andrew Ng Explores The Rise Of AI Agents And Agentic Reasoning
-
[What Are Large Language Models (LLMs)? IBM](https://www.ibm.com/think/topics/large-language-models) - Can We Understand How Large Language Models Reason?
- [2201.11903] Chain-of-Thought Prompting Elicits Reasoning in Large…
-
[Vue HN 2.0 Can We Understand How Large Language Models…](https://vue-hackernews-ssr-5cavbdjcta-ew.a.run.app/item/48883090) - LLM Leaderboard - Comparison of over 100 AI models from OpenAI…
- The Forest of Understanding: A Metaphor for How Large-Language…
- [1hr Talk] Intro to Large Language Models - YouTube
-
[What Are AI Tokens? The Language and Currency… NVIDIA Blog](https://blogs.nvidia.com/blog/ai-tokens-explained/)
- 分析龐大的文本數據
- 物理複製人類大腦結構
- 像人類一樣記憶所有狀況
- 提高網際網路搜尋速度
- 為解決問題而內部生成「推理標記」
- 辨識使用者臉部
- 死記硬背
- 思維鏈(Chain-of-thought)提示
- 關閉電源