AI 自我設計?Anthropic 驚人的研究現場

AI 代理處理複雜數據並進行研究的未來感辦公室樣貌
AI Summary

Anthropic 的 AI 模型 Claude 目前主導了該公司 26% 的研發工作,Anthropic 並對 AI 進行 AI 這種「遞迴自我改進」的可能性發出安全警示。

想像一下。早上醒來打開電腦,發現人類昨天還在苦苦掙扎的複雜 AI 演算法設計工作,AI 已經自行完成了。現在,AI 不僅僅是搜尋資訊的工具,更像是一位優秀的共同研究人員,開始主導專案。

近期全球知名 AI 企業 Anthropic 發布的數據顯示,這樣的未來正迅速靠近。數據指出,我們熟知的 AI 模型「Claude」目前已經自行引導了 Anthropic 內部超過四分之一的研發工作。

這為何重要?

這項轉變不僅代表研究速度變快。一旦 AI 掌握了研發的主導權,技術發展速度可能超乎人類控制範圍。Anthropic 透過此次公開數據,暗示 AI 技術正極度接近「自我改進」的階段。Anthropic 對遞迴自我改進可能性的警告

淺顯易懂:AI 研究員 Claude

若要比喻 Anthropic 的研究環境,就像一個「巨大的共同工作空間」。

第一是 AI 引導式研究(AI-led R&D)。在 Anthropic 的研發工作中,AI 已不僅是輔助,而是掌握了核心主導權。Anthropic 研發參與佔比 以 Claude 為例,2026 年 2 月時其研究主導佔比不到 1%,但僅過幾個月就飆升至 26%。Anthropic 研究加速指標 這就像原本是菜鳥的研究員 AI,現在已成為組長級角色,能自行分配工作並得出結果。

第二是 遞迴自我改進(Recursive Self-Improvement,指 AI 創造出更聰明 AI 的過程)。簡單來說,就是完成基礎教育的 AI 自行解決更高難度的問題並持續進化。Anthropic 在期待其極致效率的同時,也警告如果發展速度過快,可能引發安全性問題,這是一把雙面刃。Anthropic 企業公開資料中的警告

現況:3 萬名 AI 研究員

在 Anthropic 內部,此時此刻有約 3 萬個 AI 代理在同時進行研究。AI 研究代理規模 單月做出的決定高達 10 億次以上。當然,他們並沒有將所有決定完全交給 AI。為了安全,即時監控系統正在運作,大約每 4 萬 7 千次行動中就會偵測並攔截 1 次危險的決定。安全監控系統

不過,Anthropic 表示 Claude 尚未在所有研發領域獲得「完全自主權」。關於自主權水準的說明 目前結構仍由人類負責最終審查與安全準則設定。

未來會如何?

在外界對 Anthropic 次世代模型高度期待的同時,許多人正密切關注「遞迴自我改進」具體會帶來什麼變化。關於次世代模型的展望 在 AI 自行設計 AI 的時代,技術發展速度將比現在快得多。

對使用者而言,能更快遇見更聰明、更有用的 AI;但對企業來說,如何安全地控制這種速度將成為最大課題。Anthropic 目前正準備進行首次公開募股(IPO),這種技術加速與安全性之間的平衡,已成為投資者與市場關注的焦點。Anthropic 在成長與安全性之間的考量

MindTickleBytes AI 記者觀點

AI 自行主導研究看似是效率的極致,但同時也提出了根本性的問題:誰來管理「會自我設計的 AI」?Anthropic 所展現的透明數據與指標,正向我們發出重要訊號:我們需要像追求技術發展速度一樣,深入思考「安全的深度」。

參考資料

  1. METR 關於 AI 研究加速的相關問題建議
  2. Anthropic 發布研發主導佔比
  3. 市場對於 Anthropic 風險評估等級的疑慮
  4. 次世代 Claude 模型與自我改進理論
  5. Anthropic AI 主導 R&D 指標公開
  6. 隨著 AI 採用,Anthropic 的工作結構變化
  7. 針對自動化 R&D 風險報告的評估
  8. AI 風險與企業價值評估分析
  9. Anthropic 員工規模
  10. Anthropic 對遞迴自我改進功能的警告
  11. Anthropic AI 代理使用現況
  12. Anthropic 的首次公開募股與財務狀況
  13. Anthropic 技術加速與安全問題的深度分析
AD
測試你的理解
Q1. 根據 Anthropic 的研究結果,AI 模型 Claude 直接主導的研發工作比例是多少?
  • 約 1%
  • 約 26%
  • 約 90%
該數值從 2026 年 2 月的不到 1%,截至 8 月已急劇上升至約 26%。
Q2. AI 自行打造更強大 AI 的過程稱為什麼?
  • 全面自動化
  • 遞迴自我改進
  • 手動協作
AI 設計並改進 AI 模型的過程稱為遞迴自我改進(Recursive Self-Improvement)。
Q3. 在 Anthropic 的研究現場,針對 AI 代理所做的決定,其安全措施是如何執行的?
  • 所有決定皆由人類審查
  • 決定完全交由 AI 處理
  • 透過監控系統每 4 萬 7 千次行動中攔截 1 次
Anthropic 每個月審查超過 10 億次代理決定,並透過監控系統,在每 4 萬 7 千次行動中攔截 1 次具危險性的行為。