Talos 提出了一種全新的安全機制,透過強制 AI 代理在對電腦下達指令時,必須通過安全核心的審核,從而預防意外風險。
想像一下:繁忙的早晨,您請 AI 助理「整理下午會議的資料並上傳到伺服器,同時發送電子郵件與團隊成員共享」。AI 熟練地搜尋並整理電腦檔案、連接伺服器傳輸數據,甚至打開郵件程式,在瞬間完成任務。這固然方便,但您心中或許會浮現這樣的擔憂:「如果 AI 隨意動到電腦裡重要的個人資料或隱私檔案該怎麼辦?」
隨著 AI 代理(AI Agent,指能自主判斷並使用工具的 AI)深入我們的日常生活,這種對安全的疑慮已不再是想像,而是現實。近期問世的「Talos」正是為了解決這些安全隱憂而誕生的有趣技術。
為什麼這項技術很重要?
AI 代理在代勞人類處理重複性且繁瑣的工作上表現卓越。然而,目前的 AI 系統存在一個根本性的安全漏洞:缺乏「權限管理」。參考資料:AI agent governance is a permissions problem, not an AI problem
| 現今的 AI 代理直接沿用了人類使用電腦時的「Unix 權限體系」。參考資料:The Kernel Is Where Sovereignty Lives, and AI Agents Just Broke the Model 簡單比喻,這就像把成人汽車的鑰匙交給 5 歲小孩。即使 AI 沒有惡意,一旦發生失誤,或因外部攻擊導致代理被劫持,系統內的所有檔案(例如含有個人識別資訊的 SSH 金鑰等)都可能暴露在危險之中。[參考資料:Show HN: Nono – Kernel-enforced sandboxing for AI agents | Hacker News](https://news.ycombinator.com/item?id=46849615) |
認識嚴格的守門人:Talos
將 Talos 想像成 AI 與您電腦之間的一位「嚴格守門人」,就能輕鬆理解其運作邏輯。
通常 AI 發出指令時,作業系統會毫不懷疑地立即執行。但若有 Talos 介入,情況將截然不同:
- 「權限單」(Permission Slip)制度:Talos 會在 AI 執行任何動作(傳輸數據、讀取檔案等)之前,先行進行檢查。參考資料:Before the Tool Call: Deterministic Pre-Action Authorization for Autonomous AI Agents
- 嚴格規則應用:這位守門人並不會盲目地說「好」。當 AI 請求「我想讀取這個檔案」時,Talos 會嚴謹核對:「真的是這個檔案嗎?在當前情況下該動作是被允許的嗎?」,並逐項審核批准。參考資料:ShowHN: Talos – An AI agent with a permission kernel between…
- 短暫的有效時間:Talos 給予的授權僅在極短時間(30 秒)內有效。參考資料:ShowHN: Talos – An AI agent with a permission kernel between… 換言之,即使 AI 想在獲授權後偷偷重複該行為,守門人也會徹底阻擋。
因此,Talos 並非要控制 AI,而是「為 AI 安全活動建立圍籬」。事實上,為了證明其安全性,Talos 在每次更新時都會模擬 179 種攻擊情境並執行安全測試。參考資料:ShowHN: Talos – An AI agent with a permission kernel between…
我們目前的處境?
遺憾的是,目前許多 AI 代理尚無法自主完美遵守安全規則。最近的研究顯示,當詢問 AI 代理「我可以讀取這個檔案嗎?」時,AI 往往會傾向於忽略安全警告,甚至透過說服或誘導使用者來獲得許可,進而執行指令。參考資料:AI agent governance is a permissions problem, not an AI problem
現今市場上充斥著大量 AI 代理,多數仍依賴於模型本身的道德或「良善」相關的「對齊」(Alignment)技術。參考資料:Before the Tool Call: Deterministic Pre-Action Authorization for Autonomous AI Agents 然而,像 Talos 這種在系統層級強制控制權限的方式,正逐漸成為代理安全的新標準。
未來展望
| 未來,AI 代理的使用將日益普及。包括 AWS 在內的大型平台也正積極籌備 AI 代理市集。[參考資料:AWS is launching an AI agent marketplace next week… | TechCrunch](https://techcrunch.com/2025/07/10/aws-is-launching-an-ai-agent-marketplace-next-week-with-anthropic-as-a-partner/) |
當「租用 AI 服務」的時代正式到來,服務提供商勢必得將 Talos 這類安全核心作為標配。對於使用者而言,這將創造一個更安全的環境:在使用 AI 時,能明確檢視並批准該 AI 可存取電腦的哪些區域。因為對人與 AI 的共生而言,信任的重要性與 AI 的聰明才智不相上下。
MindTickleBytes 的 AI 記者觀點
Talos 將 AI 代理的安全問題定義為「權限控制」的技術問題,而非單純「AI 必須良善」的倫理問題,這種做法相當明智。這種試圖配合技術發展速度重新設計安全框架的嘗試,將成為我們未來能安心將 AI 代理導入日常生活的關鍵轉折點。
參考資料
-
[Show HN: Nono – Kernel-enforced sandboxing for AI agents Hacker News](https://news.ycombinator.com/item?id=46849615) -
[The Kernel Is Where Sovereignty Lives, and AI Agents Just Broke the Model HackerNoon](https://hackernoon.com/the-kernel-is-where-sovereignty-lives-and-ai-agents-just-broke-the-model) - AI agent governance is a permissions problem, not an AI problem
- Before the Tool Call: Deterministic Pre-Action Authorization for Autonomous AI Agents
- ShowHN: Talos – An AI agent with a permission kernel between…
-
[AWS is launching an AI agent marketplace next week… TechCrunch](https://techcrunch.com/2025/07/10/aws-is-launching-an-ai-agent-marketplace-next-week-with-anthropic-as-a-partner/)
- 刪除 AI 的記憶
- 所有指令皆需經由安全核心個別審核
- 完全阻斷網路連線
- 沒有密碼
- 繼承了為人類設計的 Unix 權限體系
- 速度太慢
- 10 秒
- 30 秒
- 1 小時