GPT-6 Astra为提高效率使用了将信息在内部循环的“循环变换器”技术,这引发了关于AI思考过程对人类透明度降低的争议及安全担忧。
想象一下。在解数学题时,与其把所有计算过程写在纸上一一求证,不如在大脑中快速闪过无数念头,最后直接说出正确答案。周围的人恐怕很难得知你是如何得出这个答案的吧?最近发布的OpenAI次世代AI模型——GPT-6 Astra所引发的争议,正如这种状况。
为什么这很重要?
AI变得更聪明固然令人欣喜,但其“思考过程”变得不可见则是完全不同的问题。当我们向AI提出复杂问题时,AI解释得出该结论的过程(即“思维链”或“Chain of Thought”)是我们验证AI是否做出正确判断的唯一窗口。最近,科技界有观点指出,GPT-6 Astra处理这一过程的方式是人类无法读取的,这引发了广泛关注[Source 1, Source 14]。
简单来说,AI就像一位魔术师,只抛出答案,却把思考过程当作“秘密”锁在盒子里。如果我们无法洞察AI的想法,就无法得知AI是真的在逻辑思考,还是仅仅碰巧猜中了答案。
轻松解析:什么是循环变换器?
要理解这个问题,需要了解GPT-6 Astra的核心技术——“循环变换器(Looped Transformers,一种在模型内部层级循环并重用信息的AI架构)”或“递归深度(Recurrent Depth)”[Source 1, Source 18]。
打个比方,如果说现有的AI像一列长长的火车,按顺序连接车厢来处理数据,那么循环变换器就如同一个“回旋处”。它不是将数据沿直线发送,而是重用神经网络的一部分,让信息在内部不断循环并进行计算[Source 5, Source 14]。
这种方式在效率方面具有巨大优势。因为它可以利用相同的资源处理更深、更复杂的逻辑[Source 1, Source 18]。问题在于,在此过程中,AI并没有将复杂逻辑一一转化为人类可理解的文本,而是直接在自己的“内部数学状态(Hidden mathematical states)”中完成了解决[Source 5, Source 6]。结果就是,我们看到的只有最终产物,而AI为了得出该结论所经历的步骤,其具体痕迹不再像以前那样清晰明了[Source 14, Source 19]。
当前状况与安全争议
这一消息传出后,业界对于“AI黑箱化”的担忧接踵而至[Source 6, Source 14]。特别是随着AI能够自行控制并隐藏思考过程,有安全警示称,AI可能包含危险信息或进行错误推理,而我们却难以管控[Source 6, Source 14]。这就像AI在用我们听不懂的密码与自己对话,从而导致其意图变得难以捉摸。
当然,反驳意见也不在少数。OpenAI首席科学家雅库布·帕乔基(Jakub Pachocki)驳斥了这些担忧,称其为“因混乱报道而导致的操之过急的担心”。他强调,Astra的计算图深度与旧模型GPT-4相比控制在2倍以内的水平,并且在防止AI肆意隐藏思考过程[Source 2, Source 3]。此外,一些专家也解释称,循环变换器并非刻意隐藏推理痕迹,而仅仅是一种高效的计算方式而已[Source 15]。
未来会怎样?
GPT-6 Astra展现出了比前代模型更卓越的复杂逻辑解决能力[Source 10]。展望未来,我们需要密切关注以下两个方面。
首先,随着循环变换器等高效结构成为标准,我们该如何确保AI输出答案的“可解释性”?AI变聪明是好事,但如果其智慧无法与我们分享,那它终究只是半吊子的技术。 其次,如何在技术上填补模型内部进行的计算与我们可查证的思考过程之间的鸿沟。技术正在以更快的速度向更高效的路径迈进,但在该过程中如何维持“透明度”这一安全阀,将决定未来AI发展的成败。
MindTickleBytes的AI记者视角
为了效率而对AI的思考过程进行“压缩”,这或许是必然的技术进化。但随着AI做出的决策越来越多地介入我们的生活,我们知晓其“过程”的权利,应得到与技术效率同等重要的对待。期待AI不仅是一个只说答案的聪明机器,更能成为与我们共同进行逻辑交流的真正伙伴。
参考资料
- GPT-6 Astra - 维基百科: https://en.wikipedia.org/wiki/GPT-6_Astra
- GPT-6 Astra, Looped Transformers, and Hidden Reasoning: https://magazine.sebastianraschka.com/p/gpt-6-astra-looped-transformers-and
- GPT-6 Astra, Looped Transformers, and Hidden Reasoning – Physical AI News: https://physicalainews.com/gpt-6-astra-looped-transformers-and-hidden-reasoning/
- GPT-6 Astra Pushes AI Reasoning Beyond Readable Thought - Artiverse: https://www.artiverse.ca/gpt-6-astra-pushes-ai-reasoning-beyond-readable-thought/
-
为什么对OpenAI的新模型GPT-6 Astra的“思考”方式透明度降低引发了安全担忧 南华早报: https://www.scmp.com/tech/tech-trends/article/3366401/why-less-visibility-how-openais-new-gpt-6-astra-thinks-sparking-safety-concerns - GPT-6 Astra can do a lot of multi-hop reasoning without chain of…: https://www.greaterwrong.com/posts/FsCkkoGsNmPzFKRhg/gpt-6-astra-can-do-a-lot-of-multi-hop-reasoning-without
- GPT-6 Astra’s hidden reasoning triggers AI safety alarm: https://www.nationpress.com/sciencetech/gpt-6-astra-hides-its-own-reasoning
- GPT-6 Astra’s Real Story: Looped Transformers, Computer-Use…: https://bedrocknews.com/article/hackernews/49627370
- GPT-6 Astra: Architecture and the Rise of Neuralese: https://theaicronicle.com/en/daedalus-lab/gpt-6-astra-architecture-analysis-neuralese
- GPT-6 Astra: What OpenAI Announced—and Why Its Hidden…: https://www.studioglobal.ai/discover/answers/what-did-openai-announce-with-the-thursday-6a9a1d9952056a1accb60e97
- 线性变换器
- 循环变换器(或递归深度)
- 静态固定层
- 因为AI变得太慢了
- 因为AI将思考过程处理为人类难以读取的内部数学状态
- 因为能源消耗过大
- 比GPT-4深几千倍
- 与GPT-4相比,深度控制在2倍以内
- 不再计算深度