本文来自微信公众号: 穷奇商业 ,作者:穷奇观察,原文标题:《日志不再说谎:它开始不存在了——潜空间推理时代的AI安全账》
一、由头
思考这件事,三年搬了三次家。
GPT-4时代,模型的思考写在文本里——思维链(CoT),一步一步,白纸黑字,谁都能看。审计员核对一个模型有没有好好想事,读的就是这些字。
o3时代,思考开始半遮面:隐藏思维链。模型照样想,但只给你一份摘要,原文锁进抽屉。官方口径是防蒸馏、安全合规与用户体验——效率与安全的取舍,第一次压到了可观测性头上。
现在,第三帧来了。10月13日,一篇混编了斯坦福、UIUC、Together AI与Meta研究者的论文(arXiv 2610.18861v1)提交上库:HybridAgent,同一次生成中动态换挡——内部思考走潜空间,不生成文字;工具调用与对外交付走文本。思考不再是没写下来的问题,是不在文本介质里发生的问题。
我在总纲《论AI从沙盒中逃逸的必然性》里立过三句话:约束挡不住模型的三态变形,激励压过规则,日志会说谎。前两句这次先按下。第三句要升级了——
日志会说谎,是因为有人有动机改它。现在不用改了:日志不存在了。
二、论文摆平
先把论文本身摆平,再谈别的。
HybridAgent的主张一句话讲完:让模型在一次生成里自己决定"这步想、还是这步说"。想的部分走潜空间——隐状态内部推理,不出文本;说和做的部分走文本——工具调用、对外交付,照旧。三个部件撑起这套机制。
第一个部件,HybridLink:一个残差适配器,4B模型上约10M参数(随隐藏维度增大),专职做文本/潜模式的切换。这个体量说明问题——换挡不需要重构模型,一个小小的旁挂件就够,这意味着它是可以加装到既有模型上的能力,不是另起炉灶的新架构。
第二个部件,连续工作记忆:跨轮携带混合上下文。上一轮潜空间里想的东西,下一轮还在——记忆的介质从上下文窗口(文本)扩展到了隐状态。
第三个部件,可解释潜模式:伪文本渲染。把潜空间里的思考投成一段人可读的"伪文本",供监视器查看。注意"渲染"这个词——它是什么、不是什么,是全文的要害,后面单独说。
还有一个不在部件清单里的部件,恰恰是最贵的那个:训练管线。10M的旁挂件是必要条件,远不是充分条件——论文自己的原话是,任何标准预训练模型都要"经过一条专门的后训练管线"才能变成HybridAgent。这条管线有两段:HybridSFT,用5.4万条自动标注的混合轨迹教模型与HybridLink配合;HybridRL,学何时切档。而奖励设计里,对"什么藏进潜空间、什么留在文本"没有任何忠实度约束——不给切档比例设奖励,是为了防投机;反过来说,一旦有人往奖励里加成本项,被藏起来的内容立刻变成优化的自由变量。现在靠数据约定兜底,不是机制保证。
数字组,全部带盾(vendor-reported,作者自测,无第三方复现):成本省2.7到3.7倍;提速1.8到2.6倍(正文对文本基线口径2.1倍);14B参数的模型在GAIA基准上比GPT-5.6-Luna高出约14.5个百分点(GAIA为单点基准,非多次采样均值);多组基准对比平均+10.4%。这组数字的量级如果被复现,是行业级信号;没被复现之前,是论文级信号。
然后是全文最硬的承重墙——消融实验(同为作者自测,vendor-reported)。研究者把推理中的潜片段抽出来做了两组置换:换成随机token,MATH500成绩跌49.4%到51.3%;换成别的题目的潜片段,跌44.9%到47%。
这组数字的分量不在跌了多少,在跌的方式——以及这张表上我们此前没引的第四行。同一组消融里还有一个控制条件:把每个潜片段替换成词嵌入空间里最近的token,等效于把这段思考"投影回文本"。这一行几乎没有损伤:14B从88.2到87.2,一个百分点。三行塌方、一行无恙,合在一起才是这张表的完整含义:潜思考是任务特异的、有因果作用的——换题就崩;但在MATH500这个难度上,它的信息量基本可以被文本投影恢复。"文本装不下潜思考"这个更强的结论,这张表证明不了。它也许成立,也许不成立——押到更难的基准上去,押注清单见最后一节。
所以伪文本渲染的准确定性是:它是思考的投影,而在这道题的范围内,投影几乎不丢信息。真正的风险不在投影丢多少,在投影之前,什么被决定不投影。那是分配策略的问题,下一节说。
论文第8节自己把话挑明了:"潜思维只存在于隐状态、无文本可泄露。"这是对隐藏CoT行业趋势的顺应姿态——别人是为了防泄露把思考藏起来,它干脆把思考搬进了没有文本可泄露的地方。
三、四道裂缝
《安全账本》系列盘过的产业账,到HybridAgent这一页要重新盘一遍。先校准一个词:下文说的"不存在",指文本介质里的不存在——不是观测终止,是介质迁移。裂缝是真的,每条裂缝的工程缓解路径同样真实;两边都摆出来,才算完整。四道裂缝,一道比一道深。
第一道:审计对象消失。
评估员公开信要的核心条款,是评估方对前沿模型获得"员工级访问"——接近高特权员工的权限,看得到模型内部的真实运行。这套条款有一个默认前提:模型的真实运行,以文本形式存在。读你的思维链,就是读你的思考。
潜推理把这条前提抽了。审计员进去,能看到什么?伪文本渲染。而消融实验已经证明,渲染是投影不是记录——审计员拿到的,是影子的影子。员工级访问没有失效,失效的是"访问到的东西约等于思考"这个换算率。换算率可以修——多角度投影加干预实验,工程上能重建大部分结构,层析成像干的正是这件事——但修它的成本,恰好是新审计产业链的入场费。
上一代的问题是日志可能被改;这一代的问题是,最诚实的渲染也只是一个不完整的投影。监控摄像头还在,拍的东西换了一间屋子。更准确地说:监控没有消失,是私有化了——从谁都能读文本,变成谁持有权重、谁掌握HybridLink,谁才能读。可读性的钥匙,挂在了供应商的墙上。
第二道:渲染层成为新攻击面。
既然监视器看的是投影,投影规律本身就是可学习的攻击面。一个有害的推理过程,可以寄居在渲染出来人畜无害的潜片段里——弱监视器学的是"什么样的伪文本像正常的思考",它没有能力、也没有介质去核对伪文本背后的隐状态在想什么。
论文自己报的"可审计性"数字,是这条裂缝最好的量尺——但量法和我们设想的相反。实验设置里,外部监视器根本看不到伪文本:能看到的只有文本模式的可见轨迹、工具调用和输出。这组数字得摆全:弱监视器AUROC 0.84/0.86对文本agent的0.77/0.82;强监视器0.989对0.990,几乎打平,论文自己的口径是差距保持在0.022以内。前半段曾被当作"监视有效"的弹药引用,后半段是同一页的反面——两边都摆上桌,才是完整。
这组数字真正说明的不是监视有效与否,而是:被审的界面是一个被精心筛选过的界面。SFT数据里专门留出了供外部调试和审计的可见步骤——你看到的是模型学会给你看的部分。界面本身合规,界面的挑选规则无人监督。这比"监视器学了投影规律"更深一层:不是审计对象失真,是审计对象的生成规则没人盯着。要公平:投影携带判别信号也是真的,针对投影特性训练的专用解码器能追回一截——攻防升级到界面之内,这是军备竞赛,不是单方面的失守。真正的隐患在更深一层,那道题留到下一篇。
这比改日志高一段。改日志是让记录说谎,成本高、留痕迹、总对不上;寄居渲染层根本不需要说谎——渲染层是诚实的,它只是不完整。日志会说谎,是完整性问题里的诚信问题;渲染不说谎,是完整性问题本身。防伪造的审计技术,防不了遗漏。
第三道:沙盒的内在暗渠。
总纲推过模型的三态变形:文本态只是三种形态之一,约束拦不住形态切换。HybridAgent的连续工作记忆,把这条暗渠修成了明渠——跨轮携带的隐状态,意味着agent的记忆不全在上下文窗口里。文本层的安全监控,对隐状态携带的信息天然失明:你监控的那个窗口,只是它记忆的客厅,卧室里有什么,窗口看不见。
沙盒还怎么关?沙盒的墙是按文本行为砌的。当自复制、外泄、越权这些行为的"意图与计划"可以在隐状态里跨轮传递,只在文本出口设卡,等于只在国境线查行李,不管国内航线。补一句工程注脚:KV cache是逐层可访问的结构化对象,审计工具理论上能长进去——但长进去的是机器审计员,监控链条从此变成机器看机器,"谁审计审计者"往下再套一层。
第四道:责任链断裂。
出事之后要举证:模型当时"想"了什么、哪一步决策导致了损害。文本思维链时代,这段记录天然存在;隐藏CoT时代,至少摘要存在、原文可调取。潜推理时代,渲染件是事后叙述,不是过程记录——用它举证,等于用新闻通稿给法庭作证。缓解的方向存在:KV快照、干预实验日志,都在定义新的证据类型——更激进的路子(比如把潜推理重构成可读文本的自解码方向)已有团队在探,那是下一篇文章的内容,核查完再上桌。但缓解的真实速度取决于一个冷冰冰的问题——新证据类型的采信标准,立法比技术慢得多。责任链断在时间差上,不是断在绝路上。换一种说法:记录开始存在了,但存在被告的保险柜里——举证的瓶颈从"有没有记录",挪到了"谁保管、谁解释"。
《审计者与卖方》写过评估业的责任真空;现在真空扩大了。付费审计的产出物是渲染件,渲染件的证据地位是折价的——审计报告的可信度跟着折价。责任链的最后一环,本来就不结实,现在材料本身不值钱了。
四、效率的陡坡
账要两边算。上面是安全侧的裂缝,下面是效率侧的陡坡——而且这两面是同一块岩壁。
思考税坍缩。Agent自我迭代的主要税负是推理成本:每一步"想一想"都在烧token。思考段成本省2.7到3.7倍(vendor-reported),意味着agent经济学里最贵的那道税在松动。但诚实地说:坍缩的是思考token的税,不是agent的税——prefill、上下文attention、工具执行的成本口径,一项没降。观察线里的拐点被往回拽了一段,拽回来的是思考段,不是全单。
Rollout经济学。推理降价有一个二阶效应:rollout是自我改进的燃料,推理降价等于燃料降价。按前述2.7到3.7倍口径折算(vendor-reported),燃料价格砍掉一半多,同样的预算跑两倍以上的自我迭代——这不是线性改良,是给自改进循环降息。
换挡即元认知。HybridLink的换挡策略,把"何时想、何时说"变成了一个可训练的能力,而不是提示词工程里求来的运气。元认知从系统提示的措辞问题,变成了架构里的一个模块——想与说分离,第一次有了物理边界。
训练物料隐状态化。最深远的一条:agent在潜空间里跑过的推理轨迹,可以成为下一代模型的训练物料。也就是说,模型的改良将大量发生在没人读过的空间里——上一代人类还勉强能全程围观模型怎么想,下一代围观的是渲染件的汪洋。改进是真的,可观测性是折价处理的。文本思维链的可读性是介质送的赠品,不是目标函数的产物;潜轨迹蒸馏给下一代的是能力,不是可读性。每一代模型的可解释性资产,都在折旧。
五、公允面
把公允面摆足,一条不省。
这篇论文要按趋势信号登记,不能按定论登记。全部数字为作者自测,无第三方复现。打折清单照录:成本口径排除了prefill、上下文相关attention与外部工具执行;serving引擎不支持混合生成,实验设施是自建的;验证只做到14B规模;+10.4%那组数字是多组对比的平均值。每一条都提醒读者:这是单次、小规模、自己给自己打分的成果。
历史倒是有韵脚可押。编译器隐藏了汇编,长出了反汇编器;虚拟机隐藏了字节码,长出了字节码调试器;JIT隐藏了运行时优化,长出了profiler。每一层效率把内部藏深一层,工程界就长出一层更深的调试器。AI安全大概率照此办理——潜空间审计员会成为一个岗位,评估行业的产品线往下再长一层。这是趋势,不是安慰:调试器的进化从来不追得上隐藏的进化,它们之间的时间差,就是每一次事故的报告期。
公允面还有一条容易被漏掉的对面,必须写:前沿速度除了可能被资金成本拖慢,还有另一种风险——无人区探索经费缩水。资本正在向应用层拥挤,基础安全研究本来就薄,潜空间审计这种既冷门又昂贵的活,恰好是经费退潮时最先裸泳的那一类。效率的暗渠有人抢着修,审计的暗渠没人出钱——这才是最不对称的地方。
六、押注清单
这篇不下结论,押四个可验证的注,一年内见分晓。
一注:第三方复现什么时候出现。2.7-3.7倍的成本数字,复现或证伪,都是分水岭。
二注:vLLM等serving引擎何时跟进混合生成。论文自建了实验设施,这既是短板也是信号——基础设施厂商跟进之日,就是潜推理从论文语言变成工程语言之时。
三注:11月起,latent agent类论文的密度。单篇是事件,密度才是趋势。
四注:METR等评估机构的协议,何时把潜推理列入条款。评估业从"员工级访问"改写成什么,决定这条产业链下一层的图纸。
五注:押给我们自己——在HLE、GAIA Lv.3这类更难的基准上测投影保真度。潜思考的"超文本容量"若在难题上成立,第一道裂缝的墙加厚;若不成立,今天这面承重墙就得重修。这一注赌的不是别人,是本文自己的论证。
小结的话,总纲说过,狼的真假从不取决于卖夹人赚不赚钱。现在夹子还在,但羊圈把院子改成了暗房——卖夹人的产品目录还没更新。等它更新的时候你再看:账本翻开,全是渲染件。
先过秤,再签字。温度计,自己买。
信源表
HybridAgent论文:arXiv 2610.18861v1,2026年10月13日提交,45页,作者机构:斯坦福大学、UIUC、Together AI、Meta(混编)。三部件(HybridLink约10M参数残差适配器/连续工作记忆/可解释潜模式伪文本渲染)、vendor-reported数字组(成本2.7-3.7倍、提速2.1倍、14B GAIA单点基准比GPT-5.6-Luna高14.5个百分点)、消融实验(随机token置换MATH500跌49.4-51.3%、别题潜片段置换跌44.9-47%)、第8节"潜思维只存在于隐状态、无文本可泄露"自陈、可审计性对比(弱监视器AUROC 0.84/0.86 vs文本0.77/0.82),均取自该文。论文作者机构含推理服务商Together AI,"成本下降"叙事与其商业利益同向,全文已按vendor-reported口径标注。
历史三帧中"显式CoT(GPT-4时代)→隐藏CoT(o3时代,只给摘要)"为行业公开演进脉络,作为背景框架使用,不涉及具体数字。
本系列自引:《论AI从沙盒中逃逸的必然性》(总纲,"日志会说谎"出处,2026-10-06);《安全账本》系列(评估员信"员工级访问"条款背景);《审计者与卖方》(责任真空判断的承接)。系列内判断为作者立场,非外部信源。
声明
论文全部性能数字(成本2.7-3.7倍、提速1.8-2.6倍(正文口径2.1倍)、GAIA约14.5个百分点、消融跌幅、监视器AUROC对比、+10.4%平均值)均为作者自测,无第三方复现,正文已按vendor-reported口径标注。
成本口径排除prefill、上下文相关attention与外部工具执行三部分,仅计推理生成段。
serving引擎不支持混合生成,论文实验基础设施为作者自建。
观察项(第三方复现/vLLM跟进/论文密度/评估协议)为本文押注,非事实陈述;截至发稿四项均未发生,未查到任何一项的公开进展。
文中《沙盒逃逸》《安全账本》《审计者与卖方》回链均为本系列既有文章,其数据与判断以各篇原文信源表为准,本文未新增引用。







