计算机使用智能体面前摆着一道熟悉的选择题:每一步都动前沿模型,效果好但账单好看不起来;全程用小开源模型,便宜但长任务里说崩就崩。「弱打前锋、按需叫强」的升级式架构是当下流行的折中,可难题一直卡在两个字:时机。10 月 15 日提交 arXiv 的《LEASH: Uncertainty-Aware Weak-to-Strong Escalation and Oversight for Computer-Use Agents》(编号 2610.22280)把这两个字做成了三层结构,而且不需要训练。

论文七位作者:Qingni Wang、Changdae Oh、Yuzhe Yang、Sharon Li、Jiachen Yang、Ang Li 与 Xin Eric Wang。他们的出发点很直白:判断「何时该叫强的上」,需要一个每一步都查得起的不确定性信号;而即便交了棒,强模型照样可能迷路——可它通常以黑盒 API 形式提供服务,内部状态根本无从监测。

什么时候该叫强的上任务开始前初始任务不确定性粗判这题难不难决定要不要先押弱模型执行每一步步级不确定性弱模型隐状态与过去成功失败轨迹比对交棒之后影子观察者继续盯着强模型黑盒也能被看住不确定性信号为什么便宜估计器直接复用动作生成时已经算出来的激活值——不用额外前向传播,也不用单独训练一个监控模型;整个框架免训练,即插即用论文 arXiv 2610.22280,10 月 15 日提交;七位作者:Qingni Wang、Changdae Oh、Yuzhe Yang、Sharon Li、Jiachen Yang、Ang Li、Xin Eric Wang;测试环境为 OSWorld
图|上排三层是框架全貌,中部是它区别于别家监控的关键。读图要点:强模型被放开之后,缰绳还没松。

三层缰绳,全部挂在不确定性上

LEASH 的三层分别对应任务的三个时刻。任务开始前,用初始任务不确定性做粗路由:这题看起来就不寻常,一开始就别把担子全压给弱模型。执行过程中,用步级不确定性做运行时升级。交棒之后,还有一个影子观察者继续盯着已经上场的强模型——黑盒看不见内部,那就从外部行为轨迹判断它是否也在打转。

不确定性信号的算法有个巧妙处:拿弱模型的隐状态,与它自己过去的成功轨迹、失败轨迹分别比对,状态更像失败那一边,就判高不确定。关键在于这个估计器直接复用动作生成时已经算出来的激活值——不用额外前向传播,也不用单独训练一个监控模型。整套框架免训练,往现有智能体 loop 外挂即可,这是它区别于多数需要训练路由器的方案的地方。

数字对上数字OSWorld 四种当代底座全面强于弱模型单干同等升级率下领先随机升级基线 6.55 到11.94 个百分点一份对旗舰的账单Qwen3.5-35B-A3B 底座任务成功率 73.66每任务约 0.4117 美元同为 OSWorld:Claude Opus 5 全程在场是 72.90LEASH 这套「弱打前锋、按需叫强」以 73.66 对 72.90 打平,推理成本降 19.2;换句说法:不是所有步骤都值得动用前沿模型,问题是哪一步值得注意口径:单基准单次对比,数字随底座与任务分布而变,论文未做跨基准平均
图|上排两卡是两组核心数字,中部是打平旗舰的那笔账。读图要点:省下的两成成本,买的是「知道何时求助」。

数字:打平旗舰,省下两成

OSWorld 上、四种当代底座上的测试里,LEASH 全面强过弱模型单干;在升级率对齐的前提下,它比「随机叫强」的基线高出 6.55 到 11.94 个百分点——不确定性确实指对了时刻,不是玄学。更有分量的是那份对旗舰的账单:Qwen3.5-35B-A3B 作前锋底座,任务成功率 73.66%,每任务约 0.4117 美元;全程在场的 Claude Opus 5 是 72.90%。打平,且推理成本降 19.2。

这组数字要连起来读才有意义:它不是「小模型追上了大模型」,而是「知道何时求助的弱模型,追上了全程硬扛的旗舰」。算力经济学里,这等于给每一步动作标了价——多数步骤不配动用前沿模型,少数步骤值得,而难点始终是识别那少数。

放进台谱里看

站点在弱强分工这条线上攒了几篇。1971 的 SpecAgent 让弱模型接地起草、强模型并行预填充审整段,治的是「每步都调大模型」的墙钟与显存浪费;LEASH 不碰分工方式,专攻交棒时机与交棒后的看管,两者可以叠加使用。1962 的 Learning to Steer 训练一个旁路智能体判「何时干预」,路线是学习出来的;LEASH 的不确定性来自隐状态比对,免训练即用,代价是它只覆盖「强弱之间」这一种干预。更早的 1551 与 1027 决策模型线讨论的是路由审查,属于同一家族的不同切面。

对企业采购方,这篇的价值在成本侧:它给「混合部署」提供了一个可复用的判据模板——不用每个项目都重训一套路由器,先量自己任务集上的步级不确定性,再决定哪些步骤值得升档。

几盆该浇的冷水

所有结论都跑在 OSWorld 一个基准上,四座底座、单次对比,没有跨基准平均——换到浏览器操作之外的长任务形态,层级结构是否照搬要重新验证。「打平 Opus 5」是单任务成功率加单任务成本的二维对比,没算延迟、失败重试与人工兜底,真实总拥有成本未必同向。影子观察者盯的是黑盒外部行为,它自己能看住多少,论文给的边界同样有限。

给正在做智能体成本优化的团队一个可直接借用的设计:把「升级决策」与「升级后监督」当成两个独立模块做,前者可以用免费复用的激活先跑起来,后者至少先做到超时与循环检测。别等训好一个完美路由器再上线——LEASH 的论证顺序恰好相反:先有可用的粗信号,再谈精度。