首页 › ai-agents › 同分差十倍:自主智能体账单战

同分差十倍:自主智能体账单战

概述

2026 年中,自主编程智能体的赛道出现了一个反常识的拐点:在 SWE-bench Verified 榜单上,六大前沿模型挤在 0.8 个百分点的窄缝里——Claude Opus 4.6 拿到 80.8%、Gemini 3.1 Pro 拿到 80.6%、MiniMax M2.5 拿到 80.2%。当分数趋同,护城河就不再是分数本身,而是"解决同一个 GitHub Issue 要烧多少钱"。本文以 METR 的时间地平线曲线与 SWE-bench 的成本竞赛为双轴,拆解自主智能体在 2026 年真正决定胜负的两件事:能连续自主多久才崩,以及每一次成功值多少美元。结论很硬——榜单已死,账单与可靠性才是新护城河。

双轴对比:自主时长 × 每任务美元

模型 / 智能体 SWE-bench Verified 每百万 Token 价(输入/输出,美元) 估计每解决一 Issue 成本 50% 时间地平线 80% 时间地平线
Claude Opus 4.8 88.6% 5 / 25 高位 较长 ~1 小时量级
Claude Opus 4.6 80.8% ~5 / 25 高位 较长 ~1 小时量级
Gemini 3.1 Pro 80.6% 中位 中位 较长 ~1 小时量级
MiniMax M2.5 80.2% ~0.28 起 极低(价格屠夫) 中等 偏短
Fable 5(脚手架) ~95% 自托管为主 取决于算力 较长 较长
OpenHands V1 ~72% 取决于底座模型 低(开源) 取决于底座 取决于底座
Mini-SWE-agent(100 行) ~74% 取决于底座模型 极低 取决于底座 取决于底座
Devin(Cognition) 自报,早期 13.86% 订阅制 固定席位 闭源不公开 闭源不公开

注:时间地平线沿用 METR 定义——以"人类专家完成同一任务所需时长"衡量智能体能可靠自主多久;50% 地平线 = 成功率 50% 对应的任务时长,80% 地平线 = 成功率 80% 对应的任务时长。闭源产品(Devin)不提供独立复现工具,数据来自厂商自报。

深度分析

一、METR 时长地平线:50% 翻倍曲线的真相

METR(Model Evaluation & Threat Research)花了数年时间只盯一个被大多数团队忽略的轴:任务时长本身就是一条可靠性轴。它的核心指标叫"时间地平线"——以人类专家完成同一任务所需的真实工时为刻度,看智能体能撑到多长的任务还保持高成功率。结论是 2019 到 2025 年间,50% 时间地平线大约每 7 个月翻一倍:2019 年的模型只能稳定完成几秒钟的微任务,到 2025 年已经能稳定处理几十分钟量级的真实工程任务。

这条曲线之所以重要,是因为它把"模型变强了"翻译成了对工程团队有用的语言——不是"分数高了 2 分",而是"你敢放手让它自己干多久"。对训练营和产品化而言,这是真正可定价的指标:一个 50% 地平线只有 5 分钟的智能体只能做单轮问答包装;一个到 30 分钟的智能体已经能承包"修一个中等 Issue"的完整闭环;一个到 2 小时的智能体才够格谈"替你跑一个独立功能模块"。翻倍曲线直接决定了你今天设计的产品边界,半年后会被免费送出去。

二、可靠性墙:80% 为何远低于 50%

翻倍曲线只讲了乐观的一半。把成功率门槛从 50% 提到 80%(企业敢上生产的最低线),时间地平线会断崖式缩短——前沿智能体在 ~1 小时量级的任务上才能维持 80% 成功率,而它们的 50% 地平线早就突破到更长。这条 50% 与 80% 之间的"可靠性差",才是企业团队最容易踩的坑:Demo 里用 50% 成功率的精彩案例打动决策者,真上生产要 80% 时才发现,能可靠交给它的任务时长可能只有 Demo 的三分之一。

这道墙的物理来源很清楚——长任务里错误会复利累积。一个每步 95% 可靠的循环,跑 20 步只剩 36% 端到端成功率;跑到第 47 步还自我感觉良好的智能体,往往不是因为能力强,而是因为它在错误的轨道上越走越远。所以"可靠性墙"不是模型参数问题,而是任务切片问题:与其祈祷模型在两小时任务上不掉链子,不如把两小时任务切成四个半小时子任务,每个都落在 80% 地平线之内。这是 2026 年企业任务设计的核心方法论,也是后面"切片设计"一节要落地的点。

三、SWE-bench 同分不同价:十倍账单差

榜单趋同这件事本身比谁第一更值得看。六大前沿模型在 0.8 个百分点内挤成一团,意味着"分数领先"作为护城河已经基本失效——你今天发布 81%,对手下个月就 81.2%,差距小于噪声。真正拉开差距的是钱:据公开成本竞赛分析,这些"同分"模型在"每解决一个 GitHub Issue"上的花费差距可达 10 倍量级。MiniMax M2.5 以约 0.28 美元/百万 token 的输入价把同分段的价格打到地板,而头部闭源模型按 5/25 美元定价,跑同样的脚手架、同样的失败重试,账单可能差出一个数量级。

这对选型的含义非常直接:在分数趋同的世界里,先用二线廉价模型跑掉 80% 的简单 Issue,只把高难度的留给昂贵模型,是性价比最高的编排策略。盲目追求榜单第一、全量用最贵模型,等于在每张账单上多付十倍税。训练营产品如果想做"AI 自动修 Issue"的 SaaS,模型的混合分层设计直接决定你能不能盈利。

四、每任务美元:从 20 美元到 0.3 美元的塌方

把"每解决一 Issue"的成本拉一条时间轴,趋势更触目惊心。早期 SWE-bench 智能体解决一个真实 Issue 动辄花 10 到 20 美元甚至更多——大量 token 烧在重复探索、错误重试、上下文反复灌水上。到 2026 年中,得益于 token 单价下跌、脚手架成熟、以及"先廉价后昂贵"的分层编排,单 Issue 成本已经能压到不足 1 美元,个别价格屠夫模型配合精简脚手架甚至逼近 0.3 美元量级。这是不到两年内一到两个数量级的成本塌方。

但这里藏着一个陷阱:低价是平均值,不是最坏情况。一个平均 0.5 美元的智能体,遇到一个特别缠手的 Issue 可能烧 15 美元还没修对——长尾任务的成本方差极大。所以"每任务美元"作为产品定价指标,必须配一个熔断上限:单 Issue 成本超过阈值就自动降级到人工或换更便宜模型放弃。没有熔断的低价是幻觉,长尾会把你一整月的利润吃掉。

五、脚手架杠杆:100 行追平 72%

一个被反复验证的反常识结论:脚手架的杠杆远大于模型差价。OpenHands V1 在 SWE-bench Verified 上约 72%,而 mini-SWE-agent 用大约 100 行代码就追到 74%——差距远小于换一个更贵模型能带来的提升。换言之,决定一个自主智能体好不好用的,往往不是你接了哪家最贵模型,而是你的 Agent Loop、错误恢复、上下文压缩、工具调用这层脚手架写得好不好。

这条结论对中小团队是天大的好消息:你不必依赖闭源旗舰,用一个中端模型 + 精心设计的 100 行核心循环,就能追平台阶之上的玩家。它的商业含义也很清楚——真正的可复制资产是脚手架 know-how,不是模型调用权限。这也是为什么 Devin 选择闭源不提供独立复现工具,而 OpenHands / SWE-agent 走全开源路线:前者卖的是"你信我",后者卖的是"你能自己改"。对训练营产品,能交付"100 行可教学的核心循环"比交付"我们调了 GPT-5"有价值得多。

六、放弃率与续跑:OpenHands Index 的五维拆穿

2026 年 1 月 28 日 All-Hands AI 发布的 OpenHands Index,正面拆穿了 SWE-bench 单一分数的迷思。它把自主软件工程能力拆成五个真实维度(含 Issue 解决、多模态调试、迁移、运行环境操作等),覆盖 33+ 模型。结果发现:在 SWE-bench 上打平的模型,在真实多步任务上会严重分化——有的擅长一次定位但放弃率高,有的能硬扛长任务但经常"伪完成"(self-verification 假通过)。

其中最值得关注的两个衍生指标是放弃率(agent 主动放弃 vs 硬撑到超时)和续跑能力(崩溃后能否从断点恢复)。放弃率高的智能体看似"诚实",其实意味着你的任务队列里会堆积大量半成品;续跑能力差的智能体则会在长任务中途崩溃后从零重跑,把已经花掉的 token 全部浪费。这两个指标在传统榜单上完全不可见,却直接决定生产环境的体验。任何想认真做自主智能体产品的团队,都该把自家模型放上 OpenHands Index 跑一遍五维画像,而不是盯着 SWE-bench 一个数字自嗨。

七、成本方差:同一任务跑十次的账单抖动

自主智能体的成本有一个常被低估的特性:非确定性带来的账单方差。同一个 Issue、同一个模型、同一个脚手架,跑十次的成本可能从 0.3 美元到 12 美元不等——差别全在它第一次探索是否走对路。走对了,几步收敛,便宜;走错了,进死循环反复重试,token 烧穿。这种方差让"平均成本"在财务上几乎没有意义,因为决定你月度盈亏的是那几个最贵的长尾。

对付方差的工程手段有三层:第一是预算熔断,单任务 token 上限一到就强制降级或放弃;第二是多样性重试,第二次重试换个不同的探索路径(改 prompt、换工具顺序),避免在同一条死路上烧第二份钱;第三是早期失败检测,在前几步就识别出"它在绕圈子"并提前叫停。把这三层做扎实,能把成本方差的标准差压下一大截,让"每任务美元"从赌博变成可预算的固定成本项。这一节几乎是"自主智能体能不能赚钱"的命门。

八、企业切片设计:把两小时任务切成半小时

把前面七节收口成一个可落地的方法论:任务时长切片。既然 80% 可靠性墙卡在 ~1 小时量级,那么任何超过这个时长的任务都不该整体交给一个自主智能体——它会在墙外以指数级速度劣化。正确做法是把一个大任务切成多个落在 80% 地平线之内的子任务,每个子任务配独立的预算上限、独立的验证门、独立的失败重试配额。

flowchart TD
    A[企业级大任务<br/>如:2 小时功能开发] --> B[切片层:按 80% 地平线切]
    B --> S1[子任务 1<br/>≤30 分钟]
    B --> S2[子任务 2<br/>≤30 分钟]
    B --> S3[子任务 3<br/>≤30 分钟]
    S1 --> V1{验证门}
    S2 --> V2{验证门}
    S3 --> V3{验证门}
    V1 -->|通过| M2[廉价模型合并]
    V2 -->|通过| M2
    V3 -->|通过| M2
    V1 -->|失败| R1[预算熔断<br/>换昂贵模型重试]
    V2 -->|失败| R1
    V3 -->|失败| R1
    R1 --> V4{再次验证}
    V4 -->|通过| M2
    V4 -->|失败| H[降级人工]
    M2 --> Z[端到端交付]
    H --> Z

这套切片设计的妙处在于:它把"可靠性墙"从硬约束变成了可管理的工程参数。每个子任务独立结算、独立验证、独立熔断,单点失败不会污染全局;廉价模型跑掉大量简单切片,昂贵模型只在验证失败的少数切片上介入。最终端到端的成功率、成本、时长都变得可预测——这才是企业敢把自主智能体放进生产流水线的最低门槛。

可靠性墙与成本竞赛的完整图景

xychart-beta
    title "自主智能体时间地平线:50% 与 80% 的鸿沟"
    x-axis ["2019", "2020", "2021", "2022", "2023", "2024", "2025", "2026"]
    y-axis "人类专家等价时长(分钟, 对数感)" 1 --> 200
    line "50% 地平线(约每7月翻倍)" [0.2, 0.5, 1.5, 4, 8, 15, 30, 50]
    line "80% 地平线(可靠性墙)" [0.1, 0.2, 0.5, 1, 2, 8, 25, 45]

上图把本文的核心张力可视化:50% 曲线一路翻倍、看似乐观,但 80% 曲线(生产可用线)长期被压在更低位置——两条线之间的垂直距离,就是"Demo 能跑"和"生产敢用"之间的真实鸿沟。2026 年的进展是这条鸿沟在收窄,但远未闭合,这正是"切片设计"存在的全部理由。

推荐方案

场景一:预算敏感的 SaaS(AI 自动修 Issue 类产品)。 放弃榜单执念,建立"廉价模型兜底 + 昂贵模型攻坚"的分层编排,单 Issue 设硬预算熔断。底座优先 MiniMax M2.5 / Gemini 3 Flash 这类价格屠夫,配 OpenHands 或自研 100 行核心循环。盈利的关键不在分数,在成本方差控制。

场景二:追求可靠性的企业生产流水线。 以 80% 时间地平线为切片上限,把所有任务切成 ≤30 分钟子任务,每片配独立验证门与熔断。底座可选 Claude Opus 4.8(88.6%、35% 更少 token,长任务性价比改善明显)作为攻坚层。务必上 OpenHands Index 做五维画像,盯放弃率与续跑能力而非单一分数。

场景三:教学 / 训练营产品。 真正可交付的资产是脚手架 know-how。围绕"100 行核心 Agent Loop + 错误恢复 + 上下文压缩"设计课程,用开源 SWE-agent / OpenHands 做底座,让学员理解"为什么脚手架比模型重要"。这比教"我们调了某旗舰 API"有持久得多的变现价值。

通用铁律: 分数趋同的时代,选型只看两根轴——能连续自主多久才崩(时间地平线),以及每一次成功值多少钱(每任务美元 + 成本方差)。榜单已死,账单与可靠性才是新护城河。

参考来源

  1. Task-Completion Time Horizons of Frontier AI Models — METR — 时间地平线指标定义与 50% 翻倍曲线原始研究
  2. Measuring AI Ability to Complete Long Tasks — arXiv 2503.14499 — 2019-2025 每 7 个月翻倍的学术依据
  3. The AI Agent Inference Cost Race 2026 — AgentMarketCap — 六大模型 0.8 分内、十倍成本差分析
  4. SWE-bench Cost-Per-Run Rankings 2026 — AgentMarketCap — MiniMax M2.5 等价格屠夫模型的成本对比
  5. Introducing the OpenHands Index — All-Hands AI — 五维度真实任务评测,拆穿 SWE-bench 单分迷思
  6. AI Agent Reliability Horizons in 2026 — AgentMarketCap — 50 分钟天花板到 80% 可靠性墙的企业任务设计

本站(公众号「51学通信」/ 站长爱卫生,微信 gprshome201101)持续追踪 AI 智能体实战前沿,每日更新榜单拆解与选型实测。

[!tip] 51学通信知识星球 星主:爱卫生(微信:gprshome201101)——公众号「51学通信」创办者,19 年通信行业运维与讲师经验,著有《GPRS网络信令实例详解》《EPC原理与实践》《5G核心网原理与实践》三本纸质书(各大电商平台有售)。 星球定位:深耕 5G 核心网、IMS、NFV/AI、云原生等 ICT 领域,主打运维岗位与信令分析。 当前规模:5200 篇主题 / 990 个回答,198 元/年。 加入福利:加入星球后请加爱卫生微信,拉您进知识星球年度陪伴与答疑群——不限量回复您的各种问题,另有群内分享。 AI 加持:51学通信知识星球已作为 skill 接入 WorkBuddy,使用 deepseek-4-flash 在海量星球帖子中精准找贴、找视频、找 FAQ 和案例,做总结、找文档和 PPT 等场景全覆盖。

51学通信知识星球海报-扫码加入