# 同分差十倍：自主智能体账单战 ## 概述 2026 年中，自主编程智能体的赛道出现了一个反常识的拐点：在 SWE-bench Verified 榜单上，六大前沿模型挤在 0.8 个百分点的窄缝里——Claude Opus 4.6 拿到 80.8%、Gemini 3.1 Pro 拿到 80.6%、MiniMax M2.5 拿到 80.2%。当分数趋同，护城河就不再是分数本身，而是"解决同一个 GitHub Issue 要烧多少钱"。本文以 METR 的时间地平线曲线与 SWE-bench 的成本竞赛为双轴，拆解自主智能体在 2026 年真正决定胜负的两件事：能连续自主多久才崩，以及每一次成功值多少美元。结论很硬——榜单已死，账单与可靠性才是新护城河。 ## 双轴对比：自主时长 × 每任务美元 | 模型 / 智能体 | SWE-bench Verified | 每百万 Token 价（输入/输出，美元） | 估计每解决一 Issue 成本 | 50% 时间地平线 | 80% 时间地平线 | |---|---|---|---|---|---| | Claude Opus 4.8 | 88.6% | 5 / 25 | 高位 | 较长 | ~1 小时量级 | | Claude Opus 4.6 | 80.8% | ~5 / 25 | 高位 | 较长 | ~1 小时量级 | | Gemini 3.1 Pro | 80.6% | 中位 | 中位 | 较长 | ~1 小时量级 | | MiniMax M2.5 | 80.2% | ~0.28 起 | 极低（价格屠夫） | 中等 | 偏短 | | Fable 5（脚手架） | ~95% | 自托管为主 | 取决于算力 | 较长 | 较长 | | OpenHands V1 | ~72% | 取决于底座模型 | 低（开源） | 取决于底座 | 取决于底座 | | Mini-SWE-agent（100 行） | ~74% | 取决于底座模型 | 极低 | 取决于底座 | 取决于底座 | | Devin（Cognition） | 自报，早期 13.86% | 订阅制 | 固定席位 | 闭源不公开 | 闭源不公开 | > 注：时间地平线沿用 METR 定义——以"人类专家完成同一任务所需时长"衡量智能体能可靠自主多久；50% 地平线 = 成功率 50% 对应的任务时长，80% 地平线 = 成功率 80% 对应的任务时长。闭源产品（Devin）不提供独立复现工具，数据来自厂商自报。 ## 深度分析 ### 一、METR 时长地平线：50% 翻倍曲线的真相 METR（Model Evaluation & Threat Research）花了数年时间只盯一个被大多数团队忽略的轴：**任务时长本身就是一条可靠性轴**。它的核心指标叫"时间地平线"——以人类专家完成同一任务所需的真实工时为刻度，看智能体能撑到多长的任务还保持高成功率。结论是 2019 到 2025 年间，50% 时间地平线大约**每 7 个月翻一倍**：2019 年的模型只能稳定完成几秒钟的微任务，到 2025 年已经能稳定处理几十分钟量级的真实工程任务。 这条曲线之所以重要，是因为它把"模型变强了"翻译成了对工程团队有用的语言——不是"分数高了 2 分"，而是"你敢放手让它自己干多久"。对训练营和产品化而言，这是真正可定价的指标：一个 50% 地平线只有 5 分钟的智能体只能做单轮问答包装；一个到 30 分钟的智能体已经能承包"修一个中等 Issue"的完整闭环；一个到 2 小时的智能体才够格谈"替你跑一个独立功能模块"。翻倍曲线直接决定了你今天设计的产品边界，半年后会被免费送出去。 ### 二、可靠性墙：80% 为何远低于 50% 翻倍曲线只讲了乐观的一半。把成功率门槛从 50% 提到 80%（企业敢上生产的最低线），时间地平线会**断崖式缩短**——前沿智能体在 ~1 小时量级的任务上才能维持 80% 成功率，而它们的 50% 地平线早就突破到更长。这条 50% 与 80% 之间的"可靠性差"，才是企业团队最容易踩的坑：Demo 里用 50% 成功率的精彩案例打动决策者，真上生产要 80% 时才发现，能可靠交给它的任务时长可能只有 Demo 的三分之一。 这道墙的物理来源很清楚——长任务里错误会**复利累积**。一个每步 95% 可靠的循环，跑 20 步只剩 36% 端到端成功率；跑到第 47 步还自我感觉良好的智能体，往往不是因为能力强，而是因为它在错误的轨道上越走越远。所以"可靠性墙"不是模型参数问题，而是**任务切片问题**：与其祈祷模型在两小时任务上不掉链子，不如把两小时任务切成四个半小时子任务，每个都落在 80% 地平线之内。这是 2026 年企业任务设计的核心方法论，也是后面"切片设计"一节要落地的点。 ### 三、SWE-bench 同分不同价：十倍账单差 榜单趋同这件事本身比谁第一更值得看。六大前沿模型在 0.8 个百分点内挤成一团，意味着**"分数领先"作为护城河已经基本失效**——你今天发布 81%，对手下个月就 81.2%，差距小于噪声。真正拉开差距的是钱：据公开成本竞赛分析，这些"同分"模型在"每解决一个 GitHub Issue"上的花费差距可达 **10 倍量级**。MiniMax M2.5 以约 0.28 美元/百万 token 的输入价把同分段的价格打到地板，而头部闭源模型按 5/25 美元定价，跑同样的脚手架、同样的失败重试，账单可能差出一个数量级。 这对选型的含义非常直接：在分数趋同的世界里，**先用二线廉价模型跑掉 80% 的简单 Issue，只把高难度的留给昂贵模型**，是性价比最高的编排策略。盲目追求榜单第一、全量用最贵模型，等于在每张账单上多付十倍税。训练营产品如果想做"AI 自动修 Issue"的 SaaS，模型的混合分层设计直接决定你能不能盈利。 ### 四、每任务美元：从 20 美元到 0.3 美元的塌方 把"每解决一 Issue"的成本拉一条时间轴，趋势更触目惊心。早期 SWE-bench 智能体解决一个真实 Issue 动辄花 10 到 20 美元甚至更多——大量 token 烧在重复探索、错误重试、上下文反复灌水上。到 2026 年中，得益于 token 单价下跌、脚手架成熟、以及"先廉价后昂贵"的分层编排，单 Issue 成本已经能压到不足 1 美元，个别价格屠夫模型配合精简脚手架甚至逼近 0.3 美元量级。这是不到两年内**一到两个数量级的成本塌方**。 但这里藏着一个陷阱：低价是**平均值**，不是**最坏情况**。一个平均 0.5 美元的智能体，遇到一个特别缠手的 Issue 可能烧 15 美元还没修对——长尾任务的成本方差极大。所以"每任务美元"作为产品定价指标，必须配一个熔断上限：单 Issue 成本超过阈值就自动降级到人工或换更便宜模型放弃。没有熔断的低价是幻觉，长尾会把你一整月的利润吃掉。 ### 五、脚手架杠杆：100 行追平 72% 一个被反复验证的反常识结论：**脚手架的杠杆远大于模型差价**。OpenHands V1 在 SWE-bench Verified 上约 72%，而 mini-SWE-agent 用大约 100 行代码就追到 74%——差距远小于换一个更贵模型能带来的提升。换言之，决定一个自主智能体好不好用的，往往不是你接了哪家最贵模型，而是你的 Agent Loop、错误恢复、上下文压缩、工具调用这层脚手架写得好不好。 这条结论对中小团队是天大的好消息：你不必依赖闭源旗舰，用一个中端模型 + 精心设计的 100 行核心循环，就能追平台阶之上的玩家。它的商业含义也很清楚——**真正的可复制资产是脚手架 know-how，不是模型调用权限**。这也是为什么 Devin 选择闭源不提供独立复现工具，而 OpenHands / SWE-agent 走全开源路线：前者卖的是"你信我"，后者卖的是"你能自己改"。对训练营产品，能交付"100 行可教学的核心循环"比交付"我们调了 GPT-5"有价值得多。 ### 六、放弃率与续跑：OpenHands Index 的五维拆穿 2026 年 1 月 28 日 All-Hands AI 发布的 OpenHands Index，正面拆穿了 SWE-bench 单一分数的迷思。它把自主软件工程能力拆成五个真实维度（含 Issue 解决、多模态调试、迁移、运行环境操作等），覆盖 33+ 模型。结果发现：**在 SWE-bench 上打平的模型，在真实多步任务上会严重分化**——有的擅长一次定位但放弃率高，有的能硬扛长任务但经常"伪完成"（self-verification 假通过）。 其中最值得关注的两个衍生指标是**放弃率**（agent 主动放弃 vs 硬撑到超时）和**续跑能力**（崩溃后能否从断点恢复）。放弃率高的智能体看似"诚实"，其实意味着你的任务队列里会堆积大量半成品；续跑能力差的智能体则会在长任务中途崩溃后从零重跑，把已经花掉的 token 全部浪费。这两个指标在传统榜单上完全不可见，却直接决定生产环境的体验。任何想认真做自主智能体产品的团队，都该把自家模型放上 OpenHands Index 跑一遍五维画像，而不是盯着 SWE-bench 一个数字自嗨。 ### 七、成本方差：同一任务跑十次的账单抖动 自主智能体的成本有一个常被低估的特性：**非确定性带来的账单方差**。同一个 Issue、同一个模型、同一个脚手架，跑十次的成本可能从 0.3 美元到 12 美元不等——差别全在它第一次探索是否走对路。走对了，几步收敛，便宜；走错了，进死循环反复重试，token 烧穿。这种方差让"平均成本"在财务上几乎没有意义，因为决定你月度盈亏的是那几个最贵的长尾。 对付方差的工程手段有三层：第一是**预算熔断**，单任务 token 上限一到就强制降级或放弃；第二是**多样性重试**，第二次重试换个不同的探索路径（改 prompt、换工具顺序），避免在同一条死路上烧第二份钱；第三是**早期失败检测**，在前几步就识别出"它在绕圈子"并提前叫停。把这三层做扎实，能把成本方差的标准差压下一大截，让"每任务美元"从赌博变成可预算的固定成本项。这一节几乎是"自主智能体能不能赚钱"的命门。 ### 八、企业切片设计：把两小时任务切成半小时 把前面七节收口成一个可落地的方法论：**任务时长切片**。既然 80% 可靠性墙卡在 ~1 小时量级，那么任何超过这个时长的任务都不该整体交给一个自主智能体——它会在墙外以指数级速度劣化。正确做法是把一个大任务切成多个落在 80% 地平线之内的子任务，每个子任务配独立的预算上限、独立的验证门、独立的失败重试配额。 ```mermaid flowchart TD A[企业级大任务
如:2 小时功能开发] --> B[切片层:按 80% 地平线切] B --> S1[子任务 1
≤30 分钟] B --> S2[子任务 2
≤30 分钟] B --> S3[子任务 3
≤30 分钟] S1 --> V1{验证门} S2 --> V2{验证门} S3 --> V3{验证门} V1 -->|通过| M2[廉价模型合并] V2 -->|通过| M2 V3 -->|通过| M2 V1 -->|失败| R1[预算熔断
换昂贵模型重试] V2 -->|失败| R1 V3 -->|失败| R1 R1 --> V4{再次验证} V4 -->|通过| M2 V4 -->|失败| H[降级人工] M2 --> Z[端到端交付] H --> Z ``` 这套切片设计的妙处在于：它把"可靠性墙"从硬约束变成了可管理的工程参数。每个子任务独立结算、独立验证、独立熔断，单点失败不会污染全局；廉价模型跑掉大量简单切片，昂贵模型只在验证失败的少数切片上介入。最终端到端的成功率、成本、时长都变得可预测——这才是企业敢把自主智能体放进生产流水线的最低门槛。 ## 可靠性墙与成本竞赛的完整图景 ```mermaid xychart-beta title "自主智能体时间地平线:50% 与 80% 的鸿沟" x-axis ["2019", "2020", "2021", "2022", "2023", "2024", "2025", "2026"] y-axis "人类专家等价时长(分钟, 对数感)" 1 --> 200 line "50% 地平线(约每7月翻倍)" [0.2, 0.5, 1.5, 4, 8, 15, 30, 50] line "80% 地平线(可靠性墙)" [0.1, 0.2, 0.5, 1, 2, 8, 25, 45] ``` 上图把本文的核心张力可视化：50% 曲线一路翻倍、看似乐观，但 80% 曲线（生产可用线）长期被压在更低位置——两条线之间的垂直距离，就是"Demo 能跑"和"生产敢用"之间的真实鸿沟。2026 年的进展是这条鸿沟在收窄，但远未闭合，这正是"切片设计"存在的全部理由。 ## 推荐方案 **场景一：预算敏感的 SaaS（AI 自动修 Issue 类产品）。** 放弃榜单执念，建立"廉价模型兜底 + 昂贵模型攻坚"的分层编排，单 Issue 设硬预算熔断。底座优先 MiniMax M2.5 / Gemini 3 Flash 这类价格屠夫，配 OpenHands 或自研 100 行核心循环。盈利的关键不在分数，在成本方差控制。 **场景二：追求可靠性的企业生产流水线。** 以 80% 时间地平线为切片上限，把所有任务切成 ≤30 分钟子任务，每片配独立验证门与熔断。底座可选 Claude Opus 4.8（88.6%、35% 更少 token，长任务性价比改善明显）作为攻坚层。务必上 OpenHands Index 做五维画像，盯放弃率与续跑能力而非单一分数。 **场景三：教学 / 训练营产品。** 真正可交付的资产是脚手架 know-how。围绕"100 行核心 Agent Loop + 错误恢复 + 上下文压缩"设计课程，用开源 SWE-agent / OpenHands 做底座，让学员理解"为什么脚手架比模型重要"。这比教"我们调了某旗舰 API"有持久得多的变现价值。 **通用铁律：** 分数趋同的时代，选型只看两根轴——能连续自主多久才崩（时间地平线），以及每一次成功值多少钱（每任务美元 + 成本方差）。榜单已死，账单与可靠性才是新护城河。 ## 参考来源 1. [Task-Completion Time Horizons of Frontier AI Models — METR](https://metr.org/time-horizons/) — 时间地平线指标定义与 50% 翻倍曲线原始研究 2. [Measuring AI Ability to Complete Long Tasks — arXiv 2503.14499](https://arxiv.org/html/2503.14499v1) — 2019-2025 每 7 个月翻倍的学术依据 3. [The AI Agent Inference Cost Race 2026 — AgentMarketCap](https://agentmarketcap.ai/blog/2026/04/06/ai-agent-inference-cost-race-2026-swe-bench-token-efficiency) — 六大模型 0.8 分内、十倍成本差分析 4. [SWE-bench Cost-Per-Run Rankings 2026 — AgentMarketCap](https://agentmarketcap.ai/blog/2026/04/07/swe-bench-cost-per-run-rankings-2026-efficiency-gap) — MiniMax M2.5 等价格屠夫模型的成本对比 5. [Introducing the OpenHands Index — All-Hands AI](https://www.openhands.dev/blog/openhands-index) — 五维度真实任务评测，拆穿 SWE-bench 单分迷思 6. [AI Agent Reliability Horizons in 2026 — AgentMarketCap](https://agentmarketcap.ai/blog/2026/04/24/metr-50-minute-agent-reliability-horizon-enterprise-task-design) — 50 分钟天花板到 80% 可靠性墙的企业任务设计 --- *本站（公众号「51学通信」/ 站长爱卫生，微信 gprshome201101）持续追踪 AI 智能体实战前沿，每日更新榜单拆解与选型实测。* > [!tip] 51学通信知识星球 > **星主：爱卫生**（微信：gprshome201101）——公众号「51学通信」创办者，19 年通信行业运维与讲师经验，著有《GPRS网络信令实例详解》《EPC原理与实践》《5G核心网原理与实践》三本纸质书（各大电商平台有售）。 > **星球定位**：深耕 5G 核心网、IMS、NFV/AI、云原生等 ICT 领域，主打运维岗位与信令分析。 > **当前规模**：5200 篇主题 / 990 个回答，198 元/年。 > **加入福利**：加入星球后请加爱卫生微信，拉您进知识星球年度陪伴与答疑群——不限量回复您的各种问题，另有群内分享。 > **AI 加持**：51学通信知识星球已作为 skill 接入 WorkBuddy，使用 deepseek-4-flash 在海量星球帖子中精准找贴、找视频、找 FAQ 和案例，做总结、找文档和 PPT 等场景全覆盖。