如果你还在用某个模型厂商的「官方 API」跑开源模型,我有个坏消息要告诉你:你大概率在为一个免费的权重付三倍以上的钱。
这是 2026 年海外开发者圈子里一个公开的秘密,但中文世界几乎没人系统讲过——Llama 4、DeepSeek-V4、Qwen 这些开源模型的权重是免费下载的,任何人都能部署。这意味着「谁来跑这个模型」彻底变成了一门竞争性生意。于是同一个 DeepSeek-V3.2,在不同「推理供应商」(inference provider)之间的价格能差出 3 到 10 倍;同一个 Llama 3.3 70B,换一个 endpoint(接口地址),账单就能砍掉一大半,而且还可能更快。
今天这篇就把这条「推理供应商套利」(inference provider arbitrage)的路径彻底拆开,告诉你:海外批发市场的真实价目长什么样、怎么用 OpenRouter 当统一入口、以及换供应商时有哪些坑。
很多人对「开源模型」有个误解:以为「开源 = 便宜」。权重确实免费,但模型本身不会自己跑——它需要 GPU 推理。而推理是有成本的:显卡折旧、电费、带宽、运维。
问题在于,这个成本在不同卖家手里天差地别。打个比方:同样一袋面粉(权重),你可以去超市买成品面包(官方 API,含品牌溢价),可以去面包批发市场买(DeepInfra/Together,走量薄利),也可以去全自动面包机店买现烤的(Groq/Cerebras,专用芯片,又快又便宜)。面粉一模一样,价格能差几倍。
这就是 2026 年推理市场的真实结构。整个赛道火到什么程度?专用芯片推理厂商 Cerebras 和 Groq 都在疯狂扩张,Together AI 2025 年刚完成 1.07 亿美元 B 轮融资专门做「推理云」——资本押注的就是「未来大家不再为模型付费,而是为推理算力付费,且会拼命比价」。
光说没用,我直接从供应商定价页抓了数据。下面是 DeepInfra(deepinfra.com/pricing)2026 年 6 月的最新挂单价,单位都是「每百万 token」:
| 模型 | 输入价 | 缓存命中价 | 输出价 |
|---|---|---|---|
| DeepSeek-V4-Pro | $1.30 | $0.10 | $2.60 |
| DeepSeek-V4-Flash | $0.10 | $0.02 | $0.20 |
| DeepSeek-V3.2 | $0.26 | $0.13 | $0.38 |
| DeepSeek-V3.1-Terminus | $0.27 | $0.13 | $0.95 |
注意两个信息差点:第一,DeepSeek-V4-Flash 输入只要 $0.10——这是一个旗舰级模型的批发价;第二,那列「缓存命中价」(cached),命中后只要正常价的 1/5 到 1/13,这个后面讲。
再来看 Llama 3.3 70B Instruct 这个完全相同的模型,在不同供应商那里卖多少钱(数据来自 hostfleet.net 的横向对比):
| 供应商 | 价格(美元/百万token 口径) |
|---|---|
| Together AI | $0.88 |
| Fireworks AI | $0.90 |
| Groq | $0.59 - $0.79 |
同一个 Llama,Groq 比 Fireworks 便宜约 35%。 而如果你绕开这些供应商,直接用某些云厂商(AWS Bedrock、Azure OpenAI、Google Vertex)托管的同款开源模型,往往会再叠加一层「云平台托管费」,单价更高。这就是「零售税」的本质。
海外推理市场已经分化成四个清晰的层级,越往下越便宜、越往专用芯片走越快:
flowchart TD
A["同一个开源模型<br/>Llama4 / DeepSeek-V4 / Qwen"] --> B["第1档:官方API<br/>品牌价 + 完整功能<br/>最贵"]
A --> C["第2档:云厂商托管<br/>Bedrock / Vertex / Azure<br/>叠加托管费"]
A --> D["第3档:批发推理商<br/>DeepInfra / Together / Fireworks<br/>走量薄利,便宜30%-70%"]
A --> E["第4档:专用芯片推理<br/>Groq / Cerebras<br/>又快又便宜"]
B -.->|"换接口省一档"| D
C -.->|"换接口省一档"| D
D -.->|"追求速度再换"| E
style D fill:#d4edda,stroke:#28a745
style E fill:#cce5ff,stroke:#007bff
价格差只是信息差的一半,另一半是速度差,而速度直接影响你的隐性成本。
GPU 推理一个 70B 模型,输出速度通常在 30-80 tokens/秒。而 Groq 和 Cerebras 这种专用芯片,能把同样的 Llama 跑到 数百到上千 tokens/秒——快出一个数量级。这意味着什么?
所以「推理供应商套利」不只是单价游戏,是「单价 × 速度 × 并发」的综合账。有时候选单价稍贵但快 10 倍的供应商,整体 ROI 反而更高。
flowchart LR
S1["Step1<br/>锁死一个模型<br/>如 DeepSeek-V3.2"] --> S2["Step2<br/>上对比站查最低价<br/>hostfleet / pricepertoken"]
S2 --> S3["Step3<br/>用OpenRouter统一入口<br/>或直连供应商"]
S3 --> S4{"需要极速?"}
S4 -->|是| S5["Groq / Cerebras<br/>专用芯片"]
S4 -->|否| S6["DeepInfra / Together<br/>批发价"]
style S3 fill:#fff3cd,stroke:#ffc107
第 1 步:先锁定模型,别在选模型上浪费钱。 决定好你到底要 DeepSeek-V3.2 还是 Llama 3.3 70B,固定下来再去比供应商。
第 2 步:上对比站查实时最低价。 这一步是国内用户最缺的——海外已经有一批专门做「逐 token 比价」的网站:
第 3 步:选接入方式。 两条路:
| 维度 | 大多数人的认知 | 真相(信息差) |
|---|---|---|
| 开源模型价格 | 「开源=便宜,随便用官方就行」 | 同一模型在不同供应商间差 3-10 倍 |
| 切换成本 | 「换供应商要重写代码」 | OpenAI 兼容格式,改个 base_url 就行 |
| 缓存价 | 「没有缓存这回事」 | 批发商有 cached 价,命中后只要 1/5 到 1/13 |
| 速度 | 「都差不多」 | 专用芯片比 GPU 快一个数量级,Agent 受益最大 |
| 接入入口 | 「只能一个个供应商注册」 | OpenRouter 一个 key 接几百模型 |
本文由「51学通信」技术团队出品。51学通信由通信行业18年老兵爱卫生(微信ID: gprshome201101)维护。 聚焦5G/6G核心网、3GPP标准、AI工具实战。知识星球「51学通信」提供深度技术答疑和行业洞察。
[!tip] 51学通信知识星球 星主:爱卫生(微信:gprshome201101)——公众号「51学通信」创办者,19 年通信行业运维与讲师经验,著有《GPRS网络信令实例详解》《EPC原理与实践》《5G核心网原理与实践》三本纸质书(各大电商平台有售)。 星球定位:深耕 5G 核心网、IMS、NFV/AI、云原生等 ICT 领域,主打运维岗位与信令分析。 当前规模:5200 篇主题 / 990 个回答,198 元/年。 加入福利:加入星球后请加爱卫生微信,拉您进知识星球年度陪伴与答疑群——不限量回复您的各种问题,另有群内分享。 AI 加持:51学通信知识星球已作为 skill 接入 WorkBuddy,使用 deepseek-4-flash 在海量星球帖子中精准找贴、找视频、找 FAQ 和案例,做总结、找文档和 PPT 等场景全覆盖。
