首页 › ai-in-telecom › 运营商AI边缘推理平台四强实战拆解

运营商AI边缘推理平台全球四强商用实战拆解

从"搬运数据"到"搬运智能"——当大模型推理从云端下沉到基站边缘,全球四大运营商正用真金白银押注下一代网络的核心商业逻辑。


一、为什么运营商要做AI边缘推理?

2025年以来,一个不可逆的趋势正在加速:大模型推理正在从集中式云端向分布式边缘迁移。Gartner预测,到2028年超过80%的算力将用于推理而非训练,而其中近半数的推理需求将发生在网络边缘。

这背后的驱动力清晰而迫切:

第一,延迟即体验。 自动驾驶、工业质检、AR/VR等场景要求端到端延迟低于10ms,而云端推理的往返延迟动辄50-100ms,根本无法满足。NVIDIA 2026年度电信AI调查显示,超过65%的受访运营商正在投资边缘AI基础设施,其中延迟敏感型应用是首要驱动力。

第二,带宽即成本。 4K/8K视频流、海量IoT传感器数据全部回传云端,每TB传输成本高达50-100美元。在边缘完成推理后只传结果,可削减70%-90%的上行带宽压力。

第三,数据即合规。 GDPR、中国《数据安全法》等法规对数据出境和敏感信息处理提出了严格限制。边缘推理让数据"不出园区"、"不出基站",天然满足数据主权要求。

第四,AI-RAN让基站GPU成为新收入来源。 基站在非峰值时段(如凌晨)GPU利用率不足30%,将其空闲算力用于AI推理,是增量收入的零成本变现路径。

但问题同样尖锐:运营商不是云厂商,边缘环境功率受限、空间受限、运维复杂,大模型推理如何在基站/边缘数据中心真正落地?全球四大运营商正在用各自的实战给出答案。


二、系统架构:运营商AI边缘推理平台的通用范式

尽管各运营商路径不同,但其系统架构正在收敛为一个通用范式:

graph TB
    subgraph 终端层
        UE[终端设备<br/>手机/CPE/IoT/摄像头]
        AGV[工业AGV/机器人]
    end

    subgraph 边缘推理层
        MEC[MEC边缘平台]
        GPU[边缘GPU算力<br/>NVIDIA/自研AI芯片]
        MODEL[推理引擎<br/>量化/蒸馏模型]
        INC[INC网络计算节点]
    end

    subgraph AI-RAN层
        RAN[AI-RAN基站]
        SPLIT[波 form/功能切分]
        ORCH[AI工作负载编排器]
    end

    subgraph 云端中心
        CLOUD[中心云训练平台]
        OTA[模型OTA分发]
        MON[全局监控调度]
    end

    UE -->|低延迟推理请求| MEC
    AGV -->|实时AI决策| MEC
    MEC --> GPU
    GPU --> MODEL
    MEC --> INC
    RAN --> SPLIT
    SPLIT --> ORCH
    ORCH -->|空闲GPU调度| GPU
    CLOUD --> OTA
    OTA --> MODEL
    CLOUD --> MON
    MON --> ORCH

    style MEC fill:#e1f5fe
    style GPU fill:#fff3e0
    style ORCH fill:#e8f5e9
    style CLOUD fill:#fce4ec

架构核心思路:AI-RAN基站内置GPU算力,通过编排器在RAN工作负载和AI推理工作负载之间动态切换;MEC平台承接区域级推理任务;中心云负责模型训练和OTA分发。三者协同形成"端-边-云"推理闭环。


三、四强实战拆解

3.1 SoftBank:Telco AI Cloud——从通信运营商到AI基础设施运营商

战略定位:SoftBank在MWC 2026上发布了"Telco AI Cloud"愿景,明确宣布从"搬运数据的通信运营商"转型为"编排智能的AI基础设施运营商"。

技术架构:SoftBank的AI边缘推理平台由三层组成:

关键进展(2026年3月):SoftBank与Ericsson成功演示了基于AI-RAN的Physical AI应用。在演示中,SoftBank的实时处理技术利用移动边缘计算(MEC)能力,将AI推理直接部署在基站侧,实现了亚10ms的端到端推理延迟。

商业亮点:

维度 数据
投资规模 数千亿日元级AI基础设施投资
边缘节点 计划在2027年前部署5000+个AI-RAN边缘节点
目标场景 自动驾驶、智慧工厂、Physical AI
合作伙伴 NVIDIA、Ericsson、Microsoft
预期收入 2028年边缘AI服务收入目标1000亿日元

差异化:SoftBank是唯一一个将AI-RAN+MEC+GPU Cloud整合为统一"Telco AI Cloud"商业产品的运营商。其核心创新在于将基站的空闲GPU算力"商品化",通过软件编排器动态调度,实现RAN功能和AI推理在同一硬件上的时分复用。


3.2 NTT DOCOMO:INC Edge——网络内计算的边缘推理新范式

战略定位:NTT DOCOMO走的不是"在基站上加GPU"的路线,而是重新定义网络本身——让网络成为AI推理的计算平台。

核心技术——INC(In-Network Computing)Edge:DOCOMO在5G核心网中开发了一个名为"INC Edge"的功能实体,它连接核心网UPF与边缘GPU资源池,实现网络数据面与计算面的融合。

2026年3月的关键突破:DOCOMO与NTT联合成功演示了利用In-Network Computing的远程GPU资源实现低延迟AI视频分析。具体参数:

性能指标 实测数据
AI视频分析延迟 <8ms(端到端)
视频分辨率 4K实时处理
GPU资源调度方式 通过IOWN网络按需调度远程GPU
推理精度 与本地GPU推理精度相当(<0.1%差异)
场景 智慧交通视频实时分析

NTT自研AI推理芯片:2025年4月,NTT发布了自研AI推理专用LSI芯片,功耗低于20W,可实时处理4K视频AI推理。这颗芯片是业界首个面向运营商边缘场景定制的AI推理ASIC:

商业路径:DOCOMO计划将INC Edge作为5G-Advanced网络的标准能力向企业客户开放,目标在2027年前实现1000个边缘节点的INC Edge覆盖。


3.3 T-Mobile US:Physical AI on AI-RAN——全球首个运营商AI-RAN商用试点

战略定位:T-Mobile依托其全美最大的5G SA网络,与NVIDIA、Nokia合作,成为全球首个开展AI-RAN商用级试点的运营商。

2026年3月的里程碑:T-Mobile在AI-RAN Innovation Center(西雅图)与NVIDIA和Nokia完成了GPU加速RAN功能测试,并在同一GPU上同时运行AI推理工作负载。

具体部署方案:

T-Mobile AI-RAN边缘推理架构:

[基站侧]
Nokia anyRAN基站 + NVIDIA RTX PRO 6000 Blackwell GPU服务器
├── RAN工作负载(vRAN/Layer 1-3处理)
├── AI推理工作负载(动态编排)
│   ├── Physical AI:自动驾驶感知
│   ├── 视频分析:安防监控
│   └── 生成式AI:本地化内容生成
└── NVIDIA Aerial SDK管理资源切分

[编排层]
NVIDIA Aerial RAN Optimizer
├── 实时监控RAN负载
├── 动态分配GPU算力给RAN/AI
└── SLA保障:RAN优先,AI利用空闲算力

试点数据:

维度 数据
GPU平台 NVIDIA RTX PRO 6000 Blackwell Server Edition
RAN + AI并发 成功在同一GPU上同时运行vRAN和3个AI推理任务
AI推理延迟 Physical AI场景 <15ms
GPU利用率提升 从RAN单负载的35%提升到RAN+AI混合的85%
商用时间表 2026 Q4外场试验,2027 H1商用系统
覆盖范围 首批覆盖10个城市的重点区域

商业逻辑:T-Mobile不直接卖边缘AI算力,而是将边缘推理能力打包进其5G Advanced企业服务套餐。企业客户按需购买"5G网络+边缘AI推理"一体化服务,T-Mobile收取服务订阅费而非裸算力租赁费。


3.4 Deutsche Telekom:10亿欧元AI工厂——欧洲最大的边缘AI基础设施

战略定位:Deutsche Telekom选择了一条更"重资产"的路径——与NVIDIA和SAP合作,在慕尼黑建设欧洲最大的AI工厂。

项目概况:

维度 数据
总投资 10亿欧元(约10.9亿美元)
地点 德国慕尼黑
GPU规模 超过10000个NVIDIA GPU
启用时间 2026年Q1
合作方 NVIDIA(算力)、SAP(企业应用)
目标市场 欧洲工业企业、公共部门

差异化定位:与另外三家运营商不同,Deutsche Telekom的AI工厂不是"基站边缘推理",而是"区域级边缘AI数据中心"。其核心服务是向欧洲工业客户提供主权AI算力——数据完全留在德国境内处理,满足欧盟GDPR和AI法案要求。

服务能力:

  1. 主权AI云:所有数据处理在德国境内完成,满足数据主权要求
  2. 工业AI推理:为制造、汽车、化工等行业提供低延迟AI推理服务
  3. SAP AI集成:与SAP企业软件深度集成,提供开箱即用的AI增强ERP/SCM
  4. 分布式边缘节点:以慕尼黑为核心,向全德300+边缘节点分发推理任务

商业预期:Deutsche Telekom预计该AI工厂将在2027年实现盈亏平衡,2028年AI云服务收入突破5亿欧元。同时,这一项目正在成为Deutsche Telekom向"欧洲AI基础设施领导者"转型的核心支柱。


四、四强对比分析

4.1 技术路线对比

维度 SoftBank NTT DOCOMO T-Mobile US Deutsche Telekom
边缘位置 基站级(AI-RAN MEC) 核心网边缘(INC Edge) 基站级(AI-RAN) 区域数据中心
推理芯片 NVIDIA GPU NTT自研LSI + GPU NVIDIA GPU NVIDIA GPU
核心创新 RAN+AI工作负载统一编排 网络内计算(INC) Physical AI on AI-RAN 主权AI云
延迟目标 <10ms <8ms <15ms <30ms
合作模式 NVIDIA+Ericsson NTT集团内部 NVIDIA+Nokia NVIDIA+SAP
商用成熟度 演示阶段 演示阶段 试点阶段 已商用

4.2 商业模式对比

维度 SoftBank NTT DOCOMO T-Mobile US Deutsche Telekom
收入模式 AI基础设施即服务 5G-A增值能力 5G+AI一体化订阅 主权AI云租赁
目标客户 企业/政府 企业/行业 企业(Physical AI) 工业企业/公共部门
差异化 首个"Telco AI Cloud"产品 自研芯片/超低功耗 美国最大5G SA+AI-RAN 欧洲数据主权标杆
投资规模 数千亿日元 未公开 数亿美元级 10亿欧元
盈亏平衡 2028年预期 2028年预期 2027年预期 2027年预期

4.3 关键性能指标对比

性能指标 SoftBank NTT DOCOMO T-Mobile US Deutsche Telekom
推理延迟 <10ms <8ms <15ms <30ms
边缘节点数 5000+(2027目标) 1000+(2027目标) 10城试点→全国 300+(德国)
GPU利用率 目标85%+ N/A(自研芯片) 85%实测 N/A
功耗效率 通用GPU 20W芯片处理4K 通用GPU 通用GPU

五、关键洞察与趋势判断

洞察1:运营商边缘推理正在分化为两条路线

路线A:基站级AI-RAN推理(SoftBank、T-Mobile)——利用AI-RAN基站的GPU空闲算力,在基站侧直接提供AI推理服务。优势是超低延迟和零新增基础设施成本,挑战是基站环境的功率和空间限制。

路线B:区域级边缘AI数据中心(Deutsche Telekom)——建设分布式AI数据中心网络,通过低延迟网络连接提供AI推理服务。优势是算力规模大、场景适应性强,挑战是投资大、回收周期长。

路线C:网络内计算(NTT DOCOMO)——不新增GPU,而是让网络本身成为计算平台。这是最具颠覆性的路线,但技术成熟度最低。

洞察2:自研AI芯片成为日本运营商的差异化选择

NTT DOCOMO选择自研20W级AI推理芯片,而非使用NVIDIA GPU。这一选择的背后是日本运营商对供应链自主可控的深层需求,以及对基站功耗极度敏感的现实约束。如果NTT的芯片能在2027年如期量产,将为全球运营商提供一种新的技术选择。

洞察3:NVIDIA正在成为运营商AI基础设施的"Intel Inside"

四个案例中,三个使用NVIDIA GPU平台。NVIDIA通过Aerial SDK和AI-RAN参考架构,正在确立其在运营商AI基础设施中的核心地位。2025年10月,NVIDIA向Nokia投资10亿美元推进AI-RAN,这表明NVIDIA正在将运营商市场视为继数据中心之后的第二增长曲线。

洞察4:数据主权正在成为运营商边缘AI的最大卖点

Deutsche Telekom的10亿欧元AI工厂,核心卖点不是性能,而是"数据留在德国"。在GDPR和EU AI Act的约束下,欧洲企业对AI数据处理的合规需求极其强烈,运营商的本地化基础设施天然具备这一优势。这在中国市场同样适用——《数据安全法》要求敏感数据本地处理,运营商的边缘AI平台天然满足这一要求。


六、对中国运营商的启示

  1. 中国移动的"九天"大模型已发布3.0版本,累计沉淀450项AI能力,但在边缘推理的商用部署上仍以POC为主。建议参考SoftBank的Telco AI Cloud模式,将"九天"模型的推理能力部署到现有的MEC节点上,先在智慧工厂、视频分析等垂直场景跑通商业模式。

  2. 中国电信的TeleAI团队提出的"AI Flow"端-边-云协同框架,与NTT DOCOMO的INC Edge理念相似。建议加快"星辰"大模型的边缘蒸馏版本开发,在5G-A网络中嵌入推理能力,形成与网络切片捆绑的增值服务。

  3. 中国联通可借鉴Deutsche Telekom的主权AI云模式,利用"元景"大模型+联通云,面向政企客户推出"数据不出省"的边缘AI推理服务,在政务、金融等对数据合规要求极高的场景建立差异化竞争力。


参考来源

  1. NVIDIA, T-Mobile and Partners Integrate Physical AI Applications on AI-RAN-Ready Infrastructure — T-Mobile官方新闻稿,详述AI-RAN商用试点细节
  2. DOCOMO and NTT Successfully Demonstrate Low-Latency AI Video Analytics Using In-Network Computing — DOCOMO官方发布,INC Edge技术演示结果
  3. SoftBank Corp. Evolves Telecom Infrastructure for the AI Era — SoftBank Telco AI Cloud愿景官方说明
  4. Deutsche Telekom, Nvidia to launch $1.2 billion AI cloud for industrial applications — 路透社报道Deutsche Telekom AI工厂
  5. NVIDIA and Nokia Advance AI-RAN with T-Mobile, Indosat and SoftBank Trials — Nokia与多运营商AI-RAN试验进展汇总
  6. 大模型与边缘智算融合发展白皮书(2025年) — 中国移动2025年发布,边缘智算技术路径
  7. NTT Announces AI Inference Chip for Real-Time 4K Video Processing — NTT自研AI推理芯片技术规格

本文由「51学通信」技术团队出品。51学通信由通信行业18年老兵爱卫生(微信ID: gprshome201101)维护,聚焦5G/6G核心网、3GPP标准解读、通信前沿技术深度分析。 出版作品有《5G核心网原理与实践》《IMS原理与实践》等4本通信专业书籍。知识星球「51学通信」提供深度技术答疑和行业洞察。

[!tip] 51学通信知识星球 星主:爱卫生(微信:gprshome201101)——公众号「51学通信」创办者,19 年通信行业运维与讲师经验,著有《GPRS网络信令实例详解》《EPC原理与实践》《5G核心网原理与实践》三本纸质书(各大电商平台有售)。 星球定位:深耕 5G 核心网、IMS、NFV/AI、云原生等 ICT 领域,主打运维岗位与信令分析。 当前规模:5200 篇主题 / 990 个回答,198 元/年。 加入福利:加入星球后请加爱卫生微信,拉您进知识星球年度陪伴与答疑群——不限量回复您的各种问题,另有群内分享。 AI 加持:51学通信知识星球已作为 skill 接入 WorkBuddy,使用 deepseek-4-flash 在海量星球帖子中精准找贴、找视频、找 FAQ 和案例,做总结、找文档和 PPT 等场景全覆盖。

51学通信知识星球海报-扫码加入