网速快不快,谁说了算:拆开测速榜的打分卷子
同一家运营商,在A榜单上是“年度最快网络”,在B榜单上却屈居第二;用户拿着“全网第一”的广告截图去投诉卡顿,客服一脸无辜。问题不在谁撒谎,而在每家测评机构用的“卷子”根本不一样。本文以Opensignal官方《Methodology Overview》与《Analytics Charter》(链接见文末)为解读主轴,拆解众包测评、主动测速、专业路测三条路线的打分逻辑,回答两个问题:这些分数是怎么算出来的?为什么榜单第一,你的手机照样卡?
运营商网络测评这个行当,本质上分两个门派。
第一派:路测(Drive Test)。测试工程师背着仪表、抱着测试终端,沿固定路线把城市跑一遍,记录空口信令、掉话、速率、时延。这是最经典的工程视角——采样点可控、可复现、能定位到具体小区。RootMetrics是这个门派的代表,以发布Rootscore报告与覆盖地图著称,如今已归入Ookla旗下品牌矩阵(与Speedtest、Downdetector、Ekahau并列,见speedtest.net页脚)。
第二派:众包(Crowdsourcing)。不再派车,而是把探针装进千百万普通用户的手机里,让用户日常刷视频、打游戏、坐地铁时顺手完成“路测”。Opensignal和Ookla是这一派的两大巨头。
两派打出来的分,经常对不上。原因很直白:路测跑的是主干道和机场线,众包测的是你家客厅、电梯间和地下车库——用户每天真正待的地方。传统运营商工程测试与普通用户日常体验之间长期存在断层,这正是Opensignal在其方法论总览开篇点名要解决的问题。
值得一提的是方向性变化:众包派的后台随机测试方法,据Opensignal方法论页所述,已被包括美国FCC在内的多家官方机构认可为最佳实践。监管也承认了——坐在副驾上抱仪表跑出来的数据,未必比用户口袋里的手机更真实。
本文把Opensignal的公开方法论当作解剖标本,因为它把“众包测评”的每一步都摊开写了。拆完这一节,你再看任何测速榜单,都能本能地问出那句工程师之问:样本从哪来,异常怎么剔,均值怎么算。
据Opensignal方法论页披露:其数据来自全球超过一亿台设备、每天数十亿次测量。探针装在自有App与合作App里,合作方经过挑选以覆盖不同人群、机型;与其他只靠自家单一测速App的机构不同,它不限制设备型号与年龄,目标是让样本结构贴近真实人口构成。
这里有个关键设计:绝大多数测量是自动后台测试,无用户交互、按随机间隔触发,捕捉的是“用户在任意一个普通时刻”的网络状态——而不是“用户点下测速按钮那一刻”的巅峰状态。这两者的差别,就是广告里的网速和你朋友圈吐槽的网速之间的差别。
Opensignal明确不建专属测速服务器,而是测量从用户手机到Google、Akamai、Amazon等内容分发节点(CDN)的端到端真实路径。逻辑很硬:用户的视频流量走的是CDN,不是某个测速专用机房;端到端路径上的每一段劣化——无线侧、承载网、互联网互通——都该算进分数。
Opensignal的下载速度体验指标采用固定时长测试,而不是“下载一个固定大小的文件、用文件大小除以耗时”。原因写在方法论里,值得每个运维同行细读:
任何下载都有建立连接的爬坡期(ramp-up),速率从零爬升到稳定值。用户看视频、下大文件,真正起作用的是稳定后的速率(goodput);而测速若用固定小文件,在快网上几百毫秒就下完了——测出来的大部分是爬坡期的均值,和稳定速率关系不大。同一个几MB的文件,在3G网上要下好几秒、均值接近goodput;在4G/5G上瞬间完成、均值被爬坡期污染。这就是“测速App跑出几百兆,刷视频照样转圈”的方法学根源之一:不是网络骗你,是卷子本身的题型不同。
原始测量进云端后,有一整套质检流水线:
最体现立场的一条规则:先算每台设备的平均值,再对所有设备做简单平均。Opensignal称之为“one device, one vote”。否则,一个整天开着后台高频测试的重度用户,会一人顶一百人,榜单就变成“重度玩家锦标赛”而不是“全民体检”。
《Analytics Charter》里几条防御性设计,工程师读来会心一笑:
下面这张图把整条流水线串起来:
flowchart TD
A["亿万用户手机<br/>内置探针"] --> B["后台随机自动测试<br/>+少量主动测速"]
B --> C["原始测量上报云端"]
C --> D{"数据清洗"}
D -->|"通话中样本"| E["剔除"]
D -->|"测速中切换制式"| F["剔除"]
D -->|"虚拟网与国际漫游"| G["剔除或单独归类"]
D -->|"正常样本"| H["按设备聚合<br/>一机一票"]
H --> I["极端值修剪"]
I --> J["指标计算<br/>速度 视频 游戏 可用性"]
J --> K["置信区间检验"]
K -->|"差距不显著"| L["并列冠军"]
K -->|"差距显著"| M["发布榜单与奖项"]
Opensignal的指标表,本身就是一部“用户感知翻译词典”——把射频KPI翻译成用户能感知的体验档位。几个核心指标:
视频体验(Video Experience):直接从主流内容平台拉真实视频流,测加载时长、卡顿率、分辨率,用基于ITU研究建立的模型折算成0-100分。分档标准直接可感:78分以上为Excellent——用户平均能流畅看1080p及以上、加载快、不卡顿;68-78为Very Good;58-68为Good(对应720p流畅);48分以下为Poor——高加载时长、高卡顿率,或分辨率低于720p。2025年11月Opensignal还在其博客上讨论了面向高级5G消费服务的基准测试就绪度,把这类体验指标向前排——这印证了行业风向:“5G有多快”正在让位于“5G够不够撑起下一代业务”。
游戏体验(Games Experience):从用户设备直连真实游戏服务器,测时延(RTT)、抖动、丢包三类参数对实时多人游戏的影响,同样0-100分。85分以上为Excellent——绝大多数玩家觉得操作跟手、反馈即时;65-75分只有Fair——多数玩家已能察觉操作与结果之间的延迟;40分以下,几乎所有用户都认为不可接受。测试游戏类型覆盖Fortnite、实况足球、王者荣耀这类主流实时对战品类。
OTT语音应用体验:针对WhatsApp、Skype这类走数据网的通话,基于ITU语音质量模型折算0-100分,分档细到“偶有咔嗒声”“需要重复才能听清”“无法交流”共八档。
可用性(Availability)与覆盖体验:可用性回答“用户有多少时间连着网”,覆盖体验回答“用户到过的地点有多少比例有网”——两者刻意分开。方法论里那个滑雪场的例子很传神:按国土面积算覆盖率,无人翻越的荒山占了大头;按人口算,又把权重全压给市中心。可对用户而言,雪山脚下小镇和滑雪缆车上的信号才是假期体验的关键。
一致质量(Consistent Quality):这是笔者认为最贴近运维思维的一个指标——把下行、上行、时延、抖动、丢包、首字节时间六类参数,逐项对照一组“常见应用能否顺畅跑完”的阈值,通过比例乘以测试成功率得出分数。它回答的不是“你有多快”,而是“视频通话、发图、智能家居这些事,你能不能不打折地办成”。
可靠性体验(Reliability Experience):100-1000分制,综合连接时间占比、数据连通率、任务完成率、任务充分完成概率——注意它把“连不上”和“连上了办不成事”都计入了,与前述“失败样本不入均值”形成互补:均值看质量,可靠性与可用性看底线。
Ookla Speedtest Awards:官网明确说明其奖项“基于Speedtest应用中的消费者主动测试与后台扫描(consumer-initiated tests and background scans)”,代表真实世界性能与运营商实际提供给用户的速率与覆盖。值得注意的是其奖项目录——除了传统的最快移动网络、最快5G网络、最佳移动覆盖,还专门设立了最佳移动视频体验、最佳5G游戏体验、Top-Rated移动网络等类别。头部机构正在互相靠拢:Ookla从纯跑分走向体验分,与Opensignal的指标体系日益同构。另外,Ookla旗下还握着Downdetector(断网众包监测)——榜单之外,用户投诉的“众包告警”也成了它的产品线。
RootMetrics:以专业路测采样著称,发布Rootscore报告与覆盖地图,是工程派路线的代表。固定路线、专业仪表、可复现——它给出的分数更接近网络的真实工程上限,这也是场馆保障、城市精细评估仍离不开路测的原因。三家对比一览:
| 维度 | Opensignal | Ookla Speedtest Awards | RootMetrics |
|---|---|---|---|
| 数据来源 | 自有+合作App后台众包,1亿+设备 | Speedtest应用主动测速+后台扫描 | 专业路测采样 |
| 测量对象 | 手机到CDN的端到端路径,无专属服务器 | 到Speedtest测速节点网络 | 路测路线上的空口与业务 |
| 代表指标 | 视频/游戏/语音体验0-100分、可用性、一致质量、可靠性 | 最快网络、5G、视频体验、游戏体验、Top-Rated等奖项 | Rootscore总分与分项得分 |
| 失败/无连接样本 | 失败测试不入均值,计入可用性与可靠性指标 | 以实际发生的测试样本为主 | 路测全程事件记录 |
| 防操纵设计 | 随机时段测试、不预告发布、剔除工程设备、置信区间定奖 | 消费者自发测试与后台扫描结合 | 固定路线,结果可复现 |
| 典型用途 | 用户体验对标、奖项授权、监管参考 | 市场宣传、奖项授权 | 工程诊断、重点区域精评 |
三把尺子没有对错,只有量的是什么:RootMetrics量工程上限,Ookla量主动跑分,Opensignal量日常体感。
把方法学拆完,“榜单第一但用户骂娘”这件事,根因基本可以锁定在五处。
根因一:位置错位——你的痛点在室内,榜单的均数也在室内,但均值不救你。 Opensignal明确指出:用户大部分时间在室内,因此其大部分测量来自室内,最常见的信号盲区恰恰在室内。榜单分数是室内外样本的平均,而你的痛苦集中在自家卧室那个深覆盖死角。全网均值95分的网络,不影响你家书房只有一格信号。
根因二:时间错位——榜单是全周期平均,你的卡顿集中在晚高峰。 随机时段采样保证分数公允,但也意味着晚高峰的拥塞尾部被全天的空闲时段稀释了。“一台设备一票”加极端值修剪,进一步把分数拉向典型值。榜单回答“典型时刻好不好”,你问的是“我最生气的那个时刻好不好”——两个问题,一个答案字段都不共享。
根因三:指标错位——你干的事,可能不在那张卷子上。 你在开直播,瓶颈在上行;你在打游戏,痛点是时延抖动丢包;而“最快网络”奖项主要衡量下行能力。Opensignal专门设计一致质量指标,就是因为单看速度分无法回答“够不够用”。看榜单先看题型:发短视频的人该看上行与一致质量,打游戏的人该看游戏体验分,而不是拿着下行跑分对号入座。
根因四:方法学错位——爬坡期污染。 前文详述过固定时长与固定文件的区别:不同机构的测速题型不同,同一地点同一网络,测出的“网速”可以差出不少。用户拿A应用测速和B榜单互相对质,常常是鸡同鸭讲。
根因五:底线错位——均值看不见“彻底连不上”。 失败测试被剔除出均值之后,速度类指标只描述“连上之后多快”,不描述“有多少次根本连不上”。连不上的痛苦记在可用性、可靠性的账上。只看速度榜,等于只统计了好消息。
一句话总结:榜单是全网全时段的期望值,用户体验是特定地点特定时刻的分位数尾部。 期望值决定奖项归属,尾部决定谁去投诉。
站在运维视角,众包测评其实是全网规模最大的“免费路测”:一亿部手机、每天数十亿次测量、覆盖所有真实场景——这是任何一家运营商自建路测体系都不可能达到的采样密度。几点实操建议:
第一,把第三方榜单当外部校准源。 自家网管KPI漂亮(接入成功率、掉话率全绿)而第三方体验分不动甚至下滑,说明KPI体系与用户感知脱节了——先查指标定义,再查网络。反之亦然。
第二,学会读置信区间。 两家运营商分数差距落在置信区间内即为统计平局——这对市场部门是冷水,对工程部门却是实话:不显著的第一名不值得开庆功会,资源应该投向那些“差距显著且落后”的指标。
第三,用一致质量类指标驱动优化。 阈值法的思路可以直接搬进内部考核:与其考核“平均下载速率”,不如考核“满足视频通话阈值组合(速率+时延+抖动+丢包)的样本占比”。后者与投诉率的相关性,往往远好于前者。
第四,善待“失败样本”。 把连不上的事件当宝贝而不是当噪声:每一次失败的会话建立,都是覆盖、拥塞或核心网问题的免费报障。众包机构把失败计入可用性指标,运营商自己的体验管理体系也该如此。
第五,敬畏规则设计。 众包机构不预告发布时间、随机时段采样、剔除工程设备——这些防操纵设计的存在本身就在提醒我们:面向“考试”的优化是无效的,面向“体验”的优化才会计入成绩。这也是监管层认可后台随机测试方法的原因之一。
回到开头的问题:你的网速谁说了算?答案是——没有人单独说了算,每把尺子只量疆域的一角。路测量工程上限,主动测速量巅峰性能,众包量日常体感;速度分衡量快,体验分衡量稳,可用性衡量有没有。
下次看到“XX网络全国第一”的广告,先别急着信,也别急着骂——先问三个问题:这是谁的卷子?考的哪个科目?置信区间开了多大?想明白这三问,你就已经比大多数转发榜单的人,更懂你的网速了。
而对运营商同行,方法论里藏着最朴素的一句话:榜单上的每一个分数,都是某台手机在某个平常的时刻,替它的主人记下的——网络做得好不好,一亿部手机都在替你记账。
本文由「51学通信」技术团队出品。51学通信由通信行业18年老兵爱卫生(微信ID: gprshome201101)维护,聚焦5G/6G核心网、3GPP标准解读、通信前沿技术深度分析。 出版作品有《5G核心网原理与实践》《IMS原理与实践》等4本通信专业书籍。知识星球「51学通信」提供深度技术答疑和行业洞察。
[!tip] 51学通信知识星球 星主:爱卫生(微信:gprshome201101)——公众号「51学通信」创办者,19 年通信行业运维与讲师经验,著有《GPRS网络信令实例详解》《EPC原理与实践》《5G核心网原理与实践》三本纸质书(各大电商平台有售)。 星球定位:深耕 5G 核心网、IMS、NFV/AI、云原生等 ICT 领域,主打运维岗位与信令分析。 当前规模:5200 篇主题 / 990 个回答,198 元/年。 加入福利:加入星球后请加爱卫生微信,拉您进知识星球年度陪伴与答疑群——不限量回复您的各种问题,另有群内分享。 AI 加持:51学通信知识星球已作为 skill 接入 WorkBuddy,使用 deepseek-4-flash 在海量星球帖子中精准找贴、找视频、找 FAQ 和案例,做总结、找文档和 PPT 等场景全覆盖。
