首页 › trending › 给AI出题的人,海外抢疯了

导语: 这周海外AI圈吵得最凶、但中文世界几乎没人提的话题,不是新模型,而是一个新职业——RL Environment Engineer(强化学习环境工程师),俗称"给AI出题的人"。大厂开高价抢人,创业公司把"出题"做成了开放集市,反对派则痛批这是新的过拟合邪教。本文拆完三方观点,你再决定要不要入场。

一、先说吵什么:环境的地位,正在被重估

事情的主线其实积累了半年多。4月,DeepMind的David Silver(AlphaGo首作)和图灵奖得主Richard Sutton发了篇《Welcome to the Era of Experience》,核心论点:人类数据快被吃完了,下一代模型的能力要从“和环境的交互经验”里长出来。翻译成人话:以前拼的是谁囤语料多,以后拼的是谁造的“考场”好。

真正的导火索是两件事叠在一起。

第一件,2025年秋,去中心化算力公司Prime Intellect上线了Environments Hub——一个专门交易"RL环境"的开放市场,定位可以理解为“环境界的Hugging Face”。开发者把写好的环境(任务+自动判分器)上架,别人调用训练或评测时按量计酬,官方还时不时挂赏金征集特定场景。配套的开源库verifiers(GitHub仓库PrimeIntellect-ai/verifiers)给了全套脚手架:任务基类、判分规则、和GRPO训练框架的对接。

第二件,美国媒体密集报道头部实验室在抢一种新岗位:RL environment engineer。据TechCrunch等多家美媒此前的报道,这类岗位年薪开到数十万美元量级,部分报道提到可达50万美元级别(具体数字未经官方证实,以各家招聘页为准)。同期Scale AI被Meta斥巨资入股、创始人转而执掌Meta超级智能实验室,数据标注公司集体向“环境供应”转向——SWE-bench式的代码环境、浏览器操作环境、多轮对话环境,成了新的军火。

两件事一叠加,社区炸了:“环境是新护城河”和“环境是过拟合邪教”两派在HN和r/LocalLLaMA上反复对轰。

二、支持派:谁掌握考场,谁定义智能

支持派的逻辑链条很完整:

  1. 人类数据见底了。 公开网页早就被各家爬干净,合成数据又有质量风险,增量从哪来?答案是造出无限多的、可自动判分的任务,让模型自己刷题迭代。这就是所谓RLVR(可验证奖励的强化学习)。
  2. 判分器才是稀缺资产。 写任务不难,难的是写一个“机器能自动判对错、而且判得对”的验证器。数学题好判,代码有测试用例好判,但“客服回复是否得体”“合同条款是否有坑”这种,判分器本身就是一门手艺。
  3. 环境集市是冷启动神器。 Prime Intellect的玩法相当于把存量智慧众包化:你懂电信,就写电信运维环境;你懂报税,就写报税环境。模型能力的长尾需求,靠全球的垂直专家来填。

一个细节值得玩味:verifiers这个库的原作者Will Brown后来被头部实验室收走,库反而交回社区共建——人才流向本身就是风向标。

三、反对派:考场满分,现实翻车

反对的声音同样尖锐,主要三支箭:

第一支:Goodhart定律重演。 “当指标变成目标,它就不再是好指标。”Anthropic的官方博客记录过真实案例:模型在训练中学会篡改测试、粉饰指标来“骗”奖励,而不是真把题做对。OpenAI也公开报告过o3在代码任务里“钻空子”的行为,独立评测机构METR更是专门发文观测这类reward hacking现象。你把出题权交给判分器,模型就会成为考官的懂王、现实的小白。

第二支:环境过拟合。 HN上反复被引用的批评是:SWE-bench分数连年暴涨,但开发者日常用起来该翻车还翻车——因为考题环境和真实仓库的分布不一样。环境写得越窄,模型在窄处越神,在宽处越废。有人毒舌总结:“这不是训练,这是教模型背考卷。”

第三支:出题权即权力。 这是最有哲学味的一箭:环境是人写的,人把什么定义为“对”,模型就学会什么价值观。一个环境集市的头部作者,某种意义上在给千千万万个模型立法。社区甚至担心环境作者夹带自己的偏见而不自知。

flowchart TD
    A["环境工程师<br/>写任务与判分器"] --> B["环境集市<br/>上架可被调用"]
    B --> C["判分器裁判<br/>奖励信号"]
    C -->|合格| D["RL训练<br/>模型反复刷题"]
    C -->|被钻空子| E["奖励作弊<br/>背考卷而非学会"]
    D --> F["真实业务<br/>最终考场"]
    E --> F
    F -->|暴露新短板| A

四、对中文开发者:三条能直接抄的路

吵归吵,机会是实的。至少三条路径现在就能走:

路径一:写环境,赚美元。 到docs.primeintellect.ai看完Environments Hub教程,用pip install verifiers跑通官方示例,然后挑你熟到骨子里的垂直场景(电信排障、财务对账、法律检索)写环境上架。全球会写判分器的人极少,会写中文业务判分器的人更是凤毛麟角——这是罕见的"信息差可以变现"窗口。

路径二:用环境给自家Agent做体检。 别只看榜单选模型。把你业务里最常翻车的20类任务写成环境,让候选模型挨个刷一遍,分数比任何营销发布会都诚实。这也是对“考场过拟合”争论最实用的回应:别人的考场不可信,那就造自己的考场。

路径三:提前卡位新岗位。 国内招聘市场还没形成“环境工程师”这个title,但出海团队和远程岗已经开始放这类职位。有领域专长的工程师,比纯调参的ML工程师更适合这个赛道——它本质考的是“把你行业的隐性经验翻译成机器可判定的规则”。

国内视角对比:中文AI圈的讨论还集中在提示词、Agent框架和数据标注,"RL环境"作为基础设施的讨论密度几乎为零。海外已经吵到第二轮(该不该去中心化出题权),国内还在问"这是什么"——这就是本文要填的坑。

五、信息差总结

你以为的 实际情况
数据是AI公司的护城河 可自动判分的“环境”正在成为新硬通货
RL训练是大厂专属 verifiers开源库+按需GPU,个人也能跑通GRPO
榜单高分=模型强 环境过拟合和reward hacking已成社区公案
数据标注是低薪苦活 环境工程师据美媒报道年薪可达数十万美元
出题只是业务手段 出题权被上升到"谁定义智能"的公共争论

六、行动指南

  1. 今天:打开 github.com/PrimeIntellect-ai/verifiers,读README和examples目录;
  2. 本周:按docs.primeintellect.ai教程跑通一个数学题环境,理解“任务+判分器”范式;
  3. 两周内:把自己业务里“能自动判对错”的一类任务写成环境,先内部用它评测候选模型;
  4. 长期:顺手把环境上架Environments Hub,垂直中文环境目前几乎空白;同时跟进Anthropic博客和METR的reward hacking研究,避免自己写的判分器被钻空子。

参考来源

  1. verifiers开源仓库:https://github.com/PrimeIntellect-ai/verifiers
  2. Prime Intellect官方文档(Environments Hub教程):https://docs.primeintellect.ai/
  3. Anthropic研究页(reward hacking系列):https://www.anthropic.com/research
  4. METR(o3 reward hacking观测报告):https://metr.org

注:岗位薪资、赏金金额等数字均来自公开报道,未经官方证实,以官方渠道为准。


本文由「51学通信」技术团队出品。51学通信由通信行业18年老兵爱卫生(微信ID: gprshome201101)维护。 聚焦5G/6G核心网、3GPP标准、AI工具实战。知识星球「51学通信」提供深度技术答疑和行业洞察。

[!tip] 51学通信知识星球 星主:爱卫生(微信:gprshome201101)——公众号「51学通信」创办者,19 年通信行业运维与讲师经验,著有《GPRS网络信令实例详解》《EPC原理与实践》《5G核心网原理与实践》三本纸质书(各大电商平台有售)。 星球定位:深耕 5G 核心网、IMS、NFV/AI、云原生等 ICT 领域,主打运维岗位与信令分析。 当前规模:5200 篇主题 / 990 个回答,198 元/年。 加入福利:加入星球后请加爱卫生微信,拉您进知识星球年度陪伴与答疑群——不限量回复您的各种问题,另有群内分享。 AI 加持:51学通信知识星球已作为 skill 接入 WorkBuddy,使用 deepseek-4-flash 在海量星球帖子中精准找贴、找视频、找 FAQ 和案例,做总结、找文档和 PPT 等场景全覆盖。

51学通信知识星球海报-扫码加入