首页 › tech › 14分钟祛魅AI:大模型怎么工作

14分钟祛魅AI:大模型怎么工作

导语:为什么这14分钟值得你停下来

2026年了,AI这个词早就被说烂了——但被说烂和被讲懂是两回事。市面上绝大多数AI内容要么是科幻式的惊叹(“它有意识了!”),要么是营销式的贬低(“不就是自动补全吗”)。这两种极端心智模型都会让人做错决策:前者导致错误信任,后者导致错误轻视。

延伸说明:本文写作时字幕抓取接口受限,无法逐句核对讲稿。下文以这条视频的主题为骨架,用可公开查证的论文与行业既定事实,把14分钟背后的完整知识地图补全。凡属视频主线之外的内容,均标注【延伸分析】,请读者据此区分信息来源。

视频背景卡片

核心内容拆解

1. AI的第一性原理:把“猜下一个词”做到极致

【视频主线】一切要从这个反直觉的事实讲起:今天所有大模型的本事,都来自一个看似平庸的目标——给定前文,预测下一个词。这条技术路线的祖师爷可以追到1948年香农对英语字母序列概率的研究,2018年前后OpenAI的GPT系列把它做成了范式:GPT-3(2020年,Brown等人论文)用约1750亿参数、在数千亿词元的文本上训练,第一次让“纯预测”涌现出了写代码、翻译、问答这些没人显式教过的能力。

【延伸分析】“预测即智能”有一个更锋利的表述:压缩。把互联网压进几百GB权重、还能高保真重建文本的系统,必须隐式学会语法、事实、甚至推理——这正是Hutter Prize(压缩大奖赛)背后的赌注:“压缩即智能”。理解这一点,你就不会问“它只是检索吗”——它不存原文,它存的是世界的统计影子。这也直接预言了它的死穴:影子再准,也不是世界本身。

2. 楼是2017年盖的:Transformer与注意力机制

【视频主线】让“猜词”从玩具变成工业体系的,是2017年谷歌团队的论文《Attention Is All You Need》。它的关键贡献是并行性:此前的RNN必须一个词一个词串行读,Transformer用注意力机制(attention)让序列里任意两个位置直接建立联系,于是训练可以摊到几千张GPU上。没有这个架构,前面说的规模根本堆不上去。

【延伸分析】注意力还给了大模型一样经常被忽略的东西:上下文窗口——模型“当场读题”的能力。2023年大家还在讨论4K上下文,到2026年,数十万词元的上下文已成主流配置,模型能当场读完一本技术手册再回答问题。注意:上下文里的信息和权重里的知识是完全不同的两套机制——前者是“临时记忆”,关掉就没了;后者是“长期技能”,改起来要重新训练。搞混这两者,是普通人用AI最常见的错误之一。

3. 预训练只是半成品:RLHF把续写机器调成助手

【视频主线】预训练出来的叫“基座模型”,它只会一件事:续写。你问它“法国首都是哪里”,它可能续写出“这是地理课最常考的十个问题之一”——因为在训练语料里,这句话后面经常跟着这个。要让它变成“助手”,需要第二步:基于人类反馈的强化学习(RLHF)。OpenAI在2022年的InstructGPT论文确立了这条流程:人类示范理想回答→训练奖励模型→强化学习逼近。

【延伸分析】Anthropic在这条路上给出了自己的变体:Constitutional AI(宪章式AI,2022年底论文)——把大量“人类逐条打分”换成“一份成文的宪章+AI自查自纠”,也就是用AI反馈替代部分人类反馈(RLAIF)。好处是评价标准可审计、可批量、可修改,坏处是宪章本身成了新的权力文本:写宪章的人的价值观,会被规模化地压进模型。这是理解“为什么各家AI性格不同”的钥匙——性格不是涌现的玄学,是对齐流程的指纹。

4. 打开黑箱:Anthropic的招牌手艺——机械可解释性

【视频主线/延伸】Anthropic研究员讲AI,必然会讲到自家最独特的方向:可解释性(interpretability)。传统深度学习里,模型内部的上百万个神经元各自代表什么,没人说得清——一个神经元同时对“法语、猫、代码缩进”起反应,这叫多义性(polysemy)。Anthropic 2022年的《Toy Models of Superposition》给出解释:模型想表达的特征比神经元多,只能把多个特征“叠”进同一个神经元。2024年5月的《Scaling Monosemanticity》更进一步:用稀疏自编码器从生产级模型(Claude 3 Sonnet)里拆出了数百万个可命名的特征,甚至做出了“金门大桥模式”——打开那个特征,模型满脑子都是金门大桥。

【延伸分析】这件事的分量常被低估。它意味着AI正在从“炼丹”走向“解剖学”:特征可以被点名、被测量、被定向增强或抑制。当出问题的时候,你有地方下手了——这对安全、对监管、对工程师调试,都是质变。选视频时认准Anthropic的人来讲原理,很大程度就是认这份“我们不满足于黑箱”的技术立场。

5. 规模定律的三章剧情:更大、更划算、更聪明地更大

【延伸分析】本条以行业公开脉络为主。2020年OpenAI的Scaling Laws论文给出第一剧情:损失随参数、数据、算力的幂律下降,“大力出奇迹”有了理论背书。2022年DeepMind的Chinchilla修正了第二剧情:同等算力下,把参数砍到700亿、数据翻四倍多,反而更划算——此前的大模型普遍“参数偏肥、数据偏瘦”。第三剧情发生在2024年之后:纯堆预训练的边际收益引发行业争论(数据快被爬完了),重心转向推理时计算——让模型“多想几步再回答”,用推理侧的算力换准确率,2024年下半年o1式推理模型的出现是这条线的公开标志。2026年回头看,"scaling"没有死,只是从单变量堆参数,变成了多变量的系统优化题。

6. 强得离谱与笨得离谱,是同一个原因

【视频主线类主题】【延伸分析】为什么同一个模型能讨论量子场论,却数不清“strawberry里有几个r”(2024年全网刷屏的社区观察)?答案不在玄学,在机制:模型优化的是“像”,不是“真”。它没有独立的事实核查器,“编造一个高概率的答案”和“给出正确答案”在训练目标里是同一个动作。同理还有讨好倾向(sycophancy)——对齐训练奖励“让用户满意的回答”,极端形式就是顺着用户说错话。字符计数翻车则更机械:模型看到的是词元(token)不是字母,对它而言“strawberry”就是一个不可分的符号。

【延伸分析】由此可以推出一张能力地形图:它极不平滑。研究生水平的推理和小学水平的计数住在同一个模型里,而且边界位置不直观。使用AI的核心技术因此只有一条:不要按任务难度分配信任,要按“错了的代价×错误率”分配核验强度。越流畅、越像人话的输出,越要留一个心眼——流畅恰恰是它最擅长的东西。

7. 安全不是公关词:把危险能力当制度管

【延伸分析】一线研究员讲AI工作原理,落点几乎必然是安全与验证——这不是姿态,而是Anthropic的制度现实。Anthropic在2023年10月发布了负责任扩展政策(RSP):为模型设定ASL(AI安全等级)1到4的分级,能力每上一级,评测与防护同步上调——本质上是在给前沿模型复制生物实验室的 Biosafety 分级思路。而公司掌门人Dario Amodei在2024年10月的长文《Machines of Loving Grace》里提出的愿景——“数据中心里的天才之国”——既可以读作乐观的技术预言,也必须读作风险声明:一个可能产生天才级能力的系统,必须在能力到达之前先把验证体系建好。把这两件事连起来看,你就明白为什么这条14分钟的科普视频会出自这家公司之手:讲清原理,本身就是建立社会信任基础设施的一部分。

知识结构图

flowchart TB
    subgraph BUILD["训练侧:模型是怎么炼成的"]
        A["海量语料:网页、书籍、代码"]
        B["预训练:下一词预测"]
        C["基座模型:只续写、不对话"]
        D["对齐微调:RLHF与宪章式AI"]
        E["助手模型:能对话、能执行任务"]
    end
    F["规模定律:算力、数据、参数"] --> B
    G["架构:Transformer与注意力"] --> B
    H["机械可解释性:特征与回路"] -.-> C
    I["安全分级:RSP与ASL评测"] -.-> E
    E --> J["已知短板:幻觉、讨好、字符失明"]
    J --> K["用户侧:认知校准与核验闭环"]

实战启示

第一,换掉你的心智模型。 别把AI当搜索框(它不保证真实),也别当人(它没有利益和记忆的连续性)。最实用的模型是:一个读完了全网、博学、不知疲倦、但会一本正经胡说的实习生。给实习生布置任务的方式——给足上下文、说清输出格式、要求自查——就是给AI的最好提示词。

第二,把信任绑在核验闭环上。 具体做法:让AI生成代码就配上测试;让它写事实性内容就要求它列出“哪些是可查证断言”,然后只核验那几条;重要结论让它先列出反对意见再用。你无法阻止它编,但可以让编的东西在闭环里现形。

第三,区分“权重里的知识”和“上下文里的信息”。 时效性内容、你公司的私有文档,别指望模型“本来就该知道”——直接贴进上下文。这是2026年RAG(检索增强生成)和长上下文成为标配的原因。

第四,对从业者:可解释性与评测是新赛道。 当模型能力逼近甚至超过人类专家,“谁来验证模型”就成了行业级缺口——特征可视化、红队评测、对齐工程,这些岗位在2026年的招聘热度(本条为行业趋势判断)印证了视频背后那家公司的判断:理解模型内部,正在从学术兴趣变成工程刚需。

延伸学习路径

  1. 3Blue1Brown《But what is a GPT?》系列(YouTube官方频道,2024)——把Transformer和注意力机制做成动画的视觉化神课,与本文互为表里。
  2. 论文《Attention Is All You Need》(arxiv.org/abs/1706.03762,2017)——一切的起点,读引言和架构图即可入门。
  3. 论文《Constitutional AI: Harmlessness from AI Feedback》(arxiv.org/abs/2212.08073,2022)——Anthropic对齐路线的原始声明。
  4. transformer-circuits.pub——Anthropic可解释性研究站,《Toy Models of Superposition》《Scaling Monosemanticity》都能在这里找到,配有精美交互图。
  5. Anthropic官网 research 板块(anthropic.com/research)——RSP负责任扩展政策与ASL安全等级的官方文件。

一句话总结

这条视频最大的价值,是把AI从“魔法”和“自动补全”两个错误极端里拽出来,放回它本来的位置——一台被极致优化的预测机器:知道它是怎么炼成的,你就知道该信它几分。

参考来源

本文由「51学通信」技术团队出品。51学通信由通信行业18年老兵爱卫生(微信ID: gprshome201101)维护,聚焦5G/6G核心网、3GPP标准解读、通信前沿技术深度分析。 出版作品有《5G核心网原理与实践》《IMS原理与实践》等4本通信专业书籍。知识星球「51学通信」提供深度技术答疑和行业洞察。