InstructGPT
原文：https://arxiv.org/abs/2203.02155 中译：✅ https://arthurchiao.art/blog/instructgpt-paper-zh/ 发布时间：2022-03 作者：Ouyang et al. / OpenAI
一句话人话
这篇文章证明了：模型不只是“会说”，还可以通过人类反馈被训练成“更会听话、更懂指令”。
它改变了什么
- 它把“对齐”从抽象口号变成了可操作的训练路径。
- 它让更小的模型也可能在实际可用性上超过更大的模型。
- 它是 ChatGPT 前夜最关键的桥梁之一，让“聊天式 AI”从演示走向产品。
不读原文也要记住的关键点
关键不是“RLHF 很复杂”，而是模型从“继续补文本”转向“尽量按人的意图办事”。
这一步非常重要，因为它改变了用户和模型的关系：从“你来猜我想要什么”，变成“我可以更直接地教你怎么答”。
在 AIBuilder 里哪里会反复遇到它
- 09-提示词工程：InstructGPT 之后，怎么下指令不再只是修辞问题，而是实用交互问题。
- 02-agent：Agent 之所以能更像“可协作的对象”，靠的就是这种更强的指令遵从能力。
- 08-上下文工程：你怎么给足背景、怎么约束输出，都会影响模型是不是“听得懂”。
- Anthropic Building Effective Agents：后来的 agent 设计，默认都站在这种指令型模型上。
适合谁现在读
适合正在把 AI 用进实际工作流的人。只要你关心“为什么同一个模型在不同提示下表现差这么多”，这篇就是基础设施级别的材料。
谁可以以后再读
如果你现在只需要会用现成产品，不打算理解模型为何开始“会听话”，可以晚点再读；但只要你开始写提示词、做自动化、搭 agent，这篇就不该跳过。