OpenAI 于 2022 年 1 月 27 日发布消息称,通过对齐研究中开发的技术,并让人类参与训练流程,其训练出的 InstructGPT 模型相比 GPT-3 更能遵循用户意图,同时在真实性和减少有害表达方面有所改善。根据来源披露,InstructGPT 已被部署为 OpenAI API 的默认语言模型。对于依赖语言模型构建应用的开发者,这意味着此次变化不仅涉及模型能力,也直接关系到 API 默认调用时的输出表现。
更新重点:从生成文本转向更好地执行意图
这次公告的核心,并不是单纯强调模型能够写出更流畅的内容,而是让模型更准确地理解并执行用户希望完成的任务。来源明确将 InstructGPT 与 GPT-3 进行比较,称前者在遵循用户意图方面表现更好,并且更加真实、较少产生有害内容。
OpenAI 将这些改善归因于对齐研究所形成的技术,以及有人类参与的训练过程。不过,所提供的来源摘要并未展开具体训练步骤,也没有列出各项能力的量化结果。因此,更稳妥的理解是:此次更新强调行为层面的优化,而非对所有任务效果作出统一保证。开发者仍需结合自身输入与业务标准判断其适用性。
对 API 使用者的影响:默认行为变化值得重新测试
模型成为 API 默认选项,使这项更新具有直接的接入意义。对未明确固定模型选择、或依赖平台默认配置的应用而言,开发者应核对实际请求配置,确认调用对象与预期是否一致。对于通过 API 中转服务接入的用户,也应向服务方确认实际模型映射,而不是仅凭接口名称判断模型行为。
- 指令执行:可重点测试摘要、改写、问答等任务是否更贴近明确要求。
- 真实性:即使来源称表现有所改善,涉及事实判断的输出仍应保留核验流程。
- 内容安全:减少有害表达有利于面向用户的应用,但不能替代业务自身的安全规则。
- 接入验证:应使用既有测试样本对比结果,检查输出形式与原有处理逻辑是否兼容。
这些检查属于面向上线的工程建议,并不代表来源已经确认特定应用一定会发生兼容性问题。尤其在使用统一接口管理多个模型时,应将接口可访问与模型行为符合预期分开验证。
成本与额度:不能从能力更新推导商务变化
对关注 Token 成本、额度与并发的用户,此次消息需要划清信息边界:来源摘要没有提供新的报价、调用限额、吞吐能力或响应速度数据。因此,不能将“默认模型更新”直接解读为降价、提额或稳定性提升,也不能据此判断第三方平台的供应能力会同步变化。
从应用侧看,更好地遵循指令可能有助于减少反复调整提示词和人工修正的需求,但实际收益仍需测试确认。评估时应同时观察任务完成质量、重试情况与实际用量,避免只看单次输出是否更自然。
总体而言,InstructGPT 成为 API 默认模型,体现了 OpenAI 将对齐研究成果用于实际服务的方向。对开发者与 API 使用者,最值得跟进的是用户意图与模型输出之间的匹配程度;在此基础上,再结合明确的价格、配额和接入信息作出部署决策。
