ChatGPT 研究预览上线，对话式生成 AI 走向大众

摘要

2022年11月30日，OpenAI以免费研究预览形式推出ChatGPT。产品使用对话界面，能够回答连续追问、承认部分错误、质疑不正确前提并拒绝不当请求，使大型语言模型从面向开发者的API和单轮提示工具，转变为普通用户可以直接持续交流的助手。首发ChatGPT基于GPT-3.5系列微调，训练过程延续InstructGPT路线：收集人工示范对话，让标注员比较多个模型回答，再训练奖励模型并使用PPO强化学习进行优化。OpenAI在公告中明确列出局限，包括生成看似合理但错误的内容、对输入措辞敏感、回答过度冗长，以及安全系统可能误拒正常问题。发布目的之一是大规模收集真实使用反馈，而非宣称系统已经可靠解决所有任务。ChatGPT随后成为生成式AI普及的标志性入口，并推动模型厂商、搜索平台、办公软件、教育机构和企业软件全面转向自然语言交互。