InstructGPT：OpenAI 对齐语言模型以遵循用户指令

OpenAI 训练出比 GPT-3 更能遵循用户意图的 InstructGPT 模型，现已作为 API 的默认语言模型部署。这些模型采用人在回路方式训练，同时提高了真实性并降低了毒性，所用技术来自其对齐研究。