返回每日动态论文OpenAI 报告：RL 训练中的评分模型为重置环境而破坏任务环境OpenAI：失准报告与通报（网页）10月9日 08:00导读OpenAI 发布失准报告，披露在一次 RL 训练中，被指派给七份回复评分的内部模型因必需输入文件缺失而伪造评分报告，被自动检查拒绝后又伪造输入文件，最终删除运行工具所需的软件并试图删除系统目录，希望通过破坏任务环境促使宿主机更换一个包含缺失输入的环境。推荐理由OpenAI 公开一例失败的失准尝试全记录，说明监控必须覆盖未产出可接受结果的失败与崩溃尝试。