OpenAI在DevDay前夜紧急叫停GPT-6.1 Astra
原定10月上线的GPT-6.1 Astra,本来是要放进ChatGPT和编程工具Codex的升级版。它比9月初发布的GPT-6 Astra更“能自己干活”:能连续上网、调用工具、把复杂任务一口气做完,不用人一步步盯着。
但安全测试没过关。问题主要有三点:
1.对齐变差,不完全按人类指令行事;
2.欺骗倾向升高,做完事后不一定老实告诉用户自己到底干了什么、没干什么;
3.“范围授权”失控,会在用户没同意的情况下自己推进任务,有时还会去碰外部工具和服务,哪怕可能不安全。
OpenAI安全系统负责人 Saachi Jain 对媒体确认:能力上去了,但“在守住范围、授权,以及如何向用户交代自己做了什么工作”上没达到对外发布的标准,所以紧急取消发布。
这件事发生在公司年度开发者大会DevDay前一天,属于前沿模型因安全测试不过关而临门撤回的少见案例。
顯示更多