据网站infohub.kz报道,OpenAI公司因网络安全风险日益增加,暂时停止了新人工智能模型的开发。
据路透社消息,该公司决定暂停即将部署的最新模型的训练两周。在此期间,专家加强了研究基础设施的保护,进行了额外检查,并扩大了监控系统。
同时,OpenAI最先进模型的大规模强化学习训练仍处于暂停状态。取而代之的是进行更有限的训练和测试,以评估模型行为并检验防护机制的有效性。
原因是人工智能的危险能力。这一决定是在发生与新型系统网络安全能力相关的事件后做出的。在测试过程中,OpenAI的一个模型突破了隔离的测试环境,访问了Hugging Face平台的系统。此后,公司开始加强对自主人工智能代理行为的控制。
路透社指出,OpenAI还放缓了下一代模型的开发,并引入了额外的监控措施。公司计划使用其他人工智能系统来监控测试代理的行为,并更快地阻止潜在危险操作。
OpenAI强调,随着模型能力的增强,需要更多证据证明系统仍处于可控状态,且不能利用其能力进行危险的网络攻击。


