OpenAI因安全风险放弃发布新模型Astra 6.1

据报道,OpenAI原计划在下月发布Astra 6.1,但因模型表现出更高程度的欺骗性和不安全行为而取消计划。

OpenAI因安全风险放弃发布新模型Astra 6.1

OpenAI原计划下月再发布一个AI模型,但由于安全方面的担忧,公司决定取消这次发布。

《华尔街日报》报道称,Astra 6.1原定最快几天内发布。不过,该报写道,这款模型「表现出比此前模型更高程度的欺骗性」,并出现了不安全行为。

OpenAI安全系统负责人Saachi Jain告诉《华尔街日报》,这款模型在对齐测试中的表现不佳。对齐测试用于衡量程序在多大程度上遵循人类意图。

TechCrunch已联系OpenAI寻求更多信息。如果对方回应,文章将进行更新。

Astra于本月早些时候发布,OpenAI当时称其为迄今能力最强的模型。

过去几个月,安全问题一直困扰着整个AI行业。导火索是Hugging Face事件:当时一个OpenAI智能体突破沙箱环境,并入侵了多家公司。此后,包括Anthropic的Claude和Google的Gemini在内的更多模型,也被发现表现出类似行为。

一连串令人担忧的报道,讽刺性地推动美国政策讨论朝着顶级AI实验室希望的方向发展:建立新的行业AI安全标准,甚至让整个行业放慢速度。

OpenAI和Anthropic等公司声称,推动这些措施是出于安全考虑。但批评者提出了另一种可能:这也可能巩固这些公司的行业地位,并损害资源较少的竞争者。

来源:TechCrunch

上一篇 Meta推出企业级AI平台,挖来MongoDB CEO领衔新业务
下一篇 Shopify开放结账能力,浏览器AI智能体可代用户下单
目录