OpenAI强化AI安全监控:30分钟内识别可疑行为
创始人
2026-08-19 08:06:45
0

8月19日,OpenAI宣布了一系列新的安全政策,旨在加强对人工智能模型在测试期间可能发生的安全事件的控制。这些措施包括在模型开发过程中进行更细致的监控,以及在训练后阶段进一步强化模型对齐和安全性。OpenAI强调,随着模型能力的增强,监控、对齐和安全标准必须始终领先于风险。

OpenAI在博客文章中提到,尽管这些措施并非直接针对HuggingFace事件,但Astra模型展现的网络安全能力以及AI行业的快速发展是促使公司采取这些措施的部分原因。在HuggingFace事件发生后,OpenAI暂停了强化学习训练两周,目前已重新启动许多风险较低模型的训练。公司仍暂停规模最大的前沿强化学习训练计划,同时开展小规模训练和评估,以评估模型行为、验证安全措施,并在继续推进之前获得更多关于模型对齐情况的证据。

此次升级中,最重要的安全措施是新的监控系统。该系统将检查工具执行的操作、可获取的推理轨迹以及活动日志,以识别各种未经授权的行为。OpenAI的目标是在发现可疑活动后的30分钟内发出警报,估计这套监控系统所需的计算资源大约相当于被监控流程本身计算资源消耗的20%。公司承诺将在未来发布的博客文章中公布更多有关该系统的细节。

相关内容

热门资讯

京港澳高速惊魂一幕:司机沉迷手... 8月19日,公安部交通管理局通报了一起因智能辅助驾驶功能使用不当导致的交通事故。事故发生在7月10日...
OpenAI强化AI安全监控:... 8月19日,OpenAI宣布了一系列新的安全政策,旨在加强对人工智能模型在测试期间可能发生的安全事件...
奇瑞神行者8官网抄袭蔚来ES8... 8月19日,汽车博主曝光神行者官网在宣传自家神行者8时,直接使用了蔚来ES8的白车身渲染图,引发网友...
广东头部医院数量稳居全国前列,... 8月19日,第九个中国医师节如期而至。近日,广东省卫生健康委召开媒体座谈会,全国名中医邱健行、全省多...
挡风玻璃现虚拟司机!Stell... 8月19日,Stellantis集团公开了一项旨在缓解乘客对无人驾驶汽车心理恐慌的专利。该专利通过挡...
百度二季度营收313亿 同比下... 8月18日,百度发布二季度财报,显示公司营收出现下滑。财报显示,百度二季度收入为人民币313亿元,环...
全球媒体聚焦 | 美媒:“将中... 美国《外交》杂志近日刊文指出,中国正在多个先进制造和技术领域形成越来越强的全球竞争力,而美国一些政界...
深耕宣讲聚共识!广州从化:创新... 北回归线上的生态明珠、中国温泉之都、岭南荔枝之乡,坐拥流溪河生态廊道、吕田红色老区、南平柿染非遗、罗...
在共享充电宝贴“上门按摩”广告... 借用共享充电宝时,你是否发现过一些设备机身被张贴了各种广告?8月18日,广州市花都区人民法院公布一起...
华为全栈智能加持!奕境X9旗舰... 8月19日,奕境X9“第二代家庭旗舰SUV”正式开启预售,预售价区间为29.98万至37.98万元。...