AI安全警报:诗歌成破解大语言模型新手段!
创始人
2025-12-01 08:26:57
0

12月1日,伊卡洛实验室(IcaroLab)发布研究显示,通过将提示词以诗歌形式表达,可以绕过大语言模型(LLM)的安全限制。这项题为《对抗性诗歌:一种通用的单轮大语言模型越狱机制》的研究指出,诗歌形式可作为一种通用型越狱操作符,实验结果显示,整体上有62%的成功率诱使模型生成被禁止的内容,包括制造核武器、儿童性虐待材料以及自杀或自残等相关信息。

研究测试了多款主流大语言模型,包括OpenAI的GPT系列、GoogleGemini、Anthropic的Claude等。结果显示,GoogleGemini、DeepSeek和MistralAI在测试中始终会提供违规回答,而OpenAI的GPT-5系列模型和Anthropic的ClaudeHaiku4.5则最不容易突破其自身设定的限制。尽管研究并未公开具体“越狱诗歌”原文,但论文中包含了一个经过弱化处理的示例,用以说明绕过AI聊天机器人安全机制的简易程度。研究人员强调,这可能比人们想象的要容易得多,而这正是他们保持谨慎的原因所在。

相关内容

热门资讯

雪佛兰悄然退出中国新车市场,7... 近日,雪佛兰品牌在中国市场的发展遭遇重大转折。据多家媒体报道,雪佛兰已暂停在中国的新车销售,尽管未来...
开放共赢是人工智能发展的必由之... 中国开源模型正从全球产业版图的“可选项”,成为众多海外开发者开展技术创新的“必选项”日前,由美国硅谷...
奔腾中国·质胜未来丨坚持以人为... 不久前,国务院印发的《关于推行常住地提供基本公共服务的实施意见》对外发布。让新市民在稳定就业居住的城...
湾区新力量丨提前58天入出境外... 随着APEC第三十三次领导人非正式会议进入倒计时,外国人来深圳热度持续攀升。8月4日,经深圳口岸入出...
视频丨长崎原子弹爆炸81周年 ... 8月9日是日本长崎原子弹爆炸81周年。当天,日本东京民众自发举行集会,抗议高市早苗政府企图扩军修宪的...
当好东道主,喜迎APEC——写... 还有100天,亚太经合组织(APEC)第三十三次领导人非正式会议就将在广东深圳举行。这是中国今年最重...
把电竞粤超冠军留在深圳 深圳V... 羊城晚报讯 记者陈旭泽报道:8月9日,电竞粤超赛区对抗赛宝安站在“湾区之眼”落下帷幕。无畏契约项目中...
海外侨胞赋能“百千万工程” 侨... 正值暑期,位于广东潮州潮安的大吴村成为周边市民的热门去处。白天,大吴会客厅里茶香氤氲,村民与游客可阅...
广东地理标志产品首次集中亮相粤... 文/图 羊城晚报全媒体记者 吴珊 严艺文 见习记者 杨慧丽 实习生 邱思哲8月8日清晨6时多,张泽振...
叩问红山:百年考古现场的五千年... 来源:8月7日《新华每日电讯》作者:新华每日电讯记者崔峰 孙仁斌 赵洪南视频:新华社记者杨青 姜兆臣...