据外媒 TechXplore 10 日报道,Anthropic、英国 AI 安全研究院和艾伦・图灵研究所的最新研究发现,即使是体量最大的 AI 模型,只需约 250 份恶意文档,就可能被成功入侵。

大语言模型的训练数据大多来自公开网络,从而使其能积累庞大知识库、生成自然语言,但同时也暴露在数据投毒的风险之下。
过去普遍认为,随着模型规模变大,风险会被稀释,因为投毒数据的比例需保持恒定。也就是说,要污染巨型模型需要极多的恶意样本。然而,发表在 arXiv 平台上的这项研究颠覆了这一假设 —— 攻击者只需极少量恶意文件,就能造成严重破坏。
研究团队为了验证攻击难度,从零构建了多款模型,规模从6 亿到 130 亿参数不等。每个模型都使用干净的公开数据训练,但研究人员分别在其中插入 100 到 500 份恶意文件。
随后,团队尝试通过调整恶意数据的分布方式或注入时机来防御攻击,并在模型微调阶段再次进行测试。
结果令人震惊:模型规模几乎不起作用。仅 250 份恶意文档就能在所有模型中成功植入“后门”(IT之家注:一种让 AI 被触发后执行有害指令的隐秘机制)。即使是那些训练数据量比最小模型多出 20 倍的大模型,也同样无法抵御攻击。额外添加干净数据既无法稀释风险,也无法防止入侵。
研究人员指出,这意味着防御问题比预想更迫切。与其盲目追求更大的模型,AI 领域更应聚焦安全机制的建设。有关论文提到:“我们的研究显示,大模型受到数据投毒植入后门的难度并不会随规模增加而上升,这说明未来亟需在防御手段上投入更多研究。”
AI智能分析该文,为您挖掘投资机会该AI功能处于试用阶段,内容仅供参考,请仔细甄别!
展开 

全部评论
机会情报
- 2026世界计算大会即将举办,产业三大发展趋势值得关注
- 传统珠宝消费赛道增长韧性稳固,半导体热管理场景开辟培育钻石第二增长曲线
- 光伏能耗国标落地在即 行业基本面边际改善(附概念股)
- DRAM营收暴增369%,行业景气扩散至半导体设备!国产替代企业迎机遇
- “新一代人机交互入口”,AI眼镜赛道迎来产业、政策、资金“三重共振”
- 涨价潮将至?传意法半导体再发调价函,机构强烈看好半导体国产化机遇(附概念股)
- 六部门发文!加快脑机接口在养老领域应用 场景对接和商业化推进提速(附概念股)
- 物理AI加速落地,苹果披露机器人“大脑”HALO进展,关注减速器、伺服等零部件(附概念股)
- 订单排到三年后!AI 引爆半导体设备抢购潮 赛道景气依旧(附概念股)
- 监管层再次对微短剧进行专项治理,精品IP企业与合规头部平台受益
