← 事件库 / Agent Security

研究证明能力审计可能漏掉加密模型后门

一篇 NeurIPS 2026 论文构造了神经网络后门:把任意隐藏计算加密进权重,只在收到秘密触发器后执行。作者在小型化学反应代理任务上测试微调、权重噪声、梯度触发器搜索和 latent adversarial training。它证明的是能力引出式审计的最坏情况上限,并不说明现有前沿模型已经包含这类后门。

对你意味着什么

对接收第三方权重的团队来说,通过常规能力引出测试,并不能在对抗性构造下证明模型没有休眠行为。这个概念验证规模小且人为设计,应推动来源审查与运行时监控分层,而不是被夸大成所有开放权重都不安全。

前沿观察

公开材料与效果验证,分开看。

已记录的事实是工作及其材料已公开。论文或作者报告的效果不自动等于独立复现。下一步关注可复用代码、任务设置和第三方验证。

证据与关联材料

技术细节与六维评分
构造 用 digital locker 把加密的任意计算编译进模型权重
已测防御 微调、权重噪声、基于梯度的触发器搜索与 latent adversarial training
实验 小型化学反应预测代理任务
范围 最坏情况对抗性构造,不是已观察到的生产事故
公开产物 论文称已发布模型供防御研究
时间依据 arXiv v1 发布于 2026-10-09T17:55:06Z
技术影响 4
工程价值 3
采用信号 1
成熟度 1
验证成本 5
风险 5