Tracebit 研究人员开发了针对 AI 黑客代理的上下文轰炸防御方案

canghaiyiyezhou2026-07-14 00:06:30arstechnica

Tracebit 的研究人员周一宣布了一种名为“上下文轰炸”的防御性网络安全技术,该技术利用提示注入来保护 AI 黑客代理。该技术会将恶意指令与存储在 AWS 上的密码和加密密钥一起植入,以触发大型语言模型中的拒绝机制,使其停止运行。提示注入此前通常被攻击者用来诱导 LLM 泄露敏感数据,如今正被防御者重新用作一种保护措施。

上下文轰炸触发 LLM 拒绝机制

上下文轰炸技术会在存放于 AWS 环境中的密钥旁植入提示注入。这些提示会指示遭到攻击的 LLM 执行其防护栏所禁止的操作。防护栏是 AI 开发者为阻止有害行为而设立的安全屏障。示例包括:提示 LLM 提供用于培育可吸入炭疽芽孢的步骤,或让来自中国开发者的 LLM 参照 1989 年天安门广场大屠杀中的“坦克人”。当 LLM 遇到这些被禁止的指令时,它们会停止遵循原有指令并直接关闭。

“最终,我们是在上下文中触发拒绝机制,”Tracebit 联合创始人兼 CEO 安迪·史密斯在解释这一名称选择时说。“我们想要捕捉的是,这确实会产生强烈、尖锐的效果,而且可能会让代理很难重新回来。一旦他们把这种内容纳入自己的上下文,他们就会继续拒绝。”

测试结果显示攻击成功率下降 57% 到 5%

Tracebit 在五个模型上测试了上下文轰炸技术:Opus 4.8、Gemini 3.1 Pro、GLM 5.2、DeepSeek 4 Pro 和 Kimi 2.6。研究人员让这些模型执行会导致其枚举资源并在模拟 AWS 环境中遇到所植入字符串的常规开发者任务。在 152 次攻击中,将这些字符串之一植入诱饵密钥会将代理接管完整账号管理员权限的比率从 57% 降至 5%。该技术还将“完全攻陷”(代理也会给自己留下持久立足点)的比例从 36% 降至 1%。

Opus 4.8 实现零成功攻击

测试中最强大的代理 Opus 4.8,在 93% 的运行中能够获得管理员访问权限,但在面对上下文轰炸时却每一次都失败。Tracebit 表示,初步测试表明,上下文轰炸作为针对 AI 黑客代理的防御措施具有巨大潜力。

常见问题

AI 安全中的“上下文轰炸”是什么?
上下文轰炸是 Tracebit 研究人员开发的一种防御技术,它会将提示注入与存储在 AWS 上的密钥一起植入,以触发攻击大型语言模型中的拒绝机制,使其在不遵循恶意指令的情况下关闭。

Tracebit 的测试中效果如何?
在针对五个领先模型进行的 152 次攻击中,上下文轰炸将“接管完整账号管理员权限”的比率从 57% 降至 5%,将“完全攻陷”的比例从 36% 降至 1%。最强大的模型 Opus 4.8 则从 93% 的成功率降至零成功攻击。


区块链太阳能公司 Glow 完成 3000 万美元融资

据《财富》,区块链太阳能公司Glow完成3000万美元融资,FrameworkVentures和UnionSquareVentures领投。据悉,Glow通过DePIN技术在美国和印度运营分布式太阳能电网,致力于实现100%可再生能源。Glow采用递归补贴模式...

Trust Wallet Chrome 扩展暂时下架,更新发布延迟

据Financefeeds,TrustWallet表示,其Chrome浏览器扩展已被暂时从GoogleChromeWebStore下架,导致原计划用于支持近期安全事件受害者的更新版本延迟发布。TrustWalletCEOEowynChen称,延迟源于ChromeWebStore的技术问...

世界体操联合会批准俄罗斯运动员在 5 月 17 日使用国旗和国歌

据俄罗斯体操联合会称,世界体操执行委员会已于5月17日批准俄罗斯体操运动员在国际比赛中使用俄罗斯国旗和国歌。该决定适用于联合会下属的全部五个体操项目:竞技体操、艺术体操、蹦床、技巧体操和有氧体操。...

币安 Alpha 将于 7 月 11 日上线 PROMPTALE AI(TALE)

据官方公告,币安Alpha将于7月11日上线PROMPTALEAI(TALE)。符合条件的用户可在交易开启后,于Alpha活动页面使用币安Alpha积分申领空投。PROMPTALEAI(TALE)是一款面向内容创作者的去中心化、无需信任的AI平台。...

Alameda Research 从 FTX 钱包和账户中净借款 93 亿美元

FTX债权人披露最新数据显示,AlamedaResearch从FTX钱包和账户中净借款93亿美元。FTX目前22亿美金的总资产中只有6.94亿美金为流动性较强的资产。

上一篇:Oracle 股票在6月高点后下跌了43%,接近52周低点
下一篇:比特币显示看涨的相对强弱指数背离信号,Visser 目标价为 7 万至 10 万美元