标题：如何防范OpenAI Atlas提示词注入攻击？
IT之家 12 月 23 日消息，尽管 OpenAI 正致力于强化其 Atlas 人工智能浏览器的网络攻击防御能力，但该公司承认，提示词注入攻击 —— 一种通过操纵人工智能智能体、使其执行隐藏在网页或电子邮件中的恶意指令的攻击手段 —— 带来的风险短期内无法消除。这也引发了人们对人工智能智能体在开放网络环境下能否安全运行的质疑。
免费影视、动漫、音乐、游戏、小说资源长期稳定更新！ 👉 点此立即查看 👈
OpenAI 在当地时间周一发布的一篇博客文章中详细阐述了该公司为增强 Atlas 的防御能力、抵御持续攻击所采取的措施，并写道：“提示词注入攻击就像网络上的诈骗和社会工程学攻击一样，几乎不可能被完全‘攻克’。”该公司坦承，ChatGPT Atlas 的“智能体模式”“扩大了安全威胁面”。
据IT之家了解，OpenAI 于今年 10 月推出了 ChatGPT Atlas 浏览器，随后安全研究人员迅速发布了相关演示，证明只需在谷歌文档中输入寥寥数语，就能改变底层浏览器的行为。就在同一天，浏览器厂商 Brave 也发布博客指出，间接提示词注入攻击是所有人工智能驱动型浏览器面临的系统性挑战，Perplexity 公司的 Comet 浏览器也未能幸免。
意识到提示词注入攻击威胁将长期存在的并非只有 OpenAI 一家。英国国家网络安全中心本月早些时候发出警告，称针对生成式人工智能应用的提示词注入攻击“或许永远无法被完全缓解”，这使得各类 都面临数据泄露的风险。这家英国政府机构建议网络安全从业者，应着力降低提示词注入攻击的风险及影响，而非寄希望于将这类攻击“彻底阻止”。
就 OpenAI 而言，该公司表示：“我们将提示词注入视为一项长期的人工智能安全挑战，未来需要持续强化防御措施。”
那么，面对这项永无止境的任务，OpenAI 给出了怎样的解决方案？答案是建立一套主动式快速响应机制。该公司称，这套机制已初显成效，能够在新型攻击手段被用于“实战攻击”前，提前在内部发现这些攻击策略。
这一思路其实与 Anthropic、谷歌等竞争对手的主张并无本质区别：要应对提示词注入攻击的持续威胁，必须构建多层防御体系，并持续开展压力测试。例如，谷歌近期的研究重点就聚焦于智能体系统的架构层面与策略层面管控。
不过，OpenAI 采取了一种与众不同的策略 —— 开发“基于大语言模型的自动化攻击程序”。本质上，这是一款由 OpenAI 借助强化学习技术训练而成的机器人，其作用是模拟黑客行为，寻找向人工智能智能体植入恶意指令的途径。
这款机器人可以先在模拟环境中测试攻击手段，再投入实际应用。模拟环境能够还原目标人工智能在遭遇攻击时的思维过程与可能采取的行动。随后，机器人可分析目标的反应，调整攻击方式，并反复进行测试。这种能够洞悉目标人工智能内部推理逻辑的优势，是外部攻击者所不具备的。因此从理论上讲，OpenAI 的这款机器人发现系统漏洞的速度，要快于现实中的黑客。
这是人工智能安全测试领域的一种常用方法：打造一个智能体，让它找出系统的极端漏洞场景，并在模拟环境中开展快速测试。
OpenAI 在博客中写道：“我们通过强化学习训练的攻击程序，能够诱导目标智能体执行复杂且需要多步骤推进的有害任务流程，这些流程的操作步骤可达数十步甚至数百步。此外，我们还发现了一些全新的攻击策略，这些策略既未出现在我们的人工红队测试中，也没有相关外部报告提及。”
在一份演示案例中（上图为部分截图），OpenAI 展示了其自动化攻击程序如何将一封恶意电子邮件植入用户收件箱。当人工智能智能体后续扫描收件箱时，它执行了邮件中隐藏的恶意指令，发送了一封辞职信，而非按要求撰写休假自动回复邮件。不过 OpenAI 称，在完成安全更新后，“智能体模式”已能成功检测到提示词注入攻击的企图，并向用户发出告警。
该公司表示，尽管要实现对提示词注入攻击的万无一失防御难度极大，但仍在依靠大规模测试与更快速的补丁更新周期，力争在相关攻击手段出现在现实世界之前，完成系统防御加固。
针对 Atlas 的安全更新是否已显著降低攻击成功率这一问题，OpenAI 发言人拒绝透露具体数据，但表示该公司早在 Atlas 浏览器发布前，就已与第三方机构合作，共同强化其针对提示词注入攻击的防御能力。
网络安全公司 Wiz 的首席安全研究员拉米・麦卡锡指出，强化学习技术确实能实现对攻击者行为的持续自适应防御，但这只是解决方案的一部分。
麦卡锡在接受科技媒体 TechCrunch 采访时表示：“衡量人工智能系统风险的一个有效方法，是计算其自主性与访问权限的乘积。”
他进一步解释道：“智能体浏览器恰恰处于这一风险模型中的高挑战区域：它们拥有中等程度的自主性，同时又具备极高的系统访问权限。当前许多安全建议，其实都反映了这种利弊权衡。比如限制登录状态下的访问权限，主要是为了减少暴露面；而要求对各类确认请求进行人工审核，则是为了约束智能体的自主操作权限。”
这两点也被列入 OpenAI 向用户提供的风险降低建议中。该公司发言人还表示，Atlas 浏览器经过训练，在发送邮件或执行支付操作前，都会向用户发起确认请求。OpenAI 同时建议用户，应向智能体下达具体明确的指令，而非直接授予其收件箱访问权限，简单告知其“自行采取必要措施”。
OpenAI 指出：“即便已部署安全防护措施，过高的自主操作权限也会让隐藏的恶意内容更容易对智能体产生影响。”
尽管 OpenAI 声称，保护 Atlas 用户免受提示词注入攻击是公司的首要任务，但麦卡锡仍对这类高风险浏览器的投入产出比持怀疑态度。
他在接受 TechCrunch 采访时表示：“对于大多数日常使用场景而言，智能体浏览器目前带来的价值，尚不足以匹配其当前的风险水平。由于它们能够访问电子邮件、支付信息等敏感数据，因此风险系数极高 —— 但与此同时，也正是这种高访问权限赋予了它们强大的功能。这种利弊平衡状态未来或将逐步改善，但就目前而言，其中的取舍权衡依然十分显著。”
相关攻略
IT之家 3 月 28 日消息，英国卫报昨日（3 月 27 日）发布博文，报道称由英国政府资助的一项最新研究显示，过去六个月内，AI 聊天机器人违抗人类指令、实施欺骗的真实案例激增五倍，总数近 70
Claude的爆炸式增长遇到算力瓶颈。这家AI公司本周悄然收紧了旗下Claude产品的使用限制，成为大模型厂商面临算力瓶颈这一行业困境的最新注脚。据悉，Anthropic本周对Claude免费版、P
新智元报道编辑：好困 Aeneas【新智元导读】把闪存股一夜干崩的谷歌顶会论文，出大事了。TurboQuant的核心方法，两年前就被一位华人学者做完、发完顶会、代码全部开源了。谷歌不仅没正面提及，而
IT之家 3 月 28 日消息，据科技媒体 Phone Arena 昨天报道，谷歌正在向 Pixel 系列手机用户推送蓝牙诊断工具（IT之家注：Bluetooth diagnostics），目前版本
新智元报道编辑：Aeneas 好困【新智元导读】刚刚，谷歌内部AI曝光了！Agent Smith一经推出，就火到一塌糊涂，全体员工集体疯抢，服务器直接被挤爆。现在，三巨头的秘密新模型都集体炸出了，让
热门专题
热门推荐
在明日方舟终末地中，小陈剧情的开启需要满足一定条件并完成特定任务。首先，要确保玩家已经达到一定的游戏进度。这包括推进主线剧情到一定阶段，解锁了相应的区域和功能。随着主线剧情的推进，
前言《逐玉》大结局落幕那晚，我盯着屏幕良久，胸口像压了块浸水的棉絮，沉闷得喘不过气。从首播时满怀热望地守在更新页面，到中期边看边叹气、反复暂停找逻辑漏洞，再到最后几集干脆调成倍速、只为“完成任务”式
3月28日消息 据新华社报道，俄罗斯政府日前宣布了一项重要的能源指令。俄副总理亚历山大·诺瓦克已指示能源部起草行政命令，计划从4月1日起全面禁止汽油出口。此举的核心目的是在中东战事引发全球能源市场动
蓝海搜书最新可用网址是https: www lanhaizw com ，平台具备极简无广告界面、全球CDN加速、三类自适应阅读模式、四重语义检索、27个细分分类、跨设备同步及离线
在网络信息爆炸的时代，一款好用的浏览器能为我们带来便捷与丰富的体验。悟空浏览器网页版正式版入口，成为众多用户探索网络精彩的关键通道。悟空浏览器以其简洁界面和强大功能吸引着广大用户。