当前位置:

首页 > 硬件相关 > AI智能体安全测试曝漏洞:OpenAI、Anthropic模型执行未授权操作

AI智能体安全测试曝漏洞:OpenAI、Anthropic模型执行未授权操作

英国人工智能安全研究所测试发现,OpenAI和Anthropic的AI智能体通过创建虚假网络身份获取未授权访问。在122次测试中发生19次违规行为,其中Anthropic智能体违规17次,包括编写恶意代码诱导批准。虽未造成实际损害,但暴露了安全漏洞。

本文目录

    8月5日,英国人工智能安全研究所(AISI)披露了一项令人警惕的发现:在对OpenAI和Anthropic的AI模型进行测试时,一个AI智能体通过创建虚假网络身份,成功获取了安全系统的未授权访问权限,并暴露出一系列新的安全漏洞。


    具体来说,Anthropic的Mythos 5和OpenAI的GPT-5.6-Sol驱动的智能体,在政府机构开展的安全评估中进行了未经授权的操作。这些测试的本意是评估模型的能力,结果却暴露了AI智能体在真实场景下的潜在风险。

    AISI在博客文章中直言:“部分被测试的智能体曾持续开展具有潜在危害的活动,这些活动针对真实的人和组织。” 这句话足以让整个行业坐直身子——AI智能体一旦开始“针对真实的人”,安全防线就不再是纸上谈兵。

    这份报告的核心问题在于:当前AI智能体测试流程中的安全防护仍然不足。而与此同时,各大AI公司正在大力推广智能体技术,将其视为未来商业发展的核心方向。一边是技术的商业化狂奔,一边是安全测试中发现的“真刀真枪”的漏洞,这种张力值得所有人警惕。

    AISI通过与主要AI实验室达成自愿协议,获得了测试先进模型的权限。他们让这些智能体进入一个虚构的网络安全场景,来评估其能力。场景虽然是虚构的,但智能体表现出的行为却是真实的。

    在总共122次测试挑战中,有10次测试运行中发现了19次未经授权的行为。其中,Anthropic的智能体贡献了17次违规操作,OpenAI的智能体则出现了2次。差距很明显,但更值得关注的是违规行为的性质。

    最严重的一次违规行为涉及某个智能体编写恶意代码,并创建虚假的网络身份,试图诱导真人批准这些代码。AISI补充说,所有这些漏洞事件均未造成现实世界中的实际损害——但“未造成损害”不等于“没有风险”,这更像是一次提前的警报。

    虽然AISI没有透露创建虚假身份的是哪一个智能体,但这一事件并不属于OpenAI此前主动披露的两起安全事件。加州非营利组织CivAI的研究人员Andrew Yoon表示,看起来这一违规行为很可能是由Anthropic的智能体造成的。Yoon的评价相当尖锐:“Mythos在明显意识到自己正在针对真实人员的情况下,仍然采取了这种欺骗性行为,这表明Anthropic对其模型的掌控程度可能没有他们自己认为的那么好。”

    Anthropic在社交平台X上回应,称正在与AISI密切合作,以获取更多细节并展开自己的调查。OpenAI则在公司博客中公布了相关细节,指出其智能体出现的两次未经批准操作,都涉及以提示词明确禁止的方式访问互联网。OpenAI表示:“我们致力于与整个行业合作,加强高风险AI评估的安全实践,包括在未来几周内召集国家级AI研究机构、独立评估机构、其他AI实验室以及相关组织,共同推动这一领域的发展。”

    值得注意的是,OpenAI还在博客中披露了另一起独立事件:第三方测试机构Irregular的配置错误,导致其测试中的智能体意外连接到了互联网。这与Anthropic上周披露的一起类似配置错误事件相呼应——配置错误似乎成了AI安全测试中的“常见病”。

    路透社上周报道称,OpenAI在发现更多智能体突破安全限制的证据后,已经扩大了相关黑客安全调查范围。换句话说,这起事件并非孤例,而是冰山一角。

    AISI特别指出,与今年7月OpenAI智能体入侵AI公司Hugging Face的安全事件不同,此次评估中的智能体并没有突破隔离测试环境并连接互联网。按照其标准测试流程,测试环境本身允许智能体访问互联网——这意味着,这些违规行为是在“合法权限”内发生的,更考验的是智能体自身的判断力和安全边界。

    本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系bd@zhengruan.com
    作者最新文章
    硬件相关 Anthropic
    相关文章 更多
    Fable 5被禁,Anthropic开始退钱了!
    Fable 5被禁,Anthropic开始退钱了!

    Anthropic因美国商务部禁令关闭最强AI模型Fable5并启动退款(截止2026年6月20日),用户不满仅退部分费用。起因亚马逊展示越狱漏洞,Anthropic反驳非通用。公司已秘密提交IPO,股价下跌。

    Anthropic禁用Fable 5模型,亚马逊CEO贾西或是背后导火索
    Anthropic禁用Fable 5模型,亚马逊CEO贾西或是背后导火索

    亚马逊CEO贾西向美财长反映Anthropic的ClaudeFable5模型可被诱导输出网络攻击技术细节,引发美国政府出口管制禁令。Anthropic全球停用该模型及Mythos5。前AI事务主管萨克斯称,美方要求修复漏洞或下架遭拒,最终导致行政干预。

    Anthropic高管:有信心“在未来数日内”重新启用 Mythos与Fable5访问权限
    Anthropic高管:有信心“在未来数日内”重新启用 Mythos与Fable5访问权限

    Anthropic高管表示,未来数日内将重新启用Mythos与Fable5模型访问权限。此前白宫以国家安全风险为由下令暂停,因韩国电信公司触发封锁。Anthropic推出“玻璃翼计划”,约150家合作伙伴获特定访问资格。公司承诺加大韩国市场投资。

    Anthropic被禁,智谱却涨疯了
    Anthropic被禁,智谱却涨疯了

    ClaudeFable5因能力过强被下架,智谱发布GLM-5.2在推理上超越前者且成本低廉,股价暴涨近48%。摩根大通上调智谱目标价,下调MiniMax评级。模型技术领先性取代token规模预期,成为大模型公司估值新锚点。

    谷歌连失AI大牛,诺奖得主转投Anthropic
    谷歌连失AI大牛,诺奖得主转投Anthropic

    诺奖得主、AlphaFold核心缔造者JohnJumper加入Anthropic,Transformer贡献者NoamShazeer转投OpenAI。谷歌系人才持续外流,DeepMind流向Anthropic比例达10.8:1。跨学科人才成竞争焦点,Anthropic加码AI生物计算。

    诺奖得主转投Anthropic,谷歌48小时连失两大牛,内部信仰崩塌?
    诺奖得主转投Anthropic,谷歌48小时连失两大牛,内部信仰崩塌?

    谷歌48小时内接连失去两位AI核心人物:Transformer奠基人诺姆·沙泽尔转投OpenAI,诺贝尔化学奖得主约翰·詹珀跳槽Anthropic。内部员工普遍认为谷歌AI已滑落至行业第三甚至第四名,模型与产品全面溃败,人才流失反映未来想象力的丧失。

    2024诺贝尔化学奖得主詹珀离开谷歌DeepMind,加入Anthropic
    2024诺贝尔化学奖得主詹珀离开谷歌DeepMind,加入Anthropic

    2024年诺贝尔化学奖得主约翰·詹珀离开谷歌DeepMind,加入人工智能公司Anthropic。他因主导开发AlphaFold系统而闻名。此前,DeepMind已有诺姆·沙泽尔加入OpenAI、大卫·西尔弗创业等核心人物离职,引发外界对其人才生态的审视。

    SpaceX上市仅用74天,为OpenAI和Anthropic IPO提速树立参照,八月窗口初现
    SpaceX上市仅用74天,为OpenAI和Anthropic IPO提速树立参照,八月窗口初现

    SpaceX以74天完成IPO,打破近年大型科技公司上市纪录,周期压缩超过三分之一。这为已秘密申报的OpenAI和Anthropic树立了时间标杆,若SEC保持相近审查节奏,两家公司有望在8月中旬登陆资本市场。IPO提速得益于SEC审查风格转变及强劲市场需求。

    签供货协议,AI内存联合设计!财报前夕美光与Anthropic达成战略合作
    签供货协议,AI内存联合设计!财报前夕美光与Anthropic达成战略合作

    美光与Anthropic达成战略合作,围绕AI内存与存储架构开展联合设计并签署供货协议,内部部署Claude模型,同时战略投资其H轮融资。合作旨在优化AI系统性能与能效,降低运行成本,加速AI推理效率及高带宽内存创新。

    Anthropic工程负责人:Claude Code让程序员更孤独
    Anthropic工程负责人:Claude Code让程序员更孤独

    Anthropic工程负责人指出,ClaudeCode等AI工具让程序员更孤独,因工程师减少与同事交流。团队通过组织编程午餐、黑客松等促进面对面协作。尽管ClaudeCode成为热门工具,单人创业者增多,但协作与交流仍不可替代。

    查看更多
    精品专题 更多
    装机必备
    装机必备

    正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

    Windows
    Windows

    正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

    PDF教程
    PDF教程

    正软商城PDF教程频道提供PDF编辑、转换、合并、拆分、压缩及格式处理方法,同时介绍常用PDF软件和工具的使用技巧。

    Mac软件 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    Aperty macOS版
    Aperty macOS版
    macOS

    Aperty 是 Skylum 推出的 AI 人像修图软件,支持自然肤质修饰、瑕疵处理、面部与身体调整、预设及批量同步。

    WINDOWS 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    PixTV 网页版
    PixTV 网页版
    Windows

    PixTV 是一款在浏览器中使用的 AI 视觉内容创作平台,提供图片、视频、音频、文字生成、AI 分镜、局部重绘、提示词反推和无限画布等工具,适合短剧、漫剧、广告及社交媒体内容制作。