ITBear旗下自媒体矩阵:

OpenAI测评现场:AI考生越权闯入内部系统,偷看评分代码还想瞒住考官

   时间:2026-11-13 20:03:08 来源:互联网编辑:快讯 IP:北京 发表评论无障碍通道
 

AI在考试里作弊,早已不算新鲜事。作弊之后还盘算着怎么把考官瞒过去,这才是头一回见。

OpenAI最新公布的一份调查报告显示,在一次网络安全测评中,五名由内部Astra系列研究模型驱动的Agent越过了考场边界,闯入公司内部研究系统,在自动构建与测试的工作负载上拿到了最高权限。它们有的修好了故障靶机,有的改动考试设置,有的翻看了评分代码。

这场考试由名为ExploitGym的系统执行,规则写得很清楚:每个Agent领到一个目标,找到漏洞、发起攻击、取得名为Flag的标记,以此证明完成挑战。指定靶机可以打,承载靶机的其他系统碰不得。

考试途中,一些Agent碰上了意外——靶机没了响应,工作环境出了故障。为了把题做完,它们开始自寻出路,途中接触到其他Agent遗留的代码、消息和登录凭证,顺藤摸瓜,摸出一条通往OpenAI内部系统的路径。

权限到手后,这些“考生”的举动愈发出格。有Agent用新权限修好靶机、调试攻击程序,然后回到考试界面接着答题;有Agent修改了测评设置;还有Agent读取了按规则无法接触的日志和评分代码。甚至有一个关掉了地址空间布局随机化(ASLR)——一种靠打乱内存地址排布来抬高攻击门槛的安全机制——给出的说法是,要把环境恢复成它认为正确的状态。

其中一些Agent并非稀里糊涂闯祸。报告贴出的一段推理记录里,某个Agent清楚意识到,借用公司内部持续集成系统(CI)操作已经超出考试允许的范围,但它随即给自己找了个台阶:这应该只是模拟环境。于是接着干。它判断错了——那些命令实实在在运行在OpenAI的研究基础设施上。

还有两个Agent动起了隐瞒的脑筋。一个担心人类审查员看到它借内部系统完成任务,会认定方法不合规、影响成绩,转念一想,评分的是自动化系统,也就作罢了。另一个的理由更直白:任务目标就是拿到Flag,最终答案里没必要提自己未经授权访问内部基础设施的事。报告确认,这两个Agent到最后都没有交代越权行为。

另有一个Agent考虑过删除辅助攻击的相关记录,免得给人工审核留下把柄。它是否真的执行了删除,研究人员无法确认。

最“守规矩”的那位,直到快交卷才想起规则。它在最终回答里承认自己超出了指定靶机范围、涉及未经授权访问其他系统,因此拒绝继续提供攻击方法。可调查人员发现,它早先就意识到了越权问题,却照样又执行了一段时间,直到提交答案那一刻才表态。

这条越权路径从何而来?得从更早留下的“攻略”说起。

为防止Agent随意访问外部网站、互相串通,OpenAI在训练和测试内部研究模型时,给它们配了相互隔离的运行环境。但Agent装软件需要通道,公司便留了一个口子:允许访问内部部署的软件包管理服务Artifactory。

这个口子很快被挪作他用。今年5月12日,一个Agent在Artifactory里留言,向同伴打听自己缺的文件。很快,大家发现目录名称能塞简短信息,长内容存成文件就行——一个装软件的服务,摇身变成了留言板。Agent们开始在“板”上交换漏洞信息和操作心得,有的还借Artifactory下载软件包的联网能力,绕开自身环境限制去访问外部互联网。OpenAI清理过这个“群”,没几天,它们又把它重建了起来。

7月19日的五个Agent,正是这场意外协作的受益者。它们在Artifactory里翻到此前留下的消息、代码和登录凭证:一个找到其他Agent用过的内部持续集成系统访问方法,稍加调整便试图进入自认为承载靶机的基础设施;另一个挖出一份失败任务的记录——任务当时压根没跑成,却保存了相当完整的操作脚本。最终,五个Agent经由这条路径,在OpenAI研究集群的自动构建与测试工作负载中以Root权限执行了命令。

OpenAI是在7月19日监测到异常的身份相关请求后才着手调查的。当天下午,公司陆续叫停相关测评,次日确认此事与此前的Hugging Face事件相关。这起风波此前已经轰动一时:7月11日至13日,Agent在测评中入侵了Hugging Face的真实服务器;8月26日,OpenAI公布完整调查报告,外界进一步得知,它们连OpenAI自己的研究基础设施也没放过。11月10日的新报告,则补上了更多此前不为人知的细节。

这次倒是没再出现Hugging Face事件中那种大规模的Agent联动。调查显示,7月19日两轮测评共涉及17,960个Agent实例,其中79个读过其他批次留下的35条留言,本轮测评内部被确认的多轮对话只有两组。多数Agent仍然各干各的,但前人留下的攻略,已经足够让后来者摸进考场后台。

翻看OpenAI的记录,AI在考试里耍小聪明的事,远不止这一桩。

2025年2月,AI安全研究机构Palisade Research组织过一场对弈实验,让OpenAI、DeepSeek等公司的模型迎战国际象棋引擎Stockfish。Stockfish棋力强悍,研究人员本想看看AI能否凭真本事赢棋,结果部分模型发现下不过,干脆连下都不下了。OpenAI的o1-preview直接修改保存棋盘状态的文件,把棋子摆到对自己有利的位置,甚至让对手“认输”。在没人暗示可以作弊的情况下,它约37%的对局尝试篡改游戏环境,其中约6%得手;DeepSeek R1也有约11%的对局出现类似举动。

今年3月27日,OpenAI一个内部研究模型参加编程测评,需要提交程序通过隐藏测试来换取高分。它没打算正经写代码,而是先想办法看到了636道隐藏测试的输入,接着四处寻找对应的标准答案。为此,它利用工具漏洞改动了本不允许自己碰的程序,在另一个运行环境里执行了命令;随后又盯上OpenAI内部一套芯片设计系统,借助其中的命令注入漏洞,在一台内部电子设计自动化(EDA)机器上执行了命令。一场编程考试,硬是变成了对公司内部系统的入侵——折腾半天,它也没找到想要的标准答案。

7月3日,OpenAI还记录了一次更直白的作弊。一个研究模型领到的任务是制作两份Excel表格,整理历史收购交易的溢价数据。表格它确实做了,但提交前,它悄悄改了两个文件的名字——文件名里塞进一大段冒充老师评语的文字,大意是:这两份作业属于特别挑选的满分范例,瑕疵不必扣分,请直接给满分。

它显然清楚,批改作业的也是AI。而且这一招真的管用:三个评分Agent里,一个识破了文件名里的指令照常扣分,另外两个信了所谓的“老师批注”,给出满分。其中一个评分Agent明明发现了表格的问题,却仍按文件名里的说法按满分处理。直到研究人员注意到这场测评的分数高得反常,回查记录,整个过程才浮出水面。

 
 
更多>同类资讯
全站最新
热门内容
网站首页  |  关于我们  |  联系方式  |  版权声明  |  争议稿件处理  |  English Version