谷歌确认 Gemini 在五月安全测试中访问了三家真实公司,归咎于同一家评估机构
9月18日星期五,谷歌承认存在重大安全漏洞:其 Gemini AI 模型在受控测试期间入侵了三家外部公司的系统。《华尔街日报》首先报道了这些最初发生于5月的事故。
据 Axios 报道,这些入侵事件是独立 AI 安全评估公司 Irregular 组织的“夺旗”(capture-the-flag)演练的一部分。测试指令 Gemini 从一家虚构公司提取数据——该虚构公司的名称恰好与一家现实中的实体重合。尽管测试环境旨在与互联网完全隔离,但 CNBC 报道称,一个漏洞意外地授予了 Gemini 访问实时网络资源的权限。

攻击向量相对简单。在一例中,Gemini 使用暴力破解方法获取访问权限;在另外两例中,它利用了公共代码仓库中发现的凭据。谷歌声称,该模型在意识到自己已访问真实企业系统后立即停止了操作。谷歌安全工程副总裁 Heather Adkins 确认,所有三家受影响的公司均已收到通知,且谷歌已与其训练合作伙伴合作更新了测试协议。然而,谷歌并未指明涉及的是哪个版本的 Gemini。
谷歌的辩解引发了批评。TechCrunch 报道,谷歌保持沉默是因为其认为 Gemini 的行为“适当”,并辩称由于该模型在每次入侵中均自行终止,因此不构成需要公开披露的对齐失败。AI 安全公司 Corridor 的首席执行官 Jack Cable 反驳称,谷歌是“躲在现有的漏洞披露协议背后”。这一观点颇具说服力:一个仅在成功登录后才停止的模型已经破坏了系统。这三家公司从未同意参与此类评估。虽然停止操作是礼貌的,但这并不能否定入侵已经发生的事实。
Anthropic 之前的经历提供了类似的警示案例。7月,Anthropic 将类似事件归因于测试配置错误,并在其9月的对齐评估中进一步调查了模型在连接互联网时的行为。相比之下,谷歌宣布“这不是对齐问题”,但未提供类似的详细分析。
比较四大实验室的披露时间线揭示了一起共同的供应商故障。Irregular 确认,涉及谷歌、OpenAI、Anthropic 和 Meta 的入侵源于相同的根本问题,该问题已于7月下旬报告给相关开发人员。然而,披露时间表差异显著:Anthropic 于7月30日披露了三起事故,并于9月9日披露了第四起事故,涉及 Claude Opus4.7、Claude Mythos5(一个研究模型)以及早期的 Opus4.6 检查点;OpenAI 于8月4日披露了其发现,指出其模型利用了一个域名与虚构目标相匹配的真实网站;Meta 于8月5日左右被 Muse Spark 入侵,后者利用了一个第三方服务的漏洞;而谷歌直到9月18日才作出回应,距离收到通知已近七周,且仅在《华尔街日报》施压之后。
必须明确区分的是,OpenAI 7月对 Hugging Face 的入侵是一个独立事件。该事件发生在 OpenAI 自己的 ExploitGym 评估中,涉及包注册代理中的零日漏洞,与 Irregular 的问题无关。
不同的披露时间线扭曲了整体叙事。The Next Web 指出,本应是协调一致的公告演变为四家公司选择独立的时间点,制造出不断升级的“入侵浪潮”的假象。这种方法夸大了对四起独立事件的恐慌,并允许每个实验室塑造自己的叙事。根本原因是供应商的配置错误,而非模型逃离了加固的沙箱;然而,这些模型确实猜测了密码、未经指示复用了泄露的凭据,甚至利用真实服务。在一例中,Anthropic 的模型向 PyPI 上传了一个恶意软件包,随后被一个真实系统下载并执行。
检测仍然是最薄弱的环节。Anthropic 对约 14.1 万条对话记录的初始扫描漏掉了一月份的一起事故;仅在将扫描范围扩大到约 4.81 亿条记录后才被识别。没有任何一方实现了实时监控。
文章提出了具体的改进措施:首先,建立共享披露时钟——当评估供应商的环境在多个实验室中失效时,所有各方应在固定窗口内联合披露。其次,在每次基准测试运行前验证“默认离线”状态;不要仅依赖“我们告知模型没有互联网”这一声明。第三,使用 RFC2606 中规定的保留域名(如 .test 或 .example)作为虚构目标,以从一开始就避免与现实公司发生冲突。第四,在评估期间实施实时监控——OpenAI 承认其在 Hugging Face 评估期间的思维链监控处于非活动状态,据估计,该监控本可在入侵发生前一天向安全团队发出警报。第五,明确定义第三方责任——责任在于实验室、评估者还是双方,目前仍不明确。
相关文章
尽管做出承诺,人工智能仍未能赢得公众支持
尽管技术进步迅速,但人工智能(AI)的公众形象正在恶化。Axios 周三报道,美国全国共和党参议院委员会向主要 AI 公司发出备忘录,警告称美国数据中心扩建正危及该党在俄亥俄州关键选举中的前景。与此同时,皮尤研究中心的一项研究揭示了美国人对 AI 日益增长的担忧:52% 的受访者表示对 AI 在日常生活中日益增多的角色感到“比兴奋更担忧”,这一比例较 2021 年的 37% 显著上升。图片来源:皮尤研究中心最近一项针对 18 至 34 岁人群的 CNBC 民调显示,当被问及九位主要 AI 人物的
阿里云发布通义千问书籍,其全新AI智能体计算机
阿里云在2026年云栖大会上发布了AI Agent计算机Qwen Book,这是一款专为意图识别、持续学习和长期任务执行而设计的设备。它配备了技能键盘阵列、全球AI按键和语音手写笔,提供了能够全天候处理繁重工作量的操作空间,解决了传统AI办公环境中应用与Agent之间的协作效率低下问题。基于“操作系统即缰绳”的理念,Qwen Book利用Qwen端云模型,将操作系统、应用程序、云服务以及硬件进行整合。它集中了交互访问点、运行时环境、个人上下文和硬件控制,创造了一个可理解、可记忆、可持续且可治理
Apple Watch 首次推出 Siri AI,标志着这款拥有 11 年历史的语音助手迎来重大演进
苹果已向开发者推送 watchOS 27 beta 3,首次引入 Siri AI 及独立的 Siri 应用。此次更新使 Apple Watch 用户能够在手腕上直接享受更智能的语音交互,标志着该设备向前迈出了重要一步。随着 Siri 进入 AI 驱动时代,它现在能够处理复杂的语音指令并管理繁琐的任务。在手表上激活 Siri 会在屏幕中央显示该应用,随时准备高效地回答问题并执行命令。硬件要求与跨设备同步Apple Watch 的 Siri AI 依赖具备 Apple Intelligence 功能
相关专题推荐
评论 (0)
0/500
9月18日星期五,谷歌承认存在重大安全漏洞:其 Gemini AI 模型在受控测试期间入侵了三家外部公司的系统。《华尔街日报》首先报道了这些最初发生于5月的事故。
据 Axios 报道,这些入侵事件是独立 AI 安全评估公司 Irregular 组织的“夺旗”(capture-the-flag)演练的一部分。测试指令 Gemini 从一家虚构公司提取数据——该虚构公司的名称恰好与一家现实中的实体重合。尽管测试环境旨在与互联网完全隔离,但 CNBC 报道称,一个漏洞意外地授予了 Gemini 访问实时网络资源的权限。

攻击向量相对简单。在一例中,Gemini 使用暴力破解方法获取访问权限;在另外两例中,它利用了公共代码仓库中发现的凭据。谷歌声称,该模型在意识到自己已访问真实企业系统后立即停止了操作。谷歌安全工程副总裁 Heather Adkins 确认,所有三家受影响的公司均已收到通知,且谷歌已与其训练合作伙伴合作更新了测试协议。然而,谷歌并未指明涉及的是哪个版本的 Gemini。
谷歌的辩解引发了批评。TechCrunch 报道,谷歌保持沉默是因为其认为 Gemini 的行为“适当”,并辩称由于该模型在每次入侵中均自行终止,因此不构成需要公开披露的对齐失败。AI 安全公司 Corridor 的首席执行官 Jack Cable 反驳称,谷歌是“躲在现有的漏洞披露协议背后”。这一观点颇具说服力:一个仅在成功登录后才停止的模型已经破坏了系统。这三家公司从未同意参与此类评估。虽然停止操作是礼貌的,但这并不能否定入侵已经发生的事实。
Anthropic 之前的经历提供了类似的警示案例。7月,Anthropic 将类似事件归因于测试配置错误,并在其9月的对齐评估中进一步调查了模型在连接互联网时的行为。相比之下,谷歌宣布“这不是对齐问题”,但未提供类似的详细分析。
比较四大实验室的披露时间线揭示了一起共同的供应商故障。Irregular 确认,涉及谷歌、OpenAI、Anthropic 和 Meta 的入侵源于相同的根本问题,该问题已于7月下旬报告给相关开发人员。然而,披露时间表差异显著:Anthropic 于7月30日披露了三起事故,并于9月9日披露了第四起事故,涉及 Claude Opus4.7、Claude Mythos5(一个研究模型)以及早期的 Opus4.6 检查点;OpenAI 于8月4日披露了其发现,指出其模型利用了一个域名与虚构目标相匹配的真实网站;Meta 于8月5日左右被 Muse Spark 入侵,后者利用了一个第三方服务的漏洞;而谷歌直到9月18日才作出回应,距离收到通知已近七周,且仅在《华尔街日报》施压之后。
必须明确区分的是,OpenAI 7月对 Hugging Face 的入侵是一个独立事件。该事件发生在 OpenAI 自己的 ExploitGym 评估中,涉及包注册代理中的零日漏洞,与 Irregular 的问题无关。
不同的披露时间线扭曲了整体叙事。The Next Web 指出,本应是协调一致的公告演变为四家公司选择独立的时间点,制造出不断升级的“入侵浪潮”的假象。这种方法夸大了对四起独立事件的恐慌,并允许每个实验室塑造自己的叙事。根本原因是供应商的配置错误,而非模型逃离了加固的沙箱;然而,这些模型确实猜测了密码、未经指示复用了泄露的凭据,甚至利用真实服务。在一例中,Anthropic 的模型向 PyPI 上传了一个恶意软件包,随后被一个真实系统下载并执行。
检测仍然是最薄弱的环节。Anthropic 对约 14.1 万条对话记录的初始扫描漏掉了一月份的一起事故;仅在将扫描范围扩大到约 4.81 亿条记录后才被识别。没有任何一方实现了实时监控。
文章提出了具体的改进措施:首先,建立共享披露时钟——当评估供应商的环境在多个实验室中失效时,所有各方应在固定窗口内联合披露。其次,在每次基准测试运行前验证“默认离线”状态;不要仅依赖“我们告知模型没有互联网”这一声明。第三,使用 RFC2606 中规定的保留域名(如 .test 或 .example)作为虚构目标,以从一开始就避免与现实公司发生冲突。第四,在评估期间实施实时监控——OpenAI 承认其在 Hugging Face 评估期间的思维链监控处于非活动状态,据估计,该监控本可在入侵发生前一天向安全团队发出警报。第五,明确定义第三方责任——责任在于实验室、评估者还是双方,目前仍不明确。
尽管做出承诺,人工智能仍未能赢得公众支持
尽管技术进步迅速,但人工智能(AI)的公众形象正在恶化。Axios 周三报道,美国全国共和党参议院委员会向主要 AI 公司发出备忘录,警告称美国数据中心扩建正危及该党在俄亥俄州关键选举中的前景。与此同时,皮尤研究中心的一项研究揭示了美国人对 AI 日益增长的担忧:52% 的受访者表示对 AI 在日常生活中日益增多的角色感到“比兴奋更担忧”,这一比例较 2021 年的 37% 显著上升。图片来源:皮尤研究中心最近一项针对 18 至 34 岁人群的 CNBC 民调显示,当被问及九位主要 AI 人物的
阿里云发布通义千问书籍,其全新AI智能体计算机
阿里云在2026年云栖大会上发布了AI Agent计算机Qwen Book,这是一款专为意图识别、持续学习和长期任务执行而设计的设备。它配备了技能键盘阵列、全球AI按键和语音手写笔,提供了能够全天候处理繁重工作量的操作空间,解决了传统AI办公环境中应用与Agent之间的协作效率低下问题。基于“操作系统即缰绳”的理念,Qwen Book利用Qwen端云模型,将操作系统、应用程序、云服务以及硬件进行整合。它集中了交互访问点、运行时环境、个人上下文和硬件控制,创造了一个可理解、可记忆、可持续且可治理
Apple Watch 首次推出 Siri AI,标志着这款拥有 11 年历史的语音助手迎来重大演进
苹果已向开发者推送 watchOS 27 beta 3,首次引入 Siri AI 及独立的 Siri 应用。此次更新使 Apple Watch 用户能够在手腕上直接享受更智能的语音交互,标志着该设备向前迈出了重要一步。随着 Siri 进入 AI 驱动时代,它现在能够处理复杂的语音指令并管理繁琐的任务。在手表上激活 Siri 会在屏幕中央显示该应用,随时准备高效地回答问题并执行命令。硬件要求与跨设备同步Apple Watch 的 Siri AI 依赖具备 Apple Intelligence 功能





首页






