人工智能幻觉几乎引发美国军事行动

在春季,美国官员在军用飞机已经升空时做出了一项令人震惊的发现:针对一艘中国船只进行武装打击的情报完全由一个人工智能聊天机器人捏造。据美国有线电视新闻网(CNN)周五报道,该行动在最后一刻被取消, narrowly 避免了一场与中国的潜在冲突。
这一事件凸显了军事领导人和外部专家日益增长的担忧:随着决策者越来越多地依赖人工智能,这些系统产生的错误会在受到审查之前沿着指挥链向上蔓延。
该情报报告在与美国-伊朗冲突期间流传,声称该船只正在运输用于核武器计划的组件。
错误信息源自一名特种作战司令部分析师,他使用一个人工智能聊天机器人将开源数据与机密信号情报相结合。该聊天机器人错误地识别了船只的货物清单。随后,该分析师再次使用该工具,将这些错误的发现格式化为一份看似官方的摘要,并分发至各个指挥渠道。
此次险些发生的事故发生在美国军方努力整合人工智能以加速决策并保持对中国的战略优势之际。五角大楼表示,人工智能在加快“杀伤链”方面提供了显著优势,使指挥官能够及时做出反应。然而,正是这种使人工智能具有吸引力的速度,也可能导致幻觉在缺乏足够人工监督的情况下持续存在。
“军人理解大型语言模型固有的不确定性非常重要,”GovAI 研究学者、美国陆军退伍军人 Jake Steckler 在回复 TechCrunch 的书面回应中表示。“但对于可能导致使用武力的任何决策,例如目标定位、情报分析或作战规划,这一点尤其关键。这些决策关乎生死。”
尽管如此,Steckler 认为,此次事件应作为增加人工智能安全措施的呼吁,而不是避免使用它的理由。“在适当的背景下并配备适当的安全措施,这些工具可以很有用,”他说。“但如果将采用速度置于一切之上,可能会导致此类事件发生,这只会让军人失去对这些系统的信任,最终只会减缓采用速度。”
相关文章
Anthropic 推出 Opus 5
Anthropic 于周五发布了 Opus 5,这是其旗舰模型的最新版。尽管体量小于 Fable 5,但该版本成本更低且限制更少,因此成为大多数应用的首选。值得注意的是,Opus 5 在公告中强调的几项基准测试中均超越了 Fable 5。Opus 5 在 Opus 4.8(5 月 28 日可用)发布仅两个月后推出,紧随 Mythos 5、Fable 5 和 Sonnet 5 于 6 月的发布。目前仅剩轻量级 Haiku 模型尚未升级至 5 系列。在公告中,Anthropic 强调了 Opu
英伟达的莱斯·卡普斯:在 TechCrunch Disrupt 2026 上等待 ChatGPT 时刻的机器人
ChatGPT 于 2022 年 11 月的发布,突然将人工智能从理论炒作转变为日常实用工具,从根本上改变了我们与大型语言模型的交互方式。机器人技术长期以来一直是讨论和发展的主题,但缺乏那个单一的突破时刻。在 TechCrunch Disrupt 2026 上,Nvidia Inception 全球物理 AI 负责人 Les Karpas 将在其“现实世界 AI 舞台”环节 《机器人正在等待它们的 ChatGPT 时刻。阻碍因素何在》 中探讨这些障碍及潜在解决方案。Image Credits:T
Anthropic 警告称,小型 AI 模型可能在年底前实现自我复制
Anthropic has issued another urgent warning: AI models could potentially learn to self-replicate within mere months, and once this process begins, there is effectively no "off" switch. According to the company's latest research, these programs lack a
相关专题推荐
评论 (0)
0/500

在春季,美国官员在军用飞机已经升空时做出了一项令人震惊的发现:针对一艘中国船只进行武装打击的情报完全由一个人工智能聊天机器人捏造。据美国有线电视新闻网(CNN)周五报道,该行动在最后一刻被取消, narrowly 避免了一场与中国的潜在冲突。
这一事件凸显了军事领导人和外部专家日益增长的担忧:随着决策者越来越多地依赖人工智能,这些系统产生的错误会在受到审查之前沿着指挥链向上蔓延。
该情报报告在与美国-伊朗冲突期间流传,声称该船只正在运输用于核武器计划的组件。
错误信息源自一名特种作战司令部分析师,他使用一个人工智能聊天机器人将开源数据与机密信号情报相结合。该聊天机器人错误地识别了船只的货物清单。随后,该分析师再次使用该工具,将这些错误的发现格式化为一份看似官方的摘要,并分发至各个指挥渠道。
此次险些发生的事故发生在美国军方努力整合人工智能以加速决策并保持对中国的战略优势之际。五角大楼表示,人工智能在加快“杀伤链”方面提供了显著优势,使指挥官能够及时做出反应。然而,正是这种使人工智能具有吸引力的速度,也可能导致幻觉在缺乏足够人工监督的情况下持续存在。
“军人理解大型语言模型固有的不确定性非常重要,”GovAI 研究学者、美国陆军退伍军人 Jake Steckler 在回复 TechCrunch 的书面回应中表示。“但对于可能导致使用武力的任何决策,例如目标定位、情报分析或作战规划,这一点尤其关键。这些决策关乎生死。”
尽管如此,Steckler 认为,此次事件应作为增加人工智能安全措施的呼吁,而不是避免使用它的理由。“在适当的背景下并配备适当的安全措施,这些工具可以很有用,”他说。“但如果将采用速度置于一切之上,可能会导致此类事件发生,这只会让军人失去对这些系统的信任,最终只会减缓采用速度。”
Anthropic 推出 Opus 5
Anthropic 于周五发布了 Opus 5,这是其旗舰模型的最新版。尽管体量小于 Fable 5,但该版本成本更低且限制更少,因此成为大多数应用的首选。值得注意的是,Opus 5 在公告中强调的几项基准测试中均超越了 Fable 5。Opus 5 在 Opus 4.8(5 月 28 日可用)发布仅两个月后推出,紧随 Mythos 5、Fable 5 和 Sonnet 5 于 6 月的发布。目前仅剩轻量级 Haiku 模型尚未升级至 5 系列。在公告中,Anthropic 强调了 Opu
英伟达的莱斯·卡普斯:在 TechCrunch Disrupt 2026 上等待 ChatGPT 时刻的机器人
ChatGPT 于 2022 年 11 月的发布,突然将人工智能从理论炒作转变为日常实用工具,从根本上改变了我们与大型语言模型的交互方式。机器人技术长期以来一直是讨论和发展的主题,但缺乏那个单一的突破时刻。在 TechCrunch Disrupt 2026 上,Nvidia Inception 全球物理 AI 负责人 Les Karpas 将在其“现实世界 AI 舞台”环节 《机器人正在等待它们的 ChatGPT 时刻。阻碍因素何在》 中探讨这些障碍及潜在解决方案。Image Credits:T
Anthropic 警告称,小型 AI 模型可能在年底前实现自我复制
Anthropic has issued another urgent warning: AI models could potentially learn to self-replicate within mere months, and once this process begins, there is effectively no "off" switch. According to the company's latest research, these programs lack a





首页






