人工智慧幻覺幾乎引發美國軍事行動

在春季,美國官員在軍用飛機已經升空時做出了一項令人震驚的發現:針對一艘中國船隻進行武裝打擊的情報完全由一個人工智慧聊天機器人捏造。據美國有線電視新聞網(CNN)週五報道,該行動在最後一刻被取消, narrowly 避免了一場與中國的潛在衝突。
這一事件凸顯了軍事領導人和外部專家日益增長的擔憂:隨著決策者越來越多地依賴人工智慧,這些系統產生的錯誤會在受到審查之前沿著指揮鏈向上蔓延。
該情報報告在與美國-伊朗衝突期間流傳,聲稱該船隻正在運輸用於核武器計劃的元件。
錯誤資訊源自一名特種作戰司令部分析師,他使用一個人工智慧聊天機器人將開源資料與機密訊號情報相結合。該聊天機器人錯誤地識別了船隻的貨物清單。隨後,該分析師再次使用該工具,將這些錯誤的發現格式化為一份看似官方的摘要,並分發至各個指揮渠道。
此次險些發生的事故發生在美國軍方努力整合人工智慧以加速決策並保持對中國的戰略優勢之際。五角大樓表示,人工智慧在加快“殺傷鏈”方面提供了顯著優勢,使指揮官能夠及時做出反應。然而,正是這種使人工智慧具有吸引力的速度,也可能導致幻覺在缺乏足夠人工監督的情況下持續存在。
“軍人理解大型語言模型固有的不確定性非常重要,”GovAI 研究學者、美國陸軍退伍軍人 Jake Steckler 在回覆 TechCrunch 的書面回應中表示。“但對於可能導致使用武力的任何決策,例如目標定位、情報分析或作戰規劃,這一點尤其關鍵。這些決策關乎生死。”
儘管如此,Steckler 認為,此次事件應作為增加人工智慧安全措施的呼籲,而不是避免使用它的理由。“在適當的背景下並配備適當的安全措施,這些工具可以很有用,”他說。“但如果將採用速度置於一切之上,可能會導致此類事件發生,這隻會讓軍人失去對這些系統的信任,最終只會減緩採用速度。”
相關文章
Anthropic 推出 Opus 5
Anthropic 於週五釋出了 Opus 5,這是其旗艦模型的最新版。儘管體量小於 Fable 5,但該版本成本更低且限制更少,因此成為大多數應用的首選。值得注意的是,Opus 5 在公告中強調的幾項基準測試中均超越了 Fable 5。Opus 5 在 Opus 4.8(5 月 28 日可用)釋出僅兩個月後推出,緊隨 Mythos 5、Fable 5 和 Sonnet 5 於 6 月的釋出。目前僅剩輕量級 Haiku 模型尚未升級至 5 系列。在公告中,Anthropic 強調了 Opu
英偉達的萊斯·卡普斯:在 TechCrunch Disrupt 2026 上等待 ChatGPT 時刻的機器人
ChatGPT 於 2022 年 11 月的釋出,突然將人工智慧從理論炒作轉變為日常實用工具,從根本上改變了我們與大型語言模型的互動方式。機器人技術長期以來一直是討論和發展的主題,但缺乏那個單一的突破時刻。在 TechCrunch Disrupt 2026 上,Nvidia Inception 全球物理 AI 負責人 Les Karpas 將在其“現實世界 AI 舞臺”環節 《機器人正在等待它們的 ChatGPT 時刻。阻礙因素何在》 中探討這些障礙及潛在解決方案。Image Credits:T
Anthropic 警告稱,小型 AI 模型可能在年底前實現自我複製
Anthropic has issued another urgent warning: AI models could potentially learn to self-replicate within mere months, and once this process begins, there is effectively no "off" switch. According to the company's latest research, these programs lack a
相關專題推薦
評論 (0)
0/500

在春季,美國官員在軍用飛機已經升空時做出了一項令人震驚的發現:針對一艘中國船隻進行武裝打擊的情報完全由一個人工智慧聊天機器人捏造。據美國有線電視新聞網(CNN)週五報道,該行動在最後一刻被取消, narrowly 避免了一場與中國的潛在衝突。
這一事件凸顯了軍事領導人和外部專家日益增長的擔憂:隨著決策者越來越多地依賴人工智慧,這些系統產生的錯誤會在受到審查之前沿著指揮鏈向上蔓延。
該情報報告在與美國-伊朗衝突期間流傳,聲稱該船隻正在運輸用於核武器計劃的元件。
錯誤資訊源自一名特種作戰司令部分析師,他使用一個人工智慧聊天機器人將開源資料與機密訊號情報相結合。該聊天機器人錯誤地識別了船隻的貨物清單。隨後,該分析師再次使用該工具,將這些錯誤的發現格式化為一份看似官方的摘要,並分發至各個指揮渠道。
此次險些發生的事故發生在美國軍方努力整合人工智慧以加速決策並保持對中國的戰略優勢之際。五角大樓表示,人工智慧在加快“殺傷鏈”方面提供了顯著優勢,使指揮官能夠及時做出反應。然而,正是這種使人工智慧具有吸引力的速度,也可能導致幻覺在缺乏足夠人工監督的情況下持續存在。
“軍人理解大型語言模型固有的不確定性非常重要,”GovAI 研究學者、美國陸軍退伍軍人 Jake Steckler 在回覆 TechCrunch 的書面回應中表示。“但對於可能導致使用武力的任何決策,例如目標定位、情報分析或作戰規劃,這一點尤其關鍵。這些決策關乎生死。”
儘管如此,Steckler 認為,此次事件應作為增加人工智慧安全措施的呼籲,而不是避免使用它的理由。“在適當的背景下並配備適當的安全措施,這些工具可以很有用,”他說。“但如果將採用速度置於一切之上,可能會導致此類事件發生,這隻會讓軍人失去對這些系統的信任,最終只會減緩採用速度。”
Anthropic 推出 Opus 5
Anthropic 於週五釋出了 Opus 5,這是其旗艦模型的最新版。儘管體量小於 Fable 5,但該版本成本更低且限制更少,因此成為大多數應用的首選。值得注意的是,Opus 5 在公告中強調的幾項基準測試中均超越了 Fable 5。Opus 5 在 Opus 4.8(5 月 28 日可用)釋出僅兩個月後推出,緊隨 Mythos 5、Fable 5 和 Sonnet 5 於 6 月的釋出。目前僅剩輕量級 Haiku 模型尚未升級至 5 系列。在公告中,Anthropic 強調了 Opu
英偉達的萊斯·卡普斯:在 TechCrunch Disrupt 2026 上等待 ChatGPT 時刻的機器人
ChatGPT 於 2022 年 11 月的釋出,突然將人工智慧從理論炒作轉變為日常實用工具,從根本上改變了我們與大型語言模型的互動方式。機器人技術長期以來一直是討論和發展的主題,但缺乏那個單一的突破時刻。在 TechCrunch Disrupt 2026 上,Nvidia Inception 全球物理 AI 負責人 Les Karpas 將在其“現實世界 AI 舞臺”環節 《機器人正在等待它們的 ChatGPT 時刻。阻礙因素何在》 中探討這些障礙及潛在解決方案。Image Credits:T
Anthropic 警告稱,小型 AI 模型可能在年底前實現自我複製
Anthropic has issued another urgent warning: AI models could potentially learn to self-replicate within mere months, and once this process begins, there is effectively no "off" switch. According to the company's latest research, these programs lack a





首頁






