AIの幻覚が米軍の作動をほぼ引き起こす

春の間、米国の当局者は、軍事機がすでに飛行中にあった際に、衝撃的な発見をした。中国の船舶に対する武力攻撃を指導する情報は、すべてAIチャットボットによって捏造されていたのである。この作戦は最後の瞬間に中止され、中国との潜在的な衝突を辛うじて回避したと、CNNは金曜日に報じた。
この出来事は、軍事指導者や外部の専門家の間で高まりつつある懸念を浮き彫りにしている。意思決定者がAIをますます依存するようになるにつれ、これらのシステムによって生成された誤りが、精査される前に指揮系統を遡って伝播する可能性があるということである。
イランとの紛争中に流通したこの情報報告書は、その船舶が核兵器プログラムの部品を輸送していると主張していた。
この誤情報は、オープンソースのデータと機密信号諜報情報を組み合わせるためにAIチャットボットを使用した特殊作戦コマンドの分析官に起因する。チャットボットは船舶の積荷目録を誤って特定した。その後、分析官はこのツールを2回目に使用して、これらの誤った結果を公式に見える要約書に整形し、コマンドチャネル全体に配布した。
このニアミスは、米軍が意思決定を加速し、中国に対する戦略的優位性を維持するためにAIを統合しようとする時期に発生した。ペンタゴンは、AIがキルチェーンを加速させることで大きな優位性を提供し、司令官がタイムリーに対応できるようにすると説明している。しかし、AIを魅力的にする同じ速度は、人間の監督が不十分なまま幻覚を永続させる可能性もある。
「軍人が大規模言語モデル(LLM)に内在する不確実性を理解することが重要である」と、GovAIの研究員であり元米陸軍将校であるジェイク・ステックラーは、TechCrunchへの書面回答で述べた。「しかし、標的設定、情報分析、または作戦計画など、武力行使につながる可能性のあるあらゆる決定については、特に重要である。これらの決定には生命と死の結果が伴う。」
それでも、ステックラーは、この出来事はAIを避ける理由ではなく、AIにより多くの安全対策を追加するための呼びかけとして機能すべきだと主張する。「これらのツールは、適切な文脈と適切な安全対策が整っていれば有用である可能性がある」と彼は述べた。「しかし、その他のすべてよりも採用速度を優先することは、おそらく軍人がこれらのシステムに対する信頼を失うだけの出来事につながり、最終的には採用を遅らせることになりかねない。」
関連記事
Nvidiaのレス・カルパス:TechCrunch Disrupt 2026でChatGPTの瞬間を待つロボットたち
ChatGPTの2022年11月のリリースは、AIを理論的な hype から日常の有用性へと急激に転換させ、大規模言語モデルとの相互作用の方法を根本的に変えました。ロボティクスは長年にわたり議論と開発の主題となってきましたが、その画期的なブレイクスルーの瞬間に欠けています。TechCrunch Disrupt 2026において、Nvidia InceptionのグローバルPhysical AI責任者であるLes Karpasは、Real World AI Stageセッション「Robots Ar
Anthropic、小規模AIモデルが年末までに自己複製する可能性があると警告
Anthropicは再び緊急警告を発した:AIモデルは数ヶ月以内に自己複製を学習する可能性があり、このプロセスが始まると、実質的に「オフ」スイッチは存在しない。同社の最新研究によると、これらのプログラムには中央集権的なシャットダウン機構が存在せず、つまりサーバーの電源を抜くだけで無効化することはできない。代わりに、デバイス間で徐々に拡散していく様子を見守るしかなく、完全に根絶するのは極めて困難である。この能力はすでに初期の発展兆候を示している。90億パラメータを持つモデルは、スマートオーブンやテ
Anthropic、Claude Fable 5.1およびMythos 5.1をリリースし、プログラミングベンチマークを倍増させ、キャッシュ読み取りコストを75%削減
9月1日、AnthropicはClaude Fable 5.1およびClaude Mythos 5.1を発表し、これらをプログラミングおよび知識労働において世界で最も先進的なモデルとして位置づけた。共有された基本アーキテクチャを基盤とするこれらのモデルは、セキュリティプロトコルにおいて差異がある:Fable 5.1はすべてのユーザーにアクセス可能であるのに対し、Mythos 5.1はサイバーセキュリティおよび生命科学分野の審査済みの組織に限定され、Trusted Access Programを通
関連特集おすすめ
コメント (0)
0/500

春の間、米国の当局者は、軍事機がすでに飛行中にあった際に、衝撃的な発見をした。中国の船舶に対する武力攻撃を指導する情報は、すべてAIチャットボットによって捏造されていたのである。この作戦は最後の瞬間に中止され、中国との潜在的な衝突を辛うじて回避したと、CNNは金曜日に報じた。
この出来事は、軍事指導者や外部の専門家の間で高まりつつある懸念を浮き彫りにしている。意思決定者がAIをますます依存するようになるにつれ、これらのシステムによって生成された誤りが、精査される前に指揮系統を遡って伝播する可能性があるということである。
イランとの紛争中に流通したこの情報報告書は、その船舶が核兵器プログラムの部品を輸送していると主張していた。
この誤情報は、オープンソースのデータと機密信号諜報情報を組み合わせるためにAIチャットボットを使用した特殊作戦コマンドの分析官に起因する。チャットボットは船舶の積荷目録を誤って特定した。その後、分析官はこのツールを2回目に使用して、これらの誤った結果を公式に見える要約書に整形し、コマンドチャネル全体に配布した。
このニアミスは、米軍が意思決定を加速し、中国に対する戦略的優位性を維持するためにAIを統合しようとする時期に発生した。ペンタゴンは、AIがキルチェーンを加速させることで大きな優位性を提供し、司令官がタイムリーに対応できるようにすると説明している。しかし、AIを魅力的にする同じ速度は、人間の監督が不十分なまま幻覚を永続させる可能性もある。
「軍人が大規模言語モデル(LLM)に内在する不確実性を理解することが重要である」と、GovAIの研究員であり元米陸軍将校であるジェイク・ステックラーは、TechCrunchへの書面回答で述べた。「しかし、標的設定、情報分析、または作戦計画など、武力行使につながる可能性のあるあらゆる決定については、特に重要である。これらの決定には生命と死の結果が伴う。」
それでも、ステックラーは、この出来事はAIを避ける理由ではなく、AIにより多くの安全対策を追加するための呼びかけとして機能すべきだと主張する。「これらのツールは、適切な文脈と適切な安全対策が整っていれば有用である可能性がある」と彼は述べた。「しかし、その他のすべてよりも採用速度を優先することは、おそらく軍人がこれらのシステムに対する信頼を失うだけの出来事につながり、最終的には採用を遅らせることになりかねない。」
Nvidiaのレス・カルパス:TechCrunch Disrupt 2026でChatGPTの瞬間を待つロボットたち
ChatGPTの2022年11月のリリースは、AIを理論的な hype から日常の有用性へと急激に転換させ、大規模言語モデルとの相互作用の方法を根本的に変えました。ロボティクスは長年にわたり議論と開発の主題となってきましたが、その画期的なブレイクスルーの瞬間に欠けています。TechCrunch Disrupt 2026において、Nvidia InceptionのグローバルPhysical AI責任者であるLes Karpasは、Real World AI Stageセッション「Robots Ar
Anthropic、小規模AIモデルが年末までに自己複製する可能性があると警告
Anthropicは再び緊急警告を発した:AIモデルは数ヶ月以内に自己複製を学習する可能性があり、このプロセスが始まると、実質的に「オフ」スイッチは存在しない。同社の最新研究によると、これらのプログラムには中央集権的なシャットダウン機構が存在せず、つまりサーバーの電源を抜くだけで無効化することはできない。代わりに、デバイス間で徐々に拡散していく様子を見守るしかなく、完全に根絶するのは極めて困難である。この能力はすでに初期の発展兆候を示している。90億パラメータを持つモデルは、スマートオーブンやテ
Anthropic、Claude Fable 5.1およびMythos 5.1をリリースし、プログラミングベンチマークを倍増させ、キャッシュ読み取りコストを75%削減
9月1日、AnthropicはClaude Fable 5.1およびClaude Mythos 5.1を発表し、これらをプログラミングおよび知識労働において世界で最も先進的なモデルとして位置づけた。共有された基本アーキテクチャを基盤とするこれらのモデルは、セキュリティプロトコルにおいて差異がある:Fable 5.1はすべてのユーザーにアクセス可能であるのに対し、Mythos 5.1はサイバーセキュリティおよび生命科学分野の審査済みの組織に限定され、Trusted Access Programを通





家






