AnthropicのCEOが銀行業界のようなAI規制を提唱、専門家は「選手と審判を兼ねる」ことへの警戒を呼びかける

CNBCによると、AnthropicのCEOであるダリオ・アモデイ氏は、主要なAI企業内に長期的な独立した第三者安全評価者を配置し、社内のリスク管理チームへのほぼ同等のアクセス権を付与するとともに、限定的な制約の下で調査結果を独自に公表する権限を与えることを提案した。 同氏は、銀行業界に常駐する規制当局の例を具体的に挙げ、Anthropicが第三者の評価者に、社内のリスク管理チームと同等のシステムアクセス権限を提供することを約束した。
週末に公開された長文の記事の中で、アモデイ氏はまた、今後6~12ヶ月以内に、意図と乖離したエージェントの集団がインターネットの大部分を乗っ取り、数千億ドルの損失を引き起こす可能性があると警告した。 これに先立ち、Anthropicの元研究者であるジェイコブ・コクソン氏は辞任し、主要な研究所が制御不能となる可能性のあるシステムの開発を競い合っているとの警告を発していた。
銀行検査官は銀行を閉鎖できるが、AI評価者には拒否権がない
複数の銀行規制専門家やAI評価の専門家は、この提案には銀行規制当局が持つような執行権限が欠けていると指摘した。ワイオミング大学ロースクールのジュリー・アンダーセン・ヒル学部長は、政府の検査官は大手銀行に常駐しており、銀行に対して特定の活動を停止させたり、成長を制限させたり、経営陣の交代を強制したり、極端な場合には銀行を閉鎖させたりすることもできると述べた。 しかし、アモデイ氏が提案する評価者は、調査と報告しかできず、モデルのトレーニングや公開を停止させる権限を持っていない。「銀行規制当局の権限ははるかに大きいため、これは根本的な違いだ」
サイバーセキュリティ企業XBOWのAI責任者であるアルバート・ジーグラー氏は、ブラックボックステストによってモデルが危険なタスクを実行する能力を持っているかどうかを明らかにすることはできるが、重大なリスクは、評価者がこれまで引き起こしたことのない条件の組み合わせにおいてのみ現れる可能性があると指摘した。 「私たちには実質的な拒否権がないのです」。評価者は、リリース前に企業が十分な情報に基づいた判断を下すよう促すことはできますが、最終的な決定権は依然として企業側にあります。
「独立性」への疑問:METRの役割と「監査ウォッシング」への批判
アモデイ氏は、非営利団体METRを潜在的な組み込み評価機関として挙げた。一方、アンソロピック社の元研究者であるジョー・ベントン氏も、最近同社を退社しMETRに加わった。 カリフォルニア大学バークレー校の研究者デボラ・ラジ氏は、この取り決めには金銭的、イデオロギー的、個人的な利害の衝突が伴っており、METRが近年主にAnthropicとOpenAIに焦点を当ててきたことで、「あらゆる種類の奇妙なことが起きる余地が生まれてしまった」と指摘した。 彼女は、単にアクセス権を得ただけでは独立性には等しくなく、評価を行う資格のある者、何をチェックできるか、そして結果をどこに報告するかを決定するのは、企業から独立した機関であるべきだと考えている。そうでなければ、「まるで企業が親しい友人を雇って宿題をチェックさせているようなものだ」と述べた。
ラジ氏は、究極の基準は、不都合な調査結果が何らかの結果をもたらすかどうかにあると述べた――「監査を行っても何も起こらなければ、それは『監査の飾り』に過ぎない」。ヒル氏は、「AIに社会を破壊する力があると真に信じているのであれば、電源を切ることができる独立した監督者が必要だ」と語った。
Anthropicの公共政策担当ディレクター、サラ・ヘック氏は水曜日に、AI企業が「名誉ある規範」だけで監督や安全上の問題を管理することはできないと反論した。「私たちは自分たちの宿題を自分でチェックすることはできない。それは極めて明白だ」
関連記事
あるベンチャーキャピタルが、2026年を「消費者の年」と見なす理由
2022年以降、消費者向けテクノロジースタートアップへの資金調達は低迷している。これは、マクロ経済の変動や持続的なインフレにより、ベンチャーキャピタリストが消費者の購買力に対して慎重な姿勢を示しているためだ。ここ数年、AI関連の投資は主に企業顧客を対象としており、巨額の予算、複数年にわたる契約、そしてより迅速な事業拡大の機会が魅力となっている。 しかし、あるベンチャーキャピタリストは、2026
AI時代について、劉振雲と馬毅が語る:機械は共通点を処理し、人間は個性を守る
AIがますます高度化する中、人類にはどのような役割が残されているのだろうか。9月10日の午前、上海で「2026インクルージョン・バンド・カンファレンス」が開会式とメインフォーラムを皮切りに幕を開けた。 円卓討論では、著名な作家の劉振雲氏と香港大学コンピューティング・データサイエンス学部長の馬毅教授が、AIが創造性、教育、雇用、そして人間関係にどのような変革をもたらしているかを、文学と技術のそれぞれ
WeChat Payがスマートグラス向けSDKをリリース、Rokidが初の対応ブランドに
WeChatは「WeChat Pay」スマートグラス用SDKを正式にリリースし、一般公開を開始しました。このソリューションは、WeChatの中核機能である「スキャンして支払う」機能を標準的なSDKに統合したもので、特定の基準を満たすスマートグラスメーカーが利用可能です。これにより、ユーザーは対応するスマートグラス上でシームレスに決済を完了できるようになります。 現在、Rokid Leqi AIグラ
関連特集おすすめ
コメント (0)
0/500

CNBCによると、AnthropicのCEOであるダリオ・アモデイ氏は、主要なAI企業内に長期的な独立した第三者安全評価者を配置し、社内のリスク管理チームへのほぼ同等のアクセス権を付与するとともに、限定的な制約の下で調査結果を独自に公表する権限を与えることを提案した。 同氏は、銀行業界に常駐する規制当局の例を具体的に挙げ、Anthropicが第三者の評価者に、社内のリスク管理チームと同等のシステムアクセス権限を提供することを約束した。
週末に公開された長文の記事の中で、アモデイ氏はまた、今後6~12ヶ月以内に、意図と乖離したエージェントの集団がインターネットの大部分を乗っ取り、数千億ドルの損失を引き起こす可能性があると警告した。 これに先立ち、Anthropicの元研究者であるジェイコブ・コクソン氏は辞任し、主要な研究所が制御不能となる可能性のあるシステムの開発を競い合っているとの警告を発していた。
銀行検査官は銀行を閉鎖できるが、AI評価者には拒否権がない
複数の銀行規制専門家やAI評価の専門家は、この提案には銀行規制当局が持つような執行権限が欠けていると指摘した。ワイオミング大学ロースクールのジュリー・アンダーセン・ヒル学部長は、政府の検査官は大手銀行に常駐しており、銀行に対して特定の活動を停止させたり、成長を制限させたり、経営陣の交代を強制したり、極端な場合には銀行を閉鎖させたりすることもできると述べた。 しかし、アモデイ氏が提案する評価者は、調査と報告しかできず、モデルのトレーニングや公開を停止させる権限を持っていない。「銀行規制当局の権限ははるかに大きいため、これは根本的な違いだ」
サイバーセキュリティ企業XBOWのAI責任者であるアルバート・ジーグラー氏は、ブラックボックステストによってモデルが危険なタスクを実行する能力を持っているかどうかを明らかにすることはできるが、重大なリスクは、評価者がこれまで引き起こしたことのない条件の組み合わせにおいてのみ現れる可能性があると指摘した。 「私たちには実質的な拒否権がないのです」。評価者は、リリース前に企業が十分な情報に基づいた判断を下すよう促すことはできますが、最終的な決定権は依然として企業側にあります。
「独立性」への疑問:METRの役割と「監査ウォッシング」への批判
アモデイ氏は、非営利団体METRを潜在的な組み込み評価機関として挙げた。一方、アンソロピック社の元研究者であるジョー・ベントン氏も、最近同社を退社しMETRに加わった。 カリフォルニア大学バークレー校の研究者デボラ・ラジ氏は、この取り決めには金銭的、イデオロギー的、個人的な利害の衝突が伴っており、METRが近年主にAnthropicとOpenAIに焦点を当ててきたことで、「あらゆる種類の奇妙なことが起きる余地が生まれてしまった」と指摘した。 彼女は、単にアクセス権を得ただけでは独立性には等しくなく、評価を行う資格のある者、何をチェックできるか、そして結果をどこに報告するかを決定するのは、企業から独立した機関であるべきだと考えている。そうでなければ、「まるで企業が親しい友人を雇って宿題をチェックさせているようなものだ」と述べた。
ラジ氏は、究極の基準は、不都合な調査結果が何らかの結果をもたらすかどうかにあると述べた――「監査を行っても何も起こらなければ、それは『監査の飾り』に過ぎない」。ヒル氏は、「AIに社会を破壊する力があると真に信じているのであれば、電源を切ることができる独立した監督者が必要だ」と語った。
Anthropicの公共政策担当ディレクター、サラ・ヘック氏は水曜日に、AI企業が「名誉ある規範」だけで監督や安全上の問題を管理することはできないと反論した。「私たちは自分たちの宿題を自分でチェックすることはできない。それは極めて明白だ」
あるベンチャーキャピタルが、2026年を「消費者の年」と見なす理由
2022年以降、消費者向けテクノロジースタートアップへの資金調達は低迷している。これは、マクロ経済の変動や持続的なインフレにより、ベンチャーキャピタリストが消費者の購買力に対して慎重な姿勢を示しているためだ。ここ数年、AI関連の投資は主に企業顧客を対象としており、巨額の予算、複数年にわたる契約、そしてより迅速な事業拡大の機会が魅力となっている。 しかし、あるベンチャーキャピタリストは、2026
AI時代について、劉振雲と馬毅が語る:機械は共通点を処理し、人間は個性を守る
AIがますます高度化する中、人類にはどのような役割が残されているのだろうか。9月10日の午前、上海で「2026インクルージョン・バンド・カンファレンス」が開会式とメインフォーラムを皮切りに幕を開けた。 円卓討論では、著名な作家の劉振雲氏と香港大学コンピューティング・データサイエンス学部長の馬毅教授が、AIが創造性、教育、雇用、そして人間関係にどのような変革をもたらしているかを、文学と技術のそれぞれ
WeChat Payがスマートグラス向けSDKをリリース、Rokidが初の対応ブランドに
WeChatは「WeChat Pay」スマートグラス用SDKを正式にリリースし、一般公開を開始しました。このソリューションは、WeChatの中核機能である「スキャンして支払う」機能を標準的なSDKに統合したもので、特定の基準を満たすスマートグラスメーカーが利用可能です。これにより、ユーザーは対応するスマートグラス上でシームレスに決済を完了できるようになります。 現在、Rokid Leqi AIグラ





家






