Anthropic 在風險上升的情況下實施新的 AI 保護措施

Anthropic 已更新其 Claude AI 聊天機器人的使用政策,以解決日益增加的安全疑慮。除了更嚴格的網路安全規則之外,該公司現在也明確列出不得使用 Claude 開發的危險武器類別。
雖然官方公告並未明確強調其武器政策的變更,但比較新舊使用準則後,發現有重大更新。在此之前,Anthropic 廣泛禁止使用 Claude 來「生產、修改、設計、行銷或散佈武器、爆炸物、危險材料或其他旨在造成人命傷害或損失的系統」。修訂後的政策擴大了這一範圍,明確禁止開發高產量炸藥,以及生物、核、化學和放射(CBRN)武器。
5 月,Anthropic 在推出全新 Claude Opus 4 機型的同時,也推出了「AI 安全等級 3」保護措施。這些防護措施的目的在於提高機型的防越獄能力,並協助防止其協助製造 CBRN 武器。
在公告中,Anthropic 也承認與代理式 AI 工具相關的風險,例如 Computer Use(可讓 Claude 控制使用者的電腦)與 Claude Code(可將 Claude 直接整合至開發人員的終端機)。"該公司表示:「這些強大的功能帶來了新的風險,包括可能被濫用、製造惡意軟體和網路攻擊。
相關內容
- Anthropic 為軍事與情報用途推出全新 Claude 服務
- Google 拋棄不開發 AI 武器的承諾
這家 AI 創辦公司在其使用政策中新增了「請勿損害電腦或網路系統」一節,以解決這些潛在威脅。這一節包括禁止使用 Claude 來發現或利用漏洞、創建或散佈惡意軟體、開發拒絕服務攻擊工具以及類似活動的規則。
此外,Anthropic 也放寬了有關政治內容的政策。該公司不再禁止所有與政治競選和遊說有關的內容創作,現在只禁止將 Claude 用於「欺騙或破壞民主程序,或涉及選民和競選目標的使用個案」。Anthropic 也澄清,其對所有「高風險」使用個案的要求 (適用於 Claude 用於向個人或客戶提出建議時),僅適用於面向消費者的情境,而非內部業務使用。
相關文章
華納音樂收購AI歸因初創公司Sureel AI
華納音樂集團(WMG)於週三確認,其正在收購Sureel AI,一家專注於人工智慧歸因的初創公司。Sureel的專有技術為音樂曲目生成“AI DNA”,將其分解為各個組成部分,以追蹤人工智慧模型如何利用這些元素。透過此次收購,WMG旨在增強其監控其藝術家和詞曲創作者的作品在人工智慧生成內容中被使用或用於訓練人工智慧模型的能力。“將Sureel整合到WMG中,增強了我們的保護、控制和變現能力,確保創意社羣保留對其智慧財產權、姓名、肖像、形象和聲音的控制權,”WMG執行長Robert Kync
亞馬遜推出“Alexa for Shopping”,同時將Rufus邊緣化
亞馬遜推出了“Alexa for Shopping”,將 Rufus 購物聊天機器人 Alexa+ 整合到應用程式、網站和 Echo Show 裝置中。該助手回答產品查詢、比較商品、跟蹤價格,並支援購物提醒。它還處理計劃中的購物操作和符合條件的自動購買。據該公司稱,“Alexa for Shopping”將 Rufus 的產品專業知識與 Alexa+ 的個性化助手上下文相結合。亞馬遜表示,Rufus 在 2025 年協助了超過 3 億客戶進行產品研究、比較和購買。GeekWire 報道稱,
微軟、Azure 與 AI 技術共同對抗加州野火風險
微軟投資於人工智慧驅動的野火偵測技術,其首席副總裁暨首席數據科學家胡安·拉維斯塔·費雷斯(Juan Lavista Ferres)針對減輕環境損害的策略進行了探討。根據美國國家航空暨太空總署(NASA)指出,氣候變遷影響地球上的每個人,其表現為氣溫上升、降雨模式改變以及海平面上升。NASA 指出,有確鑿證據顯示地球正以前所未有的速度變暖,而人類活動是主要驅動因素。隨著全球氣溫上升,野火構成的威脅日
相關專題推薦
評論 (1)
0/500
Les mises à jour de politique me rappellent que les IA comme Claude sont des outils qui peuvent avoir des utilisations à double tranchant. 🔧 C'est rassurant de voir les entreprises prendre des initiatives, mais une réglementation internationale ne serait-elle pas plus efficace contre certains dangers ? En tout cas, voilà un pas dans la bonne direction.

Anthropic 已更新其 Claude AI 聊天機器人的使用政策,以解決日益增加的安全疑慮。除了更嚴格的網路安全規則之外,該公司現在也明確列出不得使用 Claude 開發的危險武器類別。
雖然官方公告並未明確強調其武器政策的變更,但比較新舊使用準則後,發現有重大更新。在此之前,Anthropic 廣泛禁止使用 Claude 來「生產、修改、設計、行銷或散佈武器、爆炸物、危險材料或其他旨在造成人命傷害或損失的系統」。修訂後的政策擴大了這一範圍,明確禁止開發高產量炸藥,以及生物、核、化學和放射(CBRN)武器。
5 月,Anthropic 在推出全新 Claude Opus 4 機型的同時,也推出了「AI 安全等級 3」保護措施。這些防護措施的目的在於提高機型的防越獄能力,並協助防止其協助製造 CBRN 武器。
在公告中,Anthropic 也承認與代理式 AI 工具相關的風險,例如 Computer Use(可讓 Claude 控制使用者的電腦)與 Claude Code(可將 Claude 直接整合至開發人員的終端機)。"該公司表示:「這些強大的功能帶來了新的風險,包括可能被濫用、製造惡意軟體和網路攻擊。
相關內容
- Anthropic 為軍事與情報用途推出全新 Claude 服務
- Google 拋棄不開發 AI 武器的承諾
這家 AI 創辦公司在其使用政策中新增了「請勿損害電腦或網路系統」一節,以解決這些潛在威脅。這一節包括禁止使用 Claude 來發現或利用漏洞、創建或散佈惡意軟體、開發拒絕服務攻擊工具以及類似活動的規則。
此外,Anthropic 也放寬了有關政治內容的政策。該公司不再禁止所有與政治競選和遊說有關的內容創作,現在只禁止將 Claude 用於「欺騙或破壞民主程序,或涉及選民和競選目標的使用個案」。Anthropic 也澄清,其對所有「高風險」使用個案的要求 (適用於 Claude 用於向個人或客戶提出建議時),僅適用於面向消費者的情境,而非內部業務使用。
華納音樂收購AI歸因初創公司Sureel AI
華納音樂集團(WMG)於週三確認,其正在收購Sureel AI,一家專注於人工智慧歸因的初創公司。Sureel的專有技術為音樂曲目生成“AI DNA”,將其分解為各個組成部分,以追蹤人工智慧模型如何利用這些元素。透過此次收購,WMG旨在增強其監控其藝術家和詞曲創作者的作品在人工智慧生成內容中被使用或用於訓練人工智慧模型的能力。“將Sureel整合到WMG中,增強了我們的保護、控制和變現能力,確保創意社羣保留對其智慧財產權、姓名、肖像、形象和聲音的控制權,”WMG執行長Robert Kync
微軟、Azure 與 AI 技術共同對抗加州野火風險
微軟投資於人工智慧驅動的野火偵測技術,其首席副總裁暨首席數據科學家胡安·拉維斯塔·費雷斯(Juan Lavista Ferres)針對減輕環境損害的策略進行了探討。根據美國國家航空暨太空總署(NASA)指出,氣候變遷影響地球上的每個人,其表現為氣溫上升、降雨模式改變以及海平面上升。NASA 指出,有確鑿證據顯示地球正以前所未有的速度變暖,而人類活動是主要驅動因素。隨著全球氣溫上升,野火構成的威脅日
Les mises à jour de politique me rappellent que les IA comme Claude sont des outils qui peuvent avoir des utilisations à double tranchant. 🔧 C'est rassurant de voir les entreprises prendre des initiatives, mais une réglementation internationale ne serait-elle pas plus efficace contre certains dangers ? En tout cas, voilà un pas dans la bonne direction.





首頁






