Anthropic 在风险不断上升的情况下实施新的人工智能保障措施

Anthropic 更新了其人工智能聊天机器人 Claude 的使用政策,以解决日益增长的安全问题。除了更严格的网络安全规则外,该公司现在还明确列出了不得使用克劳德开发的危险武器类别。
虽然官方公告没有明确强调其武器政策的变化,但对比新旧使用指南可以发现有重大更新。此前,Anthropic 广泛禁止使用克劳德 "生产、修改、设计、销售或分发武器、爆炸物、危险材料或其他旨在造成人员伤亡的系统"。修订后的政策对此进行了扩展,明确禁止开发高能炸药以及生物、核、化学和放射性(CBRN)武器。
今年 5 月,Anthropic 在推出新的 Claude Opus 4 型号的同时,还推出了 "人工智能安全三级 "保护措施。这些保护措施旨在提高该机型的防越狱能力,并帮助防止其协助制造 CBRN 武器。
在公告中,Anthropic 还承认了与代理型人工智能工具相关的风险,如计算机使用(允许 Claude 控制用户的计算机)和 Claude 代码(将 Claude 直接集成到开发者的终端)。"该公司表示:"这些强大的功能带来了新的风险,包括可能被大规模滥用、创建恶意软件和网络攻击。
相关信息
- Anthropic为军事和情报用途推出新的克劳德服务
- 谷歌放弃不开发人工智能武器的承诺
这家人工智能初创公司正在通过在其使用政策中添加一个名为 "不得破坏计算机或网络系统 "的新章节来应对这些潜在威胁。这一部分包括禁止使用克劳德发现或利用漏洞、创建或分发恶意软件、开发拒绝服务攻击工具以及类似活动的规则。
此外,Anthropic 还放宽了有关政治内容的政策。该公司不再禁止所有与政治活动和游说有关的内容创建,现在只禁止将 Claude 用于 "欺骗或破坏民主进程,或涉及选民和竞选目标的用例"。Anthropic 还澄清,其对所有 "高风险 "用例的要求(适用于 Claude 向个人或客户提供建议的情况)仅适用于面向消费者的场景,不适用于内部业务使用。
相关文章
WordPress.com 现已支持 AI 助手撰写和发布文章,还有更多功能
广受欢迎的网站托管和发布平台 WordPress.com 现已开始引入人工智能助手——这一举措或将重塑网络的呈现方式。该公司于周五宣布,将允许人工智能助手在用户网站上起草、编辑和发布内容,同时还能管理评论、更新和修正元数据,并通过标签和分类对内容进行整理。所有这些操作均通过一个界面进行控制,网站所有者只需使用自然语言命令说明其需求即可。凭借这些新功能,网站几乎可以完全由人工指导的AI代理来创建和运
Kakao Mobility 概述了面向物理人工智能的 L4 级自动驾驶路线图
Kakao Mobility 计划内部自主研发 L4 级自动驾驶技术,作为其物理人工智能战略的一部分。在首尔COEX举行的2026世界IT展上,Kakao Mobility副总裁兼物理AI部门负责人金镇奎(Kim Jin-kyu)介绍了该路线图。他的演讲聚焦于物理AI时代基于出行平台构建的自动驾驶服务。据韩联社报道,这场题为“超越构想,付诸行动:AI驱动现实”的活动汇聚了来自17个国家的460
巴里·迪勒:随着通用人工智能的临近,对萨姆·阿尔特曼的信任已无关紧要
尽管近期有报道暗示相反的情况,但亿万富翁、媒体大亨巴里·迪勒并不认为OpenAI首席执行官山姆·阿尔特曼不可信。本周,迪勒在《华尔街日报》举办的“万物未来”峰会上发表演讲时,为阿尔特曼进行了辩护。此前,阿尔特曼曾遭到一些前同事和董事会成员的指责,称其有时会采取操纵和欺骗手段。作为阿尔特曼的朋友,迪勒是在回答一个关于人们是否应该信任阿尔特曼以确保人工智能造福人类的问题时作出上述表态的。具体而言,提问
相关专题推荐
评论 (1)
0/500
Les mises à jour de politique me rappellent que les IA comme Claude sont des outils qui peuvent avoir des utilisations à double tranchant. 🔧 C'est rassurant de voir les entreprises prendre des initiatives, mais une réglementation internationale ne serait-elle pas plus efficace contre certains dangers ? En tout cas, voilà un pas dans la bonne direction.

Anthropic 更新了其人工智能聊天机器人 Claude 的使用政策,以解决日益增长的安全问题。除了更严格的网络安全规则外,该公司现在还明确列出了不得使用克劳德开发的危险武器类别。
虽然官方公告没有明确强调其武器政策的变化,但对比新旧使用指南可以发现有重大更新。此前,Anthropic 广泛禁止使用克劳德 "生产、修改、设计、销售或分发武器、爆炸物、危险材料或其他旨在造成人员伤亡的系统"。修订后的政策对此进行了扩展,明确禁止开发高能炸药以及生物、核、化学和放射性(CBRN)武器。
今年 5 月,Anthropic 在推出新的 Claude Opus 4 型号的同时,还推出了 "人工智能安全三级 "保护措施。这些保护措施旨在提高该机型的防越狱能力,并帮助防止其协助制造 CBRN 武器。
在公告中,Anthropic 还承认了与代理型人工智能工具相关的风险,如计算机使用(允许 Claude 控制用户的计算机)和 Claude 代码(将 Claude 直接集成到开发者的终端)。"该公司表示:"这些强大的功能带来了新的风险,包括可能被大规模滥用、创建恶意软件和网络攻击。
相关信息
- Anthropic为军事和情报用途推出新的克劳德服务
- 谷歌放弃不开发人工智能武器的承诺
这家人工智能初创公司正在通过在其使用政策中添加一个名为 "不得破坏计算机或网络系统 "的新章节来应对这些潜在威胁。这一部分包括禁止使用克劳德发现或利用漏洞、创建或分发恶意软件、开发拒绝服务攻击工具以及类似活动的规则。
此外,Anthropic 还放宽了有关政治内容的政策。该公司不再禁止所有与政治活动和游说有关的内容创建,现在只禁止将 Claude 用于 "欺骗或破坏民主进程,或涉及选民和竞选目标的用例"。Anthropic 还澄清,其对所有 "高风险 "用例的要求(适用于 Claude 向个人或客户提供建议的情况)仅适用于面向消费者的场景,不适用于内部业务使用。
WordPress.com 现已支持 AI 助手撰写和发布文章,还有更多功能
广受欢迎的网站托管和发布平台 WordPress.com 现已开始引入人工智能助手——这一举措或将重塑网络的呈现方式。该公司于周五宣布,将允许人工智能助手在用户网站上起草、编辑和发布内容,同时还能管理评论、更新和修正元数据,并通过标签和分类对内容进行整理。所有这些操作均通过一个界面进行控制,网站所有者只需使用自然语言命令说明其需求即可。凭借这些新功能,网站几乎可以完全由人工指导的AI代理来创建和运
巴里·迪勒:随着通用人工智能的临近,对萨姆·阿尔特曼的信任已无关紧要
尽管近期有报道暗示相反的情况,但亿万富翁、媒体大亨巴里·迪勒并不认为OpenAI首席执行官山姆·阿尔特曼不可信。本周,迪勒在《华尔街日报》举办的“万物未来”峰会上发表演讲时,为阿尔特曼进行了辩护。此前,阿尔特曼曾遭到一些前同事和董事会成员的指责,称其有时会采取操纵和欺骗手段。作为阿尔特曼的朋友,迪勒是在回答一个关于人们是否应该信任阿尔特曼以确保人工智能造福人类的问题时作出上述表态的。具体而言,提问
Les mises à jour de politique me rappellent que les IA comme Claude sont des outils qui peuvent avoir des utilisations à double tranchant. 🔧 C'est rassurant de voir les entreprises prendre des initiatives, mais une réglementation internationale ne serait-elle pas plus efficace contre certains dangers ? En tout cas, voilà un pas dans la bonne direction.





首页






