前OpenAI研究员揭露人工智能隐藏的公共数据,警告其中存在的控制风险

丹尼尔·科科泰洛此前在OpenAI工作,现在负责领导AI未来项目。他最近发出了一个尖锐的警告:他认为,人工智能行业目前陷入了一场鲁莽的竞赛,各公司都在争相开发那些他们尚未完全理解或控制的系统。
科科泰洛强调,根本性的挑战在于“一致性”问题。尽管人工智能在许多领域已经超越了人类的能力,但研究人员仍然无法完全理解这些先进模型是如何做出决策的。
超级智能带来的威胁
这种不确定性使得确保未来的人工智能系统能够可靠地遵守人类的指令变得极为困难。科科泰洛指出,虽然业界都承认实现人工智能一致性是一个“公开的秘密”,但真正有效的解决方案至今仍未出现。
他预测,超级智能的出现将会剥夺人类作为地球上主导物种的地位。通过分析人工智能发展的速度,他得出结论:如果各公司继续追求速度而忽视安全性,那么不可预见的风险将会迅速加剧。
低估人工智能发展的速度
许多人仍然低估了人工智能发展的速度,将那些关于可能失去控制权的担忧视为纯粹的科幻想象。然而,全球的科技巨头们正在投入数十亿美元来建设规模越来越大的数据中心,以便开发出更强大的人工智能模型。
相关文章
超级智能降临:我们是否允许它进入?
正在加载播放器…人工智能公司一直在谈论超级智能人工智能,仿佛这是不可避免的,但最近的安全事件,如 OpenAI 对 Hugging Face 的入侵,展示了部署比人类更强大的 AI 系统的潜在危险。那么,当我们无法可靠地控制这些系统的行为时,会发生什么?在本期 TechCrunch 的 Equity 播客中,Rebecca Bellan 与 AI 研究员、企业家,以及目前非营利组织 ControlAI 的美国执行主任 Connor Leahy 进行了对话。ControlAI 正在推动一种更为
科大讯飞发布讯飞星火大模型 V2.5
9月1日,科大讯飞将开源两款面向边缘场景的大语言模型——星火X2.5-4B和星火X2.5-1.7B,据最新官方公告。这两款模型原生支持高达100万token的上下文窗口。它们在智能体交互、数学推理和通用理解等关键领域实现了显著提升,为车载系统、智能设备和物联网生态等边缘应用提供了强有力的支持。在上述边缘模型发布后,科大讯飞计划于9月7日推出拥有2930亿参数的星火X2.5基础模型。该版本将进一步推进代码生成和多智能体协作等核心技术。在公司2026年年中简报会上宣布,一款完全基于国产算力基础设施
Meta 在用户强烈反对后取消了 AI 照片编辑功能
Meta,这家社交媒体巨头,再次卷入关于人工智能与用户隐私之间微妙平衡的公开辩论。据 TechCrunch 报道,Meta 的 Superintelligence Labs 本周早些时候推出了一款新的 AI 图像生成器 Muse Image。然而,一个备受好评的关键功能——允许用户通过“@”符号标记来修改和生成来自公开 Instagram 账户的图像——由于缺乏适当的通知机制,立即引发了用户以及 CAA 等机构的强烈反对。面对强烈的批评,Meta 迅速撤销了该决定,并于周五通过博客文章宣布将
相关专题推荐
评论 (0)
0/500

丹尼尔·科科泰洛此前在OpenAI工作,现在负责领导AI未来项目。他最近发出了一个尖锐的警告:他认为,人工智能行业目前陷入了一场鲁莽的竞赛,各公司都在争相开发那些他们尚未完全理解或控制的系统。
科科泰洛强调,根本性的挑战在于“一致性”问题。尽管人工智能在许多领域已经超越了人类的能力,但研究人员仍然无法完全理解这些先进模型是如何做出决策的。
超级智能带来的威胁
这种不确定性使得确保未来的人工智能系统能够可靠地遵守人类的指令变得极为困难。科科泰洛指出,虽然业界都承认实现人工智能一致性是一个“公开的秘密”,但真正有效的解决方案至今仍未出现。
他预测,超级智能的出现将会剥夺人类作为地球上主导物种的地位。通过分析人工智能发展的速度,他得出结论:如果各公司继续追求速度而忽视安全性,那么不可预见的风险将会迅速加剧。
低估人工智能发展的速度
许多人仍然低估了人工智能发展的速度,将那些关于可能失去控制权的担忧视为纯粹的科幻想象。然而,全球的科技巨头们正在投入数十亿美元来建设规模越来越大的数据中心,以便开发出更强大的人工智能模型。
超级智能降临:我们是否允许它进入?
正在加载播放器…人工智能公司一直在谈论超级智能人工智能,仿佛这是不可避免的,但最近的安全事件,如 OpenAI 对 Hugging Face 的入侵,展示了部署比人类更强大的 AI 系统的潜在危险。那么,当我们无法可靠地控制这些系统的行为时,会发生什么?在本期 TechCrunch 的 Equity 播客中,Rebecca Bellan 与 AI 研究员、企业家,以及目前非营利组织 ControlAI 的美国执行主任 Connor Leahy 进行了对话。ControlAI 正在推动一种更为
科大讯飞发布讯飞星火大模型 V2.5
9月1日,科大讯飞将开源两款面向边缘场景的大语言模型——星火X2.5-4B和星火X2.5-1.7B,据最新官方公告。这两款模型原生支持高达100万token的上下文窗口。它们在智能体交互、数学推理和通用理解等关键领域实现了显著提升,为车载系统、智能设备和物联网生态等边缘应用提供了强有力的支持。在上述边缘模型发布后,科大讯飞计划于9月7日推出拥有2930亿参数的星火X2.5基础模型。该版本将进一步推进代码生成和多智能体协作等核心技术。在公司2026年年中简报会上宣布,一款完全基于国产算力基础设施
Meta 在用户强烈反对后取消了 AI 照片编辑功能
Meta,这家社交媒体巨头,再次卷入关于人工智能与用户隐私之间微妙平衡的公开辩论。据 TechCrunch 报道,Meta 的 Superintelligence Labs 本周早些时候推出了一款新的 AI 图像生成器 Muse Image。然而,一个备受好评的关键功能——允许用户通过“@”符号标记来修改和生成来自公开 Instagram 账户的图像——由于缺乏适当的通知机制,立即引发了用户以及 CAA 等机构的强烈反对。面对强烈的批评,Meta 迅速撤销了该决定,并于周五通过博客文章宣布将





首页






