OpenAI的安全承诺受到质疑:监管与监督之争

在导致加拿大震惊的Tumbler Ridge枪击事件发生后,OpenAI迅速采取了一系列补救措施。然而,法律和技术专家们仍对此表示怀疑。学者Jean-Christophe Bélisle-Pipon指出,OpenAI首席执行官Sam Altman向加拿大政府作出的安全承诺实际上是用企业监管取代了民主监督。
在事件发生前几个月,18岁枪手Jesse van Ruttenaar的ChatGPT账户就因发布与枪支暴力相关的内容而被标记。尽管该账户被暂停使用,但OpenAI并未将这一潜在威胁报告给执法部门。这场悲剧最终造成了八人丧生。
OpenAI的新举措:在警方与公司之间建立“直通渠道”
作为回应,OpenAI承诺采取以下行动:
直接报告机制:立即将可信的威胁信息报告给加拿大皇家骑警。
回顾性审查:重新审视此前被标记为可疑的账户。
专家参与:允许加拿大专家加入其安全咨询流程,协助政府制定监管建议。
专家们的担忧:“监控替代品”的陷阱
Bélisle-Pipon教授在分析中指出了一个关键问题:OpenAI正在回避对其核心模型设计及训练方法的监督,而是转而加强了对用户对话的监测。
责任缺失:报告的标准仍由OpenAI内部决定,缺乏透明度和独立审计。
令人担忧的影响:研究表明,由于用户认为聊天机器人能保护隐私,他们往往会向这些机器人倾诉心事。如果这些对话直接成为警方监控的渠道,处于心理危机中的弱势群体可能会选择保持沉默,从而错失获得帮助的机会。
监管上的隐患:这种“自愿做出的让步”可能实际上是为了规避更严格的法律法规。
真正的治理之道:将焦点从用户转向系统本身
批评者认为,真正的人工智能监管应该不仅仅关注对语音的监测,而应深入审视相关系统本身。例如:
建立独立监督机构:由心理健康专家和法律专家组成的第三方机构来评估风险,而不是完全由企业来决定一切。
模型层面的责任机制:仔细审查人工智能模型在面对暴力意图披露时的反应方式,以及开发过程中进行了哪些安全压力测试。
随着OpenAI积极与全球各国政府开展合作,Tumbler Ridge事件正在成为一个重要的参考案例:我们是在朝着更安全的科技方向发展,还是在走向一个由私营企业运营的数字监控网络?
相关文章
ElevenLabs宣布黑石集团、杰米·福克斯和伊娃·朗格利亚成为新投资者
语音人工智能公司ElevenLabs披露了其5亿美元D轮融资的更多投资者名单,该轮融资最初于2月宣布。 其中包括贝莱德(BlackRock)、威灵顿(Wellington)、D.E. Shaw和施罗德(Schroders)等机构投资者;英伟达(NVIDIA)、Salesforce、桑坦德银行(Santander)、KPN和德国电信(Deutsche Telekom)等企业;以及杰米·福克斯(Jam
OpenAI首席执行官阿尔特曼抨击Anthropic采用恐慌式营销策略
人工智能领域两大巨头OpenAI与Anthropic之间的公开争端持续升级。OpenAI首席执行官萨姆·阿尔特曼(Sam Altman)近日在一档播客节目中,对竞争对手的最新安全模型提出了质疑。奥特曼认为,Anthropic利用公众对技术的恐惧,夸大了其产品的实际能力。他认为这种做法更多是营销手段,而非真正的安全措施。限制精英群体使用引发了设置技术壁垒的指责这场争端源于Anthropic本月推出的
在获得SpaceX的大额投资后,编程初创公司Cursor AI计划在亚太地区招聘200人
人工智能编程初创公司Cursor近日宣布了一项重大的全球扩张计划,拟在未来六个月内在亚太地区招聘200名员工。主要招聘岗位包括市场营销工程师、现场工程师和人工智能部署工程师。此举彰显了这家总部位于旧金山的独角兽企业将核心技术推向国际市场的决心。目前,Cursor已在新加坡设立办事处,由高级技术高管西蒙·格林(Simon Green)领导,招聘范围将覆盖日本、悉尼、墨尔本和印度等关键市场。除亚太战
相关专题推荐
评论 (0)
0/500

在导致加拿大震惊的Tumbler Ridge枪击事件发生后,OpenAI迅速采取了一系列补救措施。然而,法律和技术专家们仍对此表示怀疑。学者Jean-Christophe Bélisle-Pipon指出,OpenAI首席执行官Sam Altman向加拿大政府作出的安全承诺实际上是用企业监管取代了民主监督。
在事件发生前几个月,18岁枪手Jesse van Ruttenaar的ChatGPT账户就因发布与枪支暴力相关的内容而被标记。尽管该账户被暂停使用,但OpenAI并未将这一潜在威胁报告给执法部门。这场悲剧最终造成了八人丧生。
OpenAI的新举措:在警方与公司之间建立“直通渠道”
作为回应,OpenAI承诺采取以下行动:
直接报告机制:立即将可信的威胁信息报告给加拿大皇家骑警。
回顾性审查:重新审视此前被标记为可疑的账户。
专家参与:允许加拿大专家加入其安全咨询流程,协助政府制定监管建议。
专家们的担忧:“监控替代品”的陷阱
Bélisle-Pipon教授在分析中指出了一个关键问题:OpenAI正在回避对其核心模型设计及训练方法的监督,而是转而加强了对用户对话的监测。
责任缺失:报告的标准仍由OpenAI内部决定,缺乏透明度和独立审计。
令人担忧的影响:研究表明,由于用户认为聊天机器人能保护隐私,他们往往会向这些机器人倾诉心事。如果这些对话直接成为警方监控的渠道,处于心理危机中的弱势群体可能会选择保持沉默,从而错失获得帮助的机会。
监管上的隐患:这种“自愿做出的让步”可能实际上是为了规避更严格的法律法规。
真正的治理之道:将焦点从用户转向系统本身
批评者认为,真正的人工智能监管应该不仅仅关注对语音的监测,而应深入审视相关系统本身。例如:
建立独立监督机构:由心理健康专家和法律专家组成的第三方机构来评估风险,而不是完全由企业来决定一切。
模型层面的责任机制:仔细审查人工智能模型在面对暴力意图披露时的反应方式,以及开发过程中进行了哪些安全压力测试。
随着OpenAI积极与全球各国政府开展合作,Tumbler Ridge事件正在成为一个重要的参考案例:我们是在朝着更安全的科技方向发展,还是在走向一个由私营企业运营的数字监控网络?
ElevenLabs宣布黑石集团、杰米·福克斯和伊娃·朗格利亚成为新投资者
语音人工智能公司ElevenLabs披露了其5亿美元D轮融资的更多投资者名单,该轮融资最初于2月宣布。 其中包括贝莱德(BlackRock)、威灵顿(Wellington)、D.E. Shaw和施罗德(Schroders)等机构投资者;英伟达(NVIDIA)、Salesforce、桑坦德银行(Santander)、KPN和德国电信(Deutsche Telekom)等企业;以及杰米·福克斯(Jam
OpenAI首席执行官阿尔特曼抨击Anthropic采用恐慌式营销策略
人工智能领域两大巨头OpenAI与Anthropic之间的公开争端持续升级。OpenAI首席执行官萨姆·阿尔特曼(Sam Altman)近日在一档播客节目中,对竞争对手的最新安全模型提出了质疑。奥特曼认为,Anthropic利用公众对技术的恐惧,夸大了其产品的实际能力。他认为这种做法更多是营销手段,而非真正的安全措施。限制精英群体使用引发了设置技术壁垒的指责这场争端源于Anthropic本月推出的
在获得SpaceX的大额投资后,编程初创公司Cursor AI计划在亚太地区招聘200人
人工智能编程初创公司Cursor近日宣布了一项重大的全球扩张计划,拟在未来六个月内在亚太地区招聘200名员工。主要招聘岗位包括市场营销工程师、现场工程师和人工智能部署工程师。此举彰显了这家总部位于旧金山的独角兽企业将核心技术推向国际市场的决心。目前,Cursor已在新加坡设立办事处,由高级技术高管西蒙·格林(Simon Green)领导,招聘范围将覆盖日本、悉尼、墨尔本和印度等关键市场。除亚太战





首页






