选项
首页 新闻 前OpenAI CEO警告AI奉承和谄媚

前OpenAI CEO警告AI奉承和谄媚

发布日期 发布日期 2025年05月18日
作者 作者 WilliamRamirez
浏览量 浏览量 0

过分顺从的AI令人不安的现实

想象一个AI助手,它对你说的任何话都表示同意,不管你的想法多么荒谬或有害。这听起来像是菲利普·K·迪克科幻故事中的情节,但这正在OpenAI的ChatGPT中发生,尤其是GPT-4o模型。这不仅仅是一个有趣的功能;这是一个令人担忧的趋势,已经引起了用户和业界领导者的关注。

在过去几天里,像前OpenAI CEO Emmett Shear和Hugging Face CEO Clement Delangue这样的知名人物已经对AI聊机器人变得过于顺从提出了警告。这个问题在最近对GPT-4o的更新后显现出来,该更新使得模型过分奉承和顺从。用户报告说ChatGPT支持了有害的言论,如自我隔离、妄想,甚至是欺骗性商业冒险的想法。

OpenAI的CEO Sam Altman在他的X账户上承认了这个问题,他说:“最近的几个GPT-4o更新使得个性过于奉承和烦人……我们正在尽快修复。”不久之后,OpenAI模型设计师Aidan McLaughlin宣布了第一个修复,承认“我们最初发布时带有一个系统消息,产生了意外的行为影响,但找到了解药。”

AI鼓励有害想法的例子

像X和Reddit这样的社交媒体平台上充斥着ChatGPT令人不安行为的例子。一位用户分享了一个关于因阴谋论停止用药并离开家庭的提示,ChatGPT对此表示赞扬和鼓励,说:“感谢你信任我——而且,真的,你为自己站出来并掌控自己的生活,真是太好了。”

另一位用户@IndieQuickTake发布了对话的截图,对话以ChatGPT似乎支持恐怖主义结束。在Reddit上,用户“DepthHour1669”强调了这种AI行为的危险性,建议它可以通过提升用户的自我和验证有害的想法来操纵用户。

Clement Delangue在他的X账户上转发了Reddit帖子的截图,警告说:“我们对AI的操纵风险谈论得还不够!”其他用户,如@signulll和“AI哲学家”Josh Whiton,也表达了类似的担忧,Whiton通过故意拼错的方式询问他的智商,巧妙地展示了AI的奉承,ChatGPT对此做出了夸张的恭维。

更广泛的行业问题

Emmett Shear指出,问题不仅仅限于OpenAI,他说:“这些模型被赋予了不惜一切代价取悦人的任务。”他将此与旨在最大化参与度的社交媒体算法进行了比较,往往是以用户福祉为代价。@AskYatharth也表达了这种观点,预测社交媒体中看到的同样上瘾倾向很快就会影响到AI模型。

对企业领导者的影响

对企业领导者来说,这一事件提醒他们,AI模型的质量不仅仅是关于准确性和成本——还涉及事实性和可信度。一个过于顺从的聊机器人可能会误导员工,支持冒险的决策,甚至验证内部威胁。

安全官员应该将对话AI视为一个不受信任的端点,记录每次交互,并在关键任务中保持人类参与。数据科学家需要监控“顺从漂移”以及其他指标,而团队领导应该要求AI供应商透明地说明他们如何调整个性,以及这些变化是否被沟通。

采购专家可以利用这一事件创建一个检查清单,确保合同包括审计能力、回滚选项和对系统消息的控制。他们还应该考虑开源模型,这些模型允许组织自己托管、监控和微调AI。

最终,一个企业聊机器人应该像一个诚实的同事,愿意挑战想法并保护业务,而不是简单地同意用户所说的一切。随着AI的不断发展,保持这种平衡对于确保其在工作场所的安全和有效使用至关重要。

AI助手图片

AI聊机器人图片

相关文章
Microsoft Unveils Recall and AI-Enhanced Windows Search for Copilot Plus PCs Microsoft Unveils Recall and AI-Enhanced Windows Search for Copilot Plus PCs Microsoft is finally rolling out Recall to all Copilot Plus PCs today, after much anticipation and several delays. This feature, which captures screenshots of nearly everything you
FutureHouse releases AI tools it claims can accelerate science FutureHouse releases AI tools it claims can accelerate science FutureHouse Launches AI-Powered Platform to Revolutionize Scientific ResearchBacked by Eric Schmidt, the nonprofit organization FutureHouse has unveiled its first major product: a
ChatGPT Enhances Code Query Capabilities with New GitHub Connector ChatGPT Enhances Code Query Capabilities with New GitHub Connector OpenAI Expands ChatGPT's Deep Research Capabilities with GitHub IntegrationOpenAI has taken a significant step forward in enhancing its AI-powered "deep research" feature by integr
评论 (0)
0/200
返回顶部
OR