OpenAI 面臨 Vibe-Graphing 技術的反彈

OpenAI 在週四舉辦的 GPT-5 活動中,展示了幾張圖表,看起來似乎展示了該模型令人印象深刻的能力,但仔細一看,卻發現資料可視化中有一些不一致的地方。
具有諷刺意味的是,在一個說明 GPT-5 在「跨模型欺騙評估」(deception evals across models)中表現的圖表中,刻度似乎錯位了。舉例來說,台上的圖表聲稱,GPT-5 在「思考」方面的欺騙率達到了 50.0%。然而,OpenAI 較小的 o3 模型(據報告為 47.4%)卻顯示為一個較大的橫條。然而,OpenAI 的官方 GPT-5 博文中發佈的數據顯示,GPT-5 的實際欺騙率為 16.5%。
這種視覺上的錯配意味著,在台上,GPT-5 的橫條顯示得比 o3 高,儘管它報告的分數較低。在同一張圖表的其他地方,o3 和 GPT-4o 得到了不同的分數,但卻用相同大小的橫條來表示。這個錯誤相當嚴重,讓執行長 Sam Altman 不得不公開承認,並標籤這次事件為「超大型的圖表失誤」,同時澄清部落格所載的是正確的版本。
OpenAI 的一位行銷人員也表示歉意,他說:「我們在部落格中修正了圖表,各位,很抱歉無意的圖表犯罪」。
週五,Altman 在回應 Reddit 用戶對圖表的詢問時解釋:「這裡的數字是準確的,但我們在直播時把柱狀圖弄亂了。在另一張幻燈片上,我們弄錯了數字"。他確認部落格文章和系統卡資料都是準確的,並補充說,「團隊成員工作到很晚,疲憊不堪,導致人為錯誤。這一切都是在直播的最後一刻才發生的"。
儘管如此,在如此重要的發佈日,這些錯誤仍為該公司帶來了不幸的外觀,尤其是在該公司宣傳新機型「在減少幻覺方面的重大進展」之時。
8 月 8 日更新:新增 Altman 的 Reddit 評論。
相關文章
華納音樂收購AI歸因初創公司Sureel AI
華納音樂集團(WMG)於週三確認,其正在收購Sureel AI,一家專注於人工智慧歸因的初創公司。Sureel的專有技術為音樂曲目生成“AI DNA”,將其分解為各個組成部分,以追蹤人工智慧模型如何利用這些元素。透過此次收購,WMG旨在增強其監控其藝術家和詞曲創作者的作品在人工智慧生成內容中被使用或用於訓練人工智慧模型的能力。“將Sureel整合到WMG中,增強了我們的保護、控制和變現能力,確保創意社羣保留對其智慧財產權、姓名、肖像、形象和聲音的控制權,”WMG執行長Robert Kync
亞馬遜推出“Alexa for Shopping”,同時將Rufus邊緣化
亞馬遜推出了“Alexa for Shopping”,將 Rufus 購物聊天機器人 Alexa+ 整合到應用程式、網站和 Echo Show 裝置中。該助手回答產品查詢、比較商品、跟蹤價格,並支援購物提醒。它還處理計劃中的購物操作和符合條件的自動購買。據該公司稱,“Alexa for Shopping”將 Rufus 的產品專業知識與 Alexa+ 的個性化助手上下文相結合。亞馬遜表示,Rufus 在 2025 年協助了超過 3 億客戶進行產品研究、比較和購買。GeekWire 報道稱,
微軟、Azure 與 AI 技術共同對抗加州野火風險
微軟投資於人工智慧驅動的野火偵測技術,其首席副總裁暨首席數據科學家胡安·拉維斯塔·費雷斯(Juan Lavista Ferres)針對減輕環境損害的策略進行了探討。根據美國國家航空暨太空總署(NASA)指出,氣候變遷影響地球上的每個人,其表現為氣溫上升、降雨模式改變以及海平面上升。NASA 指出,有確鑿證據顯示地球正以前所未有的速度變暖,而人類活動是主要驅動因素。隨著全球氣溫上升,野火構成的威脅日
相關專題推薦
評論 (0)
0/500

OpenAI 在週四舉辦的 GPT-5 活動中,展示了幾張圖表,看起來似乎展示了該模型令人印象深刻的能力,但仔細一看,卻發現資料可視化中有一些不一致的地方。
具有諷刺意味的是,在一個說明 GPT-5 在「跨模型欺騙評估」(deception evals across models)中表現的圖表中,刻度似乎錯位了。舉例來說,台上的圖表聲稱,GPT-5 在「思考」方面的欺騙率達到了 50.0%。然而,OpenAI 較小的 o3 模型(據報告為 47.4%)卻顯示為一個較大的橫條。然而,OpenAI 的官方 GPT-5 博文中發佈的數據顯示,GPT-5 的實際欺騙率為 16.5%。
這種視覺上的錯配意味著,在台上,GPT-5 的橫條顯示得比 o3 高,儘管它報告的分數較低。在同一張圖表的其他地方,o3 和 GPT-4o 得到了不同的分數,但卻用相同大小的橫條來表示。這個錯誤相當嚴重,讓執行長 Sam Altman 不得不公開承認,並標籤這次事件為「超大型的圖表失誤」,同時澄清部落格所載的是正確的版本。
OpenAI 的一位行銷人員也表示歉意,他說:「我們在部落格中修正了圖表,各位,很抱歉無意的圖表犯罪」。
週五,Altman 在回應 Reddit 用戶對圖表的詢問時解釋:「這裡的數字是準確的,但我們在直播時把柱狀圖弄亂了。在另一張幻燈片上,我們弄錯了數字"。他確認部落格文章和系統卡資料都是準確的,並補充說,「團隊成員工作到很晚,疲憊不堪,導致人為錯誤。這一切都是在直播的最後一刻才發生的"。
儘管如此,在如此重要的發佈日,這些錯誤仍為該公司帶來了不幸的外觀,尤其是在該公司宣傳新機型「在減少幻覺方面的重大進展」之時。
8 月 8 日更新:新增 Altman 的 Reddit 評論。
華納音樂收購AI歸因初創公司Sureel AI
華納音樂集團(WMG)於週三確認,其正在收購Sureel AI,一家專注於人工智慧歸因的初創公司。Sureel的專有技術為音樂曲目生成“AI DNA”,將其分解為各個組成部分,以追蹤人工智慧模型如何利用這些元素。透過此次收購,WMG旨在增強其監控其藝術家和詞曲創作者的作品在人工智慧生成內容中被使用或用於訓練人工智慧模型的能力。“將Sureel整合到WMG中,增強了我們的保護、控制和變現能力,確保創意社羣保留對其智慧財產權、姓名、肖像、形象和聲音的控制權,”WMG執行長Robert Kync
微軟、Azure 與 AI 技術共同對抗加州野火風險
微軟投資於人工智慧驅動的野火偵測技術,其首席副總裁暨首席數據科學家胡安·拉維斯塔·費雷斯(Juan Lavista Ferres)針對減輕環境損害的策略進行了探討。根據美國國家航空暨太空總署(NASA)指出,氣候變遷影響地球上的每個人,其表現為氣溫上升、降雨模式改變以及海平面上升。NASA 指出,有確鑿證據顯示地球正以前所未有的速度變暖,而人類活動是主要驅動因素。隨著全球氣溫上升,野火構成的威脅日





首頁






