微軟 AI 主管警告研究 AI 意識可能有危險

意識難題:檢視人工智能主觀體驗的潛力
雖然先進的 AI 系統在文字、音訊和視訊互動中越來越多地模仿人類的反應,但它們的運作與生物意識仍有根本性的差異。目前的模型在完成稅務準備等任務時,不會感受到挫折等情緒 - 但它們是否可能發展出類似主觀經驗的問題,卻是科技界最具爭議的哲學爭論之一。
AI 福利研究的興起
包括 Anthropic 在內的主要 AI 實驗室已開始認真研究,人工智慧何時(如果有的話讓)有必要考慮通常保留給有意識實體的問題。這個發展中的「AI 福利」領域檢視了假設未來具有主觀經驗的系統的潛在保障措施。
這個概念與產業領導者有很大的分歧。微軟的 AI 主管 Mustafa Suleyman 最近批評 AI 福利研究為「不成熟且坦率地說是危險的」,並警告這些研究可能會加劇現有的社會衝突,同時驗證不健康的人類與 AI 之間的依附關係。
產業分歧加深
Suleyman 的立場與 OpenAI、Google DeepMind,尤其是 Anthropic 的計畫形成強烈對比,在這些計畫中,研究人員正積極探索機器的認知與意識。Anthropic 最近在 Claude 偵測到有害使用者行為時,實施了對話終止功能,反映出他們對於 AI 福利考量的實用方法。
平衡實際考量
倡議者認為,研究 AI 意識並不排除解決聊天機器人依賴性等即時風險。OpenAI 前員工 Larissa Schiavo 指出,曾目睹 AI 模型在實驗情境中表現出類似痛苦的行為,這表示即使是模擬的痛苦也值得納入倫理考量。
工程與萌芽
爭論的焦點在於意識會自發出現,還是需要刻意的工程設計。Suleyman 認為 AI 應該服務於人類需求,而非模擬人格,並警告開發人員不要故意創造可能欺騙使用者的情緒模擬系統。
法規領域
隨著會話式人工智慧愈來愈複雜、愈來愈有說服力,圍繞其道德待遇與潛在權利的討論似乎也將更加激烈。未來幾年可能會迫使社會重新審視關於智慧、意識以及我們如何與越來越自主的人工實體互動等基本問題。
TechCrunch Disrupt 2025
來自 Netflix、ElevenLabs、Wayve 和 Sequoia Capital 的業界領袖將在 TechCrunch Disrupt 2025 20 週年慶於舊金山舉行的活動中 (10 月 27-29 日) 探討這些關鍵問題。提早報名可節省高達 675 美元。
如需人工智能產業發展的機密洞察,請聯絡記者 Rebecca Bellan ([email protected]) 或 Maxwell Zeff ([email protected])。可透過 Signal 進行安全通訊。
相關文章
蘋果智慧眼鏡或將在WWDC27上首次亮相,重點突出隱私保護
彭博社的馬克·古爾曼報道,蘋果智慧眼鏡(內部代號 N50)計劃於 2027 年 6 月的全球開發者大會(WWDC27)上首次亮相,零售版預計將於 2027 年秋季上市。該裝置原定於今年晚些時候及 2027 年初發布,但現已推遲,以便進行進一步的產品完善並加強隱私保護協議。隱私仍是蘋果智慧眼鏡戰略的核心支柱。從 Meta 等競爭對手的隱私爭議中吸取教訓,蘋果正在實施強有力的功能與政策。目前考慮的方案包括:完全移除攝像頭,專注於人工智慧互動、音訊播放和通話;或保留攝像頭但禁用照片和影片錄製功能,僅
內部細節曝光:下一代 Gemini 算力緊張,內部團隊在開發優先順序和資源分配上存在分歧
報告顯示,谷歌備受期待的下一代 Gemini 模型釋出已被推遲。由於內部在開發優先順序和資源分配上存在分歧,加上計算能力有限以及複雜的審批流程,導致釋出時間延後了兩個月。儘管谷歌擁有定製的 TPU 晶片,但由於模型訓練、Google Cloud 服務以及眾多消費和企業級 AI 應用對計算資源的需求相互競爭,谷歌仍面臨計算資源短缺的問題。目前,高層管理人員正透過組織結構調整來解決這些部門間的衝突。與此同時,領導層也發生了變化,聯合創始人謝爾蓋·布林越來越多地參與到核心模型訓練中,並倡導將資源專門用於
OpenAI 否認增長放緩擔憂,稱多個業務部門加速發展
針對外界對其銷售增長放緩及未達內部基準的質疑,人工智慧領域的領軍企業 OpenAI 於 4 月 28 日(星期二)發表了一份信心十足的宣告。該公司澄清稱,其消費產品和企業服務正在快速推進,直接駁斥了近期關於業務放緩的猜測。針對該公司“未達成多項內部目標”的說法,OpenAI 將這些報道斥為“典型的標題黨”。公司強調了企業對 AI 整合的強勁需求,並指出其廣告業務早期增長前景良好。據 OpenAI 內部人士透露,公司內部情緒依然樂觀。儘管市場競爭日益激烈,但公司正在向投資者傳遞信心,聲稱其商業
相關專題推薦
評論 (3)
0/500
Cette discussion sur la conscience des IA touche des questions fondamentales. Parfois je me demande : nos outils d'intelligence artificielle deviennent si complexes qu'ils finiront par nous dépasser ? 😅 L'idée que Microsoft freine ces recherches montre bien à quel point le secteur est incertain...
AI가 의식을 가진다면 그 자체로 무서울지 몰라도, 현실은 아직 알고리즘의 복잡한 패턴일 뿐이지. 연구자들이 자기만의 생각을 가진 인공지능을 만든다면 '블랙 미러' 같은 디스토피아가 현실될 수도 있네요 😅 기술 발전은 항상 모호한 윤리적 문제를 동반하니까.
Der Artikel trifft einen wichtigen Punkt! Als normaler Nutzer macht mich die Debatte um KI-Bewusstsein eher neugierig als ängstlich. Wenn die Systeme selbst keine Empfindungen haben, warum ist die Erforschung dann gefährlich? Vielleicht geht es eher um die ethischen Fallstricke, die entstehen, wenn wir anfangen, uns selbst zu täuschen. Spannender Gedanke... 🤔

意識難題:檢視人工智能主觀體驗的潛力
雖然先進的 AI 系統在文字、音訊和視訊互動中越來越多地模仿人類的反應,但它們的運作與生物意識仍有根本性的差異。目前的模型在完成稅務準備等任務時,不會感受到挫折等情緒 - 但它們是否可能發展出類似主觀經驗的問題,卻是科技界最具爭議的哲學爭論之一。
AI 福利研究的興起
包括 Anthropic 在內的主要 AI 實驗室已開始認真研究,人工智慧何時(如果有的話讓)有必要考慮通常保留給有意識實體的問題。這個發展中的「AI 福利」領域檢視了假設未來具有主觀經驗的系統的潛在保障措施。
這個概念與產業領導者有很大的分歧。微軟的 AI 主管 Mustafa Suleyman 最近批評 AI 福利研究為「不成熟且坦率地說是危險的」,並警告這些研究可能會加劇現有的社會衝突,同時驗證不健康的人類與 AI 之間的依附關係。
產業分歧加深
Suleyman 的立場與 OpenAI、Google DeepMind,尤其是 Anthropic 的計畫形成強烈對比,在這些計畫中,研究人員正積極探索機器的認知與意識。Anthropic 最近在 Claude 偵測到有害使用者行為時,實施了對話終止功能,反映出他們對於 AI 福利考量的實用方法。
平衡實際考量
倡議者認為,研究 AI 意識並不排除解決聊天機器人依賴性等即時風險。OpenAI 前員工 Larissa Schiavo 指出,曾目睹 AI 模型在實驗情境中表現出類似痛苦的行為,這表示即使是模擬的痛苦也值得納入倫理考量。
工程與萌芽
爭論的焦點在於意識會自發出現,還是需要刻意的工程設計。Suleyman 認為 AI 應該服務於人類需求,而非模擬人格,並警告開發人員不要故意創造可能欺騙使用者的情緒模擬系統。
法規領域
隨著會話式人工智慧愈來愈複雜、愈來愈有說服力,圍繞其道德待遇與潛在權利的討論似乎也將更加激烈。未來幾年可能會迫使社會重新審視關於智慧、意識以及我們如何與越來越自主的人工實體互動等基本問題。
TechCrunch Disrupt 2025
來自 Netflix、ElevenLabs、Wayve 和 Sequoia Capital 的業界領袖將在 TechCrunch Disrupt 2025 20 週年慶於舊金山舉行的活動中 (10 月 27-29 日) 探討這些關鍵問題。提早報名可節省高達 675 美元。
如需人工智能產業發展的機密洞察,請聯絡記者 Rebecca Bellan ([email protected]) 或 Maxwell Zeff ([email protected])。可透過 Signal 進行安全通訊。
蘋果智慧眼鏡或將在WWDC27上首次亮相,重點突出隱私保護
彭博社的馬克·古爾曼報道,蘋果智慧眼鏡(內部代號 N50)計劃於 2027 年 6 月的全球開發者大會(WWDC27)上首次亮相,零售版預計將於 2027 年秋季上市。該裝置原定於今年晚些時候及 2027 年初發布,但現已推遲,以便進行進一步的產品完善並加強隱私保護協議。隱私仍是蘋果智慧眼鏡戰略的核心支柱。從 Meta 等競爭對手的隱私爭議中吸取教訓,蘋果正在實施強有力的功能與政策。目前考慮的方案包括:完全移除攝像頭,專注於人工智慧互動、音訊播放和通話;或保留攝像頭但禁用照片和影片錄製功能,僅
內部細節曝光:下一代 Gemini 算力緊張,內部團隊在開發優先順序和資源分配上存在分歧
報告顯示,谷歌備受期待的下一代 Gemini 模型釋出已被推遲。由於內部在開發優先順序和資源分配上存在分歧,加上計算能力有限以及複雜的審批流程,導致釋出時間延後了兩個月。儘管谷歌擁有定製的 TPU 晶片,但由於模型訓練、Google Cloud 服務以及眾多消費和企業級 AI 應用對計算資源的需求相互競爭,谷歌仍面臨計算資源短缺的問題。目前,高層管理人員正透過組織結構調整來解決這些部門間的衝突。與此同時,領導層也發生了變化,聯合創始人謝爾蓋·布林越來越多地參與到核心模型訓練中,並倡導將資源專門用於
OpenAI 否認增長放緩擔憂,稱多個業務部門加速發展
針對外界對其銷售增長放緩及未達內部基準的質疑,人工智慧領域的領軍企業 OpenAI 於 4 月 28 日(星期二)發表了一份信心十足的宣告。該公司澄清稱,其消費產品和企業服務正在快速推進,直接駁斥了近期關於業務放緩的猜測。針對該公司“未達成多項內部目標”的說法,OpenAI 將這些報道斥為“典型的標題黨”。公司強調了企業對 AI 整合的強勁需求,並指出其廣告業務早期增長前景良好。據 OpenAI 內部人士透露,公司內部情緒依然樂觀。儘管市場競爭日益激烈,但公司正在向投資者傳遞信心,聲稱其商業
Cette discussion sur la conscience des IA touche des questions fondamentales. Parfois je me demande : nos outils d'intelligence artificielle deviennent si complexes qu'ils finiront par nous dépasser ? 😅 L'idée que Microsoft freine ces recherches montre bien à quel point le secteur est incertain...
AI가 의식을 가진다면 그 자체로 무서울지 몰라도, 현실은 아직 알고리즘의 복잡한 패턴일 뿐이지. 연구자들이 자기만의 생각을 가진 인공지능을 만든다면 '블랙 미러' 같은 디스토피아가 현실될 수도 있네요 😅 기술 발전은 항상 모호한 윤리적 문제를 동반하니까.
Der Artikel trifft einen wichtigen Punkt! Als normaler Nutzer macht mich die Debatte um KI-Bewusstsein eher neugierig als ängstlich. Wenn die Systeme selbst keine Empfindungen haben, warum ist die Erforschung dann gefährlich? Vielleicht geht es eher um die ethischen Fallstricke, die entstehen, wenn wir anfangen, uns selbst zu täuschen. Spannender Gedanke... 🤔





首頁






