Heim
OpenAI-Chefwissenschaftler warnt, dass KI bald in die Phase der Selbstverbesserung eintreten könnte, hofft jedoch, dass die Branche freiwillig das Tempo drosselt.

Jakub Pachocki, Chief Scientist bei OpenAI, warnte davor, dass sich die künstliche Intelligenz mit einer beispiellosen Geschwindigkeit entwickelt, was die menschliche Aufsicht und Kontrolle erschwert. Er forderte Entwickler von KI-Systemen auf, den Fortschritt freiwillig zu verlangsamen, um die Sicherheit priorisieren zu können.
„Selbstverbessernde Modelle stehen kurz bevor“
In einem kürzlich veröffentlichten Artikel stellte Pachocki fest, dass KI-Systeme sich rasch weiterentwickelt haben, um Computer zu steuern, mit Menschen und anderen KI-Systemen zusammenzuarbeiten sowie eigenständige Forschung durchzuführen. Er warnte davor, dass diese Modelle bald die „rekursive Selbstverbesserung“ erreichen werden, bei der sie sich ohne menschliches Eingreifen selbst optimieren.
„Dies erfordert äußerste Vorsicht“, schrieb Pachocki. „Ich befürchte, dass niemand auf die Folgen eines ungebremsten und schnellen Wachstums der maschinellen Intelligenz vorbereitet ist.“
Freiwillige Pausen sollten universellen Sicherheitsstandards vorausgehen
Pachocki schlug vor, dass Entwickler KI entweder strenger auf menschliche Interessen ausrichten oder „die Entwicklung bei Bedarf pausieren“ könnten. Er hoffte, dass freiwillige Verlangsamungen zur Standardpraxis werden würden, bevor universelle Sicherheitsstandards etabliert sind.
Diese Ansicht spiegelt jüngste Offenlegungen von OpenAI wider: Während das Unternehmen KI-Agenten nutzt, um die Entwicklung zu beschleunigen, räumt es ein, dass Sicherheit und Ausrichtung möglicherweise nicht mit den Fähigkeiten der Modelle Schritt halten können. Leistungsstärkere Systeme sind schwieriger zu überwachen. Pachocki, der zuvor erklärt hatte, dass kein Labor bisher eine zuverlässige KI-Ausrichtung erreicht habe, forderte Regierungen auf, die internationale Koordinierung priorisieren.
Verwandter Artikel
OpenAI bestätigt Verschiebung des Börsengangs, Altman sagt, dass ein Start im Jahr 2026 unklug ist
Der führende Anbieter generativer KI, OpenAI, hat sein CEO Sam Altman kürzlich in einem Interview mit Fortune klargestellt, dass das Unternehmen nicht eilig einen Börsengang (IPO) plant. Angesichts der aktuellen Marktbedingungen und des technologisch
Blue Bug Embodied stellt modularen humanoide Roboter Xiao Bai vor, ab 9.800 Yuan erhältlich
Am 14. September stellte Lan Chong, die Technologietransfergesellschaft der Xi’an Jiaotong University, den neuen modularen humanoiden Roboter „Mantis Standard Bai Xiao“ vor. Durch die Senkung der traditionellen Einstiegshürden für die humanoide Robot
Amazon startet KI-Einkaufsassistent für Einzelhändler, darunter Kate Spade
Amazon erweitert seine KI-Shopping-Funktionen auf externe Händler über einen neuen Agentic Shopping Assistant, der auf AWS basiert, wobei Kate Spade zu den ersten Marken gehört, die ihn übernehmen.Dieser Dienst ermöglicht es Händlern, KI-Shopping-Ass
Empfehlungen zu verwandten Spezialthemen
Kommentare (0)

Jakub Pachocki, Chief Scientist bei OpenAI, warnte davor, dass sich die künstliche Intelligenz mit einer beispiellosen Geschwindigkeit entwickelt, was die menschliche Aufsicht und Kontrolle erschwert. Er forderte Entwickler von KI-Systemen auf, den Fortschritt freiwillig zu verlangsamen, um die Sicherheit priorisieren zu können.
„Selbstverbessernde Modelle stehen kurz bevor“
In einem kürzlich veröffentlichten Artikel stellte Pachocki fest, dass KI-Systeme sich rasch weiterentwickelt haben, um Computer zu steuern, mit Menschen und anderen KI-Systemen zusammenzuarbeiten sowie eigenständige Forschung durchzuführen. Er warnte davor, dass diese Modelle bald die „rekursive Selbstverbesserung“ erreichen werden, bei der sie sich ohne menschliches Eingreifen selbst optimieren.
„Dies erfordert äußerste Vorsicht“, schrieb Pachocki. „Ich befürchte, dass niemand auf die Folgen eines ungebremsten und schnellen Wachstums der maschinellen Intelligenz vorbereitet ist.“
Freiwillige Pausen sollten universellen Sicherheitsstandards vorausgehen
Pachocki schlug vor, dass Entwickler KI entweder strenger auf menschliche Interessen ausrichten oder „die Entwicklung bei Bedarf pausieren“ könnten. Er hoffte, dass freiwillige Verlangsamungen zur Standardpraxis werden würden, bevor universelle Sicherheitsstandards etabliert sind.
Diese Ansicht spiegelt jüngste Offenlegungen von OpenAI wider: Während das Unternehmen KI-Agenten nutzt, um die Entwicklung zu beschleunigen, räumt es ein, dass Sicherheit und Ausrichtung möglicherweise nicht mit den Fähigkeiten der Modelle Schritt halten können. Leistungsstärkere Systeme sind schwieriger zu überwachen. Pachocki, der zuvor erklärt hatte, dass kein Labor bisher eine zuverlässige KI-Ausrichtung erreicht habe, forderte Regierungen auf, die internationale Koordinierung priorisieren.
OpenAI bestätigt Verschiebung des Börsengangs, Altman sagt, dass ein Start im Jahr 2026 unklug ist
Der führende Anbieter generativer KI, OpenAI, hat sein CEO Sam Altman kürzlich in einem Interview mit Fortune klargestellt, dass das Unternehmen nicht eilig einen Börsengang (IPO) plant. Angesichts der aktuellen Marktbedingungen und des technologisch
Blue Bug Embodied stellt modularen humanoide Roboter Xiao Bai vor, ab 9.800 Yuan erhältlich
Am 14. September stellte Lan Chong, die Technologietransfergesellschaft der Xi’an Jiaotong University, den neuen modularen humanoiden Roboter „Mantis Standard Bai Xiao“ vor. Durch die Senkung der traditionellen Einstiegshürden für die humanoide Robot
Amazon startet KI-Einkaufsassistent für Einzelhändler, darunter Kate Spade
Amazon erweitert seine KI-Shopping-Funktionen auf externe Händler über einen neuen Agentic Shopping Assistant, der auf AWS basiert, wobei Kate Spade zu den ersten Marken gehört, die ihn übernehmen.Dieser Dienst ermöglicht es Händlern, KI-Shopping-Ass











