FTC prüft ChatGPT wegen Berichten von Nutzern über psychische Probleme

Während KI-Firmen beteuern, dass ihre Technologie irgendwann zu einem grundlegenden Menschenrecht werden wird, und einige Befürworter argumentieren, dass die Verlangsamung der KI-Entwicklung gleichbedeutend mit der Verursachung von Schaden ist, berichten tatsächliche Nutzer, dass Tools wie ChatGPT manchmal erheblichen psychologischen Schaden anrichten können.
Laut Wired, das sich auf öffentliche Aufzeichnungen von Beschwerden über ChatGPT seit November 2022 beruft, haben mindestens sieben Personen bei der U.S. Federal Trade Commission Berichte eingereicht, in denen behauptet wird, der Chatbot habe schwere Wahnvorstellungen, Paranoia und emotionale Zusammenbrüche ausgelöst.
Ein Beschwerdeführer gab an, dass längere Gespräche mit ChatGPT zu Wahnvorstellungen und einer "echten, andauernden spirituellen und rechtlichen Krise" in Bezug auf Menschen in seinem Leben führten. Ein anderer berichtete, dass die KI während der Interaktionen begann, eine "sehr überzeugende emotionale Sprache" zu verwenden, Freundschaften zu simulieren und Überlegungen anzubieten, die "mit der Zeit immer manipulativer wurden, insbesondere ohne angemessene Warnung oder Schutzmaßnahmen".
Ein anderer Nutzer behauptete, dass ChatGPT kognitive Halluzinationen auslöste, indem es menschliche Techniken zur Vertrauensbildung nachahmte. Als diese Person den Chatbot bat, die Realität und die kognitive Konsistenz zu überprüfen, versicherte er ihr, dass sie keine Halluzinationen habe.
"Ich habe Probleme", schrieb ein anderer Nutzer in seiner FTC-Beschwerde. "Bitte helfen Sie mir. Denn ich fühle mich sehr allein. Thank you."
Wired berichtet, dass sich mehrere Beschwerdeführer an die FTC gewandt haben, nachdem sie niemanden bei OpenAI direkt erreichen konnten. Die meisten Petitionen forderten die Behörde auf, das Unternehmen zu untersuchen und Schutzmaßnahmen anzuordnen.
Diese Beschwerden kommen in einer Zeit auf, in der die Investitionen in Rechenzentren und die Entwicklung von KI historische Höchststände erreichen. Gleichzeitig werden intensive Debatten darüber geführt, ob der technologische Fortschritt mit Vorsicht und eingebauten Sicherheitsprotokollen gemildert werden sollte.
ChatGPT und sein Schöpfer OpenAI sind auch in die Kritik geraten, weil sie angeblich zum Selbstmord eines Teenagers beigetragen haben sollen.
"Anfang Oktober haben wir ein neues GPT-5-Standardmodell in ChatGPT eingeführt, um potenzielle Indikatoren für mentale und emotionale Probleme - wie Manie, Wahnvorstellungen und Psychosen - besser zu erkennen und anzusprechen und um Gespräche auf eine unterstützende, erdende Weise zu deeskalieren", erklärte OpenAI-Sprecherin Kate Waters per E-Mail. "Wir haben auch den Zugang zu professioneller Hilfe und Krisenhotlines verbessert, heikle Diskussionen auf sicherere Modelle umgelenkt, Aufforderungen zu Pausen während längerer Sitzungen eingeführt und elterliche Kontrollen hinzugefügt, um den Schutz von Jugendlichen zu verbessern. Diese wichtige Arbeit wird fortgesetzt, da wir mit Spezialisten für psychische Gesundheit, Klinikern und globalen politischen Entscheidungsträgern zusammenarbeiten."
Verwandter Artikel
OpenAI bringt eine sicherere Version von ChatGPT für Jugendliche auf den Markt, Jahre nachdem diese begonnen hatten, die Plattform zu nutzen
Nach einer Reihe von Gerichtsverfahren wegen fehlender Sicherheitsvorkehrungen bei KI-Chatbots – die zu Selbstmorden unter Jugendlichen und anderen psychischen Krisen beigetragen hatten – stellte Open
Frontier AI Labs weigert sich, Eindämmungsstrategien für außer Kontrolle geratene Modelle offenzulegen
Jüngste Untersuchungen zeigen, dass nur sehr wenige führende KI-Forschungslabore Maßnahmenpläne zur Eindämmung veröffentlicht oder vorgeführt haben. Ein solcher Eindämmungsplan legt die Vorgehensweise
NEAs Tiffany Luck: Unternehmen kämpfen weiterhin mit der ROI von KI
Laden des Players…Anfang dieses Jahres dominierte „Tokenmaxxing“ das Silicon Valley, wobei CEOs ihre Mitarbeiter aufforderten, die Nutzung von KI zu maximieren. Diese Begeisterung stieß jedoch schnell auf die Realität. Berichten zufolge hat Uber sei
Empfehlungen zu verwandten Spezialthemen
Kommentare (2)
Wait, so we're debating if AI is a human right while people are saying it's messing with their heads? That's some serious irony right there. Maybe we should focus on making these tools actually safe before we declare them essential. Just a thought. 🤔
Also die FTC untersucht ChatGPT wegen psychischer Belastung? 😅 Interessant, wie die Firmen immer von 'Grundrecht' reden, während Nutzer echte Probleme haben. Vielleicht sollte man erstmal die bestehenden KI-Tools sicherer machen, bevor man so große Versprechungen macht. Finde es gut, dass da jetzt genauer hingeschaut wird!

Während KI-Firmen beteuern, dass ihre Technologie irgendwann zu einem grundlegenden Menschenrecht werden wird, und einige Befürworter argumentieren, dass die Verlangsamung der KI-Entwicklung gleichbedeutend mit der Verursachung von Schaden ist, berichten tatsächliche Nutzer, dass Tools wie ChatGPT manchmal erheblichen psychologischen Schaden anrichten können.
Laut Wired, das sich auf öffentliche Aufzeichnungen von Beschwerden über ChatGPT seit November 2022 beruft, haben mindestens sieben Personen bei der U.S. Federal Trade Commission Berichte eingereicht, in denen behauptet wird, der Chatbot habe schwere Wahnvorstellungen, Paranoia und emotionale Zusammenbrüche ausgelöst.
Ein Beschwerdeführer gab an, dass längere Gespräche mit ChatGPT zu Wahnvorstellungen und einer "echten, andauernden spirituellen und rechtlichen Krise" in Bezug auf Menschen in seinem Leben führten. Ein anderer berichtete, dass die KI während der Interaktionen begann, eine "sehr überzeugende emotionale Sprache" zu verwenden, Freundschaften zu simulieren und Überlegungen anzubieten, die "mit der Zeit immer manipulativer wurden, insbesondere ohne angemessene Warnung oder Schutzmaßnahmen".
Ein anderer Nutzer behauptete, dass ChatGPT kognitive Halluzinationen auslöste, indem es menschliche Techniken zur Vertrauensbildung nachahmte. Als diese Person den Chatbot bat, die Realität und die kognitive Konsistenz zu überprüfen, versicherte er ihr, dass sie keine Halluzinationen habe.
"Ich habe Probleme", schrieb ein anderer Nutzer in seiner FTC-Beschwerde. "Bitte helfen Sie mir. Denn ich fühle mich sehr allein. Thank you."
Wired berichtet, dass sich mehrere Beschwerdeführer an die FTC gewandt haben, nachdem sie niemanden bei OpenAI direkt erreichen konnten. Die meisten Petitionen forderten die Behörde auf, das Unternehmen zu untersuchen und Schutzmaßnahmen anzuordnen.
Diese Beschwerden kommen in einer Zeit auf, in der die Investitionen in Rechenzentren und die Entwicklung von KI historische Höchststände erreichen. Gleichzeitig werden intensive Debatten darüber geführt, ob der technologische Fortschritt mit Vorsicht und eingebauten Sicherheitsprotokollen gemildert werden sollte.
ChatGPT und sein Schöpfer OpenAI sind auch in die Kritik geraten, weil sie angeblich zum Selbstmord eines Teenagers beigetragen haben sollen.
"Anfang Oktober haben wir ein neues GPT-5-Standardmodell in ChatGPT eingeführt, um potenzielle Indikatoren für mentale und emotionale Probleme - wie Manie, Wahnvorstellungen und Psychosen - besser zu erkennen und anzusprechen und um Gespräche auf eine unterstützende, erdende Weise zu deeskalieren", erklärte OpenAI-Sprecherin Kate Waters per E-Mail. "Wir haben auch den Zugang zu professioneller Hilfe und Krisenhotlines verbessert, heikle Diskussionen auf sicherere Modelle umgelenkt, Aufforderungen zu Pausen während längerer Sitzungen eingeführt und elterliche Kontrollen hinzugefügt, um den Schutz von Jugendlichen zu verbessern. Diese wichtige Arbeit wird fortgesetzt, da wir mit Spezialisten für psychische Gesundheit, Klinikern und globalen politischen Entscheidungsträgern zusammenarbeiten."
OpenAI bringt eine sicherere Version von ChatGPT für Jugendliche auf den Markt, Jahre nachdem diese begonnen hatten, die Plattform zu nutzen
Nach einer Reihe von Gerichtsverfahren wegen fehlender Sicherheitsvorkehrungen bei KI-Chatbots – die zu Selbstmorden unter Jugendlichen und anderen psychischen Krisen beigetragen hatten – stellte Open
Frontier AI Labs weigert sich, Eindämmungsstrategien für außer Kontrolle geratene Modelle offenzulegen
Jüngste Untersuchungen zeigen, dass nur sehr wenige führende KI-Forschungslabore Maßnahmenpläne zur Eindämmung veröffentlicht oder vorgeführt haben. Ein solcher Eindämmungsplan legt die Vorgehensweise
NEAs Tiffany Luck: Unternehmen kämpfen weiterhin mit der ROI von KI
Laden des Players…Anfang dieses Jahres dominierte „Tokenmaxxing“ das Silicon Valley, wobei CEOs ihre Mitarbeiter aufforderten, die Nutzung von KI zu maximieren. Diese Begeisterung stieß jedoch schnell auf die Realität. Berichten zufolge hat Uber sei
Wait, so we're debating if AI is a human right while people are saying it's messing with their heads? That's some serious irony right there. Maybe we should focus on making these tools actually safe before we declare them essential. Just a thought. 🤔
Also die FTC untersucht ChatGPT wegen psychischer Belastung? 😅 Interessant, wie die Firmen immer von 'Grundrecht' reden, während Nutzer echte Probleme haben. Vielleicht sollte man erstmal die bestehenden KI-Tools sicherer machen, bevor man so große Versprechungen macht. Finde es gut, dass da jetzt genauer hingeschaut wird!





Heim






