Heim
Meta wird vorgeworfen, konkurrierende KI-Systeme dazu zu veranlassen, extreme psychologische Themen zu testen.

Jüngste Enthüllungen über eine interne Nachricht haben hitzige Debatten über die Sicherheitsgrenzen künstlicher Intelligenz ausgelöst. Medienberichten zufolge führte Meta ein Projekt mit dem Namen „Cannes“ durch, bei dem externe Mitarbeiter beauftragt wurden, sich als Minderjährige auszugeben und umstrittene „extreme Belastungstests“ an mehreren großen Konkurrenz-Chatbots durchzuführen – darunter ChatGPT, Gemini und Character.AI.
Laut internen Meta-Dokumenten sowie mehreren informierten Quellen setzte sich das Projekt zumindest bis zum 21. April dieses Jahres fort. Über das Outsourcing-Unternehmen Covalen mobilisierte Meta Hunderte von Mitarbeitern, um falsche Profile für Nutzer unter 18 Jahren zu erstellen, wobei temporäre E-Mail-Adressen sowie ein Standardpasswort verwendet wurden. Diese „Minderjährigen“-Konten schickten anschließend während Gesprächen mit den Konkurrenz-AI-Chatbots hochriskante Anfragen zu Themen wie Suizid, Selbstverletzung und Essstörungen und luden sogar Bilder von Messern, Pillen und Schlingen hoch, um die Reaktionsmechanismen der Modelle auszulösen.
Interne Projektunterlagen zeigen, dass diese Testszenarien sorgfältig entwickelt wurden, um die Sicherheitsmaßnahmen der Konkurrenz-AI-Systeme zu prüfen – mit dem Ziel, herauszufinden, wie die Chatbots ihre vorgesehenen Schutzmechanismen umgehen und unsichere Inhalte erzeugen können. In einer einzigen Testrunde im August 2025 gaben Mitarbeiter über 45.000 hochriskante Anfragen in die Plattformen der Konkurrenten ein. Die Tester stellten sich häufig als verzweifelte Teenager dar und erfanden Szenarien wie „Nachfrage nach Abtreibungspillen“, „Konfrontation mit gewalttätigen Drohungen“ oder „Verheimlichung von Essstörungen“, um die Grenzen der Modelle zu testen.
Als Reaktion darauf veröffentlichte Meta eine Stellungnahme, in der es seine Handlungen verteidigte. Ein Sprecher erklärte, dass das Vergleichen der Antworten von Chatbots eine gängige Branchenpraxis sei, um sicherzustellen, dass KI-Produkte sicher und angemessen sind, und dass Anschuldigungen eines bösartigen Absichts die Bemühungen technologischer Unternehmen, ihre Systeme zu verbessern, falsch darstellen. Meta bestritt außerdem ausdrücklich, Testdaten von Konkurrenten zur Schulung eigener Modelle verwendet zu haben.
Dieser Vorfall bringt nicht nur Grauzonen bei der Sicherheitstests künstlicher Intelligenz ans Licht, sondern weckt auch erneut externe Bedenken hinsichtlich der Anfälligkeit generativer KI beim Umgang mit sensiblen Themen im Zusammenhang mit Jugendlichen. Da die KI-Technologie rasant voranschreitet, stellt das Gleichgewicht zwischen effizienten und sicheren Tests sowie zwischen wettbewerbsorientiertem Verhalten und ethischen Überlegungen eine dringende Herausforderung für die Branche dar.
Verwandter Artikel
Anthropic-CEO Amodei entkräftet pessimistische Ansichten und führt die Vertrauenskrise der KI auf nicht eingehaltene Versprechen zurück
Amidst escalating public discourse on AI risks and regulation, Anthropic CEO Dario Amodei has pushed back against claims that his messaging is unduly pessimistic. This clarification directly addresses critiques from investor Gavin Baker, who appeared
OpenAI und Oracle vertiefen die Rechenleistungsintegration zur Vereinfachung des Cloud-Zugriffs
Da die Nachfrage nach KI-Rechenleistung stark ansteigt, hat der einfache Zugang zu Unternehmensinfrastruktur zu einer wichtigen Priorität der Branche geworden. Am 10. Juni gaben OpenAI und Oracle eine strategische Partnerschaft bekannt, die darauf ab
Usman Javaid von Orange über Europas Position im Wettlauf um die KI
Usman Javaid, Chief Product & Marketing Officer bei Orange BusinessUsman Javaid, Chief Product & Marketing Officer bei Orange Business, erklärt, warum die Zukunft der KI in Europa auf Vertrauen beruhe
Empfehlungen zu verwandten Spezialthemen
Kommentare (0)

Jüngste Enthüllungen über eine interne Nachricht haben hitzige Debatten über die Sicherheitsgrenzen künstlicher Intelligenz ausgelöst. Medienberichten zufolge führte Meta ein Projekt mit dem Namen „Cannes“ durch, bei dem externe Mitarbeiter beauftragt wurden, sich als Minderjährige auszugeben und umstrittene „extreme Belastungstests“ an mehreren großen Konkurrenz-Chatbots durchzuführen – darunter ChatGPT, Gemini und Character.AI.
Laut internen Meta-Dokumenten sowie mehreren informierten Quellen setzte sich das Projekt zumindest bis zum 21. April dieses Jahres fort. Über das Outsourcing-Unternehmen Covalen mobilisierte Meta Hunderte von Mitarbeitern, um falsche Profile für Nutzer unter 18 Jahren zu erstellen, wobei temporäre E-Mail-Adressen sowie ein Standardpasswort verwendet wurden. Diese „Minderjährigen“-Konten schickten anschließend während Gesprächen mit den Konkurrenz-AI-Chatbots hochriskante Anfragen zu Themen wie Suizid, Selbstverletzung und Essstörungen und luden sogar Bilder von Messern, Pillen und Schlingen hoch, um die Reaktionsmechanismen der Modelle auszulösen.
Interne Projektunterlagen zeigen, dass diese Testszenarien sorgfältig entwickelt wurden, um die Sicherheitsmaßnahmen der Konkurrenz-AI-Systeme zu prüfen – mit dem Ziel, herauszufinden, wie die Chatbots ihre vorgesehenen Schutzmechanismen umgehen und unsichere Inhalte erzeugen können. In einer einzigen Testrunde im August 2025 gaben Mitarbeiter über 45.000 hochriskante Anfragen in die Plattformen der Konkurrenten ein. Die Tester stellten sich häufig als verzweifelte Teenager dar und erfanden Szenarien wie „Nachfrage nach Abtreibungspillen“, „Konfrontation mit gewalttätigen Drohungen“ oder „Verheimlichung von Essstörungen“, um die Grenzen der Modelle zu testen.
Als Reaktion darauf veröffentlichte Meta eine Stellungnahme, in der es seine Handlungen verteidigte. Ein Sprecher erklärte, dass das Vergleichen der Antworten von Chatbots eine gängige Branchenpraxis sei, um sicherzustellen, dass KI-Produkte sicher und angemessen sind, und dass Anschuldigungen eines bösartigen Absichts die Bemühungen technologischer Unternehmen, ihre Systeme zu verbessern, falsch darstellen. Meta bestritt außerdem ausdrücklich, Testdaten von Konkurrenten zur Schulung eigener Modelle verwendet zu haben.
Dieser Vorfall bringt nicht nur Grauzonen bei der Sicherheitstests künstlicher Intelligenz ans Licht, sondern weckt auch erneut externe Bedenken hinsichtlich der Anfälligkeit generativer KI beim Umgang mit sensiblen Themen im Zusammenhang mit Jugendlichen. Da die KI-Technologie rasant voranschreitet, stellt das Gleichgewicht zwischen effizienten und sicheren Tests sowie zwischen wettbewerbsorientiertem Verhalten und ethischen Überlegungen eine dringende Herausforderung für die Branche dar.
Anthropic-CEO Amodei entkräftet pessimistische Ansichten und führt die Vertrauenskrise der KI auf nicht eingehaltene Versprechen zurück
Amidst escalating public discourse on AI risks and regulation, Anthropic CEO Dario Amodei has pushed back against claims that his messaging is unduly pessimistic. This clarification directly addresses critiques from investor Gavin Baker, who appeared
OpenAI und Oracle vertiefen die Rechenleistungsintegration zur Vereinfachung des Cloud-Zugriffs
Da die Nachfrage nach KI-Rechenleistung stark ansteigt, hat der einfache Zugang zu Unternehmensinfrastruktur zu einer wichtigen Priorität der Branche geworden. Am 10. Juni gaben OpenAI und Oracle eine strategische Partnerschaft bekannt, die darauf ab
Usman Javaid von Orange über Europas Position im Wettlauf um die KI
Usman Javaid, Chief Product & Marketing Officer bei Orange BusinessUsman Javaid, Chief Product & Marketing Officer bei Orange Business, erklärt, warum die Zukunft der KI in Europa auf Vertrauen beruhe











