Heim
Die Kontroverse um „Jailbreak“ löst weltweite Zensurmaßnahmen aus und führt zur raschen Entfernung des KI-Modells „Claude Fable5“
Anthropic hat kürzlich „Claude Fable5“ vorgestellt, das das Unternehmen als sein bislang leistungsstärkstes großes Sprachmodell auf Mythos-Niveau bezeichnet. Die herausragende Leistung des Modells beim Programmieren und bei der Bewältigung komplexer Aufgaben sorgte in der Tech-Welt schnell für großes Aufsehen. Doch innerhalb von 72 Stunden verhängte die US-Regierung ein weltweites Verbot für dieses mit Spannung erwartete KI-Produkt und zwang das Unternehmen, alle Dienste einzustellen.
Das Verbot ist bemerkenswert streng. Unter Berufung auf die nationale Sicherheit untersagte die US-Regierung nicht nur Personen und Institutionen außerhalb der USA den Zugriff auf das Modell, sondern auch ausländischen Staatsangehörigen innerhalb der USA, einschließlich der eigenen ausländischen Mitarbeiter von Anthropic. Da sich die schnelle und genaue Überprüfung der Staatsangehörigkeit jedes Nutzers als technisch schwierig erwies, entschied sich Anthropic für einen pauschalen Ansatz und stellte alle Dienste für „Claude Fable5“ und das damit verbundene Modell „Claude Mythos5“ ein. Betroffene Nutzer werden nun automatisch auf die Vorgängerversion umgeleitet.

Auslöser dieses Vorfalls war die Entdeckung einer kritischen Sicherheitslücke. Berichten zufolge könnte die Schwachstelle die integrierten Sicherheitsvorkehrungen des Modells umgehen und so eine Art „Jailbreak“ ermöglichen. Anthropic betonte, dass die Jailbreak-Methode sehr spezifisch und nicht verallgemeinerbar sei und dass das Modell vor der Veröffentlichung Tausenden von Stunden Red-Team-Tests unterzogen worden sei. Dennoch verfolgte die US-Regierung eine ungewöhnlich harte Linie. Beamte argumentierten, dass die Rechenleistung von Claude Fable5 fast das „Niveau einer Netzwerkwaffe“ erreiche, sodass jeder Verstoß gegen die Sicherheitsmaßnahmen zu unvorhersehbaren Folgen führen könnte. Sie forderten Anthropic auf, entweder die Sicherheitslücke unverzüglich zu beheben oder das Produkt vom Markt zu nehmen.
Beide Seiten befinden sich in einer hitzigen Pattsituation hinsichtlich der Schwere der Sicherheitslücke. Anthropic argumentierte, dass die Einstellung eines Produkts, das von Hunderten Millionen Nutzern verwendet wird, aufgrund einer begrenzten, nicht verallgemeinerbaren Sicherheitslücke einen gefährlichen Präzedenzfall für die Branche schaffen würde. Insider deuten jedoch an, dass die Bedenken der Regierung tiefer liegen. Berichten zufolge vermuten die US-Behörden, dass mit China verbundene Organisationen die Sicherheitslücke möglicherweise bereits ausgenutzt haben, um auf die vollen Funktionen des Modells zuzugreifen, was das Risiko von Reverse Engineering oder Modelldestillation erhöht.
Verwandter Artikel
Meta entfernt KI-Fotobearbeitungsfunktion nach Nutzerprotesten
Meta, der Social-Media-Riese, ist erneut in eine öffentliche Debatte über die heikle Balance zwischen künstlicher Intelligenz und dem Schutz der Privatsphäre der Nutzer verwickelt. Laut TechCrunch hat Meta’s Superintelligence Labs diese Woche einen n
DeepMind-CEO Hassabis: Ich schlafe sechs Stunden pro Tag und fühle mich normalerweise gegen 1 Uhr nachts energiegeladen.
Fortune hat kürzlich ein Interview mit Demis Hassabis, dem CEO von Google DeepMind, veröffentlicht, das seinen unkonventionellen Ansatz zu Erholung und Produktivität offenbart. Hassabis gab bekannt, dass er sehr wenig schläft und seine wachen Stunden
OpenAI und Anthropic kämpfen trotz Umsatzrückgängen um Marktanteile
Obwohl jüngste Berichte darauf hindeuten, dass OpenAI seine Umsatzziele verfehlt hat, was an diesem Dienstag Druck auf die Technologieaktien ausübte, zeigen sich private Investoren in KI-Labore weiter
Empfehlungen zu verwandten Spezialthemen
Kommentare (0)
Anthropic hat kürzlich „Claude Fable5“ vorgestellt, das das Unternehmen als sein bislang leistungsstärkstes großes Sprachmodell auf Mythos-Niveau bezeichnet. Die herausragende Leistung des Modells beim Programmieren und bei der Bewältigung komplexer Aufgaben sorgte in der Tech-Welt schnell für großes Aufsehen. Doch innerhalb von 72 Stunden verhängte die US-Regierung ein weltweites Verbot für dieses mit Spannung erwartete KI-Produkt und zwang das Unternehmen, alle Dienste einzustellen.
Das Verbot ist bemerkenswert streng. Unter Berufung auf die nationale Sicherheit untersagte die US-Regierung nicht nur Personen und Institutionen außerhalb der USA den Zugriff auf das Modell, sondern auch ausländischen Staatsangehörigen innerhalb der USA, einschließlich der eigenen ausländischen Mitarbeiter von Anthropic. Da sich die schnelle und genaue Überprüfung der Staatsangehörigkeit jedes Nutzers als technisch schwierig erwies, entschied sich Anthropic für einen pauschalen Ansatz und stellte alle Dienste für „Claude Fable5“ und das damit verbundene Modell „Claude Mythos5“ ein. Betroffene Nutzer werden nun automatisch auf die Vorgängerversion umgeleitet.

Auslöser dieses Vorfalls war die Entdeckung einer kritischen Sicherheitslücke. Berichten zufolge könnte die Schwachstelle die integrierten Sicherheitsvorkehrungen des Modells umgehen und so eine Art „Jailbreak“ ermöglichen. Anthropic betonte, dass die Jailbreak-Methode sehr spezifisch und nicht verallgemeinerbar sei und dass das Modell vor der Veröffentlichung Tausenden von Stunden Red-Team-Tests unterzogen worden sei. Dennoch verfolgte die US-Regierung eine ungewöhnlich harte Linie. Beamte argumentierten, dass die Rechenleistung von Claude Fable5 fast das „Niveau einer Netzwerkwaffe“ erreiche, sodass jeder Verstoß gegen die Sicherheitsmaßnahmen zu unvorhersehbaren Folgen führen könnte. Sie forderten Anthropic auf, entweder die Sicherheitslücke unverzüglich zu beheben oder das Produkt vom Markt zu nehmen.
Beide Seiten befinden sich in einer hitzigen Pattsituation hinsichtlich der Schwere der Sicherheitslücke. Anthropic argumentierte, dass die Einstellung eines Produkts, das von Hunderten Millionen Nutzern verwendet wird, aufgrund einer begrenzten, nicht verallgemeinerbaren Sicherheitslücke einen gefährlichen Präzedenzfall für die Branche schaffen würde. Insider deuten jedoch an, dass die Bedenken der Regierung tiefer liegen. Berichten zufolge vermuten die US-Behörden, dass mit China verbundene Organisationen die Sicherheitslücke möglicherweise bereits ausgenutzt haben, um auf die vollen Funktionen des Modells zuzugreifen, was das Risiko von Reverse Engineering oder Modelldestillation erhöht.
Meta entfernt KI-Fotobearbeitungsfunktion nach Nutzerprotesten
Meta, der Social-Media-Riese, ist erneut in eine öffentliche Debatte über die heikle Balance zwischen künstlicher Intelligenz und dem Schutz der Privatsphäre der Nutzer verwickelt. Laut TechCrunch hat Meta’s Superintelligence Labs diese Woche einen n
DeepMind-CEO Hassabis: Ich schlafe sechs Stunden pro Tag und fühle mich normalerweise gegen 1 Uhr nachts energiegeladen.
Fortune hat kürzlich ein Interview mit Demis Hassabis, dem CEO von Google DeepMind, veröffentlicht, das seinen unkonventionellen Ansatz zu Erholung und Produktivität offenbart. Hassabis gab bekannt, dass er sehr wenig schläft und seine wachen Stunden
OpenAI und Anthropic kämpfen trotz Umsatzrückgängen um Marktanteile
Obwohl jüngste Berichte darauf hindeuten, dass OpenAI seine Umsatzziele verfehlt hat, was an diesem Dienstag Druck auf die Technologieaktien ausübte, zeigen sich private Investoren in KI-Labore weiter











