Meta enthüllt Lama 4: Fortgeschrittene KI -Modelle gestartet

Meta hat am Samstag eine Bombe platzen lassen und die neueste Ergänzung zur Llama-Familie vorgestellt: Llama 4. Diese neue Reihe umfasst Llama 4 Scout, Llama 4 Maverick und Llama 4 Behemoth. Diese Modelle wurden mit Unmengen an unmarkiertem Text, Bildern und Videos trainiert, was ihnen laut Meta ein ziemlich gutes Verständnis für visuelle Inhalte verleiht.

Der Anstoß, Llama 4 zu veröffentlichen, kam, nachdem das chinesische KI-Labor DeepSeek seine Modelle präsentierte, die Metas frühere Llama-Modelle entweder gleichzogen oder übertrafen. Dies versetzte Meta offenbar in Aufruhr und führte zur Einrichtung von Krisenstäben, um herauszufinden, wie DeepSeek es geschafft hat, ihre Modelle wie R1 und V3 kostengünstiger zu betreiben und einzusetzen.

Scout und Maverick sind sofort auf Llama.com oder über Metas Partner wie Hugging Face erhältlich. Behemoth befindet sich jedoch noch im Labor. Metas KI-Assistent, der in Apps wie WhatsApp, Messenger und Instagram zu finden ist, wurde in 40 Ländern auf Llama 4 aktualisiert. Die ausgefallenen multimodalen Funktionen sind jedoch vorerst nur in den USA und auf Englisch verfügbar.

Es gibt jedoch einen Haken. Wenn Sie in der EU sind oder Ihr Unternehmen dort ansässig ist, haben Sie Pech, denn Sie können diese Modelle weder nutzen noch teilen. Dies liegt wahrscheinlich an den strengen KI- und Datenschutzgesetzen dort. Meta ist übrigens kein Fan dieser Regeln. Außerdem benötigen Unternehmen mit über 700 Millionen monatlich aktiven Nutzern eine spezielle Lizenz von Meta, die möglicherweise verweigert wird.

„Diese Llama 4-Modelle sind nur der Anfang von etwas Großem für das Llama-Ökosystem“, prahlte Meta in ihrem Blogbeitrag. „Wir stehen mit Llama 4 erst am Anfang.“

Llama 4 ist das erste Modell, das eine Mixture of Experts (MoE)-Architektur verwendet, die das Training und die Beantwortung von Fragen viel effizienter macht. Es ist, als würde man eine große Aufgabe in kleinere Aufgaben aufteilen und sie an spezialisierte „Experten“-Modelle weitergeben.

Nehmen wir Maverick als Beispiel. Es hat insgesamt 400 Milliarden Parameter, aber nur 17 Milliarden sind über 128 Experten aktiv. Scout hingegen hat 17 Milliarden aktive Parameter, 16 Experten und insgesamt 109 Milliarden Parameter.

Metas interne Tests zeigen, dass Maverick, das sich hervorragend für allgemeine Assistenten- und Chat-Aufgaben wie kreatives Schreiben eignet, Modelle wie OpenAI's GPT-4o und Google's Gemini 2.0 in Bereichen wie Programmierung, logischem Denken und der Verarbeitung mehrerer Sprachen und langer Texte übertrifft. Es kann jedoch nicht ganz mit neueren, leistungsstärkeren Modellen wie Google's Gemini 2.5 Pro, Anthropic's Claude 3.7 Sonnet und OpenAI's GPT-4.5 mithalten.

Scout glänzt bei Aufgaben wie der Zusammenfassung von Dokumenten und der Arbeit mit großen Codebasen. Es hat ein riesiges Kontextfenster von 10 Millionen Token, was bedeutet, dass es Bilder und Millionen von Wörtern gleichzeitig verarbeiten kann. Scout läuft auf einer einzigen Nvidia H100 GPU, während Maverick ein leistungsstärkeres Nvidia H100 DGX-System oder Ähnliches benötigt.

Was Behemoth betrifft, so ist es noch unter Verschluss, wird aber ernsthafte Hardware benötigen. Es hat 288 Milliarden aktive Parameter, 16 Experten und fast zwei Billionen Gesamtparameter. Metas Tests zeigen, dass es GPT-4.5, Claude 3.7 Sonnet und Gemini 2.0 Pro in MINT-Fähigkeiten wie der Lösung mathematischer Probleme übertrifft, aber nicht Gemini 2.5 Pro schlägt.

Keines dieser Llama 4-Modelle ist das, was man als „denkende“ Modelle wie OpenAI's o1 und o3-mini bezeichnen würde. Diese Modelle überprüfen ihre Antworten doppelt und sind zuverlässiger, benötigen aber länger für Antworten.

Interessanterweise sagt Meta, dass sie Llama 4 so angepasst haben, dass es weniger wahrscheinlich „umstrittene“ Fragen ausweicht. Die neuen Modelle sind bereitwilliger, sich mit debattierten politischen und sozialen Themen auseinanderzusetzen, die die älteren Llama-Modelle gemieden hätten. Außerdem behauptet Meta, dass Llama 4 „dramatisch ausgewogener“ in dem ist, was es zu beantworten verweigert.

„Sie können sich darauf verlassen, dass Llama 4 Ihnen hilfreiche, faktenbasierte Antworten ohne Urteil gibt“, sagte ein Meta-Sprecher gegenüber TechCrunch. „Wir arbeiten daran, Llama responsiver auf eine Vielzahl von Standpunkten zu machen und weniger geneigt, einige gegenüber anderen zu bevorzugen.“

Dieser Schritt kommt, da einige Verbündete von Präsident Donald Trump, wie Elon Musk und David Sacks, KI-Chatbots beschuldigt haben, zu „woke“ zu sein und konservative Ansichten zu zensieren. Sacks hat insbesondere OpenAI's ChatGPT als voreingenommen und unwahrheitsgemäß in Bezug auf politische Themen bezeichnet.

Die Wahrheit ist, dass es schwierig ist, Voreingenommenheit in KI zu beseitigen. Selbst Musks eigenes KI-Unternehmen, xAI, hatte Probleme, einen Chatbot zu entwickeln, der politisch nicht einseitig ist.

Trotzdem haben Unternehmen wie OpenAI ihre Modelle angepasst, um mehr Fragen zu beantworten, insbesondere zu kontroversen Themen.