OpenAI-Befürworter für branchenspezifische KI-Benchmarks: Hier ist, warum es wichtig ist

Leistungsbenchmarks sind eine gängige Funktion, wenn neue KI-Modelle veröffentlicht werden und ihre Fähigkeiten in einer Reihe allgemeiner Aufgaben wie Mathematik auf Grundschulniveau (GSM8K) oder Argumentation auf Graduiertenniveau (GPQA) demonstrieren. Diese Benchmarks berücksichtigen jedoch oft nicht die spezifischen Bedürfnisse verschiedener Branchen.

Außerdem: ChatGPT wird sich nun an alles erinnern, was Sie ihm mitteilen – wie ein echter persönlicher Assistent

OpenAI-Pionierprogramm

Um diese Lücke zu schließen, hat OpenAI das OpenAI-Pionierprogramm eingeführt, das darauf abzielt, die Entwicklung von KI-Modellen für gezielte Branchen und praktische Anwendungen zu verbessern. Diese Initiative ist ein doppelt ausgerichteter Ansatz, bei dem Unternehmen mit den Forschern von OpenAI zusammenarbeiten, um maßgeschneiderte Bewertungen zu erstellen und Modelle zu verfeinern, die spezifischen Domänen entsprechen.

wir starten das OpenAI-Pionierprogramm – eine Partnerschaft zwischen OpenAI und Unternehmen, die fortschrittliche KI-Produkte entwickeln, um (a) Modelle intensiv zu optimieren, die bei hochwertigen domänenspezifischen Aufgaben übertreffen, und (b) bessere reale Bewertungen zu entwickeln, die es Branchen ermöglichen, besser zu… https://t.co/cCvkGmYqJd

— Brad Lightcap (@bradlightcap) 9. April 2025

In einem kürzlichen Blogbeitrag wies OpenAI darauf hin, dass Branchen wie Recht, Finanzen, Versicherungen, Gesundheitswesen und Buchhaltung keine umfassende Benchmark-Quelle haben. Um dies anzugehen, plant OpenAI, mit mehreren Unternehmen in jeder Branche zusammenzuarbeiten, um diese Bewertungen zu entwickeln. Dieser Ansatz zielt nicht nur darauf ab, die Modellentwicklung zu verbessern, sondern auch das Vertrauen der Öffentlichkeit in KI-Technologien zu fördern.

Außerdem: KI stößt nicht an eine Wand, sie wird einfach zu intelligent für Benchmarks, sagt Anthropic

Forschungen haben das Fehlen branchenspezifischer Benchmarks als erhebliche Herausforderung für KI in Unternehmensumgebungen identifiziert. Zum Beispiel diskutierte Silvio Savarese, der Salesforce AI Research leitet, das Konzept der Unternehmensallgemeinen Intelligenz (EGI) in einem Blogbeitrag. EGI konzentriert sich auf fortschrittliche KI-Lösungen, die auf spezifische Geschäftsbereiche zugeschnitten sind. In einer Diskussion mit ZDNET betonte er die Bedeutung der Entwicklung von Benchmarks, die domänenspezifische Funktionen bewerten, als entscheidenden Schritt zur Erreichung von EGI.

Verfeinerung bestehender Modelle

Zusätzlich zur Erstellung neuer Bewertungen wird OpenAI mit Unternehmen zusammenarbeiten, um bestehende Modelle für drei spezifische Branchenanwendungsfälle durch eine Methode namens Verstärkungs-Feinabstimmung (RFT) zu verfeinern. OpenAI wird Anleitungen zur Implementierung von RFT bereitstellen, sodass Unternehmen dann entscheiden können, wie sie diese Modelle am besten einsetzen, die laut OpenAI für den großflächigen Einsatz bereit sein sollen.

Außerdem: Der Wettlauf um KI-Modelle ist plötzlich viel enger geworden, sagen Stanford-Wissenschaftler

Die erste Gruppe, die an diesem Programm teilnimmt, wird eine ausgewählte Anzahl von Startups umfassen, die sich auf Anwendungsfälle mit erheblichem realem Einfluss konzentrieren. Wenn Ihr Unternehmen diese Kriterien erfüllt, können Sie sich bewerben, indem Sie grundlegende Unternehmensinformationen über die Webseite des OpenAI-Pionierprogramms einreichen.

Holen Sie sich jeden Morgen die wichtigsten Geschichten in Ihren Posteingang mit unserem Tech Today-Newsletter.