Heim
Google erweitert die Dateisuche der Gemini-API um fortschrittliche multimodale RAG-Funktionen
Google hat ein bedeutendes Upgrade der Dateisuchfunktion seiner Gemini-API eingeführt und bietet Entwicklern damit erweiterte Funktionen im Bereich der multimodalen „Retrieval-Augmented Generation“ (RAG). Dieses Update geht über die herkömmliche reine Textsuche hinaus und ermöglicht es der KI, Bilder zu interpretieren und sich tief in komplexe Dokumente zu integrieren – ein entscheidender Fortschritt für die Genauigkeit der KI bei der Informationsgewinnung auf Unternehmensebene.
Technisch gesehen nutzt die neue Dateisuchfunktion das „Gemini Embedding2“-Modell. Im Gegensatz zu früheren Systemen, die auf die Suche nach Textvektoren beschränkt waren, verfügt das aktualisierte System über ein einheitliches multimodales Embedding, wodurch es visuelle Inhalte in PDFs, Dokumenten und verschiedenen Bildformaten erkennen und verarbeiten kann. Das bedeutet, dass Entwickler keine komplexen Vektordatenbanken oder Dokumentensegmentierungssysteme mehr aufbauen müssen; sie können einen vollständigen RAG-Workflow – vom Daten-Upload bis zur Informationsabfrage – direkt innerhalb der Gemini-API realisieren.

In der Praxis löst dieser Fortschritt ein häufiges Problem: Herkömmliche RAG-Systeme sind oft nicht in der Lage, nicht-textuelle Inhalte zu verarbeiten. Bislang waren Diagramme, Konstruktionszeichnungen oder Produkt-Screenshots in Dokumenten „blinde Flecken“ für die KI, wodurch wichtige Kontextinformationen übersehen wurden. Nun versteht die Gemini-API diese visuellen Elemente von Haus aus. Wenn ein Unternehmen beispielsweise ein PDF mit technischen Architekturdiagrammen oder Verkaufstrenddiagrammen hochlädt, kann die KI die Diagrammdaten mit Textbeschreibungen kombinieren, um präzise Erkenntnisse zu liefern, was den Nutzen von Kundenservice-Bots und Dokumentenanalysesystemen erheblich steigert.
Um die Verwaltung großer Wissensdatenbanken zu verbessern, hat Google eine Filterfunktion für benutzerdefinierte Metadaten hinzugefügt. Entwickler können Dateien nach Abteilung, Zeitpunkt oder Kategorie kennzeichnen und beim Abruf irrelevante Informationen anhand vordefinierter Bedingungen herausfiltern, wodurch sichergestellt wird, dass die von der KI generierten Antworten zielgerichteter sind.
Um zudem Bedenken hinsichtlich der Rückverfolgbarkeit von Informationen auszuräumen, unterstützt die Gemini-API nun Zitate auf Seitenebene. Bei der Generierung von Antworten gibt die KI für jede Information die konkrete Seitenzahl an, anstatt nur auf die gesamte Datei zu verweisen. Diese Transparenz hilft Nutzern, die Richtigkeit schnell zu überprüfen, und erleichtert ein vertieftes Lesen.
Die erweiterte Dateisuchfunktion steht Entwicklern weltweit zur Verfügung. Nutzer können über Google AI Studio oder die Google Cloud-Plattform darauf zugreifen, um die Entwicklungsvorteile und Effizienzsteigerungen zu nutzen, die multimodales RAG bietet.
Verwandter Artikel
DeepMind-CEO Hassabis: Ich schlafe sechs Stunden pro Tag und fühle mich normalerweise gegen 1 Uhr nachts energiegeladen.
Fortune hat kürzlich ein Interview mit Demis Hassabis, dem CEO von Google DeepMind, veröffentlicht, das seinen unkonventionellen Ansatz zu Erholung und Produktivität offenbart. Hassabis gab bekannt, dass er sehr wenig schläft und seine wachen Stunden
OpenAI und Anthropic kämpfen trotz Umsatzrückgängen um Marktanteile
Obwohl jüngste Berichte darauf hindeuten, dass OpenAI seine Umsatzziele verfehlt hat, was an diesem Dienstag Druck auf die Technologieaktien ausübte, zeigen sich private Investoren in KI-Labore weiter
Einhaltung der Vorschriften für autonome Fahrzeuge in Kalifornien: Eine neue Ära von Bußgeldern, Geofences und 1 Million Meilen
Guident betreibt einen AuveTech-Shuttle in Südflorida und verwaltet mithilfe seiner Fernüberwachungstechnologie eine vier Meilen lange Strecke in West Palm Beach sowie eine eine Meile lange Strecke in
Empfehlungen zu verwandten Spezialthemen
Kommentare (0)
Google hat ein bedeutendes Upgrade der Dateisuchfunktion seiner Gemini-API eingeführt und bietet Entwicklern damit erweiterte Funktionen im Bereich der multimodalen „Retrieval-Augmented Generation“ (RAG). Dieses Update geht über die herkömmliche reine Textsuche hinaus und ermöglicht es der KI, Bilder zu interpretieren und sich tief in komplexe Dokumente zu integrieren – ein entscheidender Fortschritt für die Genauigkeit der KI bei der Informationsgewinnung auf Unternehmensebene.
Technisch gesehen nutzt die neue Dateisuchfunktion das „Gemini Embedding2“-Modell. Im Gegensatz zu früheren Systemen, die auf die Suche nach Textvektoren beschränkt waren, verfügt das aktualisierte System über ein einheitliches multimodales Embedding, wodurch es visuelle Inhalte in PDFs, Dokumenten und verschiedenen Bildformaten erkennen und verarbeiten kann. Das bedeutet, dass Entwickler keine komplexen Vektordatenbanken oder Dokumentensegmentierungssysteme mehr aufbauen müssen; sie können einen vollständigen RAG-Workflow – vom Daten-Upload bis zur Informationsabfrage – direkt innerhalb der Gemini-API realisieren.

In der Praxis löst dieser Fortschritt ein häufiges Problem: Herkömmliche RAG-Systeme sind oft nicht in der Lage, nicht-textuelle Inhalte zu verarbeiten. Bislang waren Diagramme, Konstruktionszeichnungen oder Produkt-Screenshots in Dokumenten „blinde Flecken“ für die KI, wodurch wichtige Kontextinformationen übersehen wurden. Nun versteht die Gemini-API diese visuellen Elemente von Haus aus. Wenn ein Unternehmen beispielsweise ein PDF mit technischen Architekturdiagrammen oder Verkaufstrenddiagrammen hochlädt, kann die KI die Diagrammdaten mit Textbeschreibungen kombinieren, um präzise Erkenntnisse zu liefern, was den Nutzen von Kundenservice-Bots und Dokumentenanalysesystemen erheblich steigert.
Um die Verwaltung großer Wissensdatenbanken zu verbessern, hat Google eine Filterfunktion für benutzerdefinierte Metadaten hinzugefügt. Entwickler können Dateien nach Abteilung, Zeitpunkt oder Kategorie kennzeichnen und beim Abruf irrelevante Informationen anhand vordefinierter Bedingungen herausfiltern, wodurch sichergestellt wird, dass die von der KI generierten Antworten zielgerichteter sind.
Um zudem Bedenken hinsichtlich der Rückverfolgbarkeit von Informationen auszuräumen, unterstützt die Gemini-API nun Zitate auf Seitenebene. Bei der Generierung von Antworten gibt die KI für jede Information die konkrete Seitenzahl an, anstatt nur auf die gesamte Datei zu verweisen. Diese Transparenz hilft Nutzern, die Richtigkeit schnell zu überprüfen, und erleichtert ein vertieftes Lesen.
Die erweiterte Dateisuchfunktion steht Entwicklern weltweit zur Verfügung. Nutzer können über Google AI Studio oder die Google Cloud-Plattform darauf zugreifen, um die Entwicklungsvorteile und Effizienzsteigerungen zu nutzen, die multimodales RAG bietet.
DeepMind-CEO Hassabis: Ich schlafe sechs Stunden pro Tag und fühle mich normalerweise gegen 1 Uhr nachts energiegeladen.
Fortune hat kürzlich ein Interview mit Demis Hassabis, dem CEO von Google DeepMind, veröffentlicht, das seinen unkonventionellen Ansatz zu Erholung und Produktivität offenbart. Hassabis gab bekannt, dass er sehr wenig schläft und seine wachen Stunden
OpenAI und Anthropic kämpfen trotz Umsatzrückgängen um Marktanteile
Obwohl jüngste Berichte darauf hindeuten, dass OpenAI seine Umsatzziele verfehlt hat, was an diesem Dienstag Druck auf die Technologieaktien ausübte, zeigen sich private Investoren in KI-Labore weiter











