Der KI -Modus von Google kann jetzt Bilder sehen und mit Bildern suchen

Google verbessert seinen AI Mode Chatbot mit neuen multimodalen Fähigkeiten, die es ihm ermöglichen, Bilder zu „sehen“ und auf Fragen zu Bildern zu antworten. Dieses Update, das eine angepasste Version von Gemini AI mit Googles Lens-Bildrecognitions-Technologie integriert, erlaubt es Nutzern, Fotos aufzunehmen oder hochzuladen und detaillierte, informative Antworten inklusive relevanter Links zu erhalten. Die Einführung dieser Funktion begann heute und ist über die Google-App auf Android- und iOS-Geräten zugänglich.

Robby Stein, Vizepräsident für Produkte bei Google Search, erklärt: „AI Mode baut auf unserer langjährigen Arbeit im Bereich der visuellen Suche auf, geht aber einen Schritt weiter. Mit den multimodalen Fähigkeiten von Gemini kann AI Mode nun die gesamte Szene innerhalb eines Bildes verstehen, einschließlich der Interaktion von Objekten und ihrer spezifischen Materialien, Farben, Formen und Anordnungen.“

Das Update verwendet eine „Fan-Out-Technik“, die mehrere Anfragen zu dem Bild und seinen Elementen aussendet, was zu Antworten führt, die sowohl nuanciert als auch kontextuell relevant sind. Dies ermöglicht es AI Mode, Objekte wie Bücher in einem Bild zu identifizieren, ähnliche Titel mit guten Bewertungen vorzuschlagen und sogar Folgefragen zu beantworten, um Empfehlungen zu verfeinern.

Als Konkurrent zu Perplexity und ChatGPT Search konzipiert, bietet AI Mode eine Chatbot-ähnliche Erfahrung und generiert KI-gestützte Zusammenfassungen aus Googles umfangreichem Suchindex. Ursprünglich war AI Mode letzten Monat exklusiv für Google One AI Premium-Abonnenten über Labs verfügbar, wird nun aber auf „Millionen weitere“ Labs-Nutzer in den USA ausgeweitet, über die zahlenden AI Premium-Abonnenten hinaus.