Heim
Mistral stellt „Robostral Navigate 8B“ vor: Autonome Navigation mit einer einzigen Kamera übertrifft Systeme mit mehreren Kameras
Mistral, ein französisches Unternehmen für künstliche Intelligenz, hat mit „Robostral Navigate“ sein erstes KI-Modell für die Roboternavigation auf den Markt gebracht. Mit 8 Milliarden Parametern ermöglicht dieses Modell Robotern die autonome Navigation in komplexen Umgebungen, wobei lediglich eine Standard-RGB-Kamera zum Einsatz kommt – Tiefensensoren oder LiDAR sind somit nicht erforderlich.

Robostral Navigate wurde in erster Linie für die „embodied navigation“ entwickelt und ist in vielfältigen Umgebungen einsetzbar, darunter Büros, Wohnräume, Geschäftsgebäude und Außenbereiche. Herkömmliche Navigationssysteme sind in der Regel auf teure LiDAR- oder Tiefensensoren angewiesen, was die Hardwarekosten und die Komplexität der Implementierung erhöht. Durch den Einsatz einer Standardkamera und eines Modells mit 8 Milliarden Parametern senkt „Robostral Navigate“ diese Hürden erheblich und schafft ein vollständiges Closed-Loop-System von der Umgebungswahrnehmung bis zur Wegplanung.
Das Modell übertrifft mit einem einzigen Objektiv sogar Mehrkamerasysteme und erreicht in neuen Umgebungen eine Erfolgsquote von über 76 %.
Die Leistungskennzahlen sind überzeugend. In R2R-CE-Benchmark-Tests erreichte das Modell eine Erfolgsquote von 79,4 % in Szenen, die in den Trainingsdaten enthalten waren, und 76,6 % in völlig neuen Umgebungen. Bemerkenswert ist, dass es die bisher beste Ein-Kamera-Lösung um 9,7 Prozentpunkte übertrifft und Spitzen-Systeme mit Tiefensensoren oder mehreren Kameras um 4,5 Prozentpunkte übertrifft. Dies zeigt, dass ein Ein-Kamera-Ansatz nicht nur mit Mehrkamera-Lösungen mithalten kann, sondern auch einen umfassenden Leistungsdurchbruch erzielt.
Mistral entwickelte das Modell vollständig intern und trainierte es ausschließlich in simulierten Umgebungen unter Verwendung von etwa 400.000 aufgezeichneten Pfaden in 6.000 verschiedenen virtuellen Räumen. Diese rein simulationsbasierte Trainingsstrategie minimiert den Bedarf an Datenerfassung in der realen Welt und validiert gleichzeitig die Effektivität der Übertragung von Fähigkeiten aus virtuellen in physische Umgebungen.
Das Open-Source-Ökosystem ist mit Rad-, Bein- und Flugrobotern kompatibel und äußerst vielversprechend.
Was die Kompatibilität betrifft, unterstützt Robostral Navigate drei Hauptkategorien von Robotern: Rad-, Bein- und Flugplattformen, womit die derzeit gängigen Roboterformen abgedeckt sind. Ob bei Logistikrobotern auf Rädern, vierbeinigen Roboterhunden oder Drohnen – das gleiche Navigationsmodell lässt sich anpassen, was seine große Vielseitigkeit unterstreicht.
Verwandter Artikel
Tencent bringt den persönlichen Agenten mit dem Codenamen „Handy Bot“ für heimliche Tests in WeChat auf den Markt.
Laut Berichten arbeitet Tencent im Hintergrund an einem Produkt für persönliche KI-Agenten, das intern „Handy Bot“ genannt wird und als eigenständige App veröffentlicht werden soll. Der Dienst ist bereits unauffällig in WeChat aufgetaucht, wobei die
OpenAI plant, eine günstigere Version von ChatGPT auf den Markt zu bringen und könnte möglicherweise ein werbfinanziertes Modell einführen, um mit Netflix zu konkurrieren.
OpenAI ist dabei, sein Publikum durch eine Überarbeitung seiner aktuellen Dienstleistungsstruktur und die Einführung einer günstigeren ChatGPT-Abonnementstufe zu erweitern. Interne Quellen deuten darauf hin, dass das Unternehmen sich geschäftlich am
Das WeChat Vision Team veröffentlicht das allgemeine multimodale Einbettungsmodell „WeMM-Embedding“ als Open-Source-Projekt; das tägliche Anrufaufkommen übersteigt zehn Milliarden
Das WeChat Visual Team von Tencent hat „WeMM-Embedding“ offiziell als Open-Source-Projekt veröffentlicht – ein vielseitiges multimodales Einbettungsmodell, das sowohl Text- als auch Bildeingaben unter
Empfehlungen zu verwandten Spezialthemen
Kommentare (0)
Mistral, ein französisches Unternehmen für künstliche Intelligenz, hat mit „Robostral Navigate“ sein erstes KI-Modell für die Roboternavigation auf den Markt gebracht. Mit 8 Milliarden Parametern ermöglicht dieses Modell Robotern die autonome Navigation in komplexen Umgebungen, wobei lediglich eine Standard-RGB-Kamera zum Einsatz kommt – Tiefensensoren oder LiDAR sind somit nicht erforderlich.

Robostral Navigate wurde in erster Linie für die „embodied navigation“ entwickelt und ist in vielfältigen Umgebungen einsetzbar, darunter Büros, Wohnräume, Geschäftsgebäude und Außenbereiche. Herkömmliche Navigationssysteme sind in der Regel auf teure LiDAR- oder Tiefensensoren angewiesen, was die Hardwarekosten und die Komplexität der Implementierung erhöht. Durch den Einsatz einer Standardkamera und eines Modells mit 8 Milliarden Parametern senkt „Robostral Navigate“ diese Hürden erheblich und schafft ein vollständiges Closed-Loop-System von der Umgebungswahrnehmung bis zur Wegplanung.
Das Modell übertrifft mit einem einzigen Objektiv sogar Mehrkamerasysteme und erreicht in neuen Umgebungen eine Erfolgsquote von über 76 %.
Die Leistungskennzahlen sind überzeugend. In R2R-CE-Benchmark-Tests erreichte das Modell eine Erfolgsquote von 79,4 % in Szenen, die in den Trainingsdaten enthalten waren, und 76,6 % in völlig neuen Umgebungen. Bemerkenswert ist, dass es die bisher beste Ein-Kamera-Lösung um 9,7 Prozentpunkte übertrifft und Spitzen-Systeme mit Tiefensensoren oder mehreren Kameras um 4,5 Prozentpunkte übertrifft. Dies zeigt, dass ein Ein-Kamera-Ansatz nicht nur mit Mehrkamera-Lösungen mithalten kann, sondern auch einen umfassenden Leistungsdurchbruch erzielt.
Mistral entwickelte das Modell vollständig intern und trainierte es ausschließlich in simulierten Umgebungen unter Verwendung von etwa 400.000 aufgezeichneten Pfaden in 6.000 verschiedenen virtuellen Räumen. Diese rein simulationsbasierte Trainingsstrategie minimiert den Bedarf an Datenerfassung in der realen Welt und validiert gleichzeitig die Effektivität der Übertragung von Fähigkeiten aus virtuellen in physische Umgebungen.
Das Open-Source-Ökosystem ist mit Rad-, Bein- und Flugrobotern kompatibel und äußerst vielversprechend.
Was die Kompatibilität betrifft, unterstützt Robostral Navigate drei Hauptkategorien von Robotern: Rad-, Bein- und Flugplattformen, womit die derzeit gängigen Roboterformen abgedeckt sind. Ob bei Logistikrobotern auf Rädern, vierbeinigen Roboterhunden oder Drohnen – das gleiche Navigationsmodell lässt sich anpassen, was seine große Vielseitigkeit unterstreicht.
Tencent bringt den persönlichen Agenten mit dem Codenamen „Handy Bot“ für heimliche Tests in WeChat auf den Markt.
Laut Berichten arbeitet Tencent im Hintergrund an einem Produkt für persönliche KI-Agenten, das intern „Handy Bot“ genannt wird und als eigenständige App veröffentlicht werden soll. Der Dienst ist bereits unauffällig in WeChat aufgetaucht, wobei die
OpenAI plant, eine günstigere Version von ChatGPT auf den Markt zu bringen und könnte möglicherweise ein werbfinanziertes Modell einführen, um mit Netflix zu konkurrieren.
OpenAI ist dabei, sein Publikum durch eine Überarbeitung seiner aktuellen Dienstleistungsstruktur und die Einführung einer günstigeren ChatGPT-Abonnementstufe zu erweitern. Interne Quellen deuten darauf hin, dass das Unternehmen sich geschäftlich am
Das WeChat Vision Team veröffentlicht das allgemeine multimodale Einbettungsmodell „WeMM-Embedding“ als Open-Source-Projekt; das tägliche Anrufaufkommen übersteigt zehn Milliarden
Das WeChat Visual Team von Tencent hat „WeMM-Embedding“ offiziell als Open-Source-Projekt veröffentlicht – ein vielseitiges multimodales Einbettungsmodell, das sowohl Text- als auch Bildeingaben unter











