Heim
Apple stellt LiTo-Modell vor, das Einzelbilder in 3D umwandelt und die Beleuchtungsgenauigkeit um 37 % verbessert
Apples KI-Forschungsteam hat kürzlich ein bahnbrechendes Modell zur 3D-Generierung namens LiTo (Surface Light Field Tokenization) vorgestellt. Diese Technologie bewältigt eine zentrale Herausforderung bei der 3D-Rekonstruktion, indem sie aus einem einzigen 2D-Bild vollständige, detailgetreue 3D-Objekte mit realistischer Beleuchtung erzeugt.

Die Innovation von LiTo basiert auf einem neuartigen latenten Raum und einem einheitlichen Rahmenwerk zur 3D-Darstellung:
Effiziente Kodierung: Sie komprimiert komplexe Oberflächen-Lichtfelddaten in kompakte Vektorsätze und erfasst dabei mathematisch die Geometrie des Objekts und dessen Interaktion mit Licht.
Bidirektionale Architektur: Mithilfe einer Encoder-Decoder-Struktur extrahiert der Encoder grundlegende geometrische und optische Merkmale. Der Decoder rekonstruiert diese Daten anschließend und rendert dabei anspruchsvolle visuelle Effekte wie Spiegelungen und Fresnel-Reflexionen präzise.
Leistung: Unübertroffene Konsistenz der Beleuchtung über alle Ansichten hinweg
LiTo wurde auf einem umfassenden 3D-Datensatz mit Tausenden von Objekten trainiert. Zu den wichtigsten experimentellen Ergebnissen gehören:
Beseitigung von Richtungsverzerrungen: LiTo hält sich strikt an das Kamerakoordinatensystem und korrigiert die in anderen Modellen häufig auftretenden Orientierungsfehler.
Modernste Metriken: Bei der Beleuchtungskonsistenz über mehrere Ansichten hinweg übertrifft LiTo das bisher führende Modell TRELLIS um etwa 37 %.
Dieser Fortschritt senkt die Hürde für die Erstellung hochwertiger 3D-Inhalte erheblich. Er verspricht eine überlegene Asset-Generierung für zukünftige Augmented-Reality- (AR) und Spatial-Computing-Plattformen, einschließlich Geräten wie dem Vision Pro.
Verwandter Artikel
Meta entfernt KI-Fotobearbeitungsfunktion nach Nutzerprotesten
Meta, der Social-Media-Riese, ist erneut in eine öffentliche Debatte über die heikle Balance zwischen künstlicher Intelligenz und dem Schutz der Privatsphäre der Nutzer verwickelt. Laut TechCrunch hat Meta’s Superintelligence Labs diese Woche einen n
DeepMind-CEO Hassabis: Ich schlafe sechs Stunden pro Tag und fühle mich normalerweise gegen 1 Uhr nachts energiegeladen.
Fortune hat kürzlich ein Interview mit Demis Hassabis, dem CEO von Google DeepMind, veröffentlicht, das seinen unkonventionellen Ansatz zu Erholung und Produktivität offenbart. Hassabis gab bekannt, dass er sehr wenig schläft und seine wachen Stunden
OpenAI und Anthropic kämpfen trotz Umsatzrückgängen um Marktanteile
Obwohl jüngste Berichte darauf hindeuten, dass OpenAI seine Umsatzziele verfehlt hat, was an diesem Dienstag Druck auf die Technologieaktien ausübte, zeigen sich private Investoren in KI-Labore weiter
Empfehlungen zu verwandten Spezialthemen
Kommentare (1)
Apples KI-Forschungsteam hat kürzlich ein bahnbrechendes Modell zur 3D-Generierung namens LiTo (Surface Light Field Tokenization) vorgestellt. Diese Technologie bewältigt eine zentrale Herausforderung bei der 3D-Rekonstruktion, indem sie aus einem einzigen 2D-Bild vollständige, detailgetreue 3D-Objekte mit realistischer Beleuchtung erzeugt.

Die Innovation von LiTo basiert auf einem neuartigen latenten Raum und einem einheitlichen Rahmenwerk zur 3D-Darstellung:
Effiziente Kodierung: Sie komprimiert komplexe Oberflächen-Lichtfelddaten in kompakte Vektorsätze und erfasst dabei mathematisch die Geometrie des Objekts und dessen Interaktion mit Licht.
Bidirektionale Architektur: Mithilfe einer Encoder-Decoder-Struktur extrahiert der Encoder grundlegende geometrische und optische Merkmale. Der Decoder rekonstruiert diese Daten anschließend und rendert dabei anspruchsvolle visuelle Effekte wie Spiegelungen und Fresnel-Reflexionen präzise.
Leistung: Unübertroffene Konsistenz der Beleuchtung über alle Ansichten hinweg
LiTo wurde auf einem umfassenden 3D-Datensatz mit Tausenden von Objekten trainiert. Zu den wichtigsten experimentellen Ergebnissen gehören:
Beseitigung von Richtungsverzerrungen: LiTo hält sich strikt an das Kamerakoordinatensystem und korrigiert die in anderen Modellen häufig auftretenden Orientierungsfehler.
Modernste Metriken: Bei der Beleuchtungskonsistenz über mehrere Ansichten hinweg übertrifft LiTo das bisher führende Modell TRELLIS um etwa 37 %.
Dieser Fortschritt senkt die Hürde für die Erstellung hochwertiger 3D-Inhalte erheblich. Er verspricht eine überlegene Asset-Generierung für zukünftige Augmented-Reality- (AR) und Spatial-Computing-Plattformen, einschließlich Geräten wie dem Vision Pro.
Meta entfernt KI-Fotobearbeitungsfunktion nach Nutzerprotesten
Meta, der Social-Media-Riese, ist erneut in eine öffentliche Debatte über die heikle Balance zwischen künstlicher Intelligenz und dem Schutz der Privatsphäre der Nutzer verwickelt. Laut TechCrunch hat Meta’s Superintelligence Labs diese Woche einen n
DeepMind-CEO Hassabis: Ich schlafe sechs Stunden pro Tag und fühle mich normalerweise gegen 1 Uhr nachts energiegeladen.
Fortune hat kürzlich ein Interview mit Demis Hassabis, dem CEO von Google DeepMind, veröffentlicht, das seinen unkonventionellen Ansatz zu Erholung und Produktivität offenbart. Hassabis gab bekannt, dass er sehr wenig schläft und seine wachen Stunden
OpenAI und Anthropic kämpfen trotz Umsatzrückgängen um Marktanteile
Obwohl jüngste Berichte darauf hindeuten, dass OpenAI seine Umsatzziele verfehlt hat, was an diesem Dienstag Druck auf die Technologieaktien ausübte, zeigen sich private Investoren in KI-Labore weiter











