Maison
Apple dévoile un modèle LiTo capable de convertir des images 2D en 3D, avec une précision d'éclairage améliorée de 37 %
L'équipe de recherche en IA d'Apple a récemment présenté un modèle de génération 3D révolutionnaire baptisé LiTo (Surface Light Field Tokenization). Cette technologie s'attaque à un défi majeur de la reconstruction 3D en générant des objets 3D complets et de haute fidélité, dotés d'un éclairage réaliste, à partir d'une seule image 2D.

L'innovation de LiTo repose sur un espace latent novateur et un cadre de représentation 3D unifié :
Codage efficace: il compresse les données complexes du champ lumineux de surface en ensembles vectoriels compacts, capturant mathématiquement la géométrie de l'objet et son interaction avec la lumière.
Architecture bidirectionnelle: à l'aide d'une structure encodeur-décodeur, l'encodeur extrait les caractéristiques géométriques et d'apparence fondamentales. Le décodeur reconstitue ensuite ces données, restituant avec précision des effets visuels avancés tels que les reflets spéculaires et les reflets de Fresnel.
Performances : une cohérence d'éclairage inégalée entre les vues
LiTo a été entraîné sur un ensemble de données 3D complet contenant des milliers d'objets. Les principaux résultats expérimentaux sont les suivants :
Élimination du biais directionnel: LiTo respecte strictement le système de coordonnées de la caméra, corrigeant ainsi les erreurs d'orientation courantes dans d'autres modèles.
Mesures de pointe: en matière de cohérence de l'éclairage multi-vues, LiTo surpasse le modèle de référence précédent, TRELLIS, d'environ 37 %.
Cette avancée réduit considérablement les obstacles à la création de contenu 3D de haute qualité. Elle est en passe d'offrir une génération de ressources supérieure pour les futures plateformes de réalité augmentée (RA) et d'informatique spatiale, y compris des appareils tels que le Vision Pro.
Article connexe
PDG de DeepMind, Hassabis : Je dors six heures par jour et je me sens généralement plein d’énergie vers 1 h du matin.
Fortune a récemment publié une interview avec Demis Hassabis, PDG de Google DeepMind, révélant son approche non conventionnelle du repos et de la productivité. Hassabis a divulgué qu’il dort très peu, structurant ses heures d’éveil en deux blocs de t
OpenAI et Anthropic se disputent des parts de marché malgré des résultats en deçà des attentes
Bien que des informations récentes laissent entendre qu’OpenAI n’aurait pas atteint ses objectifs de chiffre d’affaires, ce qui a pesé sur les valeurs technologiques ce mardi, les investisseurs privés
Conformité des véhicules autonomes en Californie : une nouvelle ère marquée par les amendes, les zones de géolocalisation et 1 million de miles
Guident exploite une navette AuveTech dans le sud de la Floride, gérant un parcours de quatre miles à West Palm Beach et un parcours d’un mile à Boca Raton grâce à sa technologie de surveillance à dis
Recommandations de sujets spéciaux liés
commentaires (1)
L'équipe de recherche en IA d'Apple a récemment présenté un modèle de génération 3D révolutionnaire baptisé LiTo (Surface Light Field Tokenization). Cette technologie s'attaque à un défi majeur de la reconstruction 3D en générant des objets 3D complets et de haute fidélité, dotés d'un éclairage réaliste, à partir d'une seule image 2D.

L'innovation de LiTo repose sur un espace latent novateur et un cadre de représentation 3D unifié :
Codage efficace: il compresse les données complexes du champ lumineux de surface en ensembles vectoriels compacts, capturant mathématiquement la géométrie de l'objet et son interaction avec la lumière.
Architecture bidirectionnelle: à l'aide d'une structure encodeur-décodeur, l'encodeur extrait les caractéristiques géométriques et d'apparence fondamentales. Le décodeur reconstitue ensuite ces données, restituant avec précision des effets visuels avancés tels que les reflets spéculaires et les reflets de Fresnel.
Performances : une cohérence d'éclairage inégalée entre les vues
LiTo a été entraîné sur un ensemble de données 3D complet contenant des milliers d'objets. Les principaux résultats expérimentaux sont les suivants :
Élimination du biais directionnel: LiTo respecte strictement le système de coordonnées de la caméra, corrigeant ainsi les erreurs d'orientation courantes dans d'autres modèles.
Mesures de pointe: en matière de cohérence de l'éclairage multi-vues, LiTo surpasse le modèle de référence précédent, TRELLIS, d'environ 37 %.
Cette avancée réduit considérablement les obstacles à la création de contenu 3D de haute qualité. Elle est en passe d'offrir une génération de ressources supérieure pour les futures plateformes de réalité augmentée (RA) et d'informatique spatiale, y compris des appareils tels que le Vision Pro.
PDG de DeepMind, Hassabis : Je dors six heures par jour et je me sens généralement plein d’énergie vers 1 h du matin.
Fortune a récemment publié une interview avec Demis Hassabis, PDG de Google DeepMind, révélant son approche non conventionnelle du repos et de la productivité. Hassabis a divulgué qu’il dort très peu, structurant ses heures d’éveil en deux blocs de t
OpenAI et Anthropic se disputent des parts de marché malgré des résultats en deçà des attentes
Bien que des informations récentes laissent entendre qu’OpenAI n’aurait pas atteint ses objectifs de chiffre d’affaires, ce qui a pesé sur les valeurs technologiques ce mardi, les investisseurs privés











