Lar
A Apple apresenta o modelo LiTo, que transforma imagens 2D em 3D com um aumento de 37% na precisão da iluminação
A equipe de pesquisa em IA da Apple apresentou recentemente um modelo inovador de geração 3D chamado LiTo (Surface Light Field Tokenization). Essa tecnologia resolve um dos principais desafios da reconstrução 3D ao gerar objetos 3D completos e de alta fidelidade, com iluminação realista, a partir de uma única imagem 2D.

A inovação do LiTo gira em torno de um novo espaço latente e de uma estrutura unificada de representação 3D:
Codificação eficiente: ela comprime dados complexos do campo de luz da superfície em conjuntos de vetores compactos, capturando matematicamente a geometria do objeto e sua interação com a luz.
Arquitetura bidirecional: utilizando uma estrutura codificador-decodificador, o codificador extrai características geométricas e de aparência fundamentais. O decodificador então reconstrói esses dados, renderizando com precisão efeitos visuais avançados, como realces especulares e reflexos de Fresnel.
Desempenho: Consistência de iluminação incomparável entre as vistas
O LiTo foi treinado em um conjunto de dados 3D abrangente contendo milhares de objetos. As principais descobertas experimentais incluem:
Eliminação do viés direcional: o LiTo segue rigorosamente o sistema de coordenadas da câmera, corrigindo os erros de orientação comuns em outros modelos.
Métricas de ponta: em termos de consistência de iluminação em múltiplas vistas, o LiTo supera o modelo líder anterior, o TRELLIS, em aproximadamente 37%.
Esse avanço reduz significativamente as barreiras para a criação de conteúdo 3D de alta qualidade. Ele está pronto para oferecer geração de recursos superior para futuras plataformas de realidade aumentada (AR) e computação espacial, incluindo dispositivos como o Vision Pro.
Artigo relacionado
Stripe vai adquirir a OpenRouter à medida que o roteamento baseado em modelos de IA ganha força
A Stripe concordou em adquirir a OpenRouter, uma plataforma de roteamento de modelos de IA que oferece aos desenvolvedores acesso a centenas de modelos por meio de uma única interface. O acordo amplia
O ex-pesquisador da OpenAI, Barrett Zoph, retorna ao Google para apoiar o desenvolvimento do Gemini
Barret Zoph, que anteriormente havia deixado a empresa de forma repentina e se juntado à OpenAI devido a um desentendimento com a CEO da Thinking Machines Lab, Miriam Mularati, mudou de emprego mais u
Como a Recursive Intelligence levantou US$ 335 milhões com uma avaliação de US$ 4 bilhões em 4 meses
As cofundadoras da startup Ricursive Intelligence pareciam destinadas a serem cofundadoras.Anna Goldie, CEO, e Azalia Mirhoseini, CTO, são tão conhecidas na comunidade de IA que estavam entre os engen
Recomendações de tópicos especiais relacionados
Comentários (1)
A equipe de pesquisa em IA da Apple apresentou recentemente um modelo inovador de geração 3D chamado LiTo (Surface Light Field Tokenization). Essa tecnologia resolve um dos principais desafios da reconstrução 3D ao gerar objetos 3D completos e de alta fidelidade, com iluminação realista, a partir de uma única imagem 2D.

A inovação do LiTo gira em torno de um novo espaço latente e de uma estrutura unificada de representação 3D:
Codificação eficiente: ela comprime dados complexos do campo de luz da superfície em conjuntos de vetores compactos, capturando matematicamente a geometria do objeto e sua interação com a luz.
Arquitetura bidirecional: utilizando uma estrutura codificador-decodificador, o codificador extrai características geométricas e de aparência fundamentais. O decodificador então reconstrói esses dados, renderizando com precisão efeitos visuais avançados, como realces especulares e reflexos de Fresnel.
Desempenho: Consistência de iluminação incomparável entre as vistas
O LiTo foi treinado em um conjunto de dados 3D abrangente contendo milhares de objetos. As principais descobertas experimentais incluem:
Eliminação do viés direcional: o LiTo segue rigorosamente o sistema de coordenadas da câmera, corrigindo os erros de orientação comuns em outros modelos.
Métricas de ponta: em termos de consistência de iluminação em múltiplas vistas, o LiTo supera o modelo líder anterior, o TRELLIS, em aproximadamente 37%.
Esse avanço reduz significativamente as barreiras para a criação de conteúdo 3D de alta qualidade. Ele está pronto para oferecer geração de recursos superior para futuras plataformas de realidade aumentada (AR) e computação espacial, incluindo dispositivos como o Vision Pro.
Stripe vai adquirir a OpenRouter à medida que o roteamento baseado em modelos de IA ganha força
A Stripe concordou em adquirir a OpenRouter, uma plataforma de roteamento de modelos de IA que oferece aos desenvolvedores acesso a centenas de modelos por meio de uma única interface. O acordo amplia
O ex-pesquisador da OpenAI, Barrett Zoph, retorna ao Google para apoiar o desenvolvimento do Gemini
Barret Zoph, que anteriormente havia deixado a empresa de forma repentina e se juntado à OpenAI devido a um desentendimento com a CEO da Thinking Machines Lab, Miriam Mularati, mudou de emprego mais u
Como a Recursive Intelligence levantou US$ 335 milhões com uma avaliação de US$ 4 bilhões em 4 meses
As cofundadoras da startup Ricursive Intelligence pareciam destinadas a serem cofundadoras.Anna Goldie, CEO, e Azalia Mirhoseini, CTO, são tão conhecidas na comunidade de IA que estavam entre os engen











