Дом
Apple представила модель LiTo, позволяющую преобразовывать отдельные изображения в 3D с повышением точности освещения на 37%
Исследовательская группа Apple по искусственному интеллекту недавно представила революционную модель генерации 3D-объектов под названием LiTo (Surface Light Field Tokenization). Эта технология решает одну из ключевых задач 3D-реконструкции, позволяя генерировать полные 3D-объекты с высокой степенью детализации и реалистичным освещением на основе всего одного 2D-изображения.

Инновационность LiTo заключается в использовании нового латентного пространства и унифицированной структуры 3D-представления:
Эффективное кодирование: оно сжимает сложные данные поля света поверхности в компактные векторные наборы, математически фиксируя геометрию объекта и его взаимодействие со светом.
Двунаправленная архитектура: используя структуру кодер-декодер, кодер извлекает основные геометрические и визуальные характеристики. Затем декодер реконструирует эти данные, точно воспроизводя сложные визуальные эффекты, такие как зеркальные блики и отражения Френеля.
Производительность: непревзойденная согласованность освещения при различных ракурсах
LiTo был обучен на обширном наборе 3D-данных, содержащем тысячи объектов. Ключевые результаты экспериментов включают:
Устранение направленного смещения: LiTo строго придерживается системы координат камеры, исправляя ошибки ориентации, характерные для других моделей.
Передовые показатели: по показателям согласованности освещения при просмотре с разных ракурсов LiTo превосходит предыдущую ведущую модель, TRELLIS, примерно на 37%.
Этот прорыв значительно снижает барьер для создания высококачественного 3D-контента. Он призван обеспечить превосходное создание ресурсов для будущих платформ дополненной реальности (AR) и пространственных вычислений, включая такие устройства, как Vision Pro.
Связанная статья
Wan-Streamer v0.2 обеспечивает сверхнизкую задержку ИИ-чата
По мере стремительного развития современных технологий взаимодействие человека с искусственным интеллектом становится всё более распространённым. Традиционные видеозвонки часто страдают от задержек, лагов и рассинхронизации аудио- и видеоданных. Wan-
Meta присоединяется к TSMC и Micron для оснащения новых серверов старой памятью
По мере ускорения внедрения искусственного интеллекта во всем мире наблюдается острый дефицит памяти следующего поколения DDR5. Чтобы избежать задержек в развертывании центров обработки данных для ИИ, Meta заключила партнерство с ведущими отраслевыми
Как базы данных временных рядов обеспечивают обработку данных робототехники в реальном времени
Дуг Паджутти из Tiger Data.Паджутти работает в качестве промышленного разработчика-адвоката в Tiger Data, поддерживая команды в создании реальных промышленных систем.Имея более 12 лет опыта в нефтегазовой отрасли и автоматизации производства, он рабо
Рекомендации по связанным специальным темам
Комментарии (1)
Исследовательская группа Apple по искусственному интеллекту недавно представила революционную модель генерации 3D-объектов под названием LiTo (Surface Light Field Tokenization). Эта технология решает одну из ключевых задач 3D-реконструкции, позволяя генерировать полные 3D-объекты с высокой степенью детализации и реалистичным освещением на основе всего одного 2D-изображения.

Инновационность LiTo заключается в использовании нового латентного пространства и унифицированной структуры 3D-представления:
Эффективное кодирование: оно сжимает сложные данные поля света поверхности в компактные векторные наборы, математически фиксируя геометрию объекта и его взаимодействие со светом.
Двунаправленная архитектура: используя структуру кодер-декодер, кодер извлекает основные геометрические и визуальные характеристики. Затем декодер реконструирует эти данные, точно воспроизводя сложные визуальные эффекты, такие как зеркальные блики и отражения Френеля.
Производительность: непревзойденная согласованность освещения при различных ракурсах
LiTo был обучен на обширном наборе 3D-данных, содержащем тысячи объектов. Ключевые результаты экспериментов включают:
Устранение направленного смещения: LiTo строго придерживается системы координат камеры, исправляя ошибки ориентации, характерные для других моделей.
Передовые показатели: по показателям согласованности освещения при просмотре с разных ракурсов LiTo превосходит предыдущую ведущую модель, TRELLIS, примерно на 37%.
Этот прорыв значительно снижает барьер для создания высококачественного 3D-контента. Он призван обеспечить превосходное создание ресурсов для будущих платформ дополненной реальности (AR) и пространственных вычислений, включая такие устройства, как Vision Pro.
Wan-Streamer v0.2 обеспечивает сверхнизкую задержку ИИ-чата
По мере стремительного развития современных технологий взаимодействие человека с искусственным интеллектом становится всё более распространённым. Традиционные видеозвонки часто страдают от задержек, лагов и рассинхронизации аудио- и видеоданных. Wan-
Meta присоединяется к TSMC и Micron для оснащения новых серверов старой памятью
По мере ускорения внедрения искусственного интеллекта во всем мире наблюдается острый дефицит памяти следующего поколения DDR5. Чтобы избежать задержек в развертывании центров обработки данных для ИИ, Meta заключила партнерство с ведущими отраслевыми
Как базы данных временных рядов обеспечивают обработку данных робототехники в реальном времени
Дуг Паджутти из Tiger Data.Паджутти работает в качестве промышленного разработчика-адвоката в Tiger Data, поддерживая команды в создании реальных промышленных систем.Имея более 12 лет опыта в нефтегазовой отрасли и автоматизации производства, он рабо











