Дом
Фреймворк LGTM от Apple устраняет проблемы с вычислительной мощностью и обеспечивает 3D-рендеринг в разрешении 4K на Vision Pro
Недавно исследователи из компании Apple и Гонконгского университета опубликовали статью под названием «Меньше гауссовых распределений, больше текстур: 4K Feedforward Texture Splatting», в которой представили новую технологическую платформу под названием LGTM. Эта технология устраняет вычислительные узкие места, возникающие при применении 3D-гауссового сплэттинга при высоких разрешениях, прокладывая путь для дисплеев с высоким разрешением, таких как Apple Vision Pro.
Технический прорыв: развязка геометрии и разрешения
Хотя широко распространённый метод прямого 3D-гауссового сплэттинга позволяет быстро преобразовывать 2D-изображения в 3D-сцены, вычислительные затраты растут экспоненциально с увеличением разрешения рендеринга, что затрудняет рендеринг в реальном времени с разрешением 4K.
Основная инновацияфреймворка LGTM заключается в отделении геометрической сложности от разрешения рендеринга. Вместо увеличения количества гауссовых функций он улучшает качество изображения с помощью двухэтапного подхода:
Обучение геометрии: сначала модель обучается базовой структуре сцены на изображениях с низким разрешением и сравнивает её с эталонными данными высокого разрешения, обеспечивая плавность и отсутствие дефектов геометрического каркаса при разрешениях 2K/4K.
Наложение текстур: специализированная сеть внешнего вида преобразует мелкие детали с изображений высокого разрешения в текстуры, которые затем накладываются на простые геометрические фигуры.

Расширение возможностей Apple Vision Pro
Двойной дисплей Apple Vision Pro имеет около 23 миллионов пикселей, причем разрешение для каждого глаза превышает 4K. Традиционные прямопроходные модели SPLAT часто сталкиваются с ограничениями производительности при обработке пикселей такой высокой плотности. LGTM позволяет модернизировать существующие системы (такие как NoPoSplat, DepthSplat и т. д.), давая устройствам возможность генерировать более детализированные текстуры, более четкий текст и более реалистичные иммерсивные среды при сохранении низкой вычислительной нагрузки.
На странице демонстрации проекта видно, что LGTM значительно расширяет визуальные границы прямого 3D-восстановления. Это позволяет предположить, что будущие пользователи visionOS смогут насладиться беспрецедентным реализмом в виртуальных пространствах, генерируемых в режиме реального времени.
Связанная статья
Apple соглашается на урегулирование спора на сумму $250 млн из-за задержки внедрения ИИ Siri
Apple согласилась выплатить 250 миллионов долларов для урегулирования коллективного иска, касающегося её маркетинга функций искусственного интеллекта до запуска iPhone 16, как впервые сообщил Financial Times.Истец утверждал, что Apple преувеличила в
Ando запускает приложение для командной переписки, объединяющее людей и ИИ
В 2025 году, пока Сара Ду помогала компаниям разрабатывать серверы MCP, возникал повторяющийся вопрос: как команды могут напрямую использовать ИИ-агентов в Slack? Этот путь преграждали значительные технические барьеры, включая сложность синхронизации
Компания Empirik, в которой инвестировала Sequoia, привлекла 21 млн долларов для прогнозирования сбоев в работе систем до их возникновения
До прихода в Sequoia Capital в 2020 году на должность директора по цифровым технологиям и информационным системам Эйвон Пури более десяти лет руководил инфраструктурным направлением в компаниях Rubrik
Рекомендации по связанным специальным темам
Комментарии (1)
Finally, someone addressed the compute anxiety on Vision Pro! 🤯 LGTM sounds like a game-changer for 3D rendering. I've been waiting for something that doesn't make my device melt during heavy tasks. If this actually delivers 4K-grade results without the lag, Apple might finally win the spatial computing race. Can't wait to test it out! 🚀
Недавно исследователи из компании Apple и Гонконгского университета опубликовали статью под названием «Меньше гауссовых распределений, больше текстур: 4K Feedforward Texture Splatting», в которой представили новую технологическую платформу под названием LGTM. Эта технология устраняет вычислительные узкие места, возникающие при применении 3D-гауссового сплэттинга при высоких разрешениях, прокладывая путь для дисплеев с высоким разрешением, таких как Apple Vision Pro.
Технический прорыв: развязка геометрии и разрешения
Хотя широко распространённый метод прямого 3D-гауссового сплэттинга позволяет быстро преобразовывать 2D-изображения в 3D-сцены, вычислительные затраты растут экспоненциально с увеличением разрешения рендеринга, что затрудняет рендеринг в реальном времени с разрешением 4K.
Основная инновация
Обучение геометрии: сначала модель обучается базовой структуре сцены на изображениях с низким разрешением и сравнивает её с эталонными данными высокого разрешения, обеспечивая плавность и отсутствие дефектов геометрического каркаса при разрешениях 2K/4K.
Наложение текстур: специализированная сеть внешнего вида преобразует мелкие детали с изображений высокого разрешения в текстуры, которые затем накладываются на простые геометрические фигуры.
Расширение возможностей Apple Vision Pro
Двойной дисплей Apple Vision Pro имеет около 23 миллионов пикселей, причем разрешение для каждого глаза превышает 4K. Традиционные прямопроходные модели
На
Apple соглашается на урегулирование спора на сумму $250 млн из-за задержки внедрения ИИ Siri
Apple согласилась выплатить 250 миллионов долларов для урегулирования коллективного иска, касающегося её маркетинга функций искусственного интеллекта до запуска iPhone 16, как впервые сообщил Financial Times.Истец утверждал, что Apple преувеличила в
Ando запускает приложение для командной переписки, объединяющее людей и ИИ
В 2025 году, пока Сара Ду помогала компаниям разрабатывать серверы MCP, возникал повторяющийся вопрос: как команды могут напрямую использовать ИИ-агентов в Slack? Этот путь преграждали значительные технические барьеры, включая сложность синхронизации
Компания Empirik, в которой инвестировала Sequoia, привлекла 21 млн долларов для прогнозирования сбоев в работе систем до их возникновения
До прихода в Sequoia Capital в 2020 году на должность директора по цифровым технологиям и информационным системам Эйвон Пури более десяти лет руководил инфраструктурным направлением в компаниях Rubrik
Finally, someone addressed the compute anxiety on Vision Pro! 🤯 LGTM sounds like a game-changer for 3D rendering. I've been waiting for something that doesn't make my device melt during heavy tasks. If this actually delivers 4K-grade results without the lag, Apple might finally win the spatial computing race. Can't wait to test it out! 🚀











