Дом
Tongyi представила первую модель искусственного интеллекта для обработки речи, сравнимую с кинофильмами: достигнута эмоционально интеллектуальная речь

После того как технологии AIGC произвели революцию в области генерации изображений и текста, последний рубеж в кино и на телевидении — озвучивание — теперь преодолевает лаборатория Tongyi Lab компании Alibaba. 16 марта Tongyi Lab официально представила и открыла исходный код первой в мире мультимодальной крупномасштабной модели для кинематографического озвучивания в различных сценариях — Fun-CineForge.
На протяжении многих лет синтез голоса с помощью ИИ страдал от «роботизированных» и «дикторских» интонаций. В кино и на телевидении передача эмоциональной глубины, микширование окружающих звуков и синхронизация с движением губ оставались серьезными препятствиями. Fun-CineForge был создан специально для преодоления этих проблем.
Эта модель представляет собой революционный интегрированный подход «данные + модель». Наряду с моделью Tongyi Lab предоставила метод построения высококачественных наборов данных. Это позволяет ИИ выйти за рамки простого чтения текста и глубоко понимать сложные кинематографические контексты, воспроизводя тонкие эмоциональные нюансы и пространственные звуковые эффекты.
Как новейший член семьи Alibaba Tongyi, Fun-CineForge с открытым исходным кодом меняет правила игры. Он предлагает создателям видео инструмент для постпродакшна «кинематографического уровня» и, благодаря доступной технологии, позволяет независимым создателям и среднебюджетным производствам добиваться высококачественного многоязычного дубляжа при минимальных затратах.
От ранней версии Qwen3-Omni до нынешней Fun-CineForge серия Tongyi стремительно складывает мультимодальный пазл. По мере того как ИИ учится «действовать как человек», весь ландшафт перевода фильмов и постпродакшна может претерпеть радикальные изменения. Модель и план построения набора данных теперь доступны на основных платформах с открытым исходным кодом, что сигнализирует о том, что эра «ИИ кинематографического уровня» наступает раньше, чем ожидалось.
Связанная статья
Генеральный директор DeepMind Хассабис: я сплю шесть часов в день, обычно чувствую прилив энергии около часа ночи.
В недавнем интервью журналу Fortune генеральный директор Google DeepMind Демис Хаассабис раскрыл свой нестандартный подход к отдыху и продуктивности. Хаассабис признался, что спит очень мало, распределяя свои бодрствующие часы на два отдельных рабочи
OpenAI и Anthropic борются за долю рынка, несмотря на снижение выручки
Несмотря на недавние сообщения о том, что OpenAI не достигла целевых показателей по выручке, что во вторник оказало давление на акции технологических компаний, частные инвесторы, вкладывающие средства
Соблюдение требований к автономным транспортным средствам в Калифорнии: новая эра штрафов, геозоны и 1 млн миль
Компания Guident эксплуатирует шаттл AuveTech в Южной Флориде, обслуживая маршрут протяженностью четыре мили в Вест-Палм-Бич и маршрут протяженностью одну милю в Бока-Ратоне с использованием своей тех
Рекомендации по связанным специальным темам
Комментарии (0)

После того как технологии AIGC произвели революцию в области генерации изображений и текста, последний рубеж в кино и на телевидении — озвучивание — теперь преодолевает лаборатория Tongyi Lab компании Alibaba. 16 марта
На протяжении многих лет синтез голоса с помощью ИИ страдал от «роботизированных» и «дикторских» интонаций. В кино и на телевидении передача эмоциональной глубины, микширование окружающих звуков и синхронизация с движением губ оставались серьезными препятствиями.
Эта модель представляет собой революционный интегрированный подход «данные + модель». Наряду с моделью
Как новейший член семьи Alibaba Tongyi,
От ранней версии
Генеральный директор DeepMind Хассабис: я сплю шесть часов в день, обычно чувствую прилив энергии около часа ночи.
В недавнем интервью журналу Fortune генеральный директор Google DeepMind Демис Хаассабис раскрыл свой нестандартный подход к отдыху и продуктивности. Хаассабис признался, что спит очень мало, распределяя свои бодрствующие часы на два отдельных рабочи
OpenAI и Anthropic борются за долю рынка, несмотря на снижение выручки
Несмотря на недавние сообщения о том, что OpenAI не достигла целевых показателей по выручке, что во вторник оказало давление на акции технологических компаний, частные инвесторы, вкладывающие средства











