Lar
A Aliyun, do Alibaba, lança o Fun-CineForge: modelo e conjunto de dados de dublagem com qualidade cinematográfica disponibilizados como código aberto
Recentemente, o projeto Fun-CineForge, desenvolvido pela equipe de processamento de fala do Alibaba Tongyi Lab em colaboração com a Universidade de Ciência e Tecnologia da China, foi oficialmente disponibilizado como código aberto. Essa iniciativa aborda os principais desafios da dublagem de filmes e programas de televisão — como sincronização labial, transferência de estilo de voz e expressão emocional — por meio da introdução de um fluxo de trabalho de produção abrangente de ponta a ponta e de soluções baseadas em modelos de grande escala.
Principais avanços: resolvendo o problema da “falta de sincronização” na dublagem de filmes
A dublagem tradicional com IA frequentemente enfrenta problemas como movimentos labiais incompatíveis, expressão emocional robótica e dificuldade em se adaptar a cenas cinematográficas complexas envolvendo diálogos e acústica com várias pessoas. O Fun-CineForge alcança um avanço significativo por meio de duas inovações-chave:
Modelo de dublagem MLLM: indo além do simples alinhamento de áudio e vídeo na área dos lábios, ele emprega uma arquitetura de modelo de linguagem multimodal de grande porte (MLLM) capaz de compreender profundamente a identidade de um personagem e as nuances emocionais dentro de uma cena.
Conjunto de dados em grande escala CineDub: O projeto criou o primeiro conjunto de dados de dublagem de programas de TV chineses ricamente anotado por meio de um pipeline automatizado, cobrindo diversos cenários como monólogos, narração, diálogos e interações entre vários interlocutores.
Atualizações do projeto e roteiro de código aberto
O projeto tem recebido atualizações frequentes recentemente, indicando um alto nível de maturidade de engenharia:
Janeiro a março de 2026: Lançamento de conjuntos de dados de amostra e demonstrações tanto para chinês (CineDub-CN) quanto para inglês (CineDub-EN).
16 de março de 2026: Tornou oficialmente o código de inferência e os pesos do modelo (Checkpoints) de código aberto, permitindo que desenvolvedores acessem esses recursos no GitHub.
Acesso ao conjunto de dados: Vários conjuntos de dados de séries clássicas estão agora disponíveis para pesquisa, incluindo a série chinesa “O Sonho da Câmara Vermelha” e a série inglesa “Downton Abbey”.
Aplicação técnica: do “diálogo” à “interpretação”
Demonstrações oficiais mostram que o modelo apresenta resultados impressionantes na refilmagem de séries clássicas como “Romance dos Três Reinos”. Ao inserir “pistas emocionais” específicas, o modelo consegue capturar com precisão a mudança emocional de um personagem — do medo ao desafio —, alcançando clonagem de voz de alta fidelidade e sincronização labial natural.
O lançamento do Fun-CineForge sinaliza uma mudança na dublagem de filmes e programas de TV com IA, passando da simples "conversão de texto em fala" para uma ferramenta de "pós-produção automatizada" com compreensão artística. Esse avanço está prestes a reduzir significativamente os custos de produção de conteúdo dublado para cinema e televisão.
Projeto: https://funcineforge.github.io/
Artigo relacionado
Stripe vai adquirir a OpenRouter à medida que o roteamento baseado em modelos de IA ganha força
A Stripe concordou em adquirir a OpenRouter, uma plataforma de roteamento de modelos de IA que oferece aos desenvolvedores acesso a centenas de modelos por meio de uma única interface. O acordo amplia
O ex-pesquisador da OpenAI, Barrett Zoph, retorna ao Google para apoiar o desenvolvimento do Gemini
Barret Zoph, que anteriormente havia deixado a empresa de forma repentina e se juntado à OpenAI devido a um desentendimento com a CEO da Thinking Machines Lab, Miriam Mularati, mudou de emprego mais u
Como a Recursive Intelligence levantou US$ 335 milhões com uma avaliação de US$ 4 bilhões em 4 meses
As cofundadoras da startup Ricursive Intelligence pareciam destinadas a serem cofundadoras.Anna Goldie, CEO, e Azalia Mirhoseini, CTO, são tão conhecidas na comunidade de IA que estavam entre os engen
Recomendações de tópicos especiais relacionados
Design e Arte
As melhores ferramentas de ilustração com IA: crie cenas editoriais e capas de forma mais rápida
As melhores ferramentas de ilustração com IA de 2026: nossa lista selecionada apresenta as melhores ferramentas, com design robusto, para criar rapidamente cenas editoriais impressionantes e capas atraentes. Cada opção passou por rigorosos testes práticos, oferecendo uma comparação entre versões gratuitas e pagas para ajudar você a encontrar a opção perfeita para o seu fluxo de trabalho. Experimente hoje mesmo essas soluções imperdíveis para aproveitar ao máximo as vantagens da IA e impulsionar sua produtividade criativa. Explore agora no XIX.AI.
10 ferramentas
xix.ai
Educação e Aprendizagem
Os melhores professores particulares especializados em IA para preparação para exames: pratique matemática, ciências e inglês
Os melhores tutores de IA para preparação para exames de 2026, com as melhores avaliações, estão aqui no XIX.AI! Nossa lista cuidadosamente selecionada apresenta ferramentas poderosas e revolucionárias que oferecem comparação entre versões gratuitas e pagas, testes práticos e rankings atualizados semanalmente. Elas ajudam a aumentar sua eficiência na redação, simplificar o aprendizado de tópicos complexos e liberar seu potencial acadêmico. Explore agora para descobrir sua ferramenta perfeita de preparação para exames e comece a criar hoje mesmo para aproveitar toda a vantagem da IA!
10 ferramentas
xix.ai
Financiar
Ferramentas de planejamento orçamentário com IA para gestão financeira pessoal
As melhores e mais bem avaliadas ferramentas de planejamento orçamentário com IA para gestão financeira pessoal de 2026 estão aqui no XIX.AI! Esta seleção especial apresenta soluções poderosas e revolucionárias que ajudam você a realizar testes na prática, entender hábitos de consumo e criar planos personalizados para aumentar a produtividade. Confira uma comparação entre versões gratuitas e pagas, além de rankings detalhados. Ferramentas imperdíveis, projetadas para simplificar a gestão financeira e explorar o potencial da IA. Explore agora!
11 ferramentas
xix.ai
Saúde e Bem-Estar
Assistentes de rastreamento do sono com IA: melhore sua recuperação adotando hábitos mais adequados antes de dormir
2026 – Os melhores assistentes de rastreamento do sono com inteligência artificial mais bem avaliados, selecionados para proporcionar uma recuperação máxima. Este guia semanal completamente atualizado apresenta ferramentas poderosas que incluem testes reais, comparações entre versões gratuitas e pagas, além de classificações detalhadas, visando ajudá-lo a encontrar a solução ideal para melhorar a qualidade do sono e fomentar hábitos noturnos mais saudáveis. Explore agora em XIX.AI e aproveite todas as vantagens oferecidas pela inteligência artificial.
10 ferramentas
xix.ai
Análise de dados
Copilotos de IA em SQL para análise de produtos e receitas
2026: Os melhores e mais bem avaliados copilotos de IA para SQL em análise de produtos e receitas! A XIX.AI selecionou um conjunto poderoso e revolucionário de ferramentas imperdíveis, que passam por testes práticos por meio de rankings atualizados semanalmente. Essas ferramentas ajudam os usuários a aumentar significativamente a produtividade, acelerando a análise de dados, simplificando consultas complexas e gerando insights precisos para impulsionar decisões de negócios mais inteligentes. Explore agora e descubra a ferramenta perfeita para aproveitar ao máximo o potencial da IA!
14 ferramentas
xix.ai
Educação e Aprendizagem
Os melhores auxiliares de tarefas escolares com IA que ensinam: aprenda conceitos, não apenas respostas
2026: Os melhores e mais bem avaliados auxiliares de tarefas com IA que ensinam conceitos fundamentais, não apenas respostas. Ferramentas poderosas para estudantes. Lista selecionada que você não pode deixar de conferir. Atualizada semanalmente. Comparação entre versões gratuitas e pagas. Testes em situações reais. Rankings precisos para ajudar você a atingir todo o seu potencial de aprendizado. Explore agora e descubra a ferramenta perfeita para estudar de forma mais inteligente.
10 ferramentas
xix.ai
Comentários (0)
Recentemente, o projeto Fun-CineForge, desenvolvido pela equipe de processamento de fala do Alibaba Tongyi Lab em colaboração com a Universidade de Ciência e Tecnologia da China, foi oficialmente disponibilizado como código aberto. Essa iniciativa aborda os principais desafios da dublagem de filmes e programas de televisão — como sincronização labial, transferência de estilo de voz e expressão emocional — por meio da introdução de um fluxo de trabalho de produção abrangente de ponta a ponta e de soluções baseadas em modelos de grande escala.
Principais avanços: resolvendo o problema da “falta de sincronização” na dublagem de filmes
A dublagem tradicional com IA frequentemente enfrenta problemas como movimentos labiais incompatíveis, expressão emocional robótica e dificuldade em se adaptar a cenas cinematográficas complexas envolvendo diálogos e acústica com várias pessoas. O Fun-CineForge alcança um avanço significativo por meio de duas inovações-chave:
Modelo de dublagem MLLM: indo além do simples alinhamento de áudio e vídeo na área dos lábios, ele emprega uma arquitetura de modelo de linguagem multimodal de grande porte (MLLM) capaz de compreender profundamente a identidade de um personagem e as nuances emocionais dentro de uma cena.
Conjunto de dados em grande escala CineDub: O projeto criou o primeiro conjunto de dados de dublagem de programas de TV chineses ricamente anotado por meio de um pipeline automatizado, cobrindo diversos cenários como monólogos, narração, diálogos e interações entre vários interlocutores.
Atualizações do projeto e roteiro de código aberto
O projeto tem recebido atualizações frequentes recentemente, indicando um alto nível de maturidade de engenharia:
Janeiro a março de 2026: Lançamento de conjuntos de dados de amostra e demonstrações tanto para chinês (CineDub-CN) quanto para inglês (CineDub-EN).
16 de março de 2026: Tornou oficialmente o código de inferência e os pesos do modelo (Checkpoints) de código aberto, permitindo que desenvolvedores acessem esses recursos no GitHub.
Acesso ao conjunto de dados: Vários conjuntos de dados de séries clássicas estão agora disponíveis para pesquisa, incluindo a série chinesa “O Sonho da Câmara Vermelha” e a série inglesa “Downton Abbey”.
Aplicação técnica: do “diálogo” à “interpretação”
Demonstrações oficiais mostram que o modelo apresenta resultados impressionantes na refilmagem de séries clássicas como “Romance dos Três Reinos”. Ao inserir “pistas emocionais” específicas, o modelo consegue capturar com precisão a mudança emocional de um personagem — do medo ao desafio —, alcançando clonagem de voz de alta fidelidade e sincronização labial natural.
O lançamento do Fun-CineForge sinaliza uma mudança na dublagem de filmes e programas de TV com IA, passando da simples "conversão de texto em fala" para uma ferramenta de "pós-produção automatizada" com compreensão artística. Esse avanço está prestes a reduzir significativamente os custos de produção de conteúdo dublado para cinema e televisão.
Projeto: https://funcineforge.github.io/
Stripe vai adquirir a OpenRouter à medida que o roteamento baseado em modelos de IA ganha força
A Stripe concordou em adquirir a OpenRouter, uma plataforma de roteamento de modelos de IA que oferece aos desenvolvedores acesso a centenas de modelos por meio de uma única interface. O acordo amplia
O ex-pesquisador da OpenAI, Barrett Zoph, retorna ao Google para apoiar o desenvolvimento do Gemini
Barret Zoph, que anteriormente havia deixado a empresa de forma repentina e se juntado à OpenAI devido a um desentendimento com a CEO da Thinking Machines Lab, Miriam Mularati, mudou de emprego mais u
Como a Recursive Intelligence levantou US$ 335 milhões com uma avaliação de US$ 4 bilhões em 4 meses
As cofundadoras da startup Ricursive Intelligence pareciam destinadas a serem cofundadoras.Anna Goldie, CEO, e Azalia Mirhoseini, CTO, são tão conhecidas na comunidade de IA que estavam entre os engen
As melhores ferramentas de ilustração com IA de 2026: nossa lista selecionada apresenta as melhores ferramentas, com design robusto, para criar rapidamente cenas editoriais impressionantes e capas atraentes. Cada opção passou por rigorosos testes práticos, oferecendo uma comparação entre versões gratuitas e pagas para ajudar você a encontrar a opção perfeita para o seu fluxo de trabalho. Experimente hoje mesmo essas soluções imperdíveis para aproveitar ao máximo as vantagens da IA e impulsionar sua produtividade criativa. Explore agora no XIX.AI.
10 ferramentas
xix.ai
Os melhores tutores de IA para preparação para exames de 2026, com as melhores avaliações, estão aqui no XIX.AI! Nossa lista cuidadosamente selecionada apresenta ferramentas poderosas e revolucionárias que oferecem comparação entre versões gratuitas e pagas, testes práticos e rankings atualizados semanalmente. Elas ajudam a aumentar sua eficiência na redação, simplificar o aprendizado de tópicos complexos e liberar seu potencial acadêmico. Explore agora para descobrir sua ferramenta perfeita de preparação para exames e comece a criar hoje mesmo para aproveitar toda a vantagem da IA!
10 ferramentas
xix.ai
As melhores e mais bem avaliadas ferramentas de planejamento orçamentário com IA para gestão financeira pessoal de 2026 estão aqui no XIX.AI! Esta seleção especial apresenta soluções poderosas e revolucionárias que ajudam você a realizar testes na prática, entender hábitos de consumo e criar planos personalizados para aumentar a produtividade. Confira uma comparação entre versões gratuitas e pagas, além de rankings detalhados. Ferramentas imperdíveis, projetadas para simplificar a gestão financeira e explorar o potencial da IA. Explore agora!
11 ferramentas
xix.ai
2026 – Os melhores assistentes de rastreamento do sono com inteligência artificial mais bem avaliados, selecionados para proporcionar uma recuperação máxima. Este guia semanal completamente atualizado apresenta ferramentas poderosas que incluem testes reais, comparações entre versões gratuitas e pagas, além de classificações detalhadas, visando ajudá-lo a encontrar a solução ideal para melhorar a qualidade do sono e fomentar hábitos noturnos mais saudáveis. Explore agora em XIX.AI e aproveite todas as vantagens oferecidas pela inteligência artificial.
10 ferramentas
xix.ai
2026: Os melhores e mais bem avaliados copilotos de IA para SQL em análise de produtos e receitas! A XIX.AI selecionou um conjunto poderoso e revolucionário de ferramentas imperdíveis, que passam por testes práticos por meio de rankings atualizados semanalmente. Essas ferramentas ajudam os usuários a aumentar significativamente a produtividade, acelerando a análise de dados, simplificando consultas complexas e gerando insights precisos para impulsionar decisões de negócios mais inteligentes. Explore agora e descubra a ferramenta perfeita para aproveitar ao máximo o potencial da IA!
14 ferramentas
xix.ai
2026: Os melhores e mais bem avaliados auxiliares de tarefas com IA que ensinam conceitos fundamentais, não apenas respostas. Ferramentas poderosas para estudantes. Lista selecionada que você não pode deixar de conferir. Atualizada semanalmente. Comparação entre versões gratuitas e pagas. Testes em situações reais. Rankings precisos para ajudar você a atingir todo o seu potencial de aprendizado. Explore agora e descubra a ferramenta perfeita para estudar de forma mais inteligente.
10 ferramentas
xix.ai
