Lar
A Xiaomi apresenta o MiMo-V2-TTS, seu modelo de IA desenvolvido internamente para síntese de voz com dialetos e emoções
A Xiaomi lançou oficialmente seu modelo de síntese de voz em grande escala desenvolvido internamente, o MiMo-V2-TTS, que representa um grande avanço na geração de voz altamente controlável e expressiva. Baseado no Audio Tokenizer, de propriedade da Xiaomi, e em uma estrutura de modelagem conjunta de texto e fala com múltiplos codebooks, o modelo aproveita um extenso pré-treinamento com centenas de milhões de horas de dados de fala para alcançar ajustes precisos, desde estilos gerais até detalhes emocionais sutis. Ao contrário dos sistemas TTS convencionais, o MiMo-V2-TTS é capaz de executar mudanças de tom e variações emocionais dentro de uma única frase, imitando de perto o ritmo natural da fala humana e suportando a síntese de músicas com afinação e ritmo precisos. Tecnicamente, a Xiaomi incorporou aprendizado por reforço multidimensional para equilibrar a estabilidade e a expressividade da saída. O modelo reconhece de forma inteligente pistas textuais, como pontuação, marcadores de entonação e indicadores de ênfase, traduzindo-as em expressões vocais apropriadas sem a necessidade de anotações manuais adicionais. Além disso, o modelo exibe forte adaptabilidade inter-regional, suportando vários dialetos, incluindo sotaques do mandarim do Nordeste, de Sichuan, de Henan, cantonês e taiwanês, e é capaz de performances vocais orientadas por personagens.
Como um marco importante no roteiro de tecnologia de voz da Xiaomi, o MiMo-V2-TTS expandirá ainda mais o suporte multilíngue e se integrará profundamente aos recursos de compreensão multimodal do MiMo-V2-Omni. Essa evolução da síntese de fala autônoma para a percepção e expressão multimodal coordenada sinaliza uma mudança nos agentes de IA, passando da interação semântica básica para uma interação homem-computador mais personalizada e emocionalmente ressonante, melhorando significativamente a experiência do usuário em aplicações como cabines inteligentes e casas inteligentes.

Artigo relacionado
Stripe vai adquirir a OpenRouter à medida que o roteamento baseado em modelos de IA ganha força
A Stripe concordou em adquirir a OpenRouter, uma plataforma de roteamento de modelos de IA que oferece aos desenvolvedores acesso a centenas de modelos por meio de uma única interface. O acordo amplia
O ex-pesquisador da OpenAI, Barrett Zoph, retorna ao Google para apoiar o desenvolvimento do Gemini
Barret Zoph, que anteriormente havia deixado a empresa de forma repentina e se juntado à OpenAI devido a um desentendimento com a CEO da Thinking Machines Lab, Miriam Mularati, mudou de emprego mais u
Como a Recursive Intelligence levantou US$ 335 milhões com uma avaliação de US$ 4 bilhões em 4 meses
As cofundadoras da startup Ricursive Intelligence pareciam destinadas a serem cofundadoras.Anna Goldie, CEO, e Azalia Mirhoseini, CTO, são tão conhecidas na comunidade de IA que estavam entre os engen
Recomendações de tópicos especiais relacionados
Comentários (3)
Xiaomi's new MiMo-V2-TTS looks promising for dialect support, but I'm still skeptical about how well it handles complex emotional shifts in real-time conversations. 🤔 The tech is impressive, yet the uncanny valley effect might linger for some users. Let's see if it can truly mimic the subtle nuances of human speech without sounding robotic after long usage. 🎙️✨
Wait, so Xiaomi's new model can synthesize voice with dialects AND emotions? That's either incredibly useful for localization or terrifying for deepfakes. I wonder how they handle tonal languages like Chinese... also, rip voice actors? 😬
A Xiaomi lançou oficialmente seu modelo de síntese de voz em grande escala desenvolvido internamente, o MiMo-V2-TTS, que representa um grande avanço na geração de voz altamente controlável e expressiva. Baseado no Audio Tokenizer, de propriedade da Xiaomi, e em uma estrutura de modelagem conjunta de texto e fala com múltiplos codebooks, o modelo aproveita um extenso pré-treinamento com centenas de milhões de horas de dados de fala para alcançar ajustes precisos, desde estilos gerais até detalhes emocionais sutis. Ao contrário dos sistemas TTS convencionais, o MiMo-V2-TTS é capaz de executar mudanças de tom e variações emocionais dentro de uma única frase, imitando de perto o ritmo natural da fala humana e suportando a síntese de músicas com afinação e ritmo precisos. Tecnicamente, a Xiaomi incorporou aprendizado por reforço multidimensional para equilibrar a estabilidade e a expressividade da saída. O modelo reconhece de forma inteligente pistas textuais, como pontuação, marcadores de entonação e indicadores de ênfase, traduzindo-as em expressões vocais apropriadas sem a necessidade de anotações manuais adicionais. Além disso, o modelo exibe forte adaptabilidade inter-regional, suportando vários dialetos, incluindo sotaques do mandarim do Nordeste, de Sichuan, de Henan, cantonês e taiwanês, e é capaz de performances vocais orientadas por personagens.
Como um marco importante no roteiro de tecnologia de voz da Xiaomi, o MiMo-V2-TTS expandirá ainda mais o suporte multilíngue e se integrará profundamente aos recursos de compreensão multimodal do MiMo-V2-Omni. Essa evolução da síntese de fala autônoma para a percepção e expressão multimodal coordenada sinaliza uma mudança nos agentes de IA, passando da interação semântica básica para uma interação homem-computador mais personalizada e emocionalmente ressonante, melhorando significativamente a experiência do usuário em aplicações como cabines inteligentes e casas inteligentes.

Stripe vai adquirir a OpenRouter à medida que o roteamento baseado em modelos de IA ganha força
A Stripe concordou em adquirir a OpenRouter, uma plataforma de roteamento de modelos de IA que oferece aos desenvolvedores acesso a centenas de modelos por meio de uma única interface. O acordo amplia
O ex-pesquisador da OpenAI, Barrett Zoph, retorna ao Google para apoiar o desenvolvimento do Gemini
Barret Zoph, que anteriormente havia deixado a empresa de forma repentina e se juntado à OpenAI devido a um desentendimento com a CEO da Thinking Machines Lab, Miriam Mularati, mudou de emprego mais u
Como a Recursive Intelligence levantou US$ 335 milhões com uma avaliação de US$ 4 bilhões em 4 meses
As cofundadoras da startup Ricursive Intelligence pareciam destinadas a serem cofundadoras.Anna Goldie, CEO, e Azalia Mirhoseini, CTO, são tão conhecidas na comunidade de IA que estavam entre os engen
Xiaomi's new MiMo-V2-TTS looks promising for dialect support, but I'm still skeptical about how well it handles complex emotional shifts in real-time conversations. 🤔 The tech is impressive, yet the uncanny valley effect might linger for some users. Let's see if it can truly mimic the subtle nuances of human speech without sounding robotic after long usage. 🎙️✨
Wait, so Xiaomi's new model can synthesize voice with dialects AND emotions? That's either incredibly useful for localization or terrifying for deepfakes. I wonder how they handle tonal languages like Chinese... also, rip voice actors? 😬











