A estabilidade AI aprimora o modelo de áudio para chips de braço

A startup de IA Stability AI uniu forças com a fabricante de chips Arm para trazer o Stable Audio Open da Stability, um modelo de IA capaz de gerar áudio como efeitos sonoros, para dispositivos móveis equipados com chips Arm.

Enquanto aplicativos como Suno e Udio podem gerar áudio, eles normalmente dependem de processamento em nuvem, o que significa que não são utilizáveis offline. Além disso, alguns modelos de geração de áudio foram treinados com material protegido por direitos autorais, levantando preocupações com propriedade intelectual. A Stability, no entanto, afirma que o Stable Audio Open foi treinado exclusivamente com áudio e músicas livres de royalties.

Na Mobile World Congress desta semana em Barcelona, a Stability exibirá o Stable Audio Open rodando em chips Arm. Este modelo pode criar sons a partir de prompts de texto, como "Ondas suaves do oceano ao pôr do sol". Graças à colaboração com a Arm, a Stability otimizou e "destilou" o Stable Audio Open, aumentando as velocidades de geração em 30 vezes. Em uma CPU Armv9, criar uma amostra de áudio de 11 segundos agora leva apenas cerca de 8 segundos.

Para esclarecer, o modelo otimizado Stable Audio Open ainda não está pronto para download. Mas o CEO da Stability, Prem Akkaraju, sugeriu em uma declaração que a empresa pretende integrar seus modelos, incluindo o Stable Audio Open, em aplicativos e dispositivos para consumidores no futuro.

Akkaraju enfatizou: "À medida que mais e mais criadores profissionais e empresas adotam a IA generativa para impulsionar seu pipeline de produção, é crucial que nossos modelos e fluxos de trabalho estejam acessíveis em todos os lugares para que os construtores construam e os criadores criem. Estamos empolgados por fazer parceria com a Arm por exatamente essa razão."

A Stability também está trabalhando com a Arm para refinar e otimizar ainda mais o Stable Audio Open para uso móvel.

A Stability, a empresa por trás do conhecido modelo de geração de imagens Stable Diffusion, conseguiu garantir novo financiamento no último ano. Investidores como Eric Schmidt e o fundador do Napster, Sean Parker, entraram para ajudar a recolocar a empresa nos trilhos. Anteriormente, o cofundador e ex-CEO da Stability, Emad Mostaque, foi dito ter gerido mal a empresa até o limite do colapso financeiro, causando saídas de funcionários, uma parceria fracassada com a Canva e inquietação dos investidores sobre o futuro da empresa.

Nos últimos meses, a Stability trouxe um novo CEO, deu as boas-vindas ao diretor de Titanic, James Cameron, para seu conselho e lançou vários novos modelos de geração de imagens.