안정성 AI는 팔 칩의 오디오 모델을 향상시킵니다

AI 스타트업 스태빌리티 AI는 칩 제조사 Arm과 협력하여 Arm 칩으로 구동되는 모바일 디바이스에 음향 효과와 같은 오디오를 생성할 수 있는 AI 모델인 스태빌리티의 스테이블 오디오 오픈을 선보입니다.

Suno나 Udio 같은 앱은 오디오를 생성할 수 있지만, 일반적으로 클라우드 프로세싱에 의존하기 때문에 오프라인에서는 사용할 수 없습니다. 게다가 일부 오디오 생성 모델은 저작권이 있는 자료로 훈련되어 IP 문제로 우려를 낳고 있습니다. 하지만 스태빌리티는 스테이블 오디오 오픈이 로열티 프리 오디오와 노래만으로 훈련되었다고 주장합니다.

이번 주 바르셀로나에서 열리는 모바일 월드 콩그레스에서 스태빌리티는 Arm 칩에서 실행되는 스테이블 오디오 오픈을 선보일 예정입니다. 이 모델은 "해질녘의 부드러운 바다 파도"와 같은 텍스트 프롬프트에서 소리를 생성할 수 있습니다. Arm과의 협력을 통해 스태빌리티는 스테이블 오디오 오픈을 최적화하고 "정제"하여 생성 속도를 30배 향상시켰습니다. Armv9 CPU에서는 11초 오디오 샘플을 생성하는 데 이제 약 8초밖에 걸리지 않습니다.

명확히 하자면, 최적화된 스테이블 오디오 오픈 모델은 아직 다운로드할 준비가 되지 않았습니다. 하지만 스태빌리티의 CEO 프렘 아카라주는 성명에서 회사가 스테이블 오디오 오픈을 포함한 모델을 소비자 앱과 디바이스에 통합할 계획이라고 암시했습니다.

아카라주는 "점점 더 많은 전문 창작자와 기업이 생성 AI를 활용하여 생산 파이프라인을 강화함에 따라, 우리의 모델과 워크플로우가 빌더가 만들고 크리에이터가 창작할 수 있도록 어디서나 접근 가능해야 한다는 것이 중요합니다. 바로 이런 이유로 Arm과 파트너십을 맺게 되어 기쁩니다."라고 강조했습니다.

스태빌리티는 또한 Arm과 협력하여 모바일 사용을 위해 스테이블 오디오 오픈을 더욱 정제하고 최적화하고 있습니다.

잘 알려진 이미지 생성 모델 스테이블 디퓨전을 만든 스태빌리티는 작년에 새로운 자금 조달에 성공했습니다. 에릭 슈미트와 냅스터 창립자 숀 파커 같은 투자자들이 회사를 다시 궤도에 올리기 위해 나섰습니다. 이전에는 스태빌리티의 공동 창립자이자 전 CEO였던 에마드 모스타크가 회사를 재정 붕괴 직전까지 잘못 운영하여 직원 이탈, 캔바와의 파트너십 실패, 그리고 회사의 미래에 대한 투자자들의 불안을 초래한 것으로 전해졌습니다.

최근 몇 달 동안 스태빌리티는 새로운 CEO를 영입하고, 타이타닉 감독 제임스 카메론을 이사회에 합류시키며, 여러 새로운 이미지 생성 모델을 출시했습니다.