볼케이노 엔진, ‘두바오 오디오 모델 1.0’ 출시: 한 문장으로 완성되는 영화 같은 오디오, 10분 분량의 일관된 캐릭터 목소리
어제, Volc Engine은 텍스트나 오디오 입력을 받아 엔드투엔드 방식으로 완성된 오디오 작품을 생성하는 ‘Doubao 오디오 생성 모델 1.0(Doubao-Seed-Audio 1.0)’을 공식 출시했습니다. 이 모델의 핵심적인 혁신은 단 하나의 프롬프트만으로 대사, 음향 효과, 배경 음악을 동시에 처리할 수 있어 수동으로 멀티트랙 편집을 할 필요가 없다는 점입니다.

한 문장으로 오디오 감독이 되어보세요. 후반 작업이 필요 없습니다.
이전에는 고품질 오디오를 제작하려면 대사, 음향 효과, 음악을 별도로 생성한 다음 수동으로 트랙을 정렬하고 믹싱해야 했으며, 이는 후반 작업 전문 지식에 의존하는 복잡한 과정이었습니다. Doubao 오디오 생성 모델 1.0은 이 모든 과정을 하나의 프롬프트로 통합합니다. 사용자는 하나의 지시어로 여러 등장인물의 대사, 어조, 감정적 리듬을 정의하고, 웃음, 한숨, 멈춤, 방언 억양과 같은 세부 사항을 포함시킬 수 있으며, 배경 음악과 주변 음향 효과를 동시에 생성하여 완성된 결과물을 바로 출력할 수 있습니다. 제작자는 설명을 입력하기만 하면 즉시 공개 가능한 팟캐스트, 오디오북 또는 브랜드 오디오를 받을 수 있습니다.
긴 오디오 전반에 걸쳐 품질 저하 없이 일관된 캐릭터 목소리를 구현합니다.
긴 오디오 제작에서 가장 큰 과제는 일관성, 즉 1분 지점과 10분 지점에서 캐릭터의 목소리가 동일하게 들리도록 하는 것입니다. Doubao 오디오 생성 모델 1.0은 텍스트-오디오 변환 기능을 참조 오디오와 깊이 통합하여 긴 구간 전반에 걸쳐 일관된 음질을 유지하므로, 제작자는 각 부분을 비교하고 수정할 필요가 없습니다. 현재 모델은 생성당 최대 2분 길이의 오디오를 지원하며, 확장 기능을 통해 더 긴 출력물에서도 목소리의 일관성을 유지하므로 오디오북, 팟캐스트 및 장편 시리즈에 적합합니다.
또한, 이 모델은 목소리와 스타일을 분리하여 제어할 수 있어, 동일한 목소리가 다양한 감정과 맥락에 적응할 수 있으며, 심지어 하나의 목소리로 서로 다른 표현을 가진 여러 역할을 연기할 수도 있습니다. 이는 캐릭터 성우 연기와 창의적인 오디오 제작의 유연성을 크게 높여줍니다. 현재 Volc Ark는 API 테스트를 시작했으며, 개인 사용자는 Experience Center에서 30분의 생성 할당량을 받을 수 있습니다. 또한 Doubao 오디오 생성 모델 1.0은 CapCut, Jiemod, Tomato와 같은 제품에도 출시될 예정입니다.
관련 기사
Musk이 약속된 업그레이드를 추진하면서 Sora 오프라인, Grok Imagine 구상
전 세계 AI 비디오 시장은 단 하루 만에 극적인 변화를 겪었습니다.OpenAI이 주력 비디오 도구인 Sora를 종료한 후, 일론 머스크는 빠르게 공백을 메우기 위해 움직였습니다. 수요일, 그는 X에서 자신의 AI 기업 **xAI**가 비디오 생성기를 업그레이드한다고 발표했습니다. 그는 "다음 버전의 **Grok Imagine**은 매우 인상적일 것입니다. 우리는 더 많은 투자를 기울이고 있습니다."라고 썼습니다.공백 메우기: Sora 퇴출
Anthropic의 연간 매출 470억 달러 달성, Claude 기업용 채택 급증
리딩 인공지능 기업 간의 경쟁이 격화되고 있습니다. 5월 28일, 주요 AI 스타트업인 앤트로픽(Anthropic)은 연화된 매출이 470억 달러를 초과했다고 보고했습니다. 이 놀라운 재정적 이정표는 생성형 AI 기술의 빠른 상용화와 시장 잠재력을 강조합니다.성장 궤적 분석 결과, 이 성과는 기업 부문에서의 광범위한 채택에서 비롯된 것으로 나타났습니다. 2월 시리즈 G 자금 조달 라운드 이후, 앤트로픽의 핵심 모델인 클로드는 전 세계 기업 고
MeituHub: Meitu의 AI 이미지 플랫폼은 기업용 맞춤형 시각적 워크플로우를 제공합니다
Meitu는 기업용 엔드투엔드 시각 콘텐츠 솔루션을 제공하기 위해 AI 기반 이미지 제작 플랫폼인 MeituHub를 공식 출시했습니다. 여기에는 초기 요구사항 분석 및 워크플로우 구성부터 최종 자산 전달까지 모든 단계가 포함됩니다. Meitu의 포괄적인 이미지 기술 스택을 활용하여 기업은 복잡한 코딩 없이 간단한 자연어 지침으로 사용자 정의 시각 워크플로우를 설계하고 재사용 가능한 웹 기반 애플리케이션을 배포할 수 있습니다.생성형 AI 도구가
관련 특별 주제 추천
의견 (1)
0/500
어제, Volc Engine은 텍스트나 오디오 입력을 받아 엔드투엔드 방식으로 완성된 오디오 작품을 생성하는 ‘Doubao 오디오 생성 모델 1.0(Doubao-Seed-Audio 1.0)’을 공식 출시했습니다. 이 모델의 핵심적인 혁신은 단 하나의 프롬프트만으로 대사, 음향 효과, 배경 음악을 동시에 처리할 수 있어 수동으로 멀티트랙 편집을 할 필요가 없다는 점입니다.

한 문장으로 오디오 감독이 되어보세요. 후반 작업이 필요 없습니다.
이전에는 고품질 오디오를 제작하려면 대사, 음향 효과, 음악을 별도로 생성한 다음 수동으로 트랙을 정렬하고 믹싱해야 했으며, 이는 후반 작업 전문 지식에 의존하는 복잡한 과정이었습니다. Doubao 오디오 생성 모델 1.0은 이 모든 과정을 하나의 프롬프트로 통합합니다. 사용자는 하나의 지시어로 여러 등장인물의 대사, 어조, 감정적 리듬을 정의하고, 웃음, 한숨, 멈춤, 방언 억양과 같은 세부 사항을 포함시킬 수 있으며, 배경 음악과 주변 음향 효과를 동시에 생성하여 완성된 결과물을 바로 출력할 수 있습니다. 제작자는 설명을 입력하기만 하면 즉시 공개 가능한 팟캐스트, 오디오북 또는 브랜드 오디오를 받을 수 있습니다.
긴 오디오 전반에 걸쳐 품질 저하 없이 일관된 캐릭터 목소리를 구현합니다.
긴 오디오 제작에서 가장 큰 과제는 일관성, 즉 1분 지점과 10분 지점에서 캐릭터의 목소리가 동일하게 들리도록 하는 것입니다. Doubao 오디오 생성 모델 1.0은 텍스트-오디오 변환 기능을 참조 오디오와 깊이 통합하여 긴 구간 전반에 걸쳐 일관된 음질을 유지하므로, 제작자는 각 부분을 비교하고 수정할 필요가 없습니다. 현재 모델은 생성당 최대 2분 길이의 오디오를 지원하며, 확장 기능을 통해 더 긴 출력물에서도 목소리의 일관성을 유지하므로 오디오북, 팟캐스트 및 장편 시리즈에 적합합니다.
또한, 이 모델은 목소리와 스타일을 분리하여 제어할 수 있어, 동일한 목소리가 다양한 감정과 맥락에 적응할 수 있으며, 심지어 하나의 목소리로 서로 다른 표현을 가진 여러 역할을 연기할 수도 있습니다. 이는 캐릭터 성우 연기와 창의적인 오디오 제작의 유연성을 크게 높여줍니다. 현재 Volc Ark는 API 테스트를 시작했으며, 개인 사용자는 Experience Center에서 30분의 생성 할당량을 받을 수 있습니다. 또한 Doubao 오디오 생성 모델 1.0은 CapCut, Jiemod, Tomato와 같은 제품에도 출시될 예정입니다.
Musk이 약속된 업그레이드를 추진하면서 Sora 오프라인, Grok Imagine 구상
전 세계 AI 비디오 시장은 단 하루 만에 극적인 변화를 겪었습니다.OpenAI이 주력 비디오 도구인 Sora를 종료한 후, 일론 머스크는 빠르게 공백을 메우기 위해 움직였습니다. 수요일, 그는 X에서 자신의 AI 기업 **xAI**가 비디오 생성기를 업그레이드한다고 발표했습니다. 그는 "다음 버전의 **Grok Imagine**은 매우 인상적일 것입니다. 우리는 더 많은 투자를 기울이고 있습니다."라고 썼습니다.공백 메우기: Sora 퇴출
Anthropic의 연간 매출 470억 달러 달성, Claude 기업용 채택 급증
리딩 인공지능 기업 간의 경쟁이 격화되고 있습니다. 5월 28일, 주요 AI 스타트업인 앤트로픽(Anthropic)은 연화된 매출이 470억 달러를 초과했다고 보고했습니다. 이 놀라운 재정적 이정표는 생성형 AI 기술의 빠른 상용화와 시장 잠재력을 강조합니다.성장 궤적 분석 결과, 이 성과는 기업 부문에서의 광범위한 채택에서 비롯된 것으로 나타났습니다. 2월 시리즈 G 자금 조달 라운드 이후, 앤트로픽의 핵심 모델인 클로드는 전 세계 기업 고
MeituHub: Meitu의 AI 이미지 플랫폼은 기업용 맞춤형 시각적 워크플로우를 제공합니다
Meitu는 기업용 엔드투엔드 시각 콘텐츠 솔루션을 제공하기 위해 AI 기반 이미지 제작 플랫폼인 MeituHub를 공식 출시했습니다. 여기에는 초기 요구사항 분석 및 워크플로우 구성부터 최종 자산 전달까지 모든 단계가 포함됩니다. Meitu의 포괄적인 이미지 기술 스택을 활용하여 기업은 복잡한 코딩 없이 간단한 자연어 지침으로 사용자 정의 시각 워크플로우를 설계하고 재사용 가능한 웹 기반 애플리케이션을 배포할 수 있습니다.생성형 AI 도구가





집






