StepZen 釋出 StepAudio 3 系列語音模型,斬獲多項全球首創

9月15日,StepXingchen 正式釋出全新的 StepAudio3 系列語音大模型。此次釋出包含五款獨立產品:StepAudio3Realtime、StepAudio3ASR、StepAudio3TTS、StepAudio3Gen 以及 StepAudio3Music。其中多款模型在權威機構 Artificial Analysis 的評估榜單中位列全球第一。目前,這五款模型已在 StepXingchen 開放平臺全面上線,覆蓋五大核心應用場景:逼真語音生成、全方位音訊內容創作、實時語音互動、複雜場景語音理解以及音樂製作。
在實時互動方面,StepAudio3Realtime 專為實現全雙工原生對話而設計。在 Artificial Analysis 對話動態排名中,它以 98.9% 的綜合得分位居全球第一;在 Artificial Analysis 語音推理排名中,其準確率達到 99.7%,同樣位列榜首。該模型能夠精準捕捉對話節奏,處理使用者打斷與連續反饋,並支援對語義、語調、情感、副語言特徵及環境音的理解。此外,它實現了並行推理與語音生成,以及非同步工具呼叫(Tool Call)和長任務處理,確保語音對話的流暢不間斷。
在語音識別方面,StepAudio3ASR 將高精度轉錄與大語言模型的知識推理能力相結合,超越了傳統的純音訊轉錄方法。它支援中文、英文、方言、混合語言、長音訊以及專業領域等多種場景。該模型在醫療、法律、金融、汽車和程式設計等語境中表現卓越,並能有效應對低音量、語速快、發音不清、唱歌及背景音樂等複雜的輸入環境。其非流式語音識別的詞錯誤率(WER)僅為 1.7%,與全球其他模型並列第一。
在語音生成方面,StepAudio3TTS 是一款專為實時互動設計的逼真模型。它在語音基調、語調、節奏和停頓方面與人類自然說話模式完美契合。該模型能夠還原笑聲、猶豫、結巴、重複和修正等副語言特徵,並能根據語義內容自主調整情感基調。採用流式生成架構,該模型實現了生成與播放的同步。
在綜合音訊內容生成方面,StepAudio3Gen 簡化了傳統的長週期製作、編輯和混音流程。使用者可以使用自然語言描述和參考音訊,同時生成人聲、音效、環境音和背景音樂。該模型允許對角色聲音、說話風格、情感、方言和笑聲等副語言特徵進行精細控制。它還允許使用者指定對話、音效和背景音樂的時機與順序,從而直接影響整個內容的聲音設計和時間序列。
在音樂創作方面,StepAudio3Music 支援基於 ABC 記譜法的零樣本生成和多輪互動式創作。使用者可以輸入歌詞、清唱、參考歌曲或樂譜,並使用自然語言控制流派、人聲、旋律、節奏、樂器和情感。該模型深入理解歌曲結構、跨段落旋律發展及能量變化。特別是在清唱伴奏場景中,單條清唱軌道即可自動生成和聲、節奏、樂器及完整編曲,助力實現真正的音樂製作。
相關文章
xAI 聯合創始人辭職,原始團隊成員僅剩五人
xAI,埃隆·馬斯克的人工智慧企業,經歷了又一輪重大的人員流失。聯合創始人託比·波倫(Toby Pohlen)已正式宣佈離職。他在 X 平臺上分享了感言,回顧了自己三年的任職經歷,提到自己處理了數千個拉取請求,並與團隊分享了許多難忘的時刻。他讚揚了團隊不懈的工作精神,開玩笑說:“沒有人比你熬夜更晚。”他離職後的首要計劃是睡足八個小時以上,隨後花些時間思考接下來的步驟。波倫的離職標誌著 xAI 創始團隊的進一步分裂。在不到三年的時間裡,最初的十二位聯合創始人中有七人已離職,留存率低於 50%。xA
Kimi K3 本月釋出,擁有2.5萬億引數
2026年下半年,大模型格局進一步加劇。繼DeepSeek V4之後,月之暗面(Moonshot AI)的Kimi K3已確認將於本月釋出。儘管具體日期尚未公佈,但內部人士透露,Kimi K3擁有高達2.5萬億引數,超越了DeepSeek V4 Pro(1.6萬億)和百度的文心5.0(2.4萬億),使其成為按引數量計算的最大國產模型。Kimi K3具備百萬token上下文視窗和先進的多模態處理能力。這一組合挑戰了全球標準,並在月之暗面憑藉Kimi K2.7 Code實現快速更新週期的基礎上,
賈樟柯的《敦煌媽媽》註冊:單身母親愛上人工智慧,遊歷中國
2026年7月,國家電影局批准了賈樟柯新片《敦煌媽媽》的劇本大綱。劇情簡介講述了一位生活在敦煌的單身母親,逐漸轉向人工智慧以對抗孤獨並與外界建立聯絡的故事。她的旅程最終從中國西部延伸至東部,橫跨整個國家。該片由趙濤和廖凡主演,計劃於2027年上映。這一專案標誌著人工智慧從技術報道轉向嚴肅作者電影的核心敘事。賈樟柯以《三峽好人》和《江湖兒女》等影片聞名,他透過普通人的生活反映時代變遷,關注那些被宏大敘事所忽視的人群。透過將孤獨的母親與人工智慧並置,影片探討了一個緊迫的社會問題:隨著技術迅速滲透日
相關專題推薦
評論 (0)
0/500

9月15日,StepXingchen 正式釋出全新的 StepAudio3 系列語音大模型。此次釋出包含五款獨立產品:StepAudio3Realtime、StepAudio3ASR、StepAudio3TTS、StepAudio3Gen 以及 StepAudio3Music。其中多款模型在權威機構 Artificial Analysis 的評估榜單中位列全球第一。目前,這五款模型已在 StepXingchen 開放平臺全面上線,覆蓋五大核心應用場景:逼真語音生成、全方位音訊內容創作、實時語音互動、複雜場景語音理解以及音樂製作。
在實時互動方面,StepAudio3Realtime 專為實現全雙工原生對話而設計。在 Artificial Analysis 對話動態排名中,它以 98.9% 的綜合得分位居全球第一;在 Artificial Analysis 語音推理排名中,其準確率達到 99.7%,同樣位列榜首。該模型能夠精準捕捉對話節奏,處理使用者打斷與連續反饋,並支援對語義、語調、情感、副語言特徵及環境音的理解。此外,它實現了並行推理與語音生成,以及非同步工具呼叫(Tool Call)和長任務處理,確保語音對話的流暢不間斷。
在語音識別方面,StepAudio3ASR 將高精度轉錄與大語言模型的知識推理能力相結合,超越了傳統的純音訊轉錄方法。它支援中文、英文、方言、混合語言、長音訊以及專業領域等多種場景。該模型在醫療、法律、金融、汽車和程式設計等語境中表現卓越,並能有效應對低音量、語速快、發音不清、唱歌及背景音樂等複雜的輸入環境。其非流式語音識別的詞錯誤率(WER)僅為 1.7%,與全球其他模型並列第一。
在語音生成方面,StepAudio3TTS 是一款專為實時互動設計的逼真模型。它在語音基調、語調、節奏和停頓方面與人類自然說話模式完美契合。該模型能夠還原笑聲、猶豫、結巴、重複和修正等副語言特徵,並能根據語義內容自主調整情感基調。採用流式生成架構,該模型實現了生成與播放的同步。
在綜合音訊內容生成方面,StepAudio3Gen 簡化了傳統的長週期製作、編輯和混音流程。使用者可以使用自然語言描述和參考音訊,同時生成人聲、音效、環境音和背景音樂。該模型允許對角色聲音、說話風格、情感、方言和笑聲等副語言特徵進行精細控制。它還允許使用者指定對話、音效和背景音樂的時機與順序,從而直接影響整個內容的聲音設計和時間序列。
在音樂創作方面,StepAudio3Music 支援基於 ABC 記譜法的零樣本生成和多輪互動式創作。使用者可以輸入歌詞、清唱、參考歌曲或樂譜,並使用自然語言控制流派、人聲、旋律、節奏、樂器和情感。該模型深入理解歌曲結構、跨段落旋律發展及能量變化。特別是在清唱伴奏場景中,單條清唱軌道即可自動生成和聲、節奏、樂器及完整編曲,助力實現真正的音樂製作。
xAI 聯合創始人辭職,原始團隊成員僅剩五人
xAI,埃隆·馬斯克的人工智慧企業,經歷了又一輪重大的人員流失。聯合創始人託比·波倫(Toby Pohlen)已正式宣佈離職。他在 X 平臺上分享了感言,回顧了自己三年的任職經歷,提到自己處理了數千個拉取請求,並與團隊分享了許多難忘的時刻。他讚揚了團隊不懈的工作精神,開玩笑說:“沒有人比你熬夜更晚。”他離職後的首要計劃是睡足八個小時以上,隨後花些時間思考接下來的步驟。波倫的離職標誌著 xAI 創始團隊的進一步分裂。在不到三年的時間裡,最初的十二位聯合創始人中有七人已離職,留存率低於 50%。xA
Kimi K3 本月釋出,擁有2.5萬億引數
2026年下半年,大模型格局進一步加劇。繼DeepSeek V4之後,月之暗面(Moonshot AI)的Kimi K3已確認將於本月釋出。儘管具體日期尚未公佈,但內部人士透露,Kimi K3擁有高達2.5萬億引數,超越了DeepSeek V4 Pro(1.6萬億)和百度的文心5.0(2.4萬億),使其成為按引數量計算的最大國產模型。Kimi K3具備百萬token上下文視窗和先進的多模態處理能力。這一組合挑戰了全球標準,並在月之暗面憑藉Kimi K2.7 Code實現快速更新週期的基礎上,
賈樟柯的《敦煌媽媽》註冊:單身母親愛上人工智慧,遊歷中國
2026年7月,國家電影局批准了賈樟柯新片《敦煌媽媽》的劇本大綱。劇情簡介講述了一位生活在敦煌的單身母親,逐漸轉向人工智慧以對抗孤獨並與外界建立聯絡的故事。她的旅程最終從中國西部延伸至東部,橫跨整個國家。該片由趙濤和廖凡主演,計劃於2027年上映。這一專案標誌著人工智慧從技術報道轉向嚴肅作者電影的核心敘事。賈樟柯以《三峽好人》和《江湖兒女》等影片聞名,他透過普通人的生活反映時代變遷,關注那些被宏大敘事所忽視的人群。透過將孤獨的母親與人工智慧並置,影片探討了一個緊迫的社會問題:隨著技術迅速滲透日





首頁






