Tongyi、初の映画級音声AIモデルを発表:感情を反映した自然な発話を実現

AIGCが画像やテキストの生成に革命をもたらした後、映画・テレビ業界における最後のフロンティアである「声優」の分野に、アリババのTongyi Labが今、切り込もうとしている。3月16日、Tongyi Labは 、映画向けかつ多様なシナリオに対応する世界初のマルチモーダル大規模モデル「Fun-CineForge」を正式にリリースし、オープンソース化した。
長年にわたり、AI音声合成は「ロボットのような」あるいは「アナウンサー風の」トーンという課題に悩まされてきた。映画やテレビ業界において、感情の深みを表現すること、環境音のミキシング、そしてリップシンクは依然として大きな障壁となっていた。「Fun-CineForge」は 、まさにこれらの課題を克服するために開発された。
このモデルは、画期的な「データ+モデル」の統合設計を採用しています。Tongyi Labは モデルに加え、高品質なデータセットを構築する方法も提供しました。これにより、AIは単なるテキスト読み上げを超えて、複雑な映画的文脈を深く理解し、微妙な感情のニュアンスや空間オーディオ効果を再現することが可能になります。
Alibaba Tongyiファミリーの最新メンバーであるオープンソースのFun-CineForgeは 、業界に革命をもたらす存在です。これは映像クリエイターに「映画級」のポストプロダクションツールを提供し、アクセスしやすい技術を通じて、インディーズクリエイターや中規模予算の制作チームが、最小限のコストで高品質な多言語吹き替えを実現することを可能にします。
初期のQwen3-Omniから 現在のFun-CineForge に至るまで、Tongyiシリーズはマルチモーダル技術のパズルを急速に完成させつつあります。AIが「人間のように振る舞う」ことを学ぶにつれ、映画の翻訳やポストプロダクションの全体像は一変する可能性があります。このモデルとそのデータセット構築計画は現在、主要なオープンソースプラットフォームで公開されており、「シネマ級AI」の時代が予想以上に早く到来することを示唆しています。
関連記事
DeepMindのCEOハサビス氏:1日6時間睡眠し、通常午前1時頃に活力を感じます。
フォーチュンは最近、Google DeepMindのCEOであるデミス・ハサビスへのインタビューを掲載し、彼の休息と生産性に対する非伝統的なアプローチを明らかにした。ハサビスは、睡眠時間が非常に短いことを明かし、覚醒時間を2つの明確な作業ブロックに構造化していると語った。彼の睡眠習慣について、ハサビスは「6時間の睡眠を目標としているが、私の習慣は典型的ではない。一日中効果的に機能できる」と述べた。彼は、6時間未満の睡眠は脳の健康に悪影響を及ぼすことを強調した。2010年にDeepMindを共
OpenAIとAnthropic、収益の伸び悩みにもかかわらず市場シェア争いを繰り広げる
OpenAIが収益目標を達成できなかったとする最近の報道を受け、今週火曜日にハイテク株に売り圧力が生じたにもかかわらず、AI研究機関への民間投資家は依然として堅調だ。経験豊富な出資者たちは、メディアによる否定的な報道にもかかわらず、投資額を減らすつもりはないことを明らかにしている。アナリストらは、現在のAI競争はまだ初期段階にあると見ており、「勝者総取り」という結末はあり得ないと見ている。高いコン
カリフォルニア州の自動運転車規制:違反切符、ジオフェンス、そして100万マイルという新たな時代
Guident社は南フロリダでAuveTechのシャトルを運行しており、同社の遠隔監視技術を活用して、ウェストパームビーチでの4マイルのルートとボカラトンでの1マイルのルートを管理している。 | 提供:Guidentカリフォルニア州は、自動運転車の規制環境を再定義しつつあり、テクノロジー業界の「迅速に動き、失敗を恐れない」という考え方から、厳格な説明責任と厳しい走行距離要件へと移行している。Gui
関連特集おすすめ
コメント (0)
0/500

AIGCが画像やテキストの生成に革命をもたらした後、映画・テレビ業界における最後のフロンティアである「声優」の分野に、アリババのTongyi Labが今、切り込もうとしている。3月16日、
長年にわたり、AI音声合成は「ロボットのような」あるいは「アナウンサー風の」トーンという課題に悩まされてきた。映画やテレビ業界において、感情の深みを表現すること、環境音のミキシング、そしてリップシンクは依然として大きな障壁となっていた。
このモデルは、画期的な「データ+モデル」の統合設計を採用しています。
Alibaba Tongyiファミリーの最新メンバーであるオープン
初期
DeepMindのCEOハサビス氏:1日6時間睡眠し、通常午前1時頃に活力を感じます。
フォーチュンは最近、Google DeepMindのCEOであるデミス・ハサビスへのインタビューを掲載し、彼の休息と生産性に対する非伝統的なアプローチを明らかにした。ハサビスは、睡眠時間が非常に短いことを明かし、覚醒時間を2つの明確な作業ブロックに構造化していると語った。彼の睡眠習慣について、ハサビスは「6時間の睡眠を目標としているが、私の習慣は典型的ではない。一日中効果的に機能できる」と述べた。彼は、6時間未満の睡眠は脳の健康に悪影響を及ぼすことを強調した。2010年にDeepMindを共
OpenAIとAnthropic、収益の伸び悩みにもかかわらず市場シェア争いを繰り広げる
OpenAIが収益目標を達成できなかったとする最近の報道を受け、今週火曜日にハイテク株に売り圧力が生じたにもかかわらず、AI研究機関への民間投資家は依然として堅調だ。経験豊富な出資者たちは、メディアによる否定的な報道にもかかわらず、投資額を減らすつもりはないことを明らかにしている。アナリストらは、現在のAI競争はまだ初期段階にあると見ており、「勝者総取り」という結末はあり得ないと見ている。高いコン





家






