Stability AIが写真を3D環境に変換するモデルを発表

Stability AIは、2D写真を没入感のあるビデオに変換し、リアルな深度と遠近感を実現する革新的なモデル「Stable Virtual Camera」を発表しました。

デジタル映画制作で一般的に使用されるバーチャルカメラは、シーン内をリアルタイムで移動することを可能にします。Stability AIは、生成AIをこの技術に統合し、公式ブログによると、映像制作者により強化された創造的なコントロールを提供します。

この画期的なツールは、アップロードされた画像（最大32枚）から別の視点を作成し、「スパイラル」、「ドリーズーム」、「パン」など、カスタマイズされたカメラムーブメントや、よりダイナミックな撮影パスを可能にします。

現在研究プレビュー段階にあるStable Virtual Cameraは、正方形、ポートレート、またはランドスケープ形式で最大1,000フレームの動画を生成します。同社は、人物、動物、または流体の質感を処理する際に、品質に限界がある可能性があることを認めています。

Stability AIは、複雑なシーン、交差するカメラパス、および非従来の形状は、特に視点が素材から大きく外れる場合に、視覚的なちらつきを引き起こす可能性があると警告しています。

研究者は、非商用ライセンスの下、Hugging Faceを通じてStable Virtual Cameraにアクセスできます。

前リーダーシップ下での財政的困難にもかかわらず、Stability AIは昨年追加資金を調達しました。Stable Diffusionを開発した同社は最近再編され、映画監督のジェームズ・キャメロンを含む新しい幹部を迎えながら、生成AIの提供を拡大しています。

最近のArmとの協業に続き、Stability AIは現在、Arm搭載デバイス向けのモバイル互換オーディオ生成技術を開発しています。