Apple、単一画像を3Dに変換するLiToモデルを発表。照明精度が37%向上
AppleのAI研究チームは最近、LiTo(Surface Light Field Tokenization)という画期的な3D生成モデルを発表しました。この技術は、たった1枚の2D画像から、リアルな照明効果を備えた完全かつ高精細な3Dオブジェクトを生成することで、3D再構築における核心的な課題に取り組んでいます。

LiToの革新性は、新しい潜在空間と統一された3D表現フレームワークに集約されています:
効率的なエンコーディング:複雑な表面光場データをコンパクトなベクトルセットに圧縮し、オブジェクトの幾何学的形状と光との相互作用を数学的に捉えます。
双方向アーキテクチャ:エンコーダー・デコーダー構造を採用し、エンコーダーが基礎的な幾何学的特徴と外観特徴を抽出します。その後、デコーダーがこのデータを再構築し、鏡面反射やフレネル反射といった高度な視覚効果を正確にレンダリングします。
性能:あらゆる視点における比類なき照明の一貫性
LiToは、数千のオブジェクトを含む包括的な3Dデータセットを用いて学習されました。主な実験結果は以下の通りです:
方向バイアスの排除:LiToはカメラ座標系に厳密に従い、他のモデルで一般的な向きに関する誤差を補正します。
最先端の評価指標:マルチビュー照明の一貫性において、LiToは従来の最先端モデルであるTRELLISを約37%上回っています。
この進歩により、高品質な3Dコンテンツ制作のハードルが大幅に下がります。Vision Proのようなデバイスを含む、将来の拡張現実(AR)および空間コンピューティングプラットフォーム向けに、優れたアセット生成を実現する準備が整っています。
関連記事
AIモデルルーティングが勢いを増す中、StripeがOpenRouterを買収へ
Stripeは、開発者が単一のインターフェースを通じて数百のモデルにアクセスできるAIモデルルーティングプラットフォーム「OpenRouter」の買収に合意した。この買収により、StripeのAI活用やトークンベースの課金に関する既存の取り組みに、モデルの選択およびルーティング機能が追加されることになる。Stripeによると、OpenRouterは80社以上のプロバイダーが提供する400以上のモデ
OpenAIの元研究員バレット・ゾフ氏が、Geminiの開発を支援するためGoogleに復帰
以前、Thinking Machines LabのCEOであるミリアム・ムララティ氏との意見の相違により、突然同社を退社してOpenAIに加わったバレット・ゾフ氏が、再び転職した。Alphabet傘下のGoogleは、ゾフ氏が研究担当副社長として復帰し、強化学習とポストトレーニングに関する専門知識をGeminiチームにもたらすことを発表した。「回転ドア」式研究者のサイクルゾフ氏のキャリアは、AI人
Recursive Intelligenceが4か月で40億ドルの評価額に基づき3億3500万ドルを調達した経緯
スタートアップ「Ricursive Intelligence」の共同創業者たちは、まるで共同創業者になる運命にあったかのようだった。CEOのアンナ・ゴールディ氏とCTOのアザリア・ミルホセイニ氏は、AIコミュニティでは非常に有名であり、ゴールディ氏はTechCrunchに対し、「ザッカーバーグから、とんでもないオファーが書かれた奇妙なメールを受け取ったAIエンジニアたち」の一人だったと、笑いながら
関連特集おすすめ
コメント (1)
0/500
AppleのAI研究チームは最近、LiTo(Surface Light Field Tokenization)という画期的な3D生成モデルを発表しました。この技術は、たった1枚の2D画像から、リアルな照明効果を備えた完全かつ高精細な3Dオブジェクトを生成することで、3D再構築における核心的な課題に取り組んでいます。

LiToの革新性は、新しい潜在空間と統一された3D表現フレームワークに集約されています:
効率的なエンコーディング:複雑な表面光場データをコンパクトなベクトルセットに圧縮し、オブジェクトの幾何学的形状と光との相互作用を数学的に捉えます。
双方向アーキテクチャ:エンコーダー・デコーダー構造を採用し、エンコーダーが基礎的な幾何学的特徴と外観特徴を抽出します。その後、デコーダーがこのデータを再構築し、鏡面反射やフレネル反射といった高度な視覚効果を正確にレンダリングします。
性能:あらゆる視点における比類なき照明の一貫性
LiToは、数千のオブジェクトを含む包括的な3Dデータセットを用いて学習されました。主な実験結果は以下の通りです:
方向バイアスの排除:LiToはカメラ座標系に厳密に従い、他のモデルで一般的な向きに関する誤差を補正します。
最先端の評価指標:マルチビュー照明の一貫性において、LiToは従来の最先端モデルであるTRELLISを約37%上回っています。
この進歩により、高品質な3Dコンテンツ制作のハードルが大幅に下がります。Vision Proのようなデバイスを含む、将来の拡張現実(AR)および空間コンピューティングプラットフォーム向けに、優れたアセット生成を実現する準備が整っています。
AIモデルルーティングが勢いを増す中、StripeがOpenRouterを買収へ
Stripeは、開発者が単一のインターフェースを通じて数百のモデルにアクセスできるAIモデルルーティングプラットフォーム「OpenRouter」の買収に合意した。この買収により、StripeのAI活用やトークンベースの課金に関する既存の取り組みに、モデルの選択およびルーティング機能が追加されることになる。Stripeによると、OpenRouterは80社以上のプロバイダーが提供する400以上のモデ
OpenAIの元研究員バレット・ゾフ氏が、Geminiの開発を支援するためGoogleに復帰
以前、Thinking Machines LabのCEOであるミリアム・ムララティ氏との意見の相違により、突然同社を退社してOpenAIに加わったバレット・ゾフ氏が、再び転職した。Alphabet傘下のGoogleは、ゾフ氏が研究担当副社長として復帰し、強化学習とポストトレーニングに関する専門知識をGeminiチームにもたらすことを発表した。「回転ドア」式研究者のサイクルゾフ氏のキャリアは、AI人
Recursive Intelligenceが4か月で40億ドルの評価額に基づき3億3500万ドルを調達した経緯
スタートアップ「Ricursive Intelligence」の共同創業者たちは、まるで共同創業者になる運命にあったかのようだった。CEOのアンナ・ゴールディ氏とCTOのアザリア・ミルホセイニ氏は、AIコミュニティでは非常に有名であり、ゴールディ氏はTechCrunchに対し、「ザッカーバーグから、とんでもないオファーが書かれた奇妙なメールを受け取ったAIエンジニアたち」の一人だったと、笑いながら





家






