アドビ、わずか 5 秒で 2D から 3D への変換を実現する新しい AI 大型モデルをデモ

書き直す必要があるのは次のとおりです: 仮想現実ジャイロ

最近、Adobe Research はオーストラリア国立大学の研究者と協力して、LRM と呼ばれる新しい AI 大型モデルを開発しました。このモデルは、わずか 5 秒で 2D 画像を高品質の 3D モデルに変換します

カテゴリ固有の方法で小規模なデータセットをトレーニングするこれまでの方法とは異なり、LRM は 5 億を超えるパラメーターを備えた拡張性の高い Transformer ベースのニューラル ネットワーク アーキテクチャを採用しています。このモデルは、Objaverse および MVImgNet データセットからの約 100 万の 3D オブジェクトに対してエンドツーエンドの方法でトレーニングされ、入力画像から直接神経放射場 (NeRF) を予測します。

出典: yiconghong.me/LRM/

論文「LRM: 単一画像から 3D への大規模再構成モデ​​ル」では、「大容量モデルと大規模なトレーニング データの組み合わせにより、モデルの汎用性が高く、さまざまなテスト入力 (実世界モデルの画像をキャプチャして生成し、高品質の 3D 再構築を生成します。"

実験では、LRM が現実世界の画像と、DALL-E や Stable Diffusio などの AI 生成モデルによって作成された画像に基づいて高忠実度 3D モデルを再構築できることが示されています。このシステムは、詳細な幾何学的形状を生成し、次のような複雑なテクスチャを保存できます。木目として。ただし、LRM には、オクルージョンされた領域でのテクスチャ生成において依然として一定の制限があります。

アプリケーションの観点から見ると、LRM には幅広い展望があります。工業デザイン、ゲーム、エンターテインメントなどさまざまなシーンに応用できます。さらに、AR/VR の分野では、LRM は詳細な 3D 環境をリアルタイムで生成することでユーザー エクスペリエンスを向上させることもできます。

元の意味を変更せずに、中国語に書き直す必要がある内容は次のとおりです: 出典:venturebeat

以上がアドビ、わずか 5 秒で 2D から 3D への変換を実現する新しい AI 大型モデルをデモの詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。