2D から 3D へ瞬時に: この AI はビデオゲームをさらにリアルにします

実質的により簡単に創作するための道具を彼に与えながら、あなたの即興演奏に自由を与えてください。これは Nvidia Research の夢であり、米国のメーカーである Nvidia Research は今週ニューオーリンズ (米国) で開催されるコンピュータ ビジョンとパターン認識に関する CVPR カンファレンスで最新のイノベーションを発表します。

この機会に、Nvidia の研究者は、写真の 3D オブジェクトへの変換に関する人工知能の進歩を特に発表しました。これまで、このブランドは、レンダリングするかどうかにかかわらず、AI の優れた能力を示すことに慣れてきました。さらにフォトリアルなビデオゲームあるいはそれに対してさえ単純な画像を 3D レンダリングに変換する。

必要に応じて変更できる要素

現在、Nvidia は Nvidia 3D MoMa をバッグに入れています。これは、オブジェクトをグラフィックス エンジンに迅速にインポートして、コンピューター建築の作成、芸術的デザイン、ゲーム開発、その他多くの用途に使用するための AI ベースの手法です。

これを実現するために、Nvidia が開発した AI は、リバース レンダリング テクノロジー (AI によって組み立てられた一連の写真からオブジェクトに形を与えることができます) と次の能力を使用して、2D 画像から 3D オブジェクトを作成できます。 Nvidia GPU。要素の作成には 1 時間もかかりません。要素の作成は、作成のニーズに合わせて最適化するために、グラフィックス エンジンやその他のプロフェッショナル ツール (3D モデラー、フィルム レンダリングなど) に使用および統合できます。

このような偉業を達成するには、テクスチャ素材の三角形メッシュが必要です。「3D ツールで使用される共通言語」。つまり、2D 写真から 3D レンダリングに変換されるオブジェクトは、何千もの小さな三角形が集まって構成されています (この技術は何十年も前から存在しており、より正確に言うと、三角形はますます小さくなっています)。エンジンでデジタル化されると、オブジェクトは、デザイナーやアーティストによって、サイズ、テクスチャ、色、または希望の照明に応じて自由かつ簡単に変更でき、ゲーム内の超リアルな装飾要素として利用できるようになります。

GPU と AI のパワー

これは、Nvidia Research の AI によって達成される作業の強みであり、写真に写った実際のオブジェクトを現実的かつ仮想化します。 Nvidiaは説得したいと考えている以前にフォトグラメトリを使用したことがある方オブジェクトをモデル化して自分の作品に統合し、時間とエネルギーを節約するだけでなく、希望に応じてカスタマイズしたり変更したりできる簡単なツールでもあります。

ユーザーはその後、個別に変更できる非常に小さな三角形で構成される 3D オブジェクトを復元しますが、ピクセルに渡されたオリジナルのマテリアル (3D に重ねられた 2D テクスチャ) や AI によって設計され、将来のシーンに応じて編集可能な照明も復元できます。

Nvidia は、楽器の作成からテクノロジーの例を示しました。テクスチャを変更したり、グラフィック エンジンからシーンのライトを操作したりすることがいかに簡単であるかがわかります。楽器ごとに、さまざまな角度から約 100 枚の画像が収集され、アニメーション化できる 3D 表現に再構成されました。デモでは、Nvidia は明らかに自社のシミュレーション プラットフォームを使用しました。Nvidia オムニバースそれらを変更するには 3D を使用します。

Nvidia 3D MoMa のテクノロジを使用して数分で実物よりも現実的なモデリングを行うことで、クリエイティブな人は誰でも、現実のサウンド オブジェクトを仮想サウンド オブジェクトに統合して自分の作品を作成できるようになります。ビデオ ゲームがますます現実的になっていることに気づきましたが、これはさらに良くなるでしょう…