Nvidia の Neuralangelo AI が iPhone のビデオを 3D 世界に変える

iPhone のムービーがゲームの世界になります。

AI の野生の世界にこれ以上驚くことはないと思われたとき、Nvidia は 2D ビデオ クリップを 3D 構造やシーンに変換できる新しい Neuralangelo AI を発表しました。 文字通り、携帯電話やカメラで撮影したビデオクリップから、建物、彫刻、実物の詳細なレプリカを生成します。

Neuralangelo の背後にあるアイデアは、現代のミケランジェロ (gddit) のように、ビデオから本物のような 3D シーンを「彫刻」し、これらの 3D シーンを他のソフトウェアにインポートできるというものです。 Neuralangelo アセットは、デジタル アーティストが光源を定義するのを支援するなど、ビデオ ゲーム、建築 Viz、Web 3 プロジェクトなど、実際には何でも使用できるように編集できます。

これは、ゲーム キャラクターと会話するための Nvidia の AI と、HiFA の研究者が開発中の新しいテキストから 3D への生成 AI のおかげで実現しました。 Neuralangelo のデモ (下) で、Nvidia は、自社の AI がミケランジェロのダビデ像などの複雑なオブジェクトや、平台トラックなどの日常的なオブジェクトをどのように再現できるかを示しました。

Nvidia は、Neuralangelo の仕組みの詳細な説明をリリースし、ガラスや滑らかな大理石などのビデオ内の複雑な詳細を 3D に変換する方法を共有しました。 売り文句は、この AI がクリエイティブのワークフローをスピードアップし、3D 仮想世界と資産を雇用に代わるのではなく新しい産業に解き放つのに役立つということです。

「Neuralangeloが提供する3D再構成機能はクリエイターにとって大きなメリットとなり、デジタル世界で現実世界を再現するのに役立ちます」と研究担当シニアディレクターで論文の共著者であるMing​​-Yu Liu氏はプレス声明で述べた。 「このツールにより、開発者は最終的に、小さな彫像であれ巨大な建物であれ、詳細なオブジェクトをビデオ ゲームや産業用デジタル ツインの仮想環境にインポートできるようになります。」

最高の AI ジェネレーターとは、仕事を置き換えるのではなく、ワークフローに適合し、ワークフローを強化できるものです。 たとえば、Adobe Firefly のような新しい生成 AI モデルは、コンセプト アートのワークフローに適合し、作業を行うアーティストに取って代わるのではなく、プロセスを高速化できます。 Adobe Firefly の使用方法に関する Ken Coleman のチュートリアル、または毎日 AI を使用している Final Frontier の Chris Colman へのインタビューをお読みください。

今月 5 つの記事をお読みいただきありがとうございます* 今すぐ登録すると無制限にアクセスできます

最初の 1 か月間はわずか £1 / $1 / €1 でお楽しみいただけます

*購読しなくても、月に 5 つの無料記事をお読みいただけます

今すぐ登録して無制限にアクセスしましょう

最初の 1 か月間だけお試しください1ポンド / 1ドル / 1ユーロ

編集者が選んだ毎日のデザインニュース、レビュー、ハウツーなど。

Ian Dean は、Creativebloq のアート & デザイン編集者であり、多くの主要雑誌の元編集者です。 これらのタイトルには、ImagineFX、3D World、主要なビデオ ゲーム タイトルの Official PlayStation Magazine が含まれます。 初期のキャリアでは、アンカットや SFX などの音楽雑誌や映画雑誌に執筆していました。 イアンは Xbox マガジン X360 を創刊し、PlayStation World を編集しました。 Creative Bloq では、イアンは自分の経験を組み合わせて、AI、デジタル アート、ビデオ ゲームのアートとテクノロジーなどに関する最新ニュースを Creative Bloq に提供しています。暇なときは、Procreate、ArtRage、Rebelle でいたずら書きをしながら、遊ぶ時間を見つけています。 XboxとPS5。 彼は熱心な Cricut ユーザーおよびレーザー カッターのファンでもあり、現在は Glowforge と xTools M1 を使用して制作しています。