NVIDIA AIテクノロジーにより、2Dビデオを3Dモデルに素早く変換可能

NVIDIA AIテクノロジーにより、2Dビデオを3Dモデルに素早く変換可能
2023年6月10日、Antarctic Bearは、アメリカのGPUメーカーNvidiaが、2Dビデオを詳細な3Dモデルに素早く変換できる新しい人工知能(AI)モデルNeuralangeloの概要を説明する研究論文を発表したことを知りました。

△AI技術を活用し、動画から3Dモデルのデモ動画を素早く作成可能(ポータル)
最新の研究によると、既存の生成 AI モデルでは、複雑なテクスチャ、均一な色、強い色の変化など、オブジェクトの細部をリアルに捉えることが困難であることがわかりました。しかし、Nvidiaの次世代人工知能技術「Neuralangelo」は、これらの問題を解決できると言われています。この技術は、高忠実度のモデルを提供するだけでなく、2D ビデオを 3D モデルに正確に変換して、素材の質感の微妙なニュアンスを表現することもできます。これにより、3D プリント業界にさらなる可能性がもたらされます。

△Neuralangelo: 高精度神経表面再構成論文(ポータル)
3D プリントツールとしての Nvidia の AI はどのように発展するのでしょうか?

Nvidia は、スマートフォンのカメラを使用して仮想オブジェクトを迅速かつ簡単に作成できるクリエイティブ プロフェッショナルの間での Neuralangelo テクノロジーの潜在的なメリットを特に強調し、アート、仮想現実、ビデオ ゲーム開発、ロボット工学、産業用デジタル ツイン製造における幅広いアプリケーションを紹介しました。

さらに同社は、ミケランジェロのダビデ像の再現やフラットベッドトラックの再構築を通じて、Neuralangelo の新技術の幅広い可能性を実証することに成功しました。この技術は、ドローンで撮影した空中ビデオ映像を使用して公園の3Dモデルを作成するなど、大規模な環境を再構築することもできます。

「Neuralangelo が提供する 3D 再構築機能は、クリエイターにとって大きなメリットとなり、現実世界をデジタル世界で再現するのに役立ちます」と、Nvidia の研究担当シニアディレクターで、この研究論文の共著者でもある Ming-Yu Liu 氏は説明します。「このツールにより、開発者は最終的に、小さな彫像から大きな建物まで、詳細なオブジェクトをビデオ ゲームや産業用デジタル ツインの仮想環境にインポートできるようになります。」

同氏はさらにこう付け加えた。「さらに、Neuralangelo のパフォーマンスと精度は、製造業や建設業がモデルや設計をより迅速かつ正確に作成するのに大いに役立つでしょう。」

Neuralangelo プロジェクトはまだ 3D プリント アプリケーションと統合されていないものの、Nvidia は、この技術が将来的に積層造形の開発方向の 1 つになる可能性が高いと述べています。現在、このプロジェクトのモデルはまだ 3D プリントに利用できません。

その未来は予想よりも早く到来するのでしょうか? Nvidia は Magic3D と呼ばれる AI 3D モデル生成ツールを発表しました。同社によれば、Magic3D は 3D オブジェクトを 40 分で生成し、DreamFusion の 2 倍の速さだという。


AIを使用して2Dビデオを3Dモデルに変換する

Neuralangelo は、オンザフライのニューラル グラフィックス プリミティブ (NGP) と信号距離関数 (SDF) の組み合わせを使用して、高品質のビデオ変換を実現します。 NGP は、マルチ解像度ハッシュエンコーディングを備えたハイブリッド 3D メッシュ構造を提供し、より細かい詳細をキャプチャしながらニューラルドメインの表現力を大幅に向上させます。この方法は 3D プリント業界に非常に適しています。

具体的には、Neuralangelo はまず、オブジェクトまたは環境の 2D ビデオを取得し、さまざまな視点を強調する複数のフレームを選択します。次に、フレームごとにカメラの位置が決定され、予備的な 3D モデルが作成されます。その後、モデルは細かいレンダリングと細部のシャープ化によって改良され、高品質の表面と精度を備えた完成品が生成されます。

高次導関数を計算するための数値勾配の使用は、このアプローチの重要な要素であり、最適化プロセスの安定化を可能にします。さらに、さまざまな詳細レベルで構造を復元するには、段階的な最適化スキームが不可欠であり、これにより包括的かつ正確な 3D モデルの再構築が可能になります。

Nvidia の Neuralangelo プロジェクトは、6 月 18 日から 22 日までカナダのバンクーバーで開催されるコンピューター ビジョンおよびパターン認識 (CVPR) カンファレンスでデモされる予定であると報じられています。このショーケースは、ポーズ推定、3D 再構築、ビデオ生成などのトピックをカバーする約 30 の他のプロジェクトとともに展示されます。

△Nvidia本社公園のビデオでは、Neuralangeloを使用して3Dモデルに素早く変換しています。Antarctic Bearは、将来、AIツールと3Dプリント技術を組み合わせることで、メーカーはより簡単に生産し、高度に複雑な部品を素早く生産し、時間の経過とともに生産プロセスを継続的に最適化できると考えています。したがって、3D プリント技術の柔軟性と迅速な製造能力と、高品質の 3D モデルを迅速に生成する AI の能力を組み合わせると、大きな利点がもたらされます。これは非常に有望な応用分野であり、注目に値します。




NGP、モデル、人工知能

<<:  2024年のオリンピックでは、より人間工学に基づいた3Dプリント自転車が登場する可能性

>>:  30°以下のオーバーハング構造にはサポートは必要ありません。ポリライトはサポートフリーのSLM金属3Dプリント技術を突破しました。

推薦する

USSエセックスは3Dプリンターを搭載した最初の米国艦船です。

はじめに: 2021 年、米国海軍研究所はゼロックスとの提携を発表し、海軍と海兵隊に ElemX 3...

浙江大学は3Dプリントの問題を解決するために精密着色技術を発明した(写真)

この投稿は Taiji Bear によって 2015-6-19 09:31 に最後に編集されました。...

Prusa がオープンソースの樹脂 3D プリンター Prusa SL1 を発売、価格は 1,599 ドル

2018年9月25日、Antarctic Bearは海外メディアから、Josef Prusaが新し...

強力な 3D プリントされた柔軟な機械式爪: 5 kg を簡単に持ち上げます。

通常のデスクトップ 3D プリンターの機能は限られていますが、ユーザーの能力が十分であれば、強力なツ...

「3Dクリエイティブ」ポートレートライブラリがアップグレード、3Dプリントフォトブースの体験ポイントが全国7か所にオープン

時代を先取りし、未知の世界を探求する人々のグループは常に存在します。序文: 立体肖像画は中国および世...

BigRep、RAPID+ TCT 2024で新型VIIO 250産業用FFF 3Dプリンターを発表

この投稿は warrior bear によって 2024-6-26 21:06 に最後に編集されまし...

江蘇ウェラリが2023年作業会議を開催、生産額は1億元を超え、第2期プロジェクトが正式に開始

2023年1月16日、江蘇ウェルリーは2023年仕事会議を開催し、中国共産党第20回全国代表大会の...

英国、金属3Dプリント技術に新たな輸出規制を導入

2024年6月19日、アンタークティックベアは、英国政府が最近、金属3Dプリンター、半導体、量子コ...

脳腫瘍の薬物送達システム用の金属 3D プリント部品

びまん性内在性橋グリオーマは、通常 10 歳未満の子供に発生します。これは死亡率が非常に高い脳腫瘍で...

SINTEF、海運分野での付加製造を推進

過去 3 年間、ノルウェーの研究開発パートナーである SINTEF は、海洋産業をより効率的かつ持続...

8,700万ドルが集まったのも不思議ではありません! BMFのマイクロナノ3Dプリントは肉眼では見えないほど精細です

材料を積み重ねていく製造方法である3Dプリントでは、作る物が小さければ小さいほど、3Dプリントのメリ...

コストを削減し、効率を高めます!ポリライトは深センビクタープレシジョンの効率的な生産の新しいモデルの構築を支援します

出典: ポリライト「当社にとって、BLT-A320設備の導入は、既存の生産方法への貢献であるだけでな...

AVIC Mateは珠海航空ショーでデビューし、金属3Dプリント機器、材料、プロセスにおけるワンストップの革新的な成果を披露しました。

第15回中国国際航空宇宙博覧会は、2024年11月12日から17日まで珠海国際航空ショーセンターで開...