MeshGPTはAI駆動型3Dモデルを最適化し、詳細の損失や過剰な三角測量を回避し、精度と効率を向上させます。

MeshGPTはAI駆動型3Dモデルを最適化し、詳細の損失や過剰な三角測量を回避し、精度と効率を向上させます。
この投稿は Bingdunxiong によって 2023-12-5 16:27 に最後に編集されました

2023年12月5日、アンタークティックベアは、ミュンヘン工科大学(TUM)とトリノ工科大学の研究者がアウディと共同で、生成AIを使用した3Dメッシュ生成ソフトウェアであるMeshGPTを開発したことを知りました。これにより、3Dモデルの生成プロセスが大幅に簡素化されます。

△比較すると、AIを使ってチームが生成した3Dモデルは、モデリングの詳細さと明瞭さにおいて優位性がある(右下)
この研究では、デコーダーのみを含むトランスフォーマーを革新的に使用して、より鮮明で一貫性のある三角形メッシュを作成しました。これにより、形状カバレッジが9%大幅に改善され、FIDスコア(コンピューター生成画像の品質を評価するために使用される指標)が30ポイント増加しました。これは、既存の方法と比較して、よりシャープなエッジ、より高いリアリティ、よりコンパクトなデザインを表し、新しい品質基準を確立します。

△この研究の詳細な論文は、「MeshGPT: デコーダートランスフォーマーによる三角形メッシュの生成」というタイトルでこちらでご覧いただけます (ポータル)
MeshGPT は、Transformer モデルから自己回帰的にサンプリングすることで学習した幾何学語彙からトークンを生成し、これらのトークンを三角形メッシュの面にデコードします。 MeshGPT のパフォーマンスは、等値面法によってニューラル フィールドから抽出された密な三角形メッシュとは対照的に、アーティストが作成したメッシュに共通するコンパクトな性質を反映しています。大規模言語モデルの最近の進歩に触発され、研究者たちはシーケンスベースのアプローチを採用し、自己回帰方式で三角形メッシュのシーケンスを生成しました。

△TUMとトリノ工科大学の研究者がAudi AGと共同で実施した研究の結果。最初のステップは、グラフ畳み込みを使用して潜在的な量子化埋め込みの語彙を学習することです。これにより、ローカル メッシュのジオメトリとトポロジに関する埋め込み情報が提供されます。 「量子化埋め込み」という用語は、自然言語処理 (NLP) と機械学習で広く使用されている、単語の埋め込みを離散形式または連続値のベクトルで表現して保存する手法を指します。

△ 生成モデルは、さまざまな言語でテキストを生成する優れた能力を示しています。これらの埋め込みはデコーダーによってソートおよびデコードされ、最終的に三角形として提示され、元のグリッドを効果的に復元できることが保証されます。次に、学習した語彙を使用してトランスフォーマー モデルをトレーニングし、次の埋め込みのインデックスを予測することで、モデルがさらに最適化されます。トレーニングを通じて、モデルは自己回帰サンプリングを実行して新しい三角形メッシュを生成し、鋭いエッジと効率的な三角形分割パターンを備えたコンパクトなメッシュを直接生成できるため、手動メッシュのパフォーマンスに近くなります。


さらにチームは、MeshGPT は最先端のメッシュ生成方法に比べて大幅な改善を示し、形状カバレッジが 9% 増加し、カテゴリ全体で FID スコアが 30 ポイント向上したと述べています。既存の方法と比較して、MeshGPT は、詳細が欠落してメッシュが過度に三角形化されることを回避できると同時に、過度に単純化された形状が出力されることも回避できます。さらに、この技術は、単一のオブジェクトの 3D モデルの生成に適用できるだけでなく、複数のオブジェクトのモデルを含むシーン全体に必要な 3D リソースの生成にも拡張できます。 。





MeshGPT、モデル

<<:  浙江大学チーム「BDM」:光硬化生物3Dプリントチュートリアル:高精度ハイドロゲルスキャフォールドの製造

>>:  さらに2台の「超メートル級」金属加工機を追加し、Jingye Additiveの100ユニット3Dプリントスーパー工場は着実に生産を拡大しました。

推薦する

UTEPは月と火星の土壌からの原材料を使用して新しい3Dプリントプラスチックバッテリー技術を開発

2023年3月26日、アンタークティックベアは、テキサス大学エルパソ校(UTEP)の研究者が新しい...

ファルスーンとオートデスクはアジア太平洋地域での協力を深め、3Dプリントの産業化を共同で推進

Antarctic Bearによると、最近、大手産業用3Dプリント企業であるFarsoonが、Au...

AVIC MT160 歯科用金属 3D プリンターが発売

2023年2月23日、第28回華南国際歯科博覧会で、AVIC MateのMT160歯科専用金属3D...

わずか129元、最新の3Dプリントマイクロランドスケープ水槽がAdditive Cloud 3D Mallで入手可能

近年、都市化や工業化が進み、私たちは鉄とコンクリートで構築された空間で暮らすようになり、本来は自然の...

上海交通大学凝固科学技術研究所:レーザー積層造形に関する現場研究が大きく進歩

上海交通大学材料科学工学部の董安平研究員、熊良華准教授、杜大凡准教授、何林助教授の研究グループは、北...

大型、大容量、低コストのStratasysは、自動車部品メーカーの開発および納品能力の向上を支援します。

出典: ストラタシスSuperStile はイタリアに本社を置く自動車の設計・製造会社であり、大手自...

ORCの研究者が新しい光ファイバーMMAM 3Dプリント技術をテスト

この投稿は、Little Soft Bear によって 2017-9-6 11:31 に最後に編集さ...

研究者は3Dプリントを使ってHIV予防と避妊のためのデバイスを作成

出典: Mohou.com研究者たちは長年にわたり、HIVやその他の病気の性感染を防ぎ、望まない妊娠...

2021年の世界インテリジェント製造会議には、複数の積層造形企業が参加予定

出典:南京日報2021年世界智能製造業大会は12月8日から10日まで南京で開催される。大会前夜、記者...

「創祥杯」付加製造(3Dプリント)機器オペレーター競技会が正式に開始

2021年5月30日、2021年全国産業職業技能コンテスト-全国電子情報サービス産業職業技能コンテス...

英国はチタン粉末の3Dプリントコストを大幅に削減する新技術に投資

アンタークティック・ベアは2017年1月11日、英国のイノベーション機関イノベートUKが、 3Dプリ...

彼は30年以上にわたり、ロケット、軍用機、衛星に金属3Dプリントを使用する方法を研究してきました。

出典:北京日報火は空と大地を照らし、赤い星が紫色の煙と混ざり合います。偉大な詩人、李白の著作には、数...

3DプリントロボットVR大集合! 10月17日、バードネストで世界クラスのDIYパーティーが開催されます

2018年10月15日、南極熊は北京時間から、「共有と統合」セクションの活動の一つである「Make...

面白い! 3Dプリントフォントと物理現象の素晴らしい融合

すべての画像はトーマス・ヴィルツ提供。デュッセルドルフを拠点とするデザイナー、トーマス・ヴィルツは修...

人間の髪の毛よりも細い微細構造を 3D プリントしました。スイスのマイクロナノ3Dプリンターが中国市場に参入

マイクロナノスケールの3Dプリンターを見たことがありますか?髪の毛よりも細く、肉眼では判別できないほ...