南洋理工大学、Math Magic、インペリアル・カレッジ・ロンドンからなる研究チームは6月13日(金)、3Dモデル生成AI「Sparc3D(Sparse Representation and Construction for High-Resolution 3D Shapes Modeling)」を発表した。現在、Webアプリ「Hitem3D」上で1日5回まで無料で生成できる。コードはGitHubで公開される予定。

Sparc3Dは、従来の3Dモデル生成手法の課題である、VAE(Variational AutoEncoder、変分オートエンコーダ)によるメッシュ圧縮後の潜在拡散サンプリング(Latent Diffusion Sampling)によるディテール損失に対処するため、「Sparcubes」「Sparconv-VAE」という2つの要素を組み合わせた3Dモデル生成技術。

Sparcubes(Sparse Deformable Marching Cubes Representation)は、メッシュのローデータを1024P³から1536P³の高解像度サーフェスに変換する手法。

▲Sparcubes(Sparse Deformable Marching Cubes Representation)の手法概要

Sparconv-VAE(Sparse convolutional networks Variational AutoEncoder)は、スパースな畳み込みニューラルネットワーク(sparse convolutional networks)のみで構築された、一貫性ある変分オートエンコーダ。これにより、潜在拡散(Latent Diffusion)を通じて効率的かつロスの少ない高解像度の3Dモデル再構築を実現するという。

▲Sparconv-VAEの手法概要

■Sparse Representation and Construction for High-Resolution 3D Shapes Modeling(Sparc3D)(プロジェクトページ、英語)
https://lizhihao6.github.io/Sparc3D/

Hitem3Dで1日5回まで無料で生成可能

Sparc3Dの公式Webアプリ「Hitem3Dではアカウント作成後、1日5回まで無料で生成が行える。また、生成モデルの解像度は「1024P³」と「1536P³」の2種類から選択できる。

▲Hitem3Dのフロントページ。画面中央下で解像度の選択が可能。その日の生成可能残数は画面右上に表示

■Hitem3D — Inside-Out Precision(Sparc3Dによる3Dモデル生成が行える公式Webアプリ)
https://hitem3d.ai/

▲Hitem3Dの紹介動画

CGWORLD関連情報

●3Dモデル生成AI「PartCrafter」リリース!  1枚の写真から編集可能な3Dパーツを瞬時に生成

北京大学、バイトダンス、カーネギー・メロン大学からなる研究チームが、パーツ単位で3Dメッシュを生成するAIモデル「PartCrafter: Structured 3D Mesh Generation via Compositional Latent Diffusion Transformers」をオープンソース(MITライセンス)で公開(コードとチェックポイントの公開は7/15を予定)。
https://cgworld.jp/flashnews/01-202506-PartCrafter.html

●NVIDIA、3Dモデル生成AI「PartPacker」GitHubで公開! 1枚の2D画像から意味のあるパーツ分割を施した3Dモデルを生成

NVIDIA(NVIDIA Deep Imagination Research)、北京大学、スタンフォード大学からなる研究チームが3Dモデル生成技術「PartPacker」を発表、GitHubでソースコードを公開した。ライセンスは「NVIDIA Source Code License」で、非商用目的での使用のみに制限されている。
https://cgworld.jp/flashnews/01-202506-NVIDIA-PartPacker.html

●「Tripo」のVastが3Dモデルをパーツごとに分解して生成できる3D生成AIモデル「HoloPart」をオープンソースで公開! 隠れた部分まで生成可能

Vastがオープンソースの3D生成AIモデル「HoloPart」を公開。見えない部分を含む分割(アモーダルセグメンテーション、Amodal Segmentation)のタスクを処理でき、完全な部品として3D形状を生成するのが特徴。
https://cgworld.jp/flashnews/01-202504-Vast-HoloPart.html