あらゆる写真を詳細でリアルな3Dアセットに即座に変換 — ブラウザで完結。Metaのオープンソース SAM 3D モデルを基盤に、当プラットフォームは卓越したスピードで精密なオブジェクトと人体の再構築を実現します。
セットアップ不要。GPU不要。アップロードするだけで3Dに。
✓ オブジェクトと人体に対応 | ✓ 高速推論 | ✓ 標準3D形式でエクスポート

SAM 3Dは、実世界の複雑さに対応するために設計された2つの専門アーキテクチャを導入します。合成データセットの限界を克服し、新しい強力なデータエンジンを活用することで、オクルージョン、照明変化、複雑なジオメトリを理解します。
1枚の画像から詳細な3D形状、テクスチャ、レイアウトを再構築します。孤立したオブジェクトに限定されていた従来の手法とは異なり、SAM 3D Objectsは雑然とした実世界環境で優れた性能を発揮します。写真内の任意のオブジェクトを選択し、ポーズを考慮した3Dメッシュを即座に生成できます。ECサイトの「ライブプレビュー」やインタラクティブな3Dシーン編集に最適です。
特殊なポーズや部分的なオクルージョンなど、困難な条件下でも正確な3Dポーズと体形を推定します。新しいMeta Momentum Human Rig(MHR)技術に基づき、骨格構造と軟部組織形状を分離し、VR、ゲーム、モーション解析に適した解釈可能でアニメーション可能な3Dモデルを提供します。
画期的な「Human-in-the-Loop」データエンジンにより、約100万枚の実世界画像にアノテーションを付与し、300万以上の検証済みメッシュを生成しました。このアプローチは「Sim-to-Real」ギャップを埋め、合成データのみで訓練されたモデルでは対応できない多様な実世界シナリオへの適応を可能にします。
従来のフォトグラメトリーや純粋な合成学習の限界を克服。SAM 3Dは、3D再構築にセマンティック理解をもたらします。

直感的な体験センターでSAM 3Dの性能を体験するか、Pythonワークフローに直接統合してください。
標準的なRGB画像であれば何でもOK。スマートフォンの写真、動画のスクリーンショット、AI生成画像など、どれでも使用できます。
再構築したいオブジェクトや人物をクリックします。SAM 3Dは即座にセグメンテーションマスクを生成し、選択を確認できます。
モデルが3Dジオメトリ、テクスチャ、ポーズを推論し、効率的な推論パイプラインを通じて数秒で高品質なメッシュを生成します。
.OBJ、.GLBなどの標準形式でアセットをダウンロードするか、人体向けの新しいMHR形式を使用できます。Blender、Unity、Unreal Engineですぐに使用可能です。
SAM 3Dを3D再構築の新基準たらしめる技術的能力をご覧ください。
多様なコンセプトを含む大規模事前学習により、カテゴリ制限なく任意のオブジェクトを再構築可能です。
骨格構造と軟部組織を分離する新しいオープンソースメッシュ形式。優れたアニメーション効果を実現します。
遮蔽されたオブジェクトの背面について、妥当なジオメトリを推論する高度な推論ロジックを搭載。
100万枚以上の実世界画像と視覚的対応を持つ、新しいSAM 3D Artist Objectsデータセットで学習。
再構築されたオブジェクトのテクスチャとジオメトリが、様々な視点から見ても一貫性を保ちます。
完全オープンソースのコードとモデルウェイト。商用利用やコミュニティイノベーションをサポートします。
SAM 3Dの機能と使用方法に関するよくある質問への回答です(公開情報に基づく)。本プロジェクトは独立運営であり、Metaとは提携していません。