Metaによると、SAM 3DはSegment Anything Collectionの最新作であり、単一の2D画像の3D理解を目的としています。 SAM 3Dは2つのモデルで構成されています。SAM 3Dオブジェクトはオブジェクトやシーンの3D再構築を行い、家具、建築、日常のオブジェクトを静止画像から回転可能かつ詳細に表示可能な3Dモデルに復元できます。 SAM 3D Bodyは、1枚の写真から人体の骨格姿勢や体型を推定し、閉鎖、極端なポーズ、複雑な遠近法下でも安定したパフォーマンスを維持し、3D姿勢と形状推定を担当します。 Metaによると、両者とも公開ベンチマークで現行レベルを満たすか更新しており、SAM 3D Objectsは複数の3D再構築タスクで既存の手法を大幅に上回っています。
公式プレスリリースには、SAM 3DがSegment Anything Playgroundで一般公開のオンライン体験を提供し、ユーザーが画像をアップロードして3D再現を見ることができると述べています。 研究者や開発者はモデルのチェックポイントや推論コードを入手し、Metaの新しい3Dベンチマークデータセットを使って評価できます。 具体的な利用規約およびライセンスは、AIブログおよびモデルリポジトリにおけるMetaの説明に従います。 全体として、ユーザー提供のコピーはSAM 3Dの位置決めと2つのサブモデルのコア機能を正確に要約しており、誇張や歪みはほとんどありません。
FAQ
Q: このセクション「SAM 3Dの紹介、SAMコレクションの最新メンバー...」 本当なの?
A: それは本当です。 同じ内容はMeta AIの公式Threads、X、LinkedInなどのアカウントにも掲載され、Meta NewsroomのSAM 3 / SAM 3Dプレスリリースで確認されました。これはMetaの公式リリースです。
Q: SAM 3Dにはどんなモデルが含まれていますか?
A: SAM 3Dは2つのモデルで構成されています。対象物やシーン全体の3D再構築用にSAM 3D Objects、そして人体の姿勢や形状の3D推定用にSAM 3D Bodyで、どちらも単一の静止画像から可視化された3D結果を生成できます。
Q: SAM 3Dは以前のSegment Anythingとどう違うのですか?
A: 初期のSAMは主に2Dのセグメント化とトラッキングを中心に「画像からオブジェクトピクセルをセグメント化」することに重点を置いていました。 SAM 3Dはこの基盤でさらに3Dジオメトリの再構成を完成させ、モデルは物体を「円を描く」だけでなく、実空間での形状や姿勢を推論できるようにしています。
Q: SAM 3DオブジェクトやSAM 3Dボディはどのようなシナリオに適していますか?
A: SAM 3D Objectsはオブジェクトや屋内シーンの再構築により適しており、AR/VRアセット生成、仮想配置、ロボットの掴みなどに利用できます。 SAM 3D Bodyはキャラクターのポーズや体型をターゲットにし、スポーツ分析、モーションキャプチャ、アバタードライビング、医療関連研究にも利用できます。
Q: SAM 3Dはオープンソースですか? 普通の開発者にはどう使えばいいですか?
A: Metaはプレスリリースで、SAM 3Dがモデルのチェックポイントと推論コード、そして新しい3Dベンチマークデータセットを提供すると述べました。 ユーザーは現在、Segment Anything Playgroundを通じて直接オンラインで体験でき、開発者はMeta AIブログや関連モデルリポジトリに従って使用説明やライセンス条件と統合できます。
