このツールを使いましたか?評価してください
SAM 3D は sam3d.org で公開されているブラウザ完結型の画像から3Dへの変換サービスです。ごく普通の写真を1枚アップロードし、その中の物体か人物を指定すると、数秒後にテクスチャの付いた三次元メッシュが返ってきて、一般的な3Dソフトでそのまま開けます。ターンテーブルも、複数方向からの撮影セットも、手間のかかるフォトグラメトリのパイプラインも要りません。入力は写真1枚だけです。
まず整理しておきたいのが帰属の話です。名前が紛らわしいためです。このサイトはメタの持ち物ではありません。サイト自身のよくある質問の欄に、本プロジェクトは独立しておりメタとは提携関係にないという断り書きが明示されています。実態はこうです。ある独立事業者が、メタが公開したオープンソースの SAM 3D モデルの重みをホストし、自前のウェブ画面、課金の仕組み、オンラインビューアを添えて商用提供しているサービスです。トップページの言い回しも率直で、メタのオープンソース SAM 3D モデルを土台に、どんな写真でも3Dアセットに変える、環境構築もGPUも不要だと述べています。この一文がこのサービスの価値をそのまま言い当てています。知能は上流の研究に由来し、売られているのはそこへ手軽に触れる権利です。
この二層構造を分けて捉える視点は、実際に使ううえでのほぼすべての判断に効いてきます。復元品質、失敗の出方、モデル側のライセンス条件は上流のモデルに遡る話であり、価格、クレジットの数え方、アップロード上限、データの保存、サポートはすべてこの運営者が決めることです。評価するときも層を分けてください。メッシュの出来を決めるのはモデルで、いくら払うのか、預けた写真がどう扱われるのかを決めるのは運営者です。
性質の異なる2つの復元系統。 SAM 3D Objects は場面を理解したうえでの物体復元を担い、背景が雑然としていても写真の中の任意の物体を選んで、姿勢情報を持つメッシュを生成します。SAM 3D Body は人物専用の別系統で、1枚の写真から人体の姿勢と体型を復元します。入口が分かれているのは、そもそも別種の問題を解いているからです。片方は任意の物体形状を予測し、もう片方はパラメータ化された人体表現を当てはめます。
マスクを手描きしないプロンプト式の選択。 対象の指定はテキストでの説明、クリック、矩形選択の3通りに対応しています。「木製のスツール」と入力するのも正当な選び方ですし、一度クリックするのも同じです。この点は、対話的で語彙に縛られないセグメンテーションを核とする Segment Anything 系の能力をそのまま受け継いでいます。
隠れた面と背面はモデルが補います。 写真1枚には物体の裏側の情報が一切含まれないため、モデルは空洞の殻や平板ではなく、もっともらしい裏面を作り出します。結果として、どの角度から見ても成立する閉じたアセットになります。ただしこれは計測ではなく創作だという点は明確に意識してください。単一画像からの復元を選んだ時点で受け入れる代償です。
骨格と軟部組織を切り分けた人体リグ。 人体系統は Meta Momentum Human Rig を土台にしており、この表現は骨格構造と軟部組織の形状を分離可能な要素として保持します。結果物にアニメーションを付ける立場からすると、区別のない頂点の塊よりはるかに有用です。姿勢と体型を別々に調整できるからです。
エンジンにそのまま入る標準的な書き出し形式。 物体の書き出しは、ゲームやウェブ向けの GLB、技術的な工程向けの PLY 点群、そして全形式を含む ZIP 一括の3通りです。書き出したファイルは Unity、アンリアル、ブレンダーなど標準的な3Dソフトですぐ使えると案内されているため、下流が点群データを明示的に求めない限り GLB が既定の選択になります。
ダウンロード前にブラウザで確認できる。 生成されたメッシュはページ内の対話的なビューアで回転させ、拡大し、角度を変えて調べられます。これは聞こえる以上に重要です。単一画像復元の失敗は元の撮影角度からは見えず、斜め後ろに回した途端に露呈するため、落とす前に確かめる習慣が実際に多くの手戻りを防ぎます。
付随する形式ビューア。 生成機能とは別に、GLB、PLY、OBJ、FBX、GLTF、STL、DAE といった一般的な3D交換ファイル向けのオンラインビューアも用意されています。主力ではなく周辺の道具ですが、重いソフトを立ち上げずに中身を確かめたいときには便利です。
EC の商品ビジュアル。 小規模な販売者にとってはカタログ写真が唯一の素材であることが多く、品番ごとに3Dスキャンを外注する費用は現実的ではありません。手元の写真から回せるモデルを起こせば、部屋に置いてみる形の配置や360度の商品回転表示が作れます。ただし成果物は寸法の正確な複製ではなく見せるための素材として扱ってください。見た目が合う段階は、測って合う段階よりずっと先に来ます。
ゲームや試作の素早い仮置き。 レベル設計の段階では、シルエットさえ合っていればよい椅子や木箱、キックボード、車止めが常に必要で、本番のアートはまだ制作中です。参考写真から GLB を作ってエンジンに置けば、その枠を数分で埋められます。この種の仮素材は後で差し替わることが多いため、生成の速さのほうがトポロジの質より値打ちがあります。
キャラクターの参考と土台メッシュ。 人体系統は全身の参考写真を姿勢付きのメッシュに変えるため、キャラクターアーティストは比率の骨組みとして使えます。完成キャラクターではなく彫り込み前の大まかな段階の代替ですが、比率がおおむね合った人型から始めるほうが、球体から始めるよりましです。
AR・VR の場面づくり。 没入型の場面は常に小道具が足りず、GLB は多くの WebXR やモバイル AR の工程で第一級の市民です。再現したい実空間の物をひとつずつ撮って復元すれば、汎用素材集の匂いではなく、その場所ならではの具体性を持った一式になります。
教育・記録保存・研究の可視化。 博物館や教員、現地調査の研究者は、もう一度スキャンできない標本や遺物、機材の写真だけを持っていることがよくあります。保存された写真から起こした粗い三次元モデルでも、対話的な教材や空間についての議論を支えるには十分です。ただし形状が近似であることは受け手に明確に伝えてください。
設備を用意せずに試す計算機視覚の実験。 自前構築するかを決める前に、自分の画像でモデルの挙動を見たい技術者は、代表的な画像を数枚通してみれば済みます。同じオープンな重みを自前で動かすには Linux 64ビット環境と VRAM 32GB 以上の NVIDIA GPU が必要だと文書化されているため、まずホスト型で試すのが、ハードを買う価値があるかを最も安く確かめる方法です。
対象に合った系統を選ぶ。 静物、家具、商品、場面の小道具は Objects の入口へ、人物写真は Body の入口へ送ります。人を物体系統に入れると、たいていは人体モデルが持つべきリグ構造をまったく欠いた、硬い彫像のようなメッシュになります。
モデルが読める入力を用意する。 アップロードは JPEG、PNG、WebP に対応し、1ファイル 10MB までです。対象が遮られておらず、光が均一で、画面内で十分大きい写真を選んでください。裏面は観測ではなく推論で埋まるため、二つの面が同時に見える四分の三の角度は、真正面から平らに撮った写真よりはるかに多くの手がかりを与えます。
対象を切り出す。 物体の工程は4段階の繰り返しです。画像をアップロードし、対象を選び、3Dモデルを生成し、ダウンロードします。選択の段では言葉で説明するかクリックするか矩形で囲むかして対象を指し示し、返ってきたマスクが本当の輪郭に沿っているか確かめます。マスクが背景にはみ出したり隣の物を飲み込んだりすると、その誤差はそのまま形状に伝わるので、後から直すより、ここでやり直すほうが得です。
生成したら見慣れない角度から検める。 復元が終わったらすぐビューアで一周させてください。カメラが見ていない面、取っ手や脚のような細長い構造、元の写真で隠れていた領域を重点的に見ます。単一画像復元の誤りはこの三箇所に集中します。
行き先に合わせて書き出す。 ゲームエンジン、リアルタイムレンダラ、ウェブビューアなら GLB を、下流の技術工程が点群データを求めるなら PLY を、選択肢を残したいなら ZIP 一括を選びます。人体復元の実際の書き出し先は GLB です。
本番投入の前に整える。 ブレンダーなど使い慣れた3Dソフトに読み込み、用途に応じてリトポロジ、UV 作業、ポリゴン削減の時間をあらかじめ見込んでおきます。ダウンロードしたファイルは完成した納品物ではなく、かなり良い出発点として扱うのが妥当です。
見映えのためではなく復元のために撮る。 自分でカメラを扱えるなら、四分の三の角度で対象全体を収め、背景は対象と明確に対比させます。劇的な照明より均一に回った光のほうが向いています。強い影は形状として解釈され、テクスチャに焼き込まれてしまいます。
マスクの問題はマスクの段階で片づける。 期待外れのメッシュは、ほぼ例外なくわずかにずれた選択範囲に端を発します。もっと具体的な言い方で指示し直すか、クリックを一つ足すか、枠を絞ってください。マスクに費やした30秒が、無駄になる生成1回を確実に節約します。
場面全体より個別の対象を復元する。 境界のはっきりした単体に切り出して入れるほうが、密な構図をまるごと投げ入れてモデルが解いてくれるのを期待するより、たいてい良い結果になります。場面が必要なら複数の物体を別々に復元し、3Dソフト側で組み立ててください。配置は完全に手中に残ります。
節約すべきは金額だけでなく生成回数。 クレジットとセグメンテーション要求は別々に数えられるため、候補となる選択範囲をいくつか切り出してみて、最も良いものだけ生成する習慣が枠を効率よく使います。切り出しが安い工程で、生成が高い工程です。
尺度は手作業で合わせる。 単一画像からの復元には絶対的な大きさの基準がありません。読み込んだら、実寸のわかる物体をひとつ決めて大きさを固定し、その周りに他を組み立ててください。
メッシュを測定器の代わりにしない。 寸法が結果を左右する仕事、つまり加工、組み付け、医療や安全に関わる場面では、本物の測定器具を使ってください。これらのモデルは見た目としてもっともらしいだけで、数値として正しいこととは別です。
商用公開の前に権利の連鎖を確かめる。 権利は二層に分かれます。サービスの出力を使う権利と、元の写真に写っている内容についての権利です。上流モデルの寛容なライセンスは、他人の製品意匠や美術作品、肖像までまとめて与えてはくれません。
インディーゲーム開発者とテクニカルアーティスト:モデリング工程が供給できる速度を超えて小道具や仮組み形状が必要で、後からメッシュを整える手間を許容できる方。
EC・商品マーケティングのチーム:平面の商品写真を大量に抱えており、品番ごとに3D撮影を発注せずに回せるインタラクティブな展示を作りたいチーム。
AR/VR・WebXR の制作者:没入型の場面を埋める GLB の小道具が必要で、面単位の作り込みより回転の速さを重んじる方。
3D のジェネラリストと趣味の利用者:いまの単一画像復元に何ができて何ができないのかを見極めたく、そのためにワークステーションを組むより少額の購読を選びたい方。
計算機視覚の技術者と研究者:オープンな重みを自前構築するか決める前に、自分の画像で SAM 3D 系を評価したい方。
教育者とコンテンツ制作者:手元にある画像から、授業や解説、動画に使える対話的な三次元の図版を作りたい方。
キャラクターアーティスト:参考写真から比率の妥当な人体の土台メッシュを得て、完成キャラクターではなく彫り始めの出発点にしたい方。
試作担当者とデザイナー:構想や配置の段階で物体の空間的な代役が必要で、近似で十分な方。
ウェブブラウザそのものが製品です。 サービスはブラウザ上で動き、計算はサーバ側で処理されます。デスクトップ版アプリやモバイルアプリ、ブラウザ拡張は案内されていませんが、これは意図した設計です。ホスト型サービスの意義は、重い計算を手元の機械から追い出すことにあるからです。
標準的な3Dソフトへつながる成果物。 書き出したファイルは Unity、アンリアル、ブレンダーなど標準的な3Dソフトですぐ使えると案内されています。とりわけ GLB は、エンジン、ウェブビューア、現代的な制作ソフトを通じて対応の幅が最も広い形式です。
同じサイトに置かれた形式ビューア。 GLB、PLY、OBJ、FBX、GLTF、STL、DAE のオンラインビューアがあり、重いソフトを立ち上げずに素早く確認できます。
自前構築というもう一つの道。 土台のモデルが公開配布されているため、自分で動かすのは現実的な選択肢です。同じオープンな重みを自前で動かすには Linux 64ビット環境と VRAM 32GB 以上の NVIDIA GPU が必要だと文書化されています。このハード要件こそ、ホスト型の窓口が存在する理由を最もはっきり説明しています。
公開された API プランは確認できません。 サイトはプランの中で開発者向けの公開インターフェースや SDK を案内していません。プログラムからの一括復元が必要なチームは、自前構築か、これらのモデルをエンドポイントとして開放している推論プラットフォームを検討すべきです。(要確認)
利用は購読制で、Basic、Pro、Max の3段階が公開されており、年払いは月払いに対して半額と表示されています。3段階の違いは機能ではなく処理量です。機能一覧は3段階とも同じで、上に行くほど増えるのは月にどれだけ処理できるかです。各段階は2つの予算を別々に数えます。月ごとの生成クレジットの枠と、それとは別の月ごとの画像セグメンテーション要求の枠です。購読前にこの二重計量の仕組みを理解しておく価値があります。候補となる選択範囲を何度も探る進め方はセグメンテーション枠を早く食い潰す一方で生成クレジットにはほとんど触れず、一括変換の進め方はちょうどその逆になるからです。公開された各段階にはクレジット単価も示されており、段階が上がるほど下がる、よくある数量割引の形をしています。
有料段階は、透かしの除去、優先的な処理速度、商用利用の権利をプラン単位の特典として案内しています。透かしの除去が有料項目であることは、未課金や試用の出力には透かしが残ることを意味しており、この分野では通例の作りです。サイトの料金ページには、詳細な無料枠、返金方針、法人契約の窓口は公開されておらず、購読型サービスの価格は時間とともに変わります。契約前には、現在の料率、1回の生成が実際に消費するクレジット数、商用条項の正確な文言を料金ページで直接確かめてください。仕事が商用権利に依存する場合はなおさらです。(要確認)
単一画像からの復元が目的なら選択肢はいくつもあり、違いは主に誰が運営しているかにあります。最も直接的な代替は上流に行くことです。SAM 3D の重みはメタが公開配布しているので、自分で動かせば中間の層がまるごと消えます。その代わり相応のGPUを用意する必要があります。メタ自身もこれらのモデルを試せるオンラインの場を運営しているため、購読せずに研究成果だけ見たいのであれば、まずそちらが目的地になります。
このモデル系統の外に出ると、より広い画像から3Dおよびテキストから3Dの領域には、ゲームで使える素材を掲げた専門の3D生成製品があり、この系統を含む多数のオープンモデルを従量課金の API として開放する汎用の推論基盤もあります。後者は席数課金の購読より自動化された一括処理に向いています。そして精度が本当の要件であるなら、正直な代替は別の生成器ではありません。きちんと多方向から撮影する古典的なフォトグラメトリや実機の3Dスキャナは、単一画像の手法では届かない、数値として信頼できる形状を今なお生み出します。要件で選んでください。速さと手軽さはホスト型の生成を、忠実さと寸法の信頼はきちんとした計測を指し示します。
解像度と細部には上限があります。 上流のモデル文書は、出力解像度が中程度であるため細部が制限されること、そして物体モデルが接触や貫入といった物理的な相互作用を推論できないことを率直に述べています。細かな表面の質感、鋭い機械的な稜線、小さな特徴はならされるか失われます。別々に復元した複数の物体を並べると互いにめり込むことがありますが、これは工程のどこにも両者の物理的な整合性を担保する仕組みがないためです。
見えていない面は創作です。 カメラに背を向けた部分はすべて、観測ではなく学習された事前知識から生成されます。見慣れた対称的な物体なら、その推測はしばしば説得力を持ちます。非対称な物体や、隠れた面に固有の細部がある物体では、裏面は自信たっぷりに間違えます。素材を信用する前に、必ず後ろから確かめてください。
人体の復元には明示された境界があります。 人体モデルは各人物を個別に処理し、複数人どうしや人と物の相互作用は考慮しません。集合写真から相互作用の整合した集団は得られませんし、手の細かな関節表現も汎用人体モデルの既知の弱点です。
メッシュはそのまま製造に使えません。 積層造形を念頭に置いたある独立した実地レビューは、表面が滑らかでも水密でもないことを理由に、これらのメッシュはスライサでそのまま扱うのに適さないと結論づけています。成果物を3D印刷するつもりなら、修復とリメッシュの工程を見込むべきで、印刷可能であることを前提にしてはいけません。
トポロジは生成されたもので、設計されたものではありません。 アーティストが計画したエッジの流れも整ったUV配置もない、密で不規則なメッシュになると考えてください。アニメーション、変形、厳しいポリゴン予算が絡む仕事では、リトポロジは選択肢ではありません。
入力の制約は実在します。 アップロードは JPEG、PNG、WebP の 10MB まで、人体復元は全身写真のときに最もうまく働きます。低解像度、強い圧縮、被写体ぶれ、極端に斜めの写真は、モデルが働き始める前に結果の上限を削ってしまいます。
権利は層をなしているのに、宣伝文句はそれを平らにします。 上流のコードは Apache 2.0 に準じる寛容なライセンスで、商用利用が無償です。第三者がこの重みを合法的にホストできるのは、まさにこの点によります。しかしそのライセンスが及ぶのはモデルであって、あなたの入力画像ではありません。著作権のある製品意匠や美術作品、あるいは特定できる人物を復元すれば、どんなモデルライセンスでも解消できない義務が生じます。
プライバシーは意識して決めるべき事項です。 ホスト型のサービスに写真を上げるということは、第三者である運営者にそれを送るということです。個人を特定できる写真は多くの法域で個人データにあたり、人体の復元はそもそも人の画像を扱う処理です。サイトはデータの保存期間を目立つ形では公開していないため、機微な素材、機密の素材、未公開の素材については、上げる前にその時点の規約を確かめてください。(要確認)
運営が続くかどうかは未知数です。 ここは他者のオープンなモデルの上に独立事業者が立てたサービスであり、この分野は入れ替わりが激しい領域です。頼りにする素材は自分でダウンロードして保管し、ここを長期の保管庫と考えないでください。
いいえ。メタが公開配布した SAM 3D モデルを、自前の画面と課金の仕組みの背後でホストしている独立した商用サービスです。サイト自身のよくある質問の欄に、本プロジェクトは独立しておりメタとは提携関係にないという断り書きが明示されています。メタ自身の公開デモや元の研究資料を探しているなら、メタ公式の AI サイトへ行ってください。この区別は、サポート、課金、プライバシー規約、商業上の約束のすべてにおいて重要です。
画像1枚です。アップロードは JPEG、PNG、WebP に対応し、1ファイル 10MB までです。フォトグラメトリと違って多方向からの撮影一式は要りません。それがこの技術の要点であり、同時にほとんどの限界の出どころでもあります。その1枚に写っていないものはすべて推論で埋めるほかないからです。
物体の書き出しは、ゲームやウェブ向けの GLB、技術的な工程向けの PLY 点群、全形式を含む ZIP 一括の3通りです。人体の復元は GLB で書き出されます。ゲームエンジンやウェブビューアへ持って行くなら GLB が正しい既定値で、下流が点群データを求めるときに PLY を選びます。
有料段階は、透かしの除去、優先的な処理速度、商用利用の権利をプラン単位の特典として案内しており、上流のモデルライセンスも商業利用を認めています。ただしそれが及ぶのは道具とモデルまでです。元の写真に写っているものについての権利までは与えません。著作権のある製品意匠、美術作品、ロゴ、識別可能な人物は、それぞれ別個の義務を伴います。その時点の利用規約を読み、素材の権利処理は別に行ってください。
可視化、試作、小道具、参考としては十分で、測定の根拠や最終的な製品形状として扱うには不十分です。上流のモデル文書は、出力解像度が中程度であるため細部が制限されること、そして物体モデルが接触や貫入といった物理的な相互作用を推論できないことを率直に述べています。整える工程を見込んでおいてください。
修復なしに安定して印刷するのは難しいです。積層造形を念頭に置いたある独立した実地レビューは、表面が滑らかでも水密でもないことを理由に、これらのメッシュはスライサでそのまま扱うのに適さないと結論づけています。修復とリメッシュの道具を通し、水密性を確かめてからでなければスライスに進めません。
障壁がハードウェアにあるからです。同じオープンな重みを自前で動かすには Linux 64ビット環境と VRAM 32GB 以上の NVIDIA GPU が必要だと文書化されています。すでにそのハードと運用する意欲があるなら、量が出るときは自前構築のほうが安く、画像も自分の設備の中に留まります。そうでないなら、購読は設備投資と運用の手間を月額に置き換える選択です。
別々の2つのメーターです。各段階は2つの予算を別々に数えます。月ごとの生成クレジットの枠と、それとは別の月ごとの画像セグメンテーション要求の枠です。マスクを選んで詰める作業はセグメンテーション枠を、実際に3Dメッシュを作る作業は生成クレジットを使います。結果として、思い切って切り出して正しい選択範囲を見つけ、生成は一度だけという進め方が有利になります。
各人物が個別に処理されます。人体モデルは各人物を個別に処理し、複数人どうしや人と物の相互作用は考慮しません。1枚から複数の人物を復元することはできますが、互いの位置関係や接触、やり取りは整合的にはモデル化されないため、配置は3Dソフト側で自分で行う必要があります。
このサービスは単一画像からの復元を軸に作られているため、実務的には動画から代表的なコマを抜き出して入力に使う形になります。被写体ぶれが少なく、対象が遮られておらず、画面内で十分大きいコマを選んでください。(公開情報に基づく推測)