ByteDance Seed3D 基礎模型
Seed3D 1.0 — 圖像生成 3D 資產
字節跳動 Seed 推出的基礎模型，將生成式建模的可擴展性與顯式物理模擬的可靠性相結合，生成多樣化、高品質、可用於物理模擬的 3D 資產。
什麼是 Seed3D 1.0
Seed3D 1.0 解決了 3D 生成中的三大關鍵挑戰：高保真資產生成、物理引擎相容性和可擴展的場景組合。這些能力朝著具身 AI 所需的世界模擬器邁出了重要一步。
核心 能力
🎨
高保真幾何與紋理
精確的 3D 重建，配合細緻的 PBR 材質，保留精細表面細節，實現逼真渲染。
⚙️
模擬就緒資產
水密流形幾何體，自動生成碰撞網格。直接整合 Isaac Sim 和物理引擎。
🏙️
可擴展場景生成
VLM 驅動的佈局將場景分解為物體，逐個合成資產，組裝複雜的室內和城市環境。
效能 評估
人工評估
基於 43 張輸入圖像，從 6 個關鍵維度進行評估。在所有維度上均表現出極具競爭力的效能，在生成精細細節和準確重建複雜特徵方面具有很強的保真度。
幾何生成
持續優於所有基線方法，獲得更高的 ULIP-I 和 Uni3D-I 分數，表明生成的幾何體與輸入圖像之間具有更好的對齊性。
紋理生成
在多視角圖像和 PBR 材質生成方面表現出色。使用真實多視角圖像報告結果，以展示 PBR 估計能力。
模擬就緒 生成
資產可直接整合到 Isaac Sim 中，用於基於物理的模擬和機器人操作測試。物理引擎提供接觸力、物體動力學和操作結果的即時回饋。
透過多樣化的操作場景可擴展地生成訓練資料
透過物理回饋進行動作結果的互動式學習
多樣化的多視角、多模態觀測資料，用於全面的評估基準
場景 生成
透過分解式方法從物體生成擴展到場景生成。VLM 提取物體實例和空間關係，然後 Seed3D 為每個物體合成幾何體和材質。最終場景按照預測的空間佈局進行組裝——從室內辦公室到大規模城市場景。
應用 場景
🤖
具身 AI 訓練
透過多樣化的操作場景，為視覺-語言-動作模型生成可擴展的訓練資料。
🎮
遊戲與內容創作
快速生成高品質 3D 道具和場景，用於虛擬環境和遊戲開發。
🏗️
機器人模擬
建立逼真環境，用於測試機器人抓取、導航和多物體互動。