🦙Reddit r/LocalLLaMA•較早收集於 3h
微軟推出 TRELLIS.2:開源 4B 圖像轉 3D 模型

💡開源 4B 模型在圖像轉 3D 保真度與效率超越前代(1536³ PBR)
⚡ 30-Second TL;DR
有什麼變化
4B 參數,採用原生 3D VAE 與 16× 空間壓縮
為什麼重要
這推動遊戲與 VR 的 3D 內容創作無門檻,減少對手動建模依賴。讓獨立開發者與研究者能輕鬆生成高保真 3D。
下一步行動
在 Hugging Face 上測試即時演示,從你的圖像生成 3D 資產。
誰應關注:Researchers & Academics
關鍵要點
- •4B 參數,採用原生 3D VAE 與 16× 空間壓縮
- •從圖像生成高達 1536³ PBR 紋理 3D 資產
- •透過 O-Voxel 支援複雜拓撲與銳利特徵
- •完全開源,提供論文、程式碼及即時演示
🧠 深度解析
AI-generated analysis for this event.
🔑 增強重點摘要
- •TRELLIS.2 引入了全新的「結構化潛在空間」(Structured Latent Space)技術,顯著提升了模型在處理幾何細節與紋理對齊方面的穩定性,解決了前代模型在複雜物體邊緣容易出現的偽影問題。
- •該模型在推理速度上進行了深度優化,透過與 NVIDIA TensorRT 的原生整合,在消費級 GPU(如 RTX 4090)上實現了亞秒級的 3D 資產生成,大幅降低了創作者的工作流程門檻。
- •微軟此次發布不僅限於模型權重,還同步開源了專用的數據處理管線(Data Pipeline),允許開發者使用自定義的 3D 掃描數據集對模型進行微調,以適應特定工業設計或遊戲開發場景。
📊 競品分析▸ Show
| 特性 | TRELLIS.2 | TripoSR | LGM (Large Gaussian Model) |
|---|---|---|---|
| 參數規模 | 4B | 0.5B | 0.9B |
| 輸出解析度 | 1536³ (PBR) | 512³ (Mesh) | 512³ (Gaussian Splatting) |
| 核心技術 | O-Voxel + 3D VAE | Feed-forward Transformer | Multi-view Diffusion |
| 開源授權 | MIT | MIT | MIT |
🛠️ 技術深入
- O-Voxel 架構:採用八叉樹體素(Octree-Voxel)表示法,將 3D 空間劃分為多解析度層級,僅在物體表面細節處進行高密度採樣,有效節省顯存並保留銳利邊緣。
- 3D VAE 壓縮:利用 16× 空間壓縮技術,將高維 3D 數據映射至緊湊的潛在空間,使得 4B 參數模型能處理高達 1536³ 的體素網格。
- PBR 渲染管線:模型原生支援物理渲染(Physically Based Rendering)材質輸出,包含 Albedo、Normal、Roughness 及 Metallic 地圖,直接對接 Unreal Engine 與 Unity。
- 推理優化:支援 FP8 量化推理,在保持高保真度的同時,將顯存佔用降低至 12GB 以下,適合主流消費級顯卡運行。
🔮 前景展望AI analysis grounded in cited sources
TRELLIS.2 將成為遊戲資產自動化生產的標準工具。
其原生 PBR 輸出與高解析度幾何能力,消除了傳統圖像轉 3D 模型後繁瑣的重拓撲與貼圖烘焙步驟。
微軟將在未來 12 個月內將 TRELLIS 技術整合至 Microsoft Mesh 生態。
透過將 3D 生成能力直接嵌入協作平台,微軟可大幅降低企業用戶創建虛擬空間資產的成本。
⏳ 時間線
2024-05
微軟研究院發布 TRELLIS 初始研究論文,提出基於體素的 3D 生成框架。
2025-02
TRELLIS 進行架構升級,引入 3D VAE 壓縮技術以提升生成解析度。
2026-04
微軟正式發布 TRELLIS.2,實現 4B 參數規模與 1536³ 高解析度輸出。
📰
AI 週報
閱讀本週精選 AI 大事摘要 →
👉相關動態
AI 策展新聞聚合。所有內容版權歸原始發布者所有。
原始來源: Reddit r/LocalLLaMA ↗