Idol 開放單圖轉3D模型:可旋轉的物件,和精準重建差在哪?

Idol開放單張圖片生成3D Gaussian物件。解析0.66B核心與1.8B完整流程、7.2GB顯存、不同GPU請求時間,以及生成背面、網格交付和相依模型授權的限制。

Share
Idol 官方範例:黑色背景上的糖果薑餅屋3D物件,屋頂鋪有彩色軟糖
Speridlabs 官網展示的 Idol 薑餅屋範例,呈現單張影像生成的可旋轉 3D Gaussian 物件。 圖片來源:官方原文。

想把一張商品照片變成可以轉動的展示物件,最困難的部分往往藏在照片沒有拍到的地方。Idol 可以補出背面,卻不能因此證明背面就是實物原樣。

Speridlabs 在 2026 年 10 月 29 日公開這個單圖轉3D模型,並釋出程式、權重與展示。輸入可以是照片、渲染圖,也可以接另一個影像生成模型。

它產生的是3D Gaussian物件,可以理解為許多帶著位置、形狀與顏色資訊的空間小斑點,組在一起形成可換視角觀看的外觀。這和製造、動畫常用的網格不是同一種交付格式。

官方也強調小模型與低顯存,但模型本體、完整推理流程與顯示卡請求速度必須分開。不同消費卡的官方測時,就遠高於原始貼文概稱的三秒。

另一個實作門檻是相依元件。Idol 本體採 Apache 2.0,輸入編碼器仍需要使用者接受各自條款,不能把一個授權名稱當成整條工具鏈的所有條件。

對創作者而言,值得先確認的是輸出是否符合展示用途,以及願意為細節、等待時間與整合多付多少。先看生成物件的形式,才能判斷後面的速度與硬體數字是否對自己的工作有意義。

Idol 從一張圖建立的是哪一種3D物件?

Idol 的輸出是標準3D Gaussian splat檔案,供檢視器從不同角度呈現。檔案副檔名是.ply,但真正需要辨認的是其中裝的表示方式,不能只看副檔名,就當成已經取得可製造的表面網格。

傳統網格通常用頂點與面描述表面,Gaussian表示則以大量空間小斑點,在不同視角下合成外觀。後者可以很適合展示,卻不會單憑看起來有立體感,就自動具備封閉表面、可動骨架或符合尺寸的工程幾何。

這也說明單張影像的限制。模型看得到正面的形狀與紋理,對背面和被遮住的部分仍需生成合理補全。若一張照片沒有拍出杯子的另一側標誌,轉動後看見的新圖樣不能當作原物件真的有那個標誌。

輸入影像先被整理,才進入生成

官卡說明,流程會移除背景、把物件重新置中,再生成物件和預測輸入相機。除主要.ply外,輸出也會留下模型實際看見的輸入圖與相機資訊,讓使用者知道生成前圖片被怎麼處理。

這些中間產物很有用途。若生成結果缺掉一段細把手,先看去背與裁切後的輸入,能區分物件是否一開始就被裁掉,還是後續生成未保留。這是依流程提出的檢查方式,並非本刊跑過模型的實測診斷。

官卡另分照片與合成圖兩種模式。合成圖的裁切較貼近物件,實拍照片保留較多空間,不能假設所有輸入都應套同一個前處理。輸入資訊如何被保留,會影響模型有機會重現什麼。

如果工作需要精確尺寸或可製造網格,這個輸出仍只是另一段流程的起點。它先讓使用者取得多視角外觀,而沒有直接完成每一種3D交付。

Idol 官方範例:黑色背景上的糖果薑餅屋3D物件,屋頂鋪有彩色軟糖
Speridlabs 官網展示的 Idol 薑餅屋範例,呈現單張影像生成的可旋轉 3D Gaussian 物件。 圖片來源:官方原文。
Idol 官方範例繞看糖果薑餅屋,展示單張圖片補出的不同視角;不等於真實物件背面的量測重建。 來源:官方原文。

從三萬到一百萬個Gaussian,細節成本怎麼選?

更多Gaussian提供更密的表示,卻不會自動把生成猜測變成真實幾何。Idol允許從32,768個到1,048,576個,預設為262,144個,數量需是三十二的倍數。

這是一個可調的表示密度,而非模型有幾個參數,也不是顯示卡記憶體容量。模型參數是學到的權重,Gaussian數量則是這次生成物件使用多少空間元素,兩者可以影響資源需求,卻不是同一個單位。

官網以相同物件在不同密度下提供對照,讓讀者放大比較細部。可先看薄邊、曲面輪廓或裝飾是否保留,再決定多出的細節值不值得檔案與處理負擔。這比只挑最大設定,更接近實際展示需求。

以一個假設的線上商品提案為例,若畫面只在小卡片中旋轉,最細的紋理未必看得見。若鏡頭會貼近物件邊緣,同樣的差異就可能變得明顯。這裡說的是交付情境差別,不是已替任何密度完成品質測試。

另一個要保留的判斷是,密度提高能更細緻地描述生成出的形狀,卻不會補回輸入從未提供的真實證據。背面若被猜錯,一百萬個Gaussian也只是更細地呈現那個猜測。

因此,應以可接受的觀看距離、視角與檔案用途決定密度。把最大數字當成預設必選,可能先增加成本,卻沒有解決真正影響提案的外觀問題。

0.66B模型,為何整個流程約1.8B?

模型本體之外,圖片還要經過去背、影像編碼與壓縮特徵處理。官方發布貼文概稱六億參數,現有研究頁寫0.66B,也就是約六億六千萬;兩者不應再被轉述成整套工具只有六億參數。

官卡把主要生成部分拆開:負責去噪的擴散變換器約370.6M,八元樹解碼器約50.8M,Gaussian解碼器約237.3M,合計約658.7M。

這和研究頁的0.66B尺度一致。

M表示百萬,B表示十億,都是參數量單位。這些數字不等於要同樣數量的位元組,更不能直接拿來當顯存需求,因為精度、執行時暫存和其他模型都會影響記憶體。

完整流程還包含BiRefNet去背、DINOv3影像編碼器,以及FLUX.2的VAE。VAE在這裡負責影像與壓縮特徵之間的轉換,不是把完整FLUX影像生成模型全部載入。官卡列整個請求相關元件約1.8B參數。

7.2GB是整個請求的峰值條件

官卡估計,載入權重本身約占3.7至4.4GB顯存,但完整請求的峰值是7.2GB。只照權重大小判斷顯卡能不能執行,會漏掉運算過程需要的其他空間。

相反地,測試表列B300有269GB、RTX 4090有24GB,指的是使用的顯卡容量,不是每一個請求都需要把整張卡填滿。設備容量、權重占用與峰值使用量,應分別理解。

目前程式的安裝條件包含Python 3.10以上、PyTorch 2.5以上,以及支援CUDA的NVIDIA顯卡。這些是官方列出的執行路徑,不能因為核心模型小,就順勢宣稱已正式支援所有手機或一般Mac。

評估能否部署,要看完整流程峰值與軟體條件,而不能只看Idol核心參數量。對第一次接觸這類工具的人,這往往比宣傳上的「小模型」更能決定是否真的能開始。

官方三秒宣傳與顯卡測時,怎麼放在一起?

速度必須和步數、密度、硬體及是否冷啟動一起讀。原始貼文說可在三秒產生百萬個splat,現有官卡也有更短的概括敘述,但沒有把所有宣傳句放在同一組可比較條件下。

較適合拿來估等待時間的,是官頁明列的顯卡表:五十個採樣步驟、生成262,144個Gaussian、八張輸入影像取中位數,每台機器使用一張顯卡,程式與設定相同。

在這組條件下,B300為3.4秒,B200為3.6秒,RTX 5090為14.1秒,RTX 4090為19.1秒,RTX 3080則為46.2秒。這些是作者公布的請求測時,並非本刊重新跑出的成績。

同一張表就能看出,最短時間不能直接當成消費卡的預期。它也不能證明每張圖片都會花中位數那麼久,因為中位數描述的是這組輸入的中央位置,不是逐次請求的時間上限。

第一次執行還有下載與編譯

程式第一次跑時會取得Idol權重及需要的編碼器,GPU上的加速也會進行編譯。因此,官卡明說首張圖片較慢,不能把下載、登入和冷啟動時間當成每次穩態推理都要重做,反過來也不能假裝初次安裝只需三秒。

官卡另提供H100上的方法比較,Idol在指定設定為6.8秒,TripoSplat為9.9秒,TRELLIS為7.1秒,LGM則為1.1秒。各模型使用的採樣與輸出密度不同,這份比較不能支持Idol是所有方法中最快的結論。

相同表格還有輸入視角和七個新視角的品質指標。速度之外,研究也在比較外觀與不同視角的一致程度,不能只拿時間最短的一列,就忽略那一列交付的內容和品質。

作者特別提醒,LGM雖然在輸入視角的PSNR最高,結果卻可能看起來模糊。PSNR以像素誤差衡量差異,不能單獨代表細節是否銳利。這個例子說明,評估3D生成時,單一最好數字和實際想保留的外觀並不總是一回事。

同樣地,把採樣步驟減少可能更快,官卡也提醒會犧牲部分細節。因此,若為了批次產量改動步數,就已離開五十步比較表的條件,不應繼續沿用表中的品質結果當作新設定證據。

保留這些條件,才能把官方數字換成合理等待預期。若要批次產生大量提案,應以接近自己硬體與設定的結果為起點,而不是把宣傳極值乘上需求數量當作產能承諾。

哪些創作工作能先接,哪些仍要另外處理?

如果目標是視覺提案,快速取得多視角物件和取得精準可製造模型,是兩種不同承諾。Idol官頁的物件展示可以說明外觀生成能力,沒有因此驗證每個生成物件都符合尺寸、拓樸或列印要求。

例如,假設設計者用一張自己有權使用的包裝草圖生成提案,正面可以先對照圖案、輪廓與比例,轉到側面則要確認新增內容是否符合設計意圖。這是本文依輸出特性提出的流程分析,並非官方保證或本刊實測。

若客戶要求背面也與實物相同,便需要其他照片、量測或人工確認,不能用模型「看起來補得合理」代替證據。若交付的是遊戲動畫,骨架、變形與引擎相容等後續工作,也不能只靠得到一個splat檔案就視為完成。

開放本體,不等於所有相依與輸入都同條款

Idol本體的程式與權重採Apache 2.0,但DINOv3與FLUX.2-dev VAE是需要先接受條款的相依模型。使用者須用自己的Hugging Face帳戶完成存取,再讓程式取得需要的元件。

這代表開放下載降低了工具取得門檻,卻沒有取消相依模型的使用條件。照片、品牌標誌與輸入生成圖的權利,也不會因為通過Idol就自動改變,仍應依原來源和用途判斷。

這裡最值得先做的決定,是把生成物件放到合適的交付階段。用在探索外觀的提案,和用在必須精準還原的正式資產,對證據與處理的要求不同;先分清楚,才不會把快速生成誤認為整份工作已完成。

Idol 常見問題

下載權重免費,代表雲端呼叫也免費嗎?

不能這樣推。官方開放權重、程式與展示,不代表所有代管平台的運算服務都免費。這篇保留原作者工具與條件,沒有替任何第三方服務承諾費率或免費額度。

整套工具只有0.66B參數嗎?

不是。約0.66B指主要生成模型部分,完整請求還包含去背、編碼器與VAE,官卡合計約1.8B。判斷能否執行,也要看顯存峰值和官方列出的軟體環境。

生成物件可以直接送3D列印嗎?

目前官卡交付的是Gaussian splat,不是已驗證可列印的網格。若需要封閉表面、尺寸與材料條件,仍要處理對應的幾何與製造要求,不能把可旋轉外觀當成已完成列印檢查。

一張照片的背面會和實物一致嗎?

沒有這個保證。模型會生成圖片看不到的面向,那是合理補全,並非取得了額外實拍資訊。要交付精準重建,仍需補充可驗證的資料。

延伸閱讀

原始資料來源

想持續看懂3D生成模型、開放工具與部署條件,歡迎免費訂閱 AI 郵報。