Sign in

Member Benefits

Get Demands

View Business Cards

Exclusive Service

Noble Identity

AS LOW AS 1.5U /DAY

Stability AI開源新模型SV3D,可生成多視角且物體外觀一致的影片

Share

2024-03-20

Stability AI發布新的3D影片生成模型Stable Video 3D(SV3D),支援從任意角度生成高品質,且物體外觀一致的影片,無論是在影片品質還是多視角呈現,表現都較之前的模型更好

Stability AI以Stable Video Diffusion模型為基礎,創建了Stable Video 3D(SV3D)模型,SV3D可生成高品質的3D多視角影片,官方提到,相較之前所發布的Stable Zero123模型,SV3D生成的影片品質以及多視角表現都更好,效能也優於Zero123-XL。

Stable Video 3D模型有兩個變體,分別是SV3D_u和SV3D_p。SV3D_u能夠利用單一圖像,不需要使用者設定攝影機參數,即可生成環繞物體的連續視角(Orbital Views)影片,而SV3D_p則是在SV3D_u基礎上,不僅支援從單一圖像生成影片,還能根據環繞物體的影片,生成指定攝影機路徑的3D影片。

Stability AI調整原有的Stable Video Diffusion圖像轉影片模型,增加攝影機路徑設定功能,使Stable Video 3D模型能夠生成從不同角度觀看物體的影片。與Stable Zero123所使用的擴散模型相比,Stable Video 3D在生成影片方面擁有更好的泛化能力以及視角一致性,因此所生成的影片,從不同視角看起來更加自然且連貫。

Stable Video 3D還採用了解耦光照最佳化(Disentangled Illumination Optimization)技術,使得模型可單獨調整照明效果,不影響場景其他元素表現,以及透過遮罩分數蒸餾採樣損失函式(Masked Score Distillation Sampling Loss),來維持生成物體的品質和一致性。

官方指出,Stable Video 3D3D影片生成有重大進步,因為先前的方法在視角通常受限制,且輸出有物體不一致的問題。而Stable Video 3D卻可從任意指定視角,輸出連貫的視圖,不僅強化姿勢可控性,也確保可在多個視圖中保持物體外觀一致。

Stable Video 3D現在推出,Stability AI會員可將其用於商業目的,針對非商業用途,開發者可以在Hugging Face下載模型權重,並參照Stability AI的研究論文。

Disclaimer:
Details
HUIDU.io

GROWTH DRIVEN GLOBAL PTE. LTD. 202618650K

101 THOMSON ROAD, #28-03A, UNITED SQUARE, SINGAPORE 307591

Copyright 2026 HuiDu