Stability AI開源新模型SV3D,可生成多視角且物體外觀一致的影片
· 2024-03-20

Stability AI發布新的3D影片生成模型Stable Video 3D(SV3D),支援從任意角度生成高品質,且物體外觀一致的影片,無論是在影片品質還是多視角呈現,表現都較之前的模型更好

Stability AI以Stable Video Diffusion模型為基礎,創建了Stable Video 3D(SV3D)模型,SV3D可生成高品質的3D多視角影片,官方提到,相較之前所發布的Stable Zero123模型,SV3D生成的影片品質以及多視角表現都更好,效能也優於Zero123-XL。

Stable Video 3D模型有兩個變體,分別是SV3D_u和SV3D_p。SV3D_u能夠利用單一圖像,不需要使用者設定攝影機參數,即可生成環繞物體的連續視角(Orbital Views)影片,而SV3D_p則是在SV3D_u基礎上,不僅支援從單一圖像生成影片,還能根據環繞物體的影片,生成指定攝影機路徑的3D影片。

Stability AI調整原有的Stable Video Diffusion圖像轉影片模型,增加攝影機路徑設定功能,使Stable Video 3D模型能夠生成從不同角度觀看物體的影片。與Stable Zero123所使用的擴散模型相比,Stable Video 3D在生成影片方面擁有更好的泛化能力以及視角一致性,因此所生成的影片,從不同視角看起來更加自然且連貫。

Stable Video 3D還採用了解耦光照最佳化(Disentangled Illumination Optimization)技術,使得模型可單獨調整照明效果,不影響場景其他元素表現,以及透過遮罩分數蒸餾採樣損失函式(Masked Score Distillation Sampling Loss),來維持生成物體的品質和一致性。

官方指出,Stable Video 3D3D影片生成有重大進步,因為先前的方法在視角通常受限制,且輸出有物體不一致的問題。而Stable Video 3D卻可從任意指定視角,輸出連貫的視圖,不僅強化姿勢可控性,也確保可在多個視圖中保持物體外觀一致。

Stable Video 3D現在推出,Stability AI會員可將其用於商業目的,針對非商業用途,開發者可以在Hugging Face下載模型權重,並參照Stability AI的研究論文。

熱門文章
巴西擬將博弈稅率提高至24% 稅收將用於社保與醫療領域
合規與政策
菲律賓網絡賭博和加密貨幣仍構成持續的洗錢風險
東南亞資訊
新澤西州7月博彩收入創6.06億美元新高,頒布禁令
合規與政策
JILI 宣佈與全球板球傳奇 AB de Villiers(ABD)達成重磅戰略合作
體育遊戲
英國確認各垂直行業的賭博稅稅率
合規與政策
西班牙監管機構警告在線賭博平臺存在身份盜竊行為
合規與政策
橫跨全球6個城市,灰度8場派對邀你共看世界盃,重塑高質量社交新場景
灰度頭條
印第安納州在線賭場法案在眾議院委員會停滯不前
合規與政策
哈薩克計劃對線上賭場促銷活動進行處罰
合規與政策
越南博彩管控逐步放寬,惟本土需求仍顯乏力
東南亞資訊
2027 Global Game Connect(GGC)斯里蘭卡招商全面啟動!業務人脈盡在掌握!
灰度頭條
印度最高法院受理公益訴訟,要求全國禁封「偽裝」成社交遊戲的賭博平台
合規與政策
菲律賓博彩技術賽道迎來新變局,B2B 供應模式加速滲透
東南亞資訊
超級PAC籌資4800萬美元:體育博彩勢力加碼
合規與政策
越南在線博彩業政策收緊 催生市場新機遇
東南亞資訊
首頁
遊戲
合作
發現
我的