Stability AI開源新模型SV3D,可生成多視角且物體外觀一致的影片
· 2024-03-20

Stability AI發布新的3D影片生成模型Stable Video 3D(SV3D),支援從任意角度生成高品質,且物體外觀一致的影片,無論是在影片品質還是多視角呈現,表現都較之前的模型更好

Stability AI以Stable Video Diffusion模型為基礎,創建了Stable Video 3D(SV3D)模型,SV3D可生成高品質的3D多視角影片,官方提到,相較之前所發布的Stable Zero123模型,SV3D生成的影片品質以及多視角表現都更好,效能也優於Zero123-XL。

Stable Video 3D模型有兩個變體,分別是SV3D_u和SV3D_p。SV3D_u能夠利用單一圖像,不需要使用者設定攝影機參數,即可生成環繞物體的連續視角(Orbital Views)影片,而SV3D_p則是在SV3D_u基礎上,不僅支援從單一圖像生成影片,還能根據環繞物體的影片,生成指定攝影機路徑的3D影片。

Stability AI調整原有的Stable Video Diffusion圖像轉影片模型,增加攝影機路徑設定功能,使Stable Video 3D模型能夠生成從不同角度觀看物體的影片。與Stable Zero123所使用的擴散模型相比,Stable Video 3D在生成影片方面擁有更好的泛化能力以及視角一致性,因此所生成的影片,從不同視角看起來更加自然且連貫。

Stable Video 3D還採用了解耦光照最佳化(Disentangled Illumination Optimization)技術,使得模型可單獨調整照明效果,不影響場景其他元素表現,以及透過遮罩分數蒸餾採樣損失函式(Masked Score Distillation Sampling Loss),來維持生成物體的品質和一致性。

官方指出,Stable Video 3D3D影片生成有重大進步,因為先前的方法在視角通常受限制,且輸出有物體不一致的問題。而Stable Video 3D卻可從任意指定視角,輸出連貫的視圖,不僅強化姿勢可控性,也確保可在多個視圖中保持物體外觀一致。

Stable Video 3D現在推出,Stability AI會員可將其用於商業目的,針對非商業用途,開發者可以在Hugging Face下載模型權重,並參照Stability AI的研究論文。

热门文章
印度最高法院受理公益诉讼,要求全国禁封“伪装”成社交游戏的赌博平台
游戏风向
密西西比州众议院委员会推进提议增加赌场税的法案
游戏风向
英国确认各垂直行业的赌博税税率
游戏风向
新泽西州7月博彩收入创6.06亿美元新高,颁布禁令
游戏风向
2027 Global Game Connect(GGC)斯里兰卡招商全面开启!业务人脉尽在掌握!
灰度头条
巴西颁布新法赋权央行封锁非法博彩账户及 Pix 交易
支付动态
亚洲游戏市场观察:15大市场热门游戏与用户趋势
线上游戏
超级PAC筹资4800万美元:体育博彩势力加码
游戏风向
哈萨克斯坦计划对在线赌场促销活动进行处罚
游戏风向
亚洲顶尖游戏供应商多寶游戏 DB GAMING,开创亚洲市场的唯一首选
广告营销
斯里兰卡博弈产业大转型,官方:剑指南亚拉斯维加斯
游戏风向
张侨伟参议员排除全面禁止,敦促菲律宾规范网络赌博
东南亚资讯
BETFAIR 网络攻击80万用户资料泄露
游戏风向
越南博彩管控逐步放宽,惟本土需求仍显乏力
东南亚资讯
菲律宾博彩技术赛道迎来新变局,B2B 供应模式加速渗透
东南亚资讯
首页
游戏
合作
发现
我的