Meta发布可用来分割视频对象的Segment Anything Model 2
支付動態 · 2024-07-30

Meta强调SAM 2模型可以分割图像或视频中的任何对象,还能即时于视频中的所有画面追踪该对象

Meta

要成功分割视频中的对象,需要了解实体于空间与时间中的位置,相较于图像中的对象分割,视频中的对象移动、变形、遮挡、照明变化或其它因素,都可能在不同的画面之间发生重大变化,再加上视频品质通常低于图像,更增加了难度。于是Meta借由创建新的视频对象分割数据集(SA-V Dataset)来训练SAM 2。

Meta

SA-V Dataset包含了5.1万个真实世界的视频,以及超过60万个时空掩码(Masklet),Masklet标注了对象于画面中出现的时间点与位置。相较于坊间最大的视频分割数据集,SA-V Dataset的视频数量是它的4.5倍,标注数量则是53倍。

自发布图像对象分割模型SAM以来,除了Meta的内部应用外,SAM已被应用在海洋科学中以分割声纳图像或分析珊瑚礁,亦已被应用在救灾的卫星图像分析,以及医疗领域上的细胞图像分割,并协助检测皮肤癌。Meta更预期可同时分割影像及视频对象的SAM 2可望被用在自动驾驶系统,追踪濒临绝种的动物,或是应用在医疗领域的腹腔摄影镜头上,相信它有更广泛的可能性。

SAM 2代码及权重采用Apache 2.0开源授权,SAM 2评估代码则采用BSD-3开源授权,而SA-V Dataset亦通过CC BY 4.0授权与外界共享。用户可通过SAM 2的展示网站理解它的能力。

热门文章
英国确认各垂直行业的赌博税税率
游戏风向
JILI 宣布与全球板球传奇 AB de Villiers(ABD)达成重磅战略合作
体育游戏
印度最高法院受理公益诉讼,要求全国禁封“伪装”成社交游戏的赌博平台
游戏风向
菲律宾博彩技术赛道迎来新变局,B2B 供应模式加速渗透
东南亚资讯
PropellerAds 分享了新的 iGaming 案例研究:在 3 个月实现 97,674 次安装和 12,701 笔存款
广告营销
越南博彩管控逐步放宽,惟本土需求仍显乏力
东南亚资讯
GGC Awards 2026 璀璨科伦坡:致敬 iGaming 行业的领航者与创新力量
灰度头条
2027 Global Game Connect(GGC)斯里兰卡招商全面开启!业务人脉尽在掌握!
灰度头条
巴西颁布新法赋权央行封锁非法博彩账户及 Pix 交易
支付动态
哈萨克斯坦计划对在线赌场促销活动进行处罚
游戏风向
张侨伟参议员排除全面禁止,敦促菲律宾规范网络赌博
东南亚资讯
巴西拟将博彩税率提高至24% 税收将用于社保和医疗领域
游戏风向
灰度世界杯嘉年华狂欢派对吉隆坡站即将开启,业务拓展人脉社交从马来西亚开始
灰度头条
BETFAIR 网络攻击80万用户资料泄露
游戏风向
新泽西州7月博彩收入创6.06亿美元新高,颁布禁令
游戏风向
首页
游戏
合作
发现
我的