字节推图像分割项目UniRef++ 提高图像分割效率和精确度
站长网2023-12-28 12:04:080阅
字节公司最新推出了一个名为UniRef 的图像分割项目,该项目将现有的即参考图像分割(RIS)、少镜头图像分割(FSS)、参考视频对象分割(RVOS)和视频对象分割(VOS)四种分割方式整合到一个架构下进行处理,从而能够自动判断应该使用哪种方式来分割内容。

论文地址:https://arxiv.org/pdf/2312.15715.pdf
这一项目中的UniFusion模块还可以与SAM模型结合使用,进一步提高图像分割的效率和精确度。这一项目的推出将为图像分割领域带来新的突破,为用户提供更加便捷和高效的图像处理解决方案。

功能:
UniRef 的核心部分是 UniFusion 模块,用于进行多路融合,处理与指定参考相关的不同任务。这使得语言和注释掩码能够无缝集成,适用于不同的分割任务。
采用统一的 Transformer 架构实现实例级分割。这种设计选择增强了模型在不同基于参考的对象分割任务中泛化的能力。
UniRef 允许在广泛的基准上进行联合训练,消除了任务特定模型的需要。这导致资源的更有效利用和整体性能的提高。
该模型在运行时表现出灵活性,能够通过指定相应的参考完成多个任务。这种适应性对于具有不同分割要求的实际应用至关重要。
实验结果表明,UniRef 在引用图像分割和引用视频对象分割方面取得了最先进的性能。此外,它在少样本图像分割和视频对象分割中与参数共享网络相比表现出竞争力。
0000
评论列表
共(0)条相关推荐
金山办公WPS AI接入文字、表格、PPT、PDF四大组件
今日,金山办公旗下生成式人工智能应用WPSAI宣布接入文字、海外版表格、PPT演示文稿、PDF四大组件中。金山办公表示,WPSAI正在积极推进合规工作,上线时间以官方正式发布为准。WPSAI为产品代号,最终命名以官方正式发布为准。本文提及的部分WPSAI能力涉及海外版本。以下为具体更新内容:表格智能数据理解与分析0000爱设计&AiPPT.cn完成B1轮融资 视觉中国领投
近日,AIGC科技企业-爱设计&AiPPT.cn宣布完成B1轮融资。本轮融资由A股上市公司视觉中国领投,星连资本和36氪跟投。此前,「爱设计」曾先后获得来自心元资本,微梦传媒,视觉中国,信天创投,策源创投,亚杰基金及知名战投方投资。本轮融资将用于人工智能技术,内容版权供应体系,国内外用户增长和核心人才引入等方面。站长网2024-06-03 19:25:180000腾讯二次元社交APP《代号M9》上线:支持虚拟形象等功能
腾讯旗下深圳市网视界科技有限公司推出了一款专为二次元用户打造的全新社交APP——《代号M9-穿越次元遇见你》。这款APP不仅支持虚拟形象装扮、多人群聊、好友地图、实时状态、个性咕卡等新奇功能,还允许用户根据自己的需求对人物进行3D捏脸和更换服装等个性化设置。用户可以通过微信或QQ账号登录该APP,并在上面寻找兴趣相投的朋友,与好友分享实时动态,自由创建兴趣群聊,拥有一个和同好的交流空间。00002天带货超2500万、涨粉80万,“捡粉丝”的蜂花捡到了泼天的富贵
蜂花彻底出圈了。随着李佳琦事件的持续发酵,许多品牌和直播间蹭起了流量。其中,国产洗护品牌蜂花成为了最大的赢家。据飞瓜数据显示,蜂花近两天的抖音直播间人气和销售数据是其直播半年来最高的数据:仅2天时间,带货GMV超2500万、涨粉超80万,不少产品直接卖断货了。蜂花究竟做了什么?这要从李佳琦掉粉视频下方的评论“捡粉丝”开始说起了......从捡箱子到捡粉丝站长网2023-09-14 21:38:080001裁员、关店、销量暴跌,网红书店艰难求生
“五一”假期过后,年轻人的网红打卡点“茑屋书店”北京首店的客流量明显减少。这与它4月底开业初期“门庭若市”的爆火程度相比,境况可谓是天壤之别。这家被称为“最美书店”的文艺打卡地,在北京开业之初几乎人满为患:想去书店需要提前在小程序上预约,凭预约码方可入店;试营业期间,点餐取餐需排队,一杯售价30元起步的咖啡,中午高峰期便被通知售罄、缺货。0000