又一个!北京智源推出通用视觉分割模型SegGPT-全球新消息

来源:站长之家时间:2023-05-30 10:26:37

站长之家(ChinaZ.com)5月30日 消息:在2023中关村论坛平行论坛之一的人工智能大模型发展论坛上,北京智源人工智能研究院推出通用分割模型 SegGPT(Segment Everything In Contex),这是一个利用视觉提示(prompt)完成任意分割任务的通用视觉模型。


(资料图片仅供参考)

SegGPT 是智源通用视觉模型 Painter 的衍生模型,可针对分割一切物体的目标做出优化。

该模型具备上下文推理能力,训练完成后无需微调,只需提供示例即可自动推理并完成对应分割任务,包括图像和视频中的实例、类别、零部件、轮廓、文本、人脸、医学图像等。

如下图所示,标注出一个画面中的彩虹,SegGPT可批量化分割其他画面中的彩虹。

它的灵活推理能力支持任意数量的视觉提示。自动视频分割和追踪能力以第一帧图像和对应的物体掩码作为上下文示例,SegGPT 能够自动对后续视频帧进行分割,并且可以用掩码的颜色作为物体的ID,实现自动追踪。

值得一提的是,此前Meta发布了其新的基于 AI 的 Segment Anything Model (SAM),该模型具有识别和分离图像和视频中的特定对象的功能。通过使用SAM,用户可以通过点击物体或输入文字提示选中编辑的物体。

威斯康辛麦迪逊、微软、港科大等机构的研究人员也提出SEEM模型,通过不同的视觉提示和语言提示,一键分割图像、视频。SEEM模型是一种新型的分割模型,这一模型可以在没有提示的开放集中执行任何分割任务,比如语义分割、实例分割和全景分割。

另外,南科大发布视频分割模型TAM,可轻松追踪视频中的任意物体并消除,操作简单友好。TAM的出现为解决传统视频分割模型需要人工标记培训数据和初始化参与数据的问题提供了之前提供,将改变CGI行业的游戏游戏规则。

SegGPT相关代码发布在 GitHub 上,论文发表在预印本平台 arXiv 上。论文地址:https://arxiv.org/abs/2304.03284

(举报)

标签:

相关阅读

推荐阅读

又一个!北京智源推出通用视觉分割模型SegGPT-全球新消息

又一个!北京智源推出通用视觉分割模型SegGPT-全

又一个!北京智源推出通用视觉分割模型SegGPT更多

2023-05-30 10:26:37
【环球热闻】张之臻法网首轮获胜 创中国男子网球历史

【环球热闻】张之臻法网首轮获胜 创中国男子网球

据央视体育客户端消息,北京时间5月30日凌晨,2023年法网男单首轮,中国选手张之臻对阵世界排名第53位的塞更多

2023-05-30 09:58:22
世界讯息:莱宝高科:5月25日接受机构调研,中国国际金融股份有限公司参与

世界讯息:莱宝高科:5月25日接受机构调研,中国

2023年5月29日莱宝高科(002106)发布公告称公司于2023年5月25日接受机构调研,中国国际金融股份有限公司臧更多

2023-05-30 09:03:48
早知道|纳斯将成76人新主帅 梅西父亲接受沙特巨额报价

早知道|纳斯将成76人新主帅 梅西父亲接受沙特巨

30日,据美国媒体报道,尼克-纳斯已与76人达成协议,将成为球队新任主帅。纳斯自2013-14赛季起在猛龙担任助更多

2023-05-30 09:07:09
支配服从测试 支配服从 世界观焦点

支配服从测试 支配服从 世界观焦点

今天来聊聊关于支配服从测试,支配服从的文章,现在就为大家来简单介绍下支配服从测试,支配服从,希望对各更多

2023-05-30 08:15:19
等你下课mp3微盘下载(等你下课mp3微盘下载)|全球速递

等你下课mp3微盘下载(等你下课mp3微盘下载)|全

1、阿细等你下课歌曲已分享到你的百度网盘登陆百度网盘点分享查收哦同求资源的请去百度提问问题地址发我百更多

2023-05-30 07:31:55
三角形的内心向量公式_三角形内心向量公式

三角形的内心向量公式_三角形内心向量公式

1、首先证明这个结论:O是ABC内心的充要条件是:aOA+bOB+cOC=0(均表示向量)证明:OB=OA+AB,OC=OA+AC,代入aOA+bOB+c更多

2023-05-30 06:31:55
雄安新建区域基础设施智慧化水平超90%

雄安新建区域基础设施智慧化水平超90%

5月29日,2023中关村论坛平行论坛——雄安智能城市论坛在北京中关村国家自主创新示范区展示中心举办。论坛更多

2023-05-30 06:08:33
+ 点击查看更多精彩

精彩放送

太原12个楼盘发放18张预售证 仅有3个项目为纯新盘
    今年9月,太原市房产管理局给省城12个楼盘正式发放了18张预售证。...
截至9月底 杭州共完成不动产登记988.72万件
    房产证、土地证,两证合一了!2016年6月1日,在市民之家举行的全市...
各地继续密集发布楼市宽松政策 多地支持农民进城购房
    近期以来,各地继续密集发布楼市宽松政策,其中包括长春、遵义多...
宁波:关于“带押过户”新模式的7个典型问题权威解答来了
    日前,宁波市不动产登记中心试点二手房带押过户新模式。新模式下...
多地政府大手笔回购商品房 苏州拟对10个板块回购约1万套新房
    越来越多的地方政府出手回购当地商品房。近日,一份苏州市政府部...
市场降温豪宅不冷 媒体:北上广深掀起“豪宅热”
    尽管整体市场低迷,但豪宅板块比较稳定。争取成交,忙完这一次,...
    最新见闻