設(shè)置
  • 日夜間
    隨系統(tǒng)
    淺色
    深色
  • 主題色

北京智源推出通用視覺 AI 模型 SegGPT:可自動追蹤并分割影音中的物體

2023/5/31 10:58:47 來源:IT之家 作者:漾仔(實習(xí)) 責(zé)編:汪淼
感謝IT之家網(wǎng)友 肖戰(zhàn)割割 的線索投遞!

IT之家 5 月 31 日消息,在 2023 年中關(guān)村論壇人工智能大模型發(fā)展論壇中,北京智源人工智能研究院推出了旗下通用分割模型 SegGPT(Segment Everything In Contex)

▲ 圖源 Arxiv

據(jù)稱,SegGPT 模型是智源通用視覺模型 Painter 的衍生模型,具備上下文推理能力,在訓(xùn)練完成后只需要提供示例即可推理并完成對應(yīng)分割任務(wù),包括圖像和視頻中的實例、類別、零部件、輪廓、文本、人臉、醫(yī)學(xué)圖像等,都可以利用視覺提示詞(Prompt)完成分割任務(wù)。

▲ 圖源 Arxiv

SegGPT 也擁有支持任意數(shù)量視覺提示的推理能力。能夠以第一幀圖像和對應(yīng)的物體掩碼作為上下文示例進行自動視頻分割,并且可以用掩碼的顏色作為物體的 ID,進行自動追蹤。

IT之家經(jīng)過查詢知悉,此前 Meta 也發(fā)布了其基于 AI 的 Segment Anything Model (SAM)模型 ,具有識別和分離圖像和視頻中特定對象的能力。而威斯康辛麥迪遜、微軟、港科大等機構(gòu)的研究人員也推出 SEEM 模型,通過不同的視覺提示和語言提示,一鍵分割圖像、視頻。IT之家的小伙伴們可以從這里訪問模型的論文鏈接。

廣告聲明:文內(nèi)含有的對外跳轉(zhuǎn)鏈接(包括不限于超鏈接、二維碼、口令等形式),用于傳遞更多信息,節(jié)省甄選時間,結(jié)果僅供參考,IT之家所有文章均包含本聲明。

相關(guān)文章

關(guān)鍵詞:視覺,模型,圖像SegGPT,北京智源

軟媒旗下網(wǎng)站: IT之家 最會買 - 返利返現(xiàn)優(yōu)惠券 iPhone之家 Win7之家 Win10之家 Win11之家

軟媒旗下軟件: 軟媒手機APP應(yīng)用 魔方 最會買 要知