完美替代Mask RCNN!BlendMask:實(shí)例分割新標(biāo)桿

??新智元推薦?
來源:我愛計(jì)算機(jī)視覺作者:CV君整理編輯:元子? ?
【新智元導(dǎo)讀】新論文BlendMask: Top-Down Meets Bottom-Up for Instance Segmentation,提出一種自頂向下和自底向上設(shè)計(jì)策略相結(jié)合的實(shí)例分割算法BlendMask,在精度上超越了Mask RCNN,速度上快20%,可謂完美替代Mask RCNN的實(shí)例分割新標(biāo)桿!戳右邊鏈接上?新智元小程序?了解更多!
該文作者信息:
作者團(tuán)隊(duì)來自阿德萊德大學(xué)、東南大學(xué)和華為諾亞方舟實(shí)驗(yàn)室。BlendMask算法思想結(jié)果示例:
上圖展示了Blend過程,BlendMask分支得到的Bases和檢測(cè)分支得到的attns注意力結(jié)果,一一對(duì)應(yīng)按元素相乘再相加合成,得到最終的實(shí)例分割結(jié)果。網(wǎng)絡(luò)架構(gòu)
作者是在SOTA 目標(biāo)檢測(cè)算法FCOS基礎(chǔ)上改進(jìn)得到BlendMask,下圖橙色部分為實(shí)例分割的檢測(cè)分支,綠色部分為使用FPN特征預(yù)測(cè)的一組bases。

檢測(cè)分支得到目標(biāo)包圍框和attns注意力區(qū)塊,其和Bottom 模塊的結(jié)果Bases 經(jīng)Blender模塊blend成最終的分割結(jié)果。
下圖為Bases 和 attentions 結(jié)果示意圖:

實(shí)驗(yàn)結(jié)果
作者將BlendMask 與其他SOTA實(shí)例分割算法在COCO test-dev數(shù)據(jù)集上進(jìn)行了比較:


BlendMask 在速度最快的的同時(shí)精度最高!
下圖為一些分割結(jié)果示例:

該文提出的方法分割結(jié)果更加精確細(xì)致。
詳細(xì)信息請(qǐng)查看原論文。
論文地址:https://arxiv.org/pdf/2001.00309.pdf
期待作者早日開源代碼~
本文授權(quán)轉(zhuǎn)載自公眾號(hào):我愛計(jì)算機(jī)視覺,作者CV君

評(píng)論
圖片
表情
