[논문 읽기] IMP(2019), Instance Mask Projection for High Accuracy Semantic Segmentation of Things

IMP: Instance Mask Projection for High Accuracy Semantic Segmentation of Things

 PDF, Panoptic Segmentation, Cheng-Yang Fu, Tamara L. Berg, Alexander C. Berg, arXiv 2019

 

Summary

 

 

 

 

 detector로 object를 검출하고 instance branch로 mask를 추출한다. 추출한 mask를 Canvas에 project하여 새로운 피쳐맵을 생성한다. project는 canvas와 detection score * instance mask의 값중 높은 값을 선택한다. 새로운 feature map을 canvas와 concat한 뒤에 semantic branch로 전달하여 semantic seg를 수행한다.

 

 따라서 instance mask 정보를 semantic branch 입력값에 주입하여 semantic seg의 성능을 높인 모델이라고 생각해볼 수 있다.

 

Experiment

 

 

 

 

---

my github

Seonghoon-Yu/Paper_Review_and_Implementation_in_PyTorch