딥러닝 공부방

SPNet, Semantic Projection Network for Zero- and Few-Label Semantic Segmentation PDF, Zero-Shot Semantic Segmentation, Yongqin et al, CVPR 2020 Summary embedding based zero-shot semantic segmentation 모델입니다. SPNet은 두 가지로 구성되어 있습니다. (1) Visual-semantic embedding module 이미지를 입력 받아 segmentation model에 전달하여 a x b x d_w 의 피쳐맵을 생성합니다. d_w는 werd embedding의 차원과 동일합니다. (2) Semantic Projection (1)이 생성한 fea..

Context-aware Feature Generation for Zero-shot Semantic Segmentation PDF, Zero-shot segmentation, Zhangxuan, at al, arXiv 2020 Summary unseen object를 segment하는 zero-shot semantic segmentation 논문이다. 해당 논문은 genetation에 context-aware feature를 주입하여 unseen image를 더 정확하게 생성하여 성능을 끌어 올린다. pixel-wise contextual information을 포착하기 위해 contextual module을 제안하는데, 이 semantic word embedding과 contextual informat..

Zero-Shot Semantic Segmentation PDF, Zero shot semantic segmentation, Xizhou Zhu, Weije Su, Lewei Lu, Xiaogang Wang, Jifeng Dai, arXiv 2019 Summary 요즘 부쩍 zero shot에 대해 관심이 많아졌다. CLIP을 읽고 Zero-shot에 대한 강한 흥미가 생겼는데, segmentation에서는 zero shot을 어떻게 적용하는지 궁금해서 읽어보았다. 우선 좀 복잡한것 같다. unlabeled segmentation dataset이 없어서 labeled dataset에서 몇 개의 label을 제외하고 학습을 진행하는 것 같다. supervision segmentation 모델로 featur..