Overview

Motivation

Method overview

Point Selection for Inference and Training

Point-wise Representation and Point Head

Experiment: Instance Segmentation

Thoughts


Overview

제목: PointRend: Image Segmentation as Rendering

저자: Alexander Kirillov, Yuxin Wu, Kaiming He, Ross Girshick

기관: Facebook (FAIR)

요약: 기존 image segmentation 연구들은 low resolution의 segmentation mask를 결과로 출력한다. 이 논문에서는 high-resolution의 segmentation mask를 detail하게 predict 하는 방법을 제안한다. Image segmentation을 rendering 관점에서 보고, classical한 rendering 테크닉인 adaptive subdivision[1] 방식을 차용한다. 기존 image segmentation 모델 (Mask R-CNN, FCN)에 flexible하게 적용 가능하다.


Motivation

Instance Segmentation의 대표 모델인 Mask R-CNN의 output mask의 크기는 고작 28x28이다. 이 결과를 high-resolution으로 upsample 하되, 아래처럼 더 detail한 mask를 생성하자는 연구다. 아래는 순서대로 본 논문의 figure 1,7이다.


Method overview