UPSNet

abstract 

 

이 논문에서는 새롭게 제안된 panoptic segmentation 작업을 처리하기 위한 통합 panoptic segmentation network 를 제안한다.

 

single backbone residual network 위에 두 하위 작업을 동시에 해결하는 변형 가능한 컨볼루션 기반 시맨틱 분할 헤드와 Mask R-CNN스타일 인스턴스 분할 헤드를 설계한다ㅏ. 

 

더 중요한 것은 픽셀 단위 분류를 통해 파놉틱 segmentation을 해결하는 매개 변수가 없는 파놉틱 헤드를 도입한다.

 

먼저 이전 두헤드의 로짓을 활용하고 segmentation과 instance segmentation 간의 충돌을 더 잘 해결하는 데 도움이 되는 알려지지 않은 추가 클래스의 예측을 가능하게 하기 위해 표현을 혁신적으로 확장한다. 

또한 다양한 인스턴스 수로 인해 발생하는 문제를 처리하고 엔드 투 엔드 방식으로 하위 모듈로 역전파를 가능하게 한다. 

cityscaoes,coco의 대규모의 실험적인 결과와  내부 데이터 세트에 대한 광범위한 실험 결과는 upsnet이 훨씬 빠른 출론으로 최첨단 성능을 달성한다는 것을 보여준다.