이미지 내에서 픽셀 단위로 객체를 분류해내는 작업이다.
객체란 Object 즉, 사람, 자동차, 나무, 자전거 등을 말하며 이를 class라고 표현한다.
Segmentation의 장점은 Detection과 Classification을 동시에 할 수 있다는 점이다.
Classification (이미지 분류)과의 차이점은 이미지 분류는 전체 이미지에 대해 하나의 라벨이고, Semantic Segmentation은 모든 픽셀에 라벨 할당히다.
공간 정보는 Classification은 '무엇(what)'만 알 수 있고, Semantic Segmentation은 '무엇 + 어디 (what + where)'까지 파악 가능하다.

출처
blog