Multimodal data

서로 다른 형태의 정보로 이루어져 뚜렷한 통계적 특성이 구분되는 데이터를 말한다. 관측치 하나(e.g. 반도체)를 설명하기 위해 센서 시그널, 이미지, 텍스트 데이터를 수집할 수 있는 것이 그 예다. 이처럼 다양한 형태로 이루어진 데이터 특징을 효과적으로 학습하기 위한 방법을 Multimodal learning

Coarse-grained & Fine-grained

Coarse-grained란 뭉툭한 라벨을 의미한다. cat, dog와 같이 큰 분류로 구분하는 task를 가리켜 coarse-grained classification이라 지칭한다.
Fine-grained란 좀 더 세세하게 구분한 라벨을 의미한다. cat, dog가 아닌 dog가 쉐퍼드, 요크테리어 등과 같이 좀 더 깊게 라벨을 분류하는 task를 fine-grained classification이라 지칭한다.

Multi-instance learning

   multiple instance learning은 문서가 입력으로 주어졌을 때, 문서를 구성하는 segment 들 각각에 대한 segment classification 을 수행하고, 그 결과를 조합(aggregation)해 document classification 결과를 얻는 것