SOTA는 "State-Of-The-Art"의 약자입니다. 한국어로는 "최첨단" 또는 "최신 기술"로 번역
SOTA 모음 사이트
https://paperswithcode.com
- 자연어 처리 (NLP):
- GPT (Generative Pre-trained Transformer) 시리즈
- BERT (Bidirectional Encoder Representations from Transformers)와 그 변형 모델들
- 컴퓨터 비전:
- Vision Transformer (ViT)
- EfficientNet 시리즈
- 음성 인식:
- Wav2Vec 2.0
- HuBERT (Hidden-Unit BERT)
- 강화학습:
- MuZero
- AlphaFold 2 (단백질 구조 예측)
- 다중 모달 학습:
- CLIP (Contrastive Language-Image Pre-training)
- DALL-E 시리즈