profile
NLP 영원하길..
post-thumbnail

PLM (Pretraining Language Model)

헷갈리는 모델에 대해 정리...Challenge: BERT와 같은 Pre-training language represenation 모델은 일반적으로 모델의 파라미터 크기가 커지면 성능이 향상됨. 하지만 다음과 같은 문제 발생 1\. Memory Limitation:

2022년 7월 7일
·
0개의 댓글
·
post-thumbnail

Importance Estimation from Multiple Perspectives for Keyphrase Extraction (EMNLP 2021)

NLP에서의 keyprhase extraction (KE)은 보통 2개의 파트를 포함함candidate keyphrase extractionkeyphrase importance estimation이전의 KE 방법론들은 bias results을 추출했음.이 논문에서는 t

2022년 7월 5일
·
0개의 댓글
·