# ALBERT
총 4개의 포스트

[NLP] Natural Language Understanding
문제 정의 \- task가 해결하고자 하는 문제가 무엇인가? quora에 올라온 질문 페어가 동일한 의미를 갖는지 확인데이터셋 소개(대표적인 데이터셋 1개) \- task를 해결하기 위해 사용할 수 있는데 데이터셋이 무엇인가? IMDb \- 데이터 구조는
2022년 2월 22일
·
4개의 댓글
리뷰-albert: A lite BERT
이 논문은 앞으로 gpu 메모리 한계와 긴 training 학습의 한계점이 올 것이라고 예측을 하고, 이러한 문제를 해결하기 위한 두가지의 파라미터 축소 방법을 제공을 한다. 이를 통해 적은 메모리 사용과 학습 시간을 빠르게 가져갈 수 있는 이점을 가진다.제시할 두 가
2022년 1월 11일
·
0개의 댓글
ALBERT: A Lite BERT for Self-Supervised Learning of Language Representations
ALBERT 논문 리뷰
2021년 10월 1일
·
0개의 댓글