profile
Software engineer who specialized in NLP

[논문리뷰]Attention Is All You Need

1) Introduction 기존 Language Model들은 context를 반영하기 위해서 Recurrent Neural Network(RNN) 기반으로 이전의 레이어의 state를 현재 state에 반영하는 방법을 사용해왔다. 이러한 순서에 의존적인 학습 방

2021년 5월 2일
·
0개의 댓글