AI Tech Day 30 (Transformer)

이연걸·2021년 9월 14일
0
post-thumbnail

1. 오늘 일정

1) 강의 수강
2) 삼전 자소서
3) 피어 세션

2. 학습 내용

삼전 자소서쓰느라 바쁘기도 했고, 내일도 이어지는 내용이니 내일 정리 예정.

3. 피어 세션 정리

  • Q, K, V 역할 의미
  • 트랜스포머와 Seq2Seq 차이점
  • Q, K가 self attention에서 유사도가 높을텐데 의미가 있나?

4. 과제 수행 과정

  • 과제 x

5. 회고

  • 삼전 자소서쓰는데 너무 많은 시간을 할애한듯 하다.
  • 내일부터는 트랜스포머에 더 집중하자!

6. 내일 할일

  • 트랜스포머 강의 마무리
  • 논문 발표 준비
profile
AI가 세상을 바꾼다. 열심히 AI를 배워서 선한 영향력을 펼치는 개발자가 되고싶다. 인생은 Gradient Descent와 같지.

0개의 댓글

관련 채용 정보