자연어 처리 : 공부할 것들 (강의, 책, 블로그 등등)

이향기·2021년 9월 5일
4

[강의]

CS224N

-강의 공식 홈페이지
https://web.stanford.edu/class/archive/cs/cs224n/cs224n.1194/
-유튜브 URL
https://www.youtube.com/playlist?list=PLoROMvodv4rOhcuXMZkNm7j3fVwBBY42z


[책]

밑바닥부터 시작하는 딥러닝2 : 파이썬으로 직접 구현하며 배우는 순환 신경망과 자연어 처리

-당장 최신의 딥러닝 기술이 적용된 자연어처리를 구현할 수 있도록 해주는 응용서적은 아니다.
-하지만, 자연어처리의 최신 기법의 근간이 되는 word2vec, RNN, LSTM, Attention과 같은 개념들을 이해할 수 있도록 도와주는 기본서적이다. 설명이 아주 잘 되어있고, 모든 개념들을 구현하는 코드가 Package없이 쓰여있다. 추천한다! (역시 일본인이 쓴 기술서 bb)

-교보문고 온라인
http://www.kyobobook.co.kr/product/detailViewKor.laf?ejkGb=KOR&mallGb=KOR&barcode=9791162241745&orderClick=LEa&Kc=
-깃허브 URL
https://github.com/WegraLee/deep-learning-from-scratch-2

딥러닝을 이용한 자연어처리 입문

-아쉽게도 아직 책을 출간하지 않으신듯 하다 ㅎ
-하지만 출간된 책이 아니라서, 꾸준히 최신 기법까지 업데이트가 된다는 장점이 있는 것 같다.
-위의 '밑바닥부터 시작하는 딥러닝2'의 내용을 거의 모두 포괄하며, 더 나아가 Tokenizer, Transformers와 BERT까지 다룬다.
-Tensorflow, Keras를 사용하여 구현하는 부분이 아쉽다.

-위키독스 URL
https://wikidocs.net/book/2155

만들면서 배우는 파이토치 딥러닝

-자연어처리만을 다루는 책은 아니다.
-Pytorch를 활용해 딥러닝 모델링을 하는 과정을 예시를 들어 알려주는 책.
-하지만, BERT를 활용한 감성분석 예제를 들고있어, 참고하기 충분할듯 하다.
(또한 전이학습, 파인튜닝에 대한 개념도 알 수 있을듯 하다.)

-교보문고 온라인
http://www.kyobobook.co.kr/product/detailViewKor.laf?ejkGb=KOR&mallGb=KOR&barcode=9791162244609&orderClick=LEa&Kc=


[블로그]

위클리NLP

-자연어 처리에 관련된 주제를 1주일에 하나씩 올려주시는 컨셉의 블로그
-이미 꽤 많은 글이 올라와있으니 참고!
-학위를 따거나 스터디를 하는 방식이 아닌, 혼자 무언가 공부하다보면 내가 잘 가고 있는건지, 뭘 공부해야 하는건지 막막하고, 공부한 내용을 같이 얘기나누어줄 사람이 없어서 힘든 것 같다. 이 블로그가 나에게 큰 힘이 되어줄듯 ><
-글 중에서 1주년 Q&A에 어떻게 공부해야하는지 답변해 주신게 있다. 참고!
-블로그 URL
https://jiho-ml.com/tag/weekly-nlp/


[경진대회]

DACON

-아무래도 자연어처리로 풀고자하는 문제 중 한국어를 대상으로 한 문제가 많을 것 같아, Kaggle보다는 DACON이 적절할 것이라고 생각한다.
-현 시점 기준, [자연어 기반 기후기술분류 AI 경진대회], [뉴스 토픽 분류 AI 경진대회]가 연습용으로 접근 가능하니 참고!
-앞으로 또 자연어처리 관련 경진대회가 열리면 참여해보고싶다~
-DACON URL
https://dacon.io/

profile
Data science & Machine learning, baking and reading(≪,≫)

0개의 댓글