# torchtext
총 4개의 포스트
[NLP] 자연어처리에 사용되는 Dataset(데이터셋), Dataloader 만들기
spaCy의 Tokenizer와 torchtext을 활용하여 말뭉치를 단어 사전으로 바꾼다. 단어 사전을 활용해 데이터셋을 구성하고 학습을 위한 데이터로더를 구성하는 방법에 대해 배운다.
2022년 7월 30일
·
0개의 댓글·
0[NLP] torchtext, spaCy를 이용하여 Vocab 만들기
spaCy의 Tokenizer와 torchtext의 Vocab을 활용하여 말뭉치를 단어사전으로 바꾸는 실습을 진행해본다.
2022년 7월 30일
·
0개의 댓글·
0[NLP] NLTK, spaCy, torchtext를 이용하여 영어 토큰화(English Tokenization)작업 수행하기
토큰화를 위해 사용되는 자연어처리 라이브러리인 NLTK, spaCy, torchtext에 대해 알아본다.
2022년 7월 30일
·
0개의 댓글·
0