NLP

✋🏻 파이썬 자연어 처리의 이론과 실제를 읽고 정리한 내용입니다.자연어 처리 관련 애플리케이션은 방대한 양의 데이터를 사용해 만든다.이런 많은 데이터 모음을 코퍼스라고 한다.코퍼스는 코퍼스 분석 뿐만 아니라 언어 분석에 사용되는 실제 언어의 체계적 디지털 모음이다.

NLP에는 2개의 주요 컴포넌트가 있는데 자연어 이해(NLP)와 자연어 생성(NLG)이다.자연어이해는 NLP의 첫 컴포넌트로 간주NLU는 인공지능 하드 문제, 또는 인공지능 완료 문제로 간주됨NLU는 NL 입력을 유용한 표현으로 변환하는 프로세스로 정의됨NLG는 NLP

원시 데이터, 또는 코퍼스로부터 NLP 어플리케이션을 개발하거나 NLP 관련 문제를 해결하는 데 도움이 되는 피처를 생성 또는 유도하는 과정피처 엔지니어링의 목적ML 알고리즘은 소통을 위한 피처의 언어만 이해할 수 있으므로 적절한 속성이나 피처를 찾는 것이 피처 엔지니