출간일 : 2024-03-15chat gpt에는 open ai가 개발한 언어 모델인 gpt 기술이 사용된다. 언어 모델이란 인간의 언어 즉 자연어를 컴퓨터가 이해할 수 있게 하고 이를 바탕으로 택스트를 생성하기 위한 알고리즘이나 프로그램을 말한다.open ai는 이 g
model I/O은 랭체인의 가장 기본적인 모듈이다. 1\. language models 다양한 언어 모델을 동일한 인터페이스에서 호출할 수 있는 기능 제공prompts해당 모듈은 언어 모델을 호출하기 위한 프롬프트를 구축하는데 유용한 기능을 제공한다. 다양한 처리를
랭체인을 사용해 rdg기법으로 pdf에 포함된 정보를 기반으로 질문하는 챗봇 만들기pymupdf 설치
rag 기법으로 처리하기에는 너무 길어질 수 있기 때문에 text splitters모듈로 문맥을 유지하면서 문장을 적절히 분할해야한다.spaCy는 파이썬으로 개발된 자연어 처리 라이브러리이다.자연어 처리는 인간이 일상에서 사용하는 언어를 컴퓨터가 이해하고 분석할 수 있