RAG
- Retrieval-Augumented Generation
- 검색 증강 생성
LLM에 공개된 지식이 아닌 vector DB (내가 제공한 데이터) 내에서 답을 찾아 제공해주는것
임베딩
- 문서를 벡터로 바꾸는 과정을 임베딩이라 부름
가상 환경 세팅하기
Pdf -> txt
패키지 설치
venv 폴더가 없다면
- python -m venv .venv
python 가상환경 활성화
- source .venv/bin/activate
python 가상환경 확인
- which python
의존성 설치는 최초 한번만!
- pip install -r requirements.txt
문서 임베딩 하기전 작업
임베딩
-
AI 스튜디오에서 API 키 발급 받아서
-
.env 파일에 입력하기
GOOGLE_GENAI_API_KEY=YOUR_API_KEY -
터미널에 입력하기
python src/embedding.py
embedding.json 파일생성되면 끝
429에러코드 -> 무료면 적당히 해라 너무 양이 많다
