웹크롤링 파일 yaml에 설정 절차

• 크롤링을 action으로 지정하기 위하여 다음과 같은 절차를 준수

1. requirements.txt로 패키지 설치
2. 크롤링 파일 생성
3. requirements.txt, 크롤링 파일 yaml에 설정하여 자동화하기

• 파일 위치 참고
  

1. requirements.txt

• 웹 크롤링을 위하여 설치할 패키지 정보가 담긴 requirements.txt 파일 생성
• beautifulsoup4, requests은 파일에 반드시 추가하기

2. crawling.py 파일생성 및 작성

• 크롤링을 위한 코드를 작성
  

3. yaml에서 crawling 파일 연결

• run에 requirements.txt 파일을 이용한 설치, 파이썬을 실행하는 코드를 설정해준다.
  

---

참고

• Github Action을 활용한 크롤러 웹 페이지 만들기