데이터 엔지니어의 직무에 대한 간략한 설명과 공부 방법론에 대한 내용입니다.
웹 크롤링의 간단한 개념과 실습을 정리한 글입니다.
Pagination에 대한 개념과 간단한 실습을 정리한 글입니다.
Windows 환경에서 wls를 활용하여 간단한 cron 실습을 진행했습니다.
웹 크롤러 스크립트를 cron에 등록해, 정해진 시간마다 데이터를 자동 수집하고 CSV로 저장하는 실습입니다.