겜린더 스크래핑 봇 제작기

드디어 겜린더의 핵심이라고 할 수 있는 게임 데이터를 수집하려고 한다.

Selenium으로 야무지게 데이터 수집해보기 시리즈

Steam, Xbox, Playstation, Nintendo Switch에 있는 출시 예정 게임들을 전부 가져와 MariaDB에 저장하고 MongoDB로 보내는 작업을 수행하는 데이터 파이프라인을 구축하였다.

전에 만들었던 데이터 수집 봇을 테스트 하고있었는데 생각보다 많은 오류와 불편한 점이 발견되어 이를 개선시키기 위해 다시 좀 들여다보았다.