프로젝트에서 사용하는 데이터를 뉴스나 메일 데이터를 사용했으면 오타나 은어사용이 적었을텐데 학생들이 에브리타임에서 작성한 강의리뷰데이터를 가져와서 사용하다보니 전처리 해야할 부분이 굉장히 많아졌다.😢
크롤링하다가 에브리타임 계정 차단 당함... 다들 미리 알아보고 조심합시당... 그래서 크롤링은 어떻게 해야할까요? 로그인이 필요한 웹사이트를 크롤링해야하는 경우 우선 로그인을 하는 과정에 대해서 공부해봅시당 브라우저에서 서버로의 요청(request)과 서버에서