3주차에 배운 것
3주차에는 bs4를 설치하고웹에 있는 데이터를 긁어서 내가 활용할 수 있도록 가져오는 크롤링, 그리고 mongoDB에 데이터를 저장하고 이를 robo3T로 확인하는 법을 배웠습니다. 이 두가지를 조합하여 웹에 있는 데이터를 주소를 따와서 크롤링 한 뒤 이를 내 DB에 저장하는 프로젝트를 연습했습니다.
3주차 프로젝트
이 사이트의 1~100위 곡들을 크롤링 하여
아래 처럼 원하는 요소들을 프린트 한 뒤, 이를 mongoDB에 저장하는 프로젝트를 연습했습니다.
기억해야 할 것
- bs4 설치해서 크롤링한 것
- mongoDB에 데이터를 저장, 삭제 그리고 'find'를 사용하여 하나 또는 여러개의 데이터를 꺼내오는 것!
- 크롤링할 때 공백이 생기는 경우도 있는 데 이때 공백제거 함수를 사용해서 원하는 부분만 남기고 공백제거. (
.text[0:2].strip(), 구글링)
