• 웹에서 데이터를 가지고 오는 상황.
• 동적 페이지를 크롤링하기

01

셀프 주유소가 저럼한지 확인?

Selenium

: 크롤링을 위해 만들어진 것이 아니라, 웹 브라우저를 테스트하기 위해 만들어진 것. 서비스가 크롬, 파이어폭스 등에서 잘 작동하는지.

Beautiful Soup 만으로 해결할 수 없는 것

• 접근할 웹 주소를 알 수 없을 때
• 자바스크립트를 사용하는 웹페이지의 경우
• 웹 브라우저로 접근하지 않으면 안될 때 (ex/ 클릭이나 로그인이 꼭필요하다)

Selenium

• 웹 브라우저를 원격 조작하는 도구
• 자동으로 URL을 열고 클릭 등이 가능
• 스크롤, 문자의 입력, 화면 캡쳐 등
  (페북, 인스타 등 스크롤을 내리면 컨텐츠가 더 많이 생길 때)

04

send_keys

: 로그인할 때 많이 사용됨

15

데이터 편집하기

concat

: 형식이 동일하고 연달아 붙이기만 하면 될 때는 list로 하나로 묶은 다음 concat 명령을 사용한다.