파이썬(request, bs4 라이브러리)을 통한 크롤링 기본 환경

hyein·2022년 8월 8일

웹프로그래밍(중단)

목록 보기
10/12
  1. 파이참에서 라이브러리 설치하기(Requests, bs4)
  • 상단바의 File-Settings(설정)
  • Project-Python Interpreter
  • '+'버튼 눌러서 라이브러리 검색
  • Install Package

-여기서 패키지 설치 = 외부 라이브러리 설치라고 생각하면 된다.
-Requests라이브러리로 HTML 코드를 다운로드 하고,
BeautifulSoup라이브러리로 원하는 데이터를 파싱한다.

import requests
from bs4 import BeautifulSoup

headers = {'User-Agent' : 'Mozilla/5.0 (Windows NT 10.0; Win64; x64)AppleWebKit/537.36 (KHTML, like Gecko) Chrome/73.0.3683.86 Safari/537.36'}
data = requests.get('https://movie.naver.com/movie/sdb/rank/rmovie.naver?sel=pnt&date=20210829',headers=headers)

soup = BeautifulSoup(data.text, 'html.parser')

0개의 댓글