[python] REST api로 제공되는 데이터 파싱

url의 html 코드 불러오기

requests, beautifulsoup 사용

import requests
from bs4 import BeautifulSoup
import pandas as pd

url = "https://www.naver.com"

res = requests.get(url)
soup = BeautifulSoup(res.content, 'html.parser')

rest api에서 json으로 제공하는 데이터를 dataframe으로 저장하기

pandas의 read_json을 사용하여 json->dataframe으로 저장

## json -> dataframe

import pandas as pd

url = "http://openapi.get.url"

df = pd.read_json(url)
df

tolist() 을 이용하여 dataframe의 값을 리스트로 저장하기

import numpy as np

변수1 = np.array(df['<column1>'].tolist())
변수2 = np.array(df['<column1>'].tolist())