한경 오늘의 기업리포트

투자자들이 많이 보는 한경컨센서스의 기업리포트자료 가볍게 크롤링 (22.3.18.기준)

• 크롤링 초보들도 편히 보실 수 있게 한 페이지만 구현

import selenium
from selenium import webdriver 
import pandas as pd

import warnings
warnings.filterwarnings('ignore')

import chromedriver_autoinstaller

path = chromedriver_autoinstaller.install()
driver = webdriver.Chrome(path)
driver.get("http://consensus.hankyung.com/apps.analysis/analysis.list?skinType=business")

time.sleep(2)

title_list = []
url_list = []

elements = driver.find_elements_by_css_selector("td.text_l > a")

for element in elements:
    title_list.append(element.text)
    url_list.append(element.get_attribute('href'))

df = pd.DataFrame({'title':title_list, 'url':url_list})
df.to_csv("today_report.csv", encoding='utf-8')

df