크롤링을 하게 될때 , 한글이 깨지는 현상을 보게 된다 .
https://sfixer.tistory.com/entry/python3-beautifulsoup-%ED%95%9C%EA%B8%80-%EA%B9%A8%EC%A7%90
res = requests.get(common_category_url, headers=HEADERS)
data = BeautifulSoup(res.content, 'html.parser')
이코드를 그대로 실행 시키게 되면 한글이 깨져서 나오게 된다 .
이것을 decode 를 해줘야 한다 .
data = BeautifulSoup(res.content.decode('euc-kr', 'replace'), 'html.parser')
res.content 부분을 decode 를 해주면 됩니다.