Data Crawling
1.[Data Crawling] Beautiful Soup ('Connection aborted') issue
많은 요청으로 인한 Beautiful Soup 로드 에러
2021년 4월 1일
2.[Data Crawling] Selenium ('웹 디자이너를 욕하지 말자') TIP
데이터(웹) 크롤링? 웹페이지의 내용을 그대로 가져와서 필요한 데이터를 추출해 내는 것 (본 게시글은 크롤링(셀레니움)에 대한 전반적인 지식이 필요합니다. 아닐수도?) 크롤링을 하면서, 매일 매일 좌절을 겪었다. 정형화되지 않은 웹 형식, 아주 신기하게 'p
2021년 4월 5일
3.[Data Crawling] re ('문자깨짐 - 분명 한글이 아닌데도!') issue
한글이 아닌데도 문자가 깨 진 다, 그것도 저 녀 석 만...데이터 크롤링을 1줄 1눈물닦 하며 힘겹게 확인하는데... 자 꾸 깨 진 다...분명 인코딩을 utf-8로 주었는데도, 왜...방법은 간단하다.인코딩 방식을 'euc-kr'로 바꾼다 ^^
2021년 4월 4일
4.[Data Crawling] re ('cp949 codec can't encode character ... ') issue
요즘에 캡스톤 관련 작업으로 데이터 크롤링을 진행중인데, 크롤링 된 데이터를 csv파일로 쓰던 도중 아래와 같은 오류가 생겼다.인코딩에 문제가 있는데...찾아본 결과, Python3 부터는 ANSI 기준으로 작성된 파일만 핸들링 할 수 있다고 한다.그리하여, 기존의 코
2021년 4월 2일