웹크롤러 대마왕

os.getcwd() //현재 디렉토리os.chdir(dir) //dir로 이동os.listdir(dir) //dir의 하위 디렉토리 os.path.exists(dir) //dir의 존재여부 확인os.mkdir(dir) // 폴더를 만들어주는 함수(하위폴더는 안만들어줌

while(True)를 활용하여 숫자가 나올때까지 받고, 모든행이 출력되었을때(indexerror), 예외가 발생하지않을때, break로 끊는다.

네이버, 다음, 구글에서 검색어를 입력받고, txt파일에 내용 추출하기 전체코드 도입 fname으로 현재 디렉토리 저장, 각각 사이트에 맞는 파일이름에다가 크롤링한 정보를 저장할꺼기 때문에 fname+=으로 덧붙여준다. orig_stdout 에 sys.stdou

그 이전에 만든것이랑 비슷하다. 다만, 이번엔 csv파일과 xls파일을 만들꺼기 때문에 이름을 정해주자!저번 코드랑 많이 달라졌다. url규칙으로 인해 바로 검색하게 하고, select도 조금 간결하게 쓰게 되었다.일때 content_list = soup.select(