# scrapping

8개의 포스트
post-thumbnail

7. Scrapping & Crawling

Scrapping은 우리가 정한 특정 웹 페이지에서 데이터를 추출하는 것으로 예를들면, 특정주제의 뉴스, 인기검색어로 정보 가져오기, 상품의 가격 모니터링하는 것을 말한다.Crawling은 url을 탐색해서 반복적으로 링크를 찾아서 가져오는 과정으로, 웹페이지를 찾아

2023년 1월 16일
·
0개의 댓글
·

scrapping & crawling

다른 사이트에 있는 정보 가져오기 어떻게?? 백엔드에 있는 API들을 통해 html도 주고받을 수 있다. 백엔드에서 주소에 맞는 html을 받을 수 있다. git bash에서 curl 명령어로 실습가능 postman 에서도 확인 가능 라이브러리 : cheerio, puppeteer scrapping 한번 가져오기 -> Cheerio(npm 라

2022년 4월 28일
·
0개의 댓글
·
post-thumbnail

[TIL]Data scraping & crawling

dsadas

2022년 4월 2일
·
0개의 댓글
·
post-thumbnail

Web Scrapping (JavaScript)

웹 스크래핑(Web Scrapping)은 위키백과를 따르면, 웹사이트에서 데이터를 추출하는데 사용되는 데이터 스크래핑이다. 웹 스크래핑은 HTTP 또는 웹 브라우저를 사용하여 World Wide Web에 직접 액세스할 수 있다.

2021년 9월 30일
·
0개의 댓글
·

Python & 웹스크래핑

python을 시작했다. 일년 전쯤에 python을 공부했었는데 한동안 터치를 안 했더니 다 까먹었다😅 그래도 한번 해서 그런지 쉽게 따라갔다. java랑 비교했을 때 python이 훨씬 유연하다는 것을 느꼈다. 학교로 따지면 java는 규칙이 많은 학교고 pytho

2021년 7월 21일
·
0개의 댓글
·
post-thumbnail

Scrapping in Python (3) - save data to csv format

csv.writer.writerow를 사용해서 칼럼의 값을 저장합니다.총정리 합니다.

2021년 2월 28일
·
0개의 댓글
·
post-thumbnail

Scrapping in Python (1) - INDEED 스크래핑하기

웹스크랩핑(Web Scrapping)이란? 웹에 있는 데이터를 가지고 오는 기술을 일컫습니다. 스크래핑할 url 접속 ref https://github.com/psf/requests

2021년 2월 26일
·
0개의 댓글
·
post-thumbnail

Scrapping in Python (0)

웹스크랩핑(Web Scrapping)이란?웹에 있는 데이터를 가지고 오는 기술을 일컫습니다.

2021년 2월 26일
·
0개의 댓글
·