# cheerio

5개의 포스트
post-thumbnail

Node.js 배치 크롤러 만들어보기

타겟사이트 : (전력거래소) https://www.kpx.or.kr/ 시뮬레이션 : 전력거래소에서오늘의 SMP, 오늘의 REC를 하루에 한번씩 긁어오는 간단한 배치 크롤러를 구현해봅니다.node v13.8.0package.jsonnodeCrawling 디렉토리

2020년 3월 30일
·
1개의 댓글

[개인프로젝트] SmartWallpaperFinder

1. 개요 배경화면 크롤링 사이트입니다. alpacoders라는 대형 Wallpaper 사이트를 자주 이용하는 편인데 키워드를 검색했을 때, 30개씩 정보를 보여주고 다음페이지를 클릭해서 넘어가야지만 다음 정보를 가져오는데에 불편함을 느껴 키워드를 검색했을 때 클릭하는 번거로움 없이 한눈에 이미지들을 보면 좋을 것 같다는 생각에 웹사이트를 기획해보았습니다....

2020년 1월 19일
·
0개의 댓글
post-thumbnail

Typescript와 Express로 재밌는 무언가를 만들어보자!(3)

서론 지난 포스트에서 프로젝트 세팅을 모두 끝마쳤습니다! 이제 실제로 멋진 Typescript Express 크롤러를 만들어볼 차례입니다. 어서 개발하러 가시죠! 1. 크롤러의 작동원리 크롤러의 작동원리는 사실 정말 별 것도 없습니다. 우리가 일반적으로 웹 서핑을 할 때 보는 웹 페이지들은 다들 알고 계시는 것처럼 HTML과 CSS, 자바스크립트로 동작하...

2019년 8월 19일
·
13개의 댓글
post-thumbnail

Typescript와 Express로 재밌는 무언가를 만들어보자!(1)

서론 안녕하세요! Medium에서 글을 쓰다가 코드는 안예뻐쁘고, github gist를 쓰기엔 귀찮아서 velog로 찾아온 사람입니다. 이상한 소리는 집어치우고, 서론이지만 본론으로 들어가봅시다. 저는 원래 Typescript(I love TS)와 React를 좋아하는 프론트엔드 개발자였습니다. 하지만 모든 개발자들이 그러하듯이 풀스택!!!의 꿈을 가지...

2019년 7월 30일
·
7개의 댓글
post-thumbnail

[sanitize-html] iconv없이 한글 웹페이지 크롤링하기

사연 request모듈을 활용해서 한글 웹페이지를 받아 온 다음 cheerio를 써서 엘리먼트를 찾아 그 안에서 html을 가져오는 작업이었는데, html이 깨져서 출력되었다.

2018년 12월 4일
·
2개의 댓글