# selenium

67개의 포스트

TIL#65 KakaoFriends Crawling

1차 프로젝트 - kakao crawling

2020년 9월 16일
·
0개의 댓글

⛱ 웹 크롤링

어떤 태그는 크롤링이 되고, 어떤 건 seletor이고 어떤 건 그냥 copy고,, 정리를 해보려고 한다. 1. csv파일 생성 크롤링해서 데이터를 뽑았으면 csv파일로 생성해야 DB에 넣을 수 있다. 2. Beautifulsoup4 공식문서 2. 요소 가져오기

2020년 9월 13일
·
0개의 댓글
post-thumbnail

Selenium

신나는 새 학기가 시작됐다. 이번 학기에는 하고 싶은 공부를 하면서 여유롭게 보내리라 첫 번째 신나는 공부는 Selenium이다. 나는 취업전략개발팀에서 근로를 하고 있는데 근로장학생으로서 고정적인 업무가 하나있다. 매주 30개의 채용공고를 취합해서 엑셀에 정리하는

2020년 9월 5일
·
0개의 댓글
post-thumbnail

OpenCV | Web crawling | 프로젝트2 : step1

1 인스타 웹크롤링을 위한 준비 1-1 셀레니움, 크롬드라이버 설치하기 우선 셀레니움, 크롬드라이버를 통해 인스타 속 클래스를 뽑아내야 한다. 처음 써보는 selenium 이었지만 이미 설치는 되어있었다. 그리고 chromedriver를 설치한다. 본인의 크롬

2020년 8월 29일
·
0개의 댓글
post-thumbnail

스타벅스로 배우는 웹크롤링

앞에서는 빌보드 차트로 웹크롤링을 해보았다...!스타벅스 웹크롤링은 빌보드 차트보다 조금 더 수월하게 느껴졌다.방식은 거의 동일하니 구현해보도록하자!이번에는 스타벅스 코리아에 있는 MENU에 음료에 있는 모든 음료의 제목과 이미지를 크롤링해서 csv로 저장해 봅시다.구

2020년 8월 2일
·
0개의 댓글
post-thumbnail

빌보드 차트로 연습하는 웹 크롤링

빌보드 차트로 웹크롤링에 대하여 알아보겠습니다.우선, 빌보드 차트를 한번 보시죠~짜쟌~ 이런식으로 구성되어있습니다.빌보드차트에서 순위, 곡, 아티스트 정보, 이미지를 BeutifulSoup/셀레니움을 이용하여 크롤링 해보겠습니다~!우선, 크롤링을 위한 새로운 가상환경을

2020년 8월 2일
·
0개의 댓글

스타벅스 페이지로 시작하는 웹 크롤링

위코드 11기 웹 크롤링의 두 번째 과제에 대해 발표를 준비하게된 겸해서 블로그에 정리까지 하기로 했다. 과제는 스타벅스 코리아 음료페이지에서 음료의 이름과 그 이미지 URL을 csv 파일에 담는 것이다. 그럼 시작해보자!웹 크롤링이란 웹 상에서 존재하는 컨텐츠를 수집

2020년 7월 28일
·
0개의 댓글
post-thumbnail

[Selenium] Java를 이용한 다음 카카오 메일 자동화 삭제

개요 토이 프로젝트로 무엇을 만들까 하다가 Selenium를 이용하면 크롤링, 자동 로그인 기타 등등 웹브라우저를 컨트롤 할 수 있다는 이야기를 듣고 한번 찾아보기로 했다. Selenium이란? 공식 문서상에 이렇게 소개되어있다. > Selenium automate

2020년 7월 18일
·
0개의 댓글

파이썬 에러 - chromedriver

현재 사용중인 크롬 브라우저와 chromedriver의 버전이 달라 발생된 에러

2020년 7월 2일
·
0개의 댓글
post-thumbnail

Selenium Grid

Selenium을 이용하여 원격으로, 여러 컴퓨터에서 테스팅을 하는 grid 시스템에 대해 정말 간략하게 소개합니다.

2020년 6월 6일
·
0개의 댓글

Web Crawling 연습

빌보드차트처음 해보기도 하지만, 잘 이해하지못해 3일내내 이 코드만 붇잡고있었다.먼저 크롤링하여 받을 값들을 저장하기위해 csv를 설정해주었다, .writerow를 사용하여 해당csv의 값들의 title을 정해주었다.그다음 Chromedriver를 사용할 준비를 한다.

2020년 6월 4일
·
0개의 댓글
post-thumbnail

Table Column sort

테이블 컬럼의 정렬상태를 확인해야할 때는 어떻게하면 될까요?

2020년 6월 2일
·
0개의 댓글
post-thumbnail

토이 프로젝트 기획 _ 카카오톡 챗봇

2020년은 코로나의 해로 참 힘든 학기를 맞이하고 있다.학교에 단 한번도 등교한적이 없이 무의미하게 한학기를 마무리하고있다.필자는 대학 학부 3학년 학생으로 올해 공익근무요원 입대를 앞두고있다.방학생활과 공익근무기간에 실행할 몇가지 토이프로젝트를 기획해보려고한다.Py

2020년 6월 2일
·
0개의 댓글
post-thumbnail

How to take Screenshot

Selenium을 사용시에 스크린샷은 어떻게 찍으면 될까요?

2020년 6월 1일
·
0개의 댓글
post-thumbnail

Maximizing window and Deleting cookies using Selenium

Selenium으로 인터넷 창의 최대화나 쿠키를 삭제하는 방법

2020년 5월 31일
·
0개의 댓글
post-thumbnail

Handling HTTPS Certification using Selenium

Selenium을 이용하여 HTTPS Certification을 적용? 하는 방법.

2020년 5월 27일
·
0개의 댓글
post-thumbnail

LAKA_Project - DAY2 - 크롤링

오늘은 평소보다 1시간 일찍 나와서 프로젝트1일 차 저녁부터 진행해본 웹 크롤링을 아침 약 40분 정도 진행해보다 우리 조가 진행할 프로젝트 모델링을 위한 aquerytool 을 보며 따라해보기를 시도 했다.에이쿼리 툴 뿐만 아니라 모델링에 대해 취약점을 계속 발견해서

2020년 5월 26일
·
0개의 댓글

셀레늄 크롤링

리퀘스트 가지고는 못 가지고 오니까 동적인 요소를 가져온 다음에 크롤링 하려고페이지 로드 시간을 줘야한다.xpath --> 태그의 다른 경로 표기방식로딩될 시간을 줘야 한다.정확하게 딸려고 id를 쓴다.get_attribute ---> 셀레늄 for selenium

2020년 5월 26일
·
0개의 댓글