# selenium

128개의 포스트
post-thumbnail

[R] 웹 크롤링 준비

아마 " 웹(Web) 정보 수집 "의 꽃은 웹 크롤링이지 않을까 생각된다.오늘은 R로 크롤링을 하기 이전에 준비해야 할 프로그램 및 구동 방법을 설명하려 한다.우선 설치에 앞서 Selenium이 무엇인지 간단히 짚고 넘어가자!Selenium 한 마디로 웹 브라우저

2일 전
·
0개의 댓글
post-thumbnail

스파르타코딩클럽 파이썬 혼자놀기 패키지 1

전에 들어봤는데 2021년 추석 이벤트에 다시 나와서 또 무료수강함.그리고 'copy selector'를 하면......어쨌든 그래서 저 url들을 모두 긁어서 출력하려면 이렇게 하면 된다고 한다.그러면 이런 식으로 뜨고그 링크 중 하나를 가져오면 출력 결과는 이렇고저

5일 전
·
0개의 댓글
post-thumbnail

[ETOOS] Selenium 과 함께라면,, - 2

1편에서 소개했지만 이투스247 학원에서 일을 하고 있고주어진 업무에 시간을 쏟기가 아까워 프로그램을 만들어보고자 한다.나아가 하나의 웹사이트를 만든 후 이투스247 각 지점 마다 사용할수 있도록 배포하는 것이 목표!바보같은 반복 데일리테스트 과목은 국어 2과목, 수학

2021년 9월 8일
·
0개의 댓글
post-thumbnail

What difference executeScript click and checked using Selenium Java

설명하고보니 당연한 차이이긴 하지만, Selenium에서 JavascriptExecuter.executeScript()를 사용할때, click과 checked=true의 차이를 작성해봅니다. JavascriptExecutor >In simple words, Java

2021년 9월 1일
·
0개의 댓글
post-thumbnail

How to get Class attribute on WebElement using Selenium Java

WebElement에서 class의 값을 확인하려면 어떻게 해야할까요?

2021년 8월 31일
·
0개의 댓글
post-thumbnail

[ETOOS] Selenium 과 함께라면,,

Selenium 과 함께하는 회사 업무 덜기!

2021년 8월 21일
·
0개의 댓글

[Py-Stairs] Step.3~4 마감 뉴스 Reader

Step.3부터 파란만장한 실패 연대기가 시작된다.내가 채워야할 부분이 무엇인지, 확실하게 발전하려면 어떤 공부를 해야하는지를알아갈 수 있는 시간이었기에 아주 좌절하진 않았으나...유쾌하지만은 않은 Step들이다.그동안은 사용자에게 정보를 받아 처리하는 프로그램만을 짜

2021년 8월 17일
·
0개의 댓글
post-thumbnail

Toy 프로젝트 - 웹크롤링 part 03

썸네일이미지 출처: https://www.pngwing.com/ko/search?q=cgvpart 01, part 02 순서대로 모두 이어지는 내용이다.이 포스팅은 part 03 으로 마지막 파트이다. '블랙위도우'로 예시를 들고 있다.part 01, part

2021년 8월 8일
·
0개의 댓글
post-thumbnail

Toy 프로젝트 - 웹크롤링 part 02

썸네일이미지 출처: https://www.pngwing.com/ko/search?q=cgv : 이전 포스팅에서까지 url을 뽑았다. 이제부터는 구체적인 전략을 말하겠다. 해당 영화 url에서 댓글, 날짜, 사용자 크롤링 예정댓글 페이지 수에 따른 구분댓글 페이

2021년 8월 8일
·
0개의 댓글
post-thumbnail

Toy 프로젝트 - 웹크롤링 part 01

오늘은 기술블로그 느낌이 나도록 웹크롤링 예제를 보여주려고 한다. CGV 홈페이지에서 특정 영화의 댓글들을 크롤링하는 예제이다. k-digital training 에서는 'Toy 프로젝트'라는 이름으로 개인 프로젝트로 진행하였다. 개발자들이나 웹 관련 종사자들이

2021년 8월 8일
·
0개의 댓글
post-thumbnail

원본 이미지 크롤링 하는법

이전 포스트의 크롤러 앞서 작성한 크롤링 프로그램은 구글 이미지 검색시 나오는 썸네일들을 크롤링하는 코드였습니다. 빠르고 쉽다는 장점이 있지만 사실 썸네일들은 픽셀이 압축된 이미지이기 때문에 화질이 좋지는 않습니다. 실제 썸네일을 크롤링한 결과와 원본 이미지를 크롤링

2021년 8월 7일
·
0개의 댓글

How to setup Selenium on Mac

How to setup Selenium on Mac에러 메시지:해결 방법: chromedriver가 brew로 다운로드 한 프로그램이기 때문에 처음 실행할 때 사용자 확인을 요청받는데, 해당 속성 제거한다.참조: nable to launch the chrome brow

2021년 8월 6일
·
0개의 댓글

[Python] Selenium

find all elements find elements by id execute javascript execute javascript get_property

2021년 8월 5일
·
0개의 댓글
post-thumbnail

브런치 크롤링 하기

이번에 소마 프로젝트를 진행함에 있어서 일기에 대한 데이터를 수집을 해야 했습니다. 네이버 블로그나 브런치, 벨로그를 둘러보던중 자신의 감정에 솔직하게 작성하고 다양한 주제가 있어서 브런치를 선택하게 되었습니다.저의 크롤링 과정은 다음과 같습니다.브런치 메인 화면에서

2021년 8월 4일
·
0개의 댓글
post-thumbnail

이미지를 직접 크롤링해보자~

크롤링? 사실 이 게시글을 보러 들어온 사람이라면 대부분 크롤링 이 뭔지 이미 알고있을 것이라고 생각됩니다. 크롤링 이란 무수히 많은 컴퓨터에 분산 저장되어 있는 문서를 수집하여 검색 대상의 색인으로 포함시키는 기술. 어느 부류의 기술을 얼마나 빨리 검색 대상에 포함

2021년 8월 1일
·
0개의 댓글

동적 웹페이지 html 코드 긁어오는 방법

어? 왜 내가 원하는 내용이 tag 안에 없지?gazpacho library를 사용해 크롤링을 하던 도중 위와 같은 문제를 맞닥뜨렸다. 이런 경우는 tag 안의 내용이 동적으로 생성되는 부분이였기에 단순히 html 코드만 받아온 상태에서는 이를 긁을 수 없다. 현재

2021년 7월 24일
·
0개의 댓글
post-thumbnail

selenium으로 유튜브 구독목록 마이그레이션 자동화하기

최근에 구글 아이디를 새로 만들었더니 기존에 사용하던 구글 계정의 유튜브 구독 목록은 옮길 방법이 없다는 문제가 생겼습니다. 유튜브는 원래 구독관리 페이지에서 구독목록을 xml파일로 내보내는 기능이 있었습니다. 하지만, 어느 순간 조용히 그 기능이 사라졌습니다.'이 자

2021년 7월 17일
·
0개의 댓글
post-thumbnail

Some method of ExpectedCondition on Selenium Java

회사 코드를 리팩토링하면서 구글링하면서 얻은 지식을 좀 정리해봅니다... Explict wait를 사용할 때, 조건을 부여하기 위해 사용하는 ExpectedCondtion 에 대해 알아봅니다.

2021년 7월 17일
·
0개의 댓글
post-thumbnail

TIL 10. Python 따라하며 익히기 #selenium 활용 (자동로그인/자동검색)

selenium은 웹사이트 테스트를 위한 도구로 브라우저 동작을 자동화할 수 있습니다. 프로그래밍으로 브라우저 동작을 제어해서 마치 사람이 이용하는 것 같이 웹페이지를 요청하고 응답을 받아올 수 있습니다.1) selenium 설치 : 명령 프롬프트에서 pip inst

2021년 7월 14일
·
0개의 댓글

우분투에서 파이썬 셀레니움 프로젝트 생성하기[virtualenv]

프로젝트 클론하기: https://github.com/suhongkim98/selenium-firefox1) 운영체제에 맞는 gecko driver를 다운받는다. https://github.com/mozilla/geckodriver/releases/l

2021년 7월 9일
·
0개의 댓글