EDA, 웹크롤링

VScode, Jupyter Notebook, Colab 등을 활용하여 진행하여 먼저 각각의 환경 설정을 진행하였다. ◼가상 환경 프로젝트별 관리를 용이하게 하기위해 venv로 가상 환경을 생성하여 사용한다. ▫가상 환경 생성 python -m venv '가상 환경명'

서울시 구별 CCTV 현황 시각화서울시 CCTV 경향 파악지역별 상대적인 CCTV 수 파악Python, Pandas서울시 구별 CCTV 현황 데이터서울시 구별 인구 현황 데이터CCTV와 인구 현황 합치기데이터 정리, 정렬Matplotlib그래프를 통한 시각화Regres

데이터 읽기 및 컬럼명 변경최근 증가율 컬럼 추가2013년도 이전과 비교하여 2014, 2015, 2016년도 CCTV 개수 증가율데이터 읽기 및 컬럼명 변경첫 행인 '합계' 행은 필요없으므로 삭제unique 함수 : 중복 제외 데이터 확인 가능데이터 양이 많아지면 초

서울시 CCTV 현황 분석(2)와 같이 준비표로만 정보를 전달하는 것은 한계가 있다.이를 보완하기 위해 시각화(Visualization)한다.matplotlib에서 한글 사용을 위해 폰트 변경Pandas DataFrame은 데이터 변수에서 바로 plot() 명령을 사용

◼개요 데이터 과학의 목적 가정(혹은 인식)을 검증하고 표현하는 것 2014-10월 기사 : 서울 강남 3구 체감안전도 높아 => 검증 및 확인 활용 : Googlemaps, Folium, Matplotlib, Seaborn, Pandas, Numpy 데이터

◼Beautiful Soup HTML : 웹 페이지를 구성하는 마크업 언어 html 태그 : 웹 페이지 표현 head 태그 : 눈에 보이지 않지만 문서에 필요한 헤더 정보 보관 body 태그 : 눈에 보이는 정보 보관 Beautiful Soup 테스트를

시카고 최고의 샌드위치 50 기사 : 링크식당명, 메뉴명, 가격,주소, 위치 추출지도에 각 식당 시각화페이지 요청url_base = 'https://www.chicagomag.com'url_sub = '/Chicago-Magazine/November-2012/

네이버 영화 메인 페이지 링크영화랭킹 평점순(현재상영영화) 링크https://movie.naver.com/movie/sdb/rank/rmovie.naver?sel=cur&date=20210926date=날짜 : 날짜를 변경하여 다른 날짜에 접근할 수 있다.테스

Selenium웹 브라우저를 원격 조작하는 도구자동으로 URL을 열고 클릭 등이 가능스크롤, 문자 입력, 화면 캡처 등등설치 : 파이썬 모듈 + 크롬 드라이버pip install selenium | conda install selenium크롬 버전 확인 : 94.\_\

opinet : 링크대한민국 주유 가격싼 주유소 찾기 - 지역별 : 링크목표 데이터 : 브랜드, 가격, 셀프 주유 여부, 위치데이터가 바뀌어도 주소가 변경되지 않아 BeautifulSoup로 접근하기 어렵다웹 주소 접근해당 URL로 한 번에 접근이 안된다.메인 페이지로

◾import ◾iframe iframe : html 안의 또 다른 html selenium 활용 request 활용 네이버 금융 추출 테스트 매매 기준율은 iframe에 담겨있어 바로 접근이 불가능하다. 1. Selenium iframe 태그 지정 -> s

설치Visual C++ Build Tool 설치 : 링크pip install pandas-datareader | conda install pandas-datareaderpip install fbprophet | conda install -c conda-forge fbp

네이버 API : 네이버 개발자 센터Open API 신청발급된 개인 ID, Secret으로 API 연동개발자 가이드를 보며 테스트 : <a href='https://developers.naver.com/docs/serviceapi/search/blog/b