Part 04. EDA/웹크롤링/파이썬프로그래밍

미니콘다 설치 및 환경설정 'conda activate ds_study' -> 수업 전에 항상 들어가놓기 'conda deactivate' -> base로 돌아감 'jupyter notebook' -> 크롬창으로 열림 -> 코드실행: Shift+Enter matplo

서울시 구별 인구수 대비 CCTV 현황 그래프 그리기 #Python, Pandas 1) 서울시 구별 CCTV 현황 데이터 확보 2) 인구 현황 데이터 확보 3) CCTV 데이터와 인구 현황 데이터 합치기 4) 데이터를 정리하고 정렬하기 #Matplotlib 5) 그

matplotlib의 기초파이썬의 대표 시각화 도구삼각함수 그리기plt.figure(figsize=(10, 6)) \`\`\`colormap = tdef drawGraph():drawGraph()import matplotlib.pyplot as pltfrom matp

강남3구 범죄현황 데이터 개요 및 읽어오기 숫자값들이 콤마(,)를 사용하고 있어서 문자로 인식될 수 있음 -> 천단위 구분(thousands=",")라고 알려주면 콤마를 제거하고 숫자형으로 읽음 -> info(): 데이터의 개요 확인하기 RangeIndex가 655

seaborn boxplot swarmplot heatmap pairplot : 경향을 보여줌 lmplot 범죄현황 데이터 시각화 Folium 지도 시각화 folium.Map() save("path") tiles option -> 지도 테마 선택 f

Beautiful Soup 기초 터미널에서 ds_study루트로 간 다음에 code . -> Visual Studio Code 실행 ctrl+shift+p 누르고 python select interpreter -> ds_study 선택해서 연결해주기 html 만들기

시카고 맛집 메인페이지 분석 시카고 맛집 [0]번째 데이터부터 가져와보기 -> bs4.element.Tag : find함수 사용가능 -> '1' -> 'BLT\nOld Oak Tap\nRead more ' -> '/Chicago-Magazine/November

selenium 설치 >- Beautiful Soup만으로 해결할 수 없는 것 -접근할 웹 주소를 알 수 없을 때 -자바스크립트를 사용하는 웹페이지의 경우 -웹 브라우저로 접근하지 않으면 안 될 때 >- Selenium -웹 브라우저를 원격 조작하는 도구 -자동으로

Naver API 등록네이버, 페이스북, 구글 등 IT 거대 기업들부터 많은 S/W 관련 회사들이 자사 제품을 사용하는 것에 대해 API를 제공함특히 요즘처럼 웹크롤링에 대한 방어가 점점 심해지는 이때, 해당 회사의 API를 사용하는 것이 오히려 더 바람직할 수 있음\

인구현황 데이터 정리, 소멸위기지역 파악하기 인구현황데이터에 지도 ID 만들기 카르토그램으로 인구현황 시각화하기

스타벅스 매장 정보 가져오기\-> .class 밑에 li 밑에 a를 지정from bs4 import BeautifulSouphtml = driver.page_sourcedom = BeautifulSoup(html, 'html.parser')seoul_list = dom

셀프 주유소가 정말 저렴한지 알아보기https://www.opinet.co.kr/searRgSelect.do사이트 구조 확인목표 데이터: 주유소 이름, 주소, 브랜드(상호명),휘발유 가격, 경유 가격,셀프 여부, 세차장 여부, 충전소 여부, 경정비 여부, 편의