🐼 Python

Python에서 pandas로 exel 파일(.xlsx, .xls)을 읽어오기 위해서는 pandas.read_excel() 함수를 사용한다.커맨드로 인스톨 혹은 환경에 따라 pip3를 사용첫 번째 인수에 엑셀 파일이 있는 폴더 경로 또는 URL을 지정해준다.코드와 같

Python pandas로 excel 파일을 읽어오는 방법에 대한 전체적인 내용은 아래의 포스팅 참고https://velog.io/@inhwa1025/Python-pandas%EB%A1%9C-exel-%ED%8C%8C%EC%9D%BC-%EC%9D%BD%EA%B

Ctrl + d: 선택된 스크립트 디버그 실행Ctrl + r: 그냥 실행여러 줄 드래그 후 Command + /주석 처리 된 곳에서 다시 Command + / 누르면 주석 풀림import 선언 후 모듈이 설치되지 않아 빨간줄이 그어진 곳에 커서를 두고 alt + Ent

Python pandas 라이브러리에서 제공하는 데이터 구조. R 언어의 DataFrame 데이터 타입을 참고하여 만들어짐행과 열로 구성된 2차원 Data Structure. RDB의 테이블 또는 엑셀(스프레드 시트)과 유사3요소: column, data(row), i

pandas는 기본적으로 row에 인덱스를 0부터 차례대로 부여set_index 함수를 이용해 변경 가능아래의 코드는 A column을 인덱스로 지정하는 것loc 사용append 이용인덱스를 신경쓰지 않고 데이터의 가장 뒤에 row 추가loc 이용DataFrame\[’

Python pandas를 이용해 MySQL에 데이터를 삽입하다 에러가 발생함이는 MySQL에서 python의 nan을 이해할 수 없기 때문에 발생한 에러NaN이란?Not a Number의 약어. 표현 불가능한 수치형 결과엑셀 파일을 DataFrame 형태로 받아올 때

DataFrame.shape 을 통해 몇 차원인지, 각 차원별로 몇개의 데이터가 있는 지 확인 할 수 있음

.to_numpy 사용 .values 사용

Pandas의 DataFrame, Series에 저장된 값을 치환하고 싶은 경우 replace() 함수 사용 가능to_replace: 교체해야하는 DataFrame의 값. str, regex, list, dict, Series, int, float, Nonevalue:

참고로 대용량 데이터와 빅데이터는 다르다. 분산컴퓨팅을 하지 않고, 오직 컴퓨터 하나로 대용량 데이터 전처리를 진행해야 한다면 변수 생성(초기화)을 할수록 RAM이 가득차 에러가 뜰 것이며 for 문의 속도도 현저히 떨어지게

DataFrame으로 데이터를 분석하던 중 null 값이 포함 된 컬럼의 자료형을 int로 바꾸려고 시도하였으나 아래와 같은 오류가 발생함pandas.errors.IntCastingNaNError: Cannot convert non-finite values (NA or

위와 같은 데이터 프레임에서 X가 2이고 Y가 비어있지 않은 열만 찾는 방법은 아래와 같음X가 1이고 Y가 비어있지 않을 때 Y의 값을 9로 변경하기앞선 조건 지정을 통해 해당하는 열의 인덱스 번호를 받아올 수 있음열의 인덱스 번호 리스트로 for문 돌리기이 때 df.

DataFrame 형태의 데이터를 엑셀 파일로 저장하기 위해 to_excel() 사용 가능to_excel(excel_writer, sheet_name, na_rep, float_format, columns, header, index, inf_rep, freeze_pan

Boto3 는 Python 용 AWS SDK (Software Development Kit) / Python 버전 2.7+ 및 3.4+를 기본으로 지원 / Boto3를 이용해 AWS에서 지원하는 40개 이상의 서비스를 python에서 활용할 수 있음

boto3를 사용 예제를 찾아보는데, 어떤 예시는 boto3.client를 사용하고 어떤 예시는 boto3.resource를 사용해서 차이점이 뭔가 싶어서 정리해본 글

boto3 설치 및 기본설정은 여기서 👉 \[Python] boto3로 AWS S3와 연동하기Amazon boto3 공식 문서를 참고하였음 👉 AWS boto3 document - S3client와 resource의 차이점은 여기를 참고 👉 \[Python] bo

참고자료: Complexity of Python Operations

예시\\033\[ = \\xb1\[ = \\u001b\[Terminal 창에 특수한 역할을 하는 명령을 주는 시작 코드\\033\[(숫자)m : 원하는 색에 대해 ANSI 표준으로 정해진 숫자 지정\\033\[0m : Terminal 속성 초기화 (Reset)Reset