DataAnalysis 메모하기

이 글은 빅데이터에서 판다스를 사용할 때 너무 느린 속도를 빠르게 하는 방법을 정리한 글이다.판다스는 데이터 분석을 위해서 사용하는 대표적인 툴설치방법사용방법여기까지는 기본 판다스를 사용하는 방법이다. 참고했던 자료들에 따르면, 기존 판다스는 1GB 이내에서 사용할만

이 글은 AWS EC2 사용할 때 고려해야할 간단한 메모 글이다.AWS Console > EC2 에서 서버생성하면, 프리티어는 1년 무료이지만 불필요한 인스턴스를 만들면 요금부과가 되므로 적은 양이라도 삭제하지 않으면 계속 비용이 발생한다.공부용으로는 반드시 "프리티어

이 글은 데이터 전처리(PreProcessing)을 위한 방법을 정리한 자료센서데이터, 공공데이터를 사용하여 분석하는 프로젝트를 진행한다고 생각해보면, 고품질의 알고리즘을 개발하기 위해서는 고품질의 데이터를 사용해야한다.고품질의 데이터를 제작하려면 데이터 전처리 과정이

이 글은 AWS S3에 터미널로 접속하여 파일 업로드/다운로드하는 방법을 소개하는 글이다. S3 : Simple Storage Service로 클라우드 저장소임. 지역(Region)별로 있는 저장소에 접속하는 개념임.(서울 : ap-northeast-2 처럼 버킷이

MSSQL을 파이썬에서 사용하기 위해서는 모듈을 다운 받아야 한다.하지만 C++ 컴파일러 버전이 안맞으면 파이참에서 안깔리는 문제가 발생한다.(pip 업그레이드도 해보고, 각종 방법들을 해봐도 안될 것이다.)아래 주소로 가서 pymssql‑2.1.5‑cp39‑cp39‑

데이터베이스 접속 방법을 생각하는 중에 클래스 하나를 간단하게 만들어보았다.ms 홈페이지에서 제공해주는 접속 방법을 활용해서 만들었다,서버주소, 데이터베이스 이름, 유저 이름, 암호, 쿼리텍스트를 입력하고 데이터베이스에 접속하면된다. 접속 자체는 간단하지만, 데이터 베