Data Engineering
1.Data Pipeline
데이터 파이프라인의 정의와 ETL, ELT에 대해 알아보고 비교한다.
2023년 2월 4일
2.Data Warehouse
데이터 웨어하우스의 정의와 목적, 아키텍처 및 구성요소 등에 대해 정리한다. 또한, 데이터 웨어하우스와 데이터베이스, 데이터 레이크, 데이터 마트를 비교한다.
2023년 2월 4일
3.Airflow
Apache Airflow에 대해 알아보자.
2023년 2월 4일
4.[MySQL] InnoDB vs MyISAM + Memory
MySQL의 스토리지 엔진에 대해 알아보고 대표적인 엔진인 InnoDB와 MyISAM을 비교한다.
2023년 2월 6일
5.docker container의 파일을 Google Drive에 올리는 방법 (rclone)
위 명령어를 입력하면 remote 저장소 (이 경우에는 설정한 google drive) 내에 있는 폴더가 출력됨.1) 마운트할 폴더 생성2) user 권한 부여USER 확인 명령어GROUP 확인 명령어3) 마운트한 폴더(/mnt/gdrive)의 소유자가 변경되었는지 확
2025년 1월 2일