data-engineering-side-project

1.프로젝트 개요

post-thumbnail

2.데이터 구성 확인 및 모델링 계획

post-thumbnail

3.Data Extraction

post-thumbnail

4.Data Transformation

post-thumbnail

5.Data Load

post-thumbnail

6.Spark를 이용한 데이터의 병렬 처리

post-thumbnail

7.Airflow를 이용한 작업 자동화

post-thumbnail