[airflow dbt] 0. airflowdbt-day1-0-강의소개

data_hamster·2023년 8월 5일
0

에어플로우 고급기능, dbt로 ELT


ELT 작성과 구글시트/슬랙 연동 배워보고
에어플로우를 API로 조작해보기
대그 디펜던시를 어떻게 할지
태스크 그룹핑을 어떻게 할지
데이터 파이프라인을 운영하는게 어떤 의미인지.
dbt에 이해, 레드쉬프트로 구현
dbt 에어플로우 위에서 대그로 구현
데이터 카탈로그, 데이터 디스커버리의 개념 공부


docker기준으로 실행하고 데모를 돌릴 것이기 때문
파이썬 알아야 함.
SQL 기본지식 있어야 함.

파이썬, SQL, 에어플로우는 기본이라는 것.
도커에 대한 지식도 필요함.

profile
반갑습니다 햄스터 좋아합니다

0개의 댓글