DBT

📌 ELT의 미래 ETL은 결국 ELT를 하기 위함이다. 이 때 데이터 품질 검증이 중요하다. 데이터 품질의 중요성 증대 입출력 체크 더 다양한 품질 검사 리니지 체크 데이터 히스토리 파악 데이터 품질 유지 -> 비용/노력 감소와 생산성 증대의 지름길 📌 DB Normalization DB를 좀더 조직적이고 일관된 방법으로 디자...

📌DBT Seeds 많은 dimension 테이블들은 크기가 작고 많이 변하지 않는다. Seeds는 이를 파일 형태로 데이터웨어하우스로 로드하는 방법이다. -> Seeds는 작은 파일 데이터를지칭한다 (보통 csv파일) 'dbt seed'명령어를 입력해서 빌드한다. 📌DBT Sources 1. Staging 테이블을 만들 때 입력 테이블들이 자주 바뀐...