docker-compose 실행 이미지 실행 여부 확인 도커 엔진 확인 브라우저에서 8080으로 접속해서 설정된 아이디와 비밀번호를 입력해서 모니터링 가능한지 확인 postgresql도 같이 설치하기에 db접속도구에서 localhost의 5432번 포트에 airflow라는 스키마에 airflow 아이디로 airflow 비밀번호를 이용해서 접속 Airflo...
✔ Airflow 개요 워크플로를 개발하고 모니터링하기 위한 오픈 소스 솔루션 workflow는 일련의 작업의 흐름 ETL 데이터를 추출하고 변환하고 적재하는 작업 이러한 작업의 흐름을 관리해주는 애플리케이션 중의 하나가 Airflow Airflow를 이용해서 많이 하는 작업이 데이터 수집 및 전처리와 저장 작업(DataLake를 만들때) Batch Pr...