EMR-on-EKS

EMR on EKS 도입 및 장단점 소개

EMR on EKS 진행 전 사전에 필요한 기능들 install

EKS 클러스터를 생성하고 EKS를 통해 EMR Cluster를 구축할 권한 및 인증 과정을 설정해보자.

EMR Virtual Cluster 생성 및 EKS Node Group 추가 (On Demand / Spot) 과정들을 통해 EMR on EKS 환경에서 spark job 실행을 위한 준비를 모두 마쳐보자!

EMR on EKS 환경에서의 로깅 설정 및 실제 작업을 던져보며 작업이 수행되고 완료된 작업에 대한 로그 확인까지 다뤄본다.