카프카 및 Debezium 활용 CDC인프라 구축
- 쿠버네티스를 사용하지 않고 ec2 만 사용하면 scale in/out을 수동으로 해야 함.
- 쿠버네티스를 이용하여 자동으로 scale in/out 및 각종 장애 상황 대응
구조
계획
-
namespace 생성하여 관리
-
mysql에 실시간으로 데이터 넣으면서 데비지움, 스트림, 미러메이커 테스트
-
실시간 데이터 분석
-
카프카, 주키퍼 장애상황 테스트
-
실시간 대시보드 구축
-
컨슈머 렉 모니터링
-
쿠버네티스 자원 모니터링
-
카프카 커넥트 장애 시 자동으로 커넥터 생성 rest 요청 전송 후 알림 발송
-
scale in/out 자동화
-
파드 생성 삭제 시 알림 발송
-
동적 볼륨 프로비저닝 이용(nfs)
-
CI/CD
smilegate