Kafka

소스 애플리케이션과 타켓 애플리케이션이 데이터를 전송하는 라인이 매우 복잡해졌다.데이터 전송 라인이 많아지면 배포와 장애에 대응하기 어렵다.데이터 전송에 대한 프로토콜의 파편화가 심하다.LinkedIn 에서 개발하였다.OpenSource이다.Source Applicat

Kafka Producer의 역할 Topic에 해당하는 메시지를 생성 특정 Topic으로 데이터를 publish 처리 실패 / 재시도 1) 코드에서 살펴보기 1. 의존성 추가: Gradle 주의사항: Broker 버전과 Client 버전의 하위 호환이 완벽하지 않으므

Topic의 Partition으로부터 데이터 polling (데이터를 가져가는 주체)Partition offset(파티션 데이터의 번호) 위치를 기록(commit)Consumer Group을 통해 병렬 처리각 Consumer Group은 다른 Consumer 그룹에게