회사에서 msk 인프라를 구축하고 스프링부트에서 사용해야 하는 일이 있었는데, 이거 관련해서 자료가 많이 없어서 고생했었다.. 특히 서버리스는 더..ㅠ..한 이틀은 새벽까지 해서 겨우 어느정도 이해하고 사용할 수 있었다. 나는 aws도 잘 몰랐고 카프카도 잘 몰랐었고
aws에 opensearch라는 기능이 있다. 이거 관련해서 자료가 많이 없었어서 구축에 어려움을 겪었어서 공유하고자 한다. 처음에는 막막했는데 막상 쓰다보니까 굉장히 편리해서 도입을 고려해봐도 좋을듯하다. 오픈서치란? elasticsearch + kibana를 이용
나는 오픈서치를 사용한 이유가 log 모니터링을 위해서였다. 그래서 오늘은 어플리케이션 로그를 어떻게 오픈서치 클러스터로 넘기는 지에 대해서 포스팅하려고 한다. 구조 오픈 서치로 데이터를 적재하는 방법은 여러가지가 있겠지만 나는 아래 구조를 사용해서 데이터를 적재했다
기존에는 ec2에서 aws configure으로 액세스 키, 시크릿 키로 카프카에 접근을 했었는데 이번에 보안상 iam role으로 접근 하게 변경하게 되었다.근데 관련 자료가 없어서 이참에 한번 정리해보고자 한다.참고로 액세스 키, 시크릿 키로 ec2에서 접근하는 방