목록2024/11/12 (1)
imhamburger 님의 블로그
카프카(Kafka) - Kafka Broker 왜 홀수 개의 브로커가 필요할까?
파이널 프로젝트 시작 전에 모든 개발환경을 yaml 파일로 실행시키고 Grafana 시각화를 만드는 작은? 프로젝트를 먼저 진행하였다. (작은?!!)나는 그중에서 Kafka를 맡았는데 이번에 Kafka를 yaml로 구축하면서 더 자세히 들여다볼 수 있는 시간을 가졌던 것 같다. 카프카는 Broker를 통해 데이터를 보내고 받는 형식이다.Broker는 내가 개수를 지정할 수 있는데, 이러한 의문이 들었다. Broker는 몇 개가 적당한거지? 그래서 여기저기 검색해보니 브로커를 최소 3개를 사용하는게 좋다는 내용을 보았다.그리고 홀수개여야 한다는 점! 왜 3개가 좋은건지 이해하기 전에 acks 와 min.insync.replicas 옵션을 먼저 짚고 넘어가야 한다. 카프카에서 acks는 프로듀서가 메시지를..
데이터엔지니어 부트캠프
2024. 11. 12. 21:30