CentOS7 Kafka 2.12-3.4.0 jdk 11 Kafka 설치 kafka 설치는 공식 홈페이지 https://kafka.apache.org/downloads 에서 받을 수 있다. kafka는 zookeeper가 있어야 돌아가므로 zookeeper먼저 실행후 kafka를 실행 시킨다. bin/zookeeper-server-start.sh config/zookeeper.properties bin/kafka-server-start.sh config/server.properties 이다. 기본포트는 zookeeper는 2181이고 kafka는 9092 이다. 포트는 각 설정 properties에서 할 수 있다. error가 없으면 기동 한것이다. 나는 나중에 kafka와 spring boot로 연결하..

Kafka Kafka는 Pub/Sub(Publisher/Subscriber) 모델을 사용하는 분산 스트리밍 플랫폼으로, 대량의 데이터를 실시간으로 처리하고 전달하는 데 사용된다. Kafka는 대용량의 데이터를 안정적이고 빠르게 처리할 수 있는 고성능 메시징 시스템으로 분류된다 Kafka cluster kafka cluster는 여러개의 kafka 서버(브로커)를 구성하고있는 집합체이다. Kafka 아키텍처 Kafka 아키텍처는 Producer, Broker, Consumer로 구성된다. Producer는 Kafka Topic에 데이터를 생성하고, Broker는 Kafka 클러스터에서 데이터를 저장하고 분배한다. Consumer는 Broker로부터 데이터를 가져와 처리한다. Topic은 분산 데이터 저장소..