Dev_duri

Kafka 로그 확인 cat /kafka(설치된 카프카 디렉토리)/logs/server.log Zookeeper 실행 /zookeeper(설치된 주키퍼 디렉토리)/bin/zkServer.sh start Kafka topic 생성 ./kafka-topics.sh --zookeeper [주키퍼1 ip]:2181,[주키퍼2 ip]:2181,[주키퍼3 ip]:2181/localhost.localdomain_znode --replication-factor 1 --partitions 1 --topic [토픽명] --create 카프카 메세지 전송 실행 위치 (/kafka(설치된 카프카 디렉토리)/bin) ./kafka-console-producer.sh --topic [토픽명] --broker-list [카프카 i..

Topic Kafka 안에서 메시지가 저장되는 장소, 논리적인 표현 Producer 메시지를 생산해서 Kafka의 Topic으로 메시지를 보내는 어플리케이션 Consumer Topic의 메시지를 사용하기 위해 협력하는 Consumer들의 집합 Consumer Group Topic의 메시지를 사용하기 위해 협력하는 Consumer들의 집합 하나의 Consumer는 하나의 Consumer Group에 포함되며, Consumer Group 내의 Consumer들은 협력하여 Topic의 메시지를 분산 처리한다. Partition 하나의 Topic은 하나 이상의 Partition으로 구성 병령처리(Throughput)를 위해서 다수의 Partition을 사용 Segment 메시지(데이터)가 저장되는 실제 물리 F..