Kafka

docker wurstmeister

wurstmeister/kafka-docker: Dockerfile for Apache Kafka
Apple Silicon M1 에서 문제 발생함.
https://hub.docker.com/r/wurstmeister/kafka/
https://raw.githubusercontent.com/wurstmeister/kafka-docker/master/docker-compose.yml 를 기본 참조하여 작성
/opt/kafka/bin/kafka-console-*.sh 로 여러 명령을 해볼 수 있다.
Kafka 버전에 따라 옵션이 다르므로 확인 할것.

docker exec -it docker-kafka /bin/bash
cd /opt/kafka/bin
 
# producer - console 에 타이핑하고 엔터 누르면 전송됨.
# --batch-size 0 으로 줘야 타이핑 즉시 전송됨.
/opt/kafka/bin/kafka-console-producer.sh\
    --broker-list localhost:9092 --topic <topic-name> --batch-size 0
 
# consumer - 여러개 consume 못함.
/opt/kafka/bin/kafka-console-consumer.sh  --bootstrap-server localhost:9092\
    --topic <topic-name>

docker 기타

처리량

Kafka에서 파티션 증가 없이 동시 처리량을 늘리는 방법 - Parallel Consumer

권남

사이드바

목차

Kafka

관련 도구

docker wurstmeister

docker 기타

처리량

참고

권남

사용자 도구

사이트 도구

사이드바

목차

Kafka

관련 도구

docker wurstmeister

docker 기타

처리량

참고

문서 도구