[Kafka] Kafka 개념을 훑어보고, 주의할 점에 대해서 가볍게 알아보자
·
Backend
Kafka 훑어보기Apache Kafka는 대규모 데이터 스트리밍과 실시간 데이터 처리를 위해 설계된 오픈소스 분산 메시징 시스템이자 이벤트 스트리밍 플랫폼이다. 쉽게 말해서, Kafka를 통해 데이터를 발행하고, 컨슈머를 통해서 데이터를 처리할 수 있다. 아래 그림을 통해 일단 구조를 훑어보고 각 개념들이 무엇인지 이해하고 주의할 점은 무엇인지 살펴보자간단한 컨셉으로는 일단 프로듀서를 통해 데이터를 토픽에 Push하고, 컨슈머를 통해 메시지를 Consume하는 것을 볼 수 있다. 용어도 프로듀서, 브로커, 토픽, 파티션, 컨슈머 등등 아직은 조금 복잡힌 더 자세히 살펴보자. 토픽(Topic)과 파티션(Partition)토픽은 Kafka에서 데이터를 저장하고 관리하는 개념이다. 데이터를 전송하는 프로듀..
test
·
카테고리 없음
Test ## h2 # h1 blablahihihohogoenter