[KAFKA] Topic, Producer, Consumer

토픽 토픽 : 카프카 클러스터에 있는 특정 스트림 데이터에 대한 검증이 없기에 여러 종류의 데이터를 저장할 수 있음 이름을 이용해서 토픽 구별 토픽 안에 있는 메시지 순서를 데이터 스트림이라고 부름 토픽을 통해 데이터 스트림을 만든다. 카프카 토픽에 데이터를 추가하기 위해서 producer 사용 데이터를 읽기 위해서 Consumer 사용 카프카에 쿼리를 할 수는 없다. 파티션 토픽은 여러 개의 파티션으로 분할된다. 각각의 파티션에 있는 메시지들은 순서대로 저장됨 오프셋이라는 증가하는 아이디를 가짐 카프카는 불변성임 데이터를 추가하고 난 뒤에 데이터를 삭제하거나 변경할 수 없음 파티션에 계속 기록 트럭이 20초마다 카프카에 위치를 전송함 (Producer) 대시보드나 알림 서비스에서 Consume 해서 사용함 중요 카프카에 있는 데이터는 불변성 카프카의 데이터는 시간이 지나면 사라짐 기본 7일 오프셋은 특정 파티션에만 의미가 있다. 오프셋 재사용은 안됨 오프셋의 순서는 한 파티션에서만...

원문링크 : [KAFKA] Topic, Producer, Consumer