Learn. Build. Share.

Kafka 컨슈머는 왜 자꾸 밀릴까?

lag가 커지고 리밸런싱이 반복될 때, 컨슈머 내부에서는 무엇이 벌어질까? poll과 fetch의 흐름을 알아보자!

2023.07.18

Kafka 메시지 키, 그냥 넣으면 끝일까?

메시지 키 하나가 순서 보장, 병렬 처리, hot partition까지 바꾼다!

2023.07.06

Kafka exactly-once, 정말 한 번만 처리될까?

at-most-once, at-least-once, exactly-once의 차이와 한계를 살펴보고, Kafka에서 중복과 유실이 발생하는 지점을 정리한다.

2023.06.24

Kafka 프로듀서, 얼마나 안전하고 얼마나 빠를까?

Kafka 프로듀서의 메시지 전송 과정부터 acks 설정, 배치와 압축, 멱등 프로듀서, 트랜잭션까지 코드와 함께 살펴보자!

2023.06.14

Kafka Streams 에러 처리와 복구 전략

Kafka Streams에서 역직렬화, 프로덕션, 비즈니스 로직 에러를 단계별로 처리하는 핸들러 구조와 State Store 복구 전략을 다룬다.

2023.06.02