토스뱅크의 대규모 Kafka 클러스터 운영과 데이터센터 이중화를 담당할 Kafka Engineer (운영 장애 대응 경험자)
주요 업무
- 서버 MSA 이벤트, 데이터 파이프라인, 로그 등 용도별로 분리된 대규모 Kafka Broker Cluster를 두 데이터센터에서 운영
- Broker 증설, partition reassign, rolling upgrade, 용량 계획을 주도하고 Ansible 기반으로 자동화
- Broker와 Client 사이에서 발생하는 지연, rebalance, consumer lag 문제를 JVM, OS, 네트워크 수준까지 추적해 해결
- 데이터센터 이중화를 위한 데이터 미러링과 offset sync 애플리케이션을 Kafka Connect 기반으로 개발·운영
- 메트릭과 로그 기반 모니터링·알림 고도화 및 AI를 활용한 장애 분석 자동화
자격 요건
- Kafka Broker를 운영 환경에서 직접 운영하며 장애를 해결해본 경험이 있는 분
- replication, ISR, controller, consumer group 등 Kafka 내부 동작을 깊이 있게 이해하고 있는 분
- JVM 기반 언어로 개발할 수 있고 GC와 메모리 문제를 분석할 수 있는 분
- Linux, 네트워크, 디스크 I/O 등 탄탄한 시스템 지식을 가진 분
우대 사항
- 베어메탈 환경에서 Ansible 등으로 Kafka 배포와 업그레이드를 자동화해본 경험
- 멀티 데이터센터 이중화나 미러링(MirrorMaker2 등)을 설계하거나 운영해본 경험
- Kafka Connect 플러그인 개발 또는 Kafka 오픈소스 코드를 분석·기여한 경험
- Spring Boot 환경에서 Kafka Client를 활용하거나 Client 가이드를 제공해본 경험
근무 조건
- 근무지
- 서울
- 경력
- 무관
- 마감
- 상시 채용 · 마감일 없음
- 처음 확인
- 2026-11-21
이 요약은 회사 공고를 읽고 추린 것입니다. 지원 전에 회사 공고에서 원문을 확인하세요.
이 공고 점검 이력
11.21처음 확인
11.23 02:15확인 · 살아 있음