차세대 로깅 플랫폼 구축기: 일 41TB, 200억 건 로그를 Clickstack으로 실시간 처리하기 | 안정성과 인프라
kakao tech · 23:46 · Watch on YouTube
카카오페이증권은 로그가 2022년 하루 약 100GB에서 41TB, 하루 200억 건으로 늘고 장 개시 시 평소의 20배를 넘는 폭증이 생긴 뒤, Filebeat–Kafka–Fluentd–OpenSearch 파이프라인을 ClickStack(ClickHouse, OpenTelemetry, HyperDX)으로 교체했다. 새 경로는 초당 약 110만 건을 유지하고, 대부분의 검색을 약 1초...