ClickHouse Cloud의 100PB 규모 관측 가능성 플랫폼: LogHouse의 진화
2025-06-21
ClickHouse Cloud의 내부 로깅 플랫폼인 LogHouse는 1년 만에 19PB에서 100PB 이상으로, 행 수는 40조 행에서 500조 행으로 증가했습니다. 이벤트 양이 20배 증가함에 따라 LogHouse 팀은 CPU 사용률을 이전의 10% 미만으로 줄이는 사용자 지정 내보내기 프로그램인 SysEx를 개발했습니다. SysEx는 ClickHouse 시스템 테이블에서 데이터를 직접 복사하여 OpenTelemetry의 파싱 및 마샬링 병목 현상을 해결합니다. 동시에 LogHouse는 ClickHouse 기본 관측 가능성 UI인 HyperDX를 통합하여 원활한 탐색, 상관 관계 및 근본 원인 분석을 제공합니다.
기술