Teste de Carga GlassFlow ClickHouse: Desduplicação em Tempo Real em Escala
2025-06-22
A equipe GlassFlow realizou um teste de carga em larga escala para desduplicação em tempo real, obtendo resultados impressionantes. Em um MacBook Pro, o GlassFlow processou mais de 9.000 registros por segundo do Kafka com latência inferior a 0,12 ms, atingindo um pico de 55.000 registros por segundo. Mesmo com 20 milhões de registros e 12 publicadores concorrentes, o sistema permaneceu robusto, sem falhas, perda de mensagens ou desordenação. O teste utilizou dados sintéticos simulando um caso de uso do mundo real, avaliando a desduplicação, a taxa de transferência e a latência. A configuração completa do teste é de código aberto.
Desenvolvimento