币安如何利用 Quickwit 构建 100PB 日志服务
2024-07-11
本文介绍了全球领先的加密货币交易所币安如何利用 Quickwit 构建一个 100PB 的日志服务。币安之前使用 Elasticsearch 集群管理海量交易日志，但面临着运维复杂、保留时间有限和可靠性不足等挑战。Quickwit 提供了 Kafka 集成、VRL 转换、对象存储和更高效的压缩等优势，帮助币安实现了每天 1.6PB 的索引速度，并将搜索集群扩展到 100PB 的规模。此次迁移帮助币安节省了 80% 的计算资源和 20 倍的存储成本，并提高了日志保留时间和故障排除能力。
43