ArkFlow: Un motor de procesamiento de flujo de Rust de alto rendimiento
2025-03-14
ArkFlow es un motor de procesamiento de flujo de alto rendimiento construido sobre Rust y Tokio. Admite múltiples fuentes de datos como Kafka, MQTT y HTTP, y ofrece varios procesadores, incluyendo consultas SQL, procesamiento JSON y codificación/decodificación Protobuf. Su diseño modular permite una fácil extensión, y la configuración se gestiona mediante archivos YAML. Los usuarios pueden definir entradas, pipelines y salidas para gestionar diversas tareas de procesamiento de flujo, como el procesamiento de datos de Kafka a Kafka o la generación y procesamiento de datos de prueba.
Desarrollo
procesamiento de flujo