SQLFlow: Stream-Processing mit DuckDB und SQL
2025-01-03
SQLFlow ist eine Stream-Processing-Engine, die von DuckDB angetrieben wird und SQL-basierte Operationen auf Echtzeitdaten aus Quellen wie Kafka und Webhooks ermöglicht. Sie unterstützt Datentransformationen, Anreicherung, Aggregation, gleitende Fensteraggregation und Ausgaben an Ziele wie Kafka, Datenbanken oder lokale Dateien. SQLFlow bietet einen hohen Durchsatz und verarbeitet Zehntausende von Nachrichten pro Sekunde. Es unterstützt benutzerdefinierte Serialisierung und Codierung. Die Docker-Bereitstellung ist einfach zu konfigurieren.
Entwicklung
Stream-Processing