Polars Cloud: Eine skalierbare, serverlose Plattform für die DataFrame-Verarbeitung

Das Polars-Team entwickelt Polars Cloud, eine flexible DataFrame-API-Plattform, die auf Hochleistungsrechnen basiert. Sie soll die Lücke zwischen Pandas und PySpark schließen und sowohl Benutzerfreundlichkeit als auch Skalierbarkeit bieten. Polars Cloud unterstützt verteiltes Rechnen, serverloses Rechnen, konfigurierbare Hardware (GPU und CPU), diagonales Skalieren (horizontal und vertikal), Multi-Cloud-Support (AWS, Azure, GCP), On-Premise-Lizenzierung, Fehlertoleranz, Datenverfolgung und Observability. Benutzer können Abfragen remote mit einfachen API-Aufrufen ausführen, wobei sowohl Batch- als auch interaktive Modi unterstützt werden. Polars Cloud unterstützt auch verschiedene Skalierungsstrategien, darunter verteilte, partitionierte und parallele Abfragen, um verschiedene Datenverarbeitungsanforderungen zu bewältigen.