Polars Cloud verfügbar: Überbrückung der DataFrame-Skalierungslücke

2025-09-04
Polars Cloud verfügbar: Überbrückung der DataFrame-Skalierungslücke

Polars Cloud ist jetzt allgemein auf AWS verfügbar, zusammen mit dem Open-Beta-Launch seines neuartigen verteilten Engines. Diese Plattform zielt darauf ab, die Kluft zwischen der Benutzerfreundlichkeit von lokalen Pandas und der Skalierbarkeit von Remote PySpark zu schließen und bietet eine einzige API, die nahtlos von Laptops in die Cloud skaliert. Sein verteilter Engine nutzt die innovative Streaming-Architektur von Polars und ermöglicht horizontale, vertikale und diagonale Skalierungsstrategien, wodurch Kosten und Komplexität deutlich reduziert und die Leistung verbessert werden. Zukünftige Pläne umfassen die Unterstützung vor Ort, ein Live-Cluster-Dashboard, Aufgabenorchestration, automatische Skalierung, Katalogunterstützung und Multi-Region-Bereitstellung.

Mehr lesen
Entwicklung

Polars Cloud: Eine skalierbare, serverlose Plattform für die DataFrame-Verarbeitung

2025-03-07
Polars Cloud: Eine skalierbare, serverlose Plattform für die DataFrame-Verarbeitung

Das Polars-Team entwickelt Polars Cloud, eine flexible DataFrame-API-Plattform, die auf Hochleistungsrechnen basiert. Sie soll die Lücke zwischen Pandas und PySpark schließen und sowohl Benutzerfreundlichkeit als auch Skalierbarkeit bieten. Polars Cloud unterstützt verteiltes Rechnen, serverloses Rechnen, konfigurierbare Hardware (GPU und CPU), diagonales Skalieren (horizontal und vertikal), Multi-Cloud-Support (AWS, Azure, GCP), On-Premise-Lizenzierung, Fehlertoleranz, Datenverfolgung und Observability. Benutzer können Abfragen remote mit einfachen API-Aufrufen ausführen, wobei sowohl Batch- als auch interaktive Modi unterstützt werden. Polars Cloud unterstützt auch verschiedene Skalierungsstrategien, darunter verteilte, partitionierte und parallele Abfragen, um verschiedene Datenverarbeitungsanforderungen zu bewältigen.

Mehr lesen
Entwicklung