Polars Cloud : Une plateforme de traitement de DataFrame scalable et sans serveur

2025-03-07
Polars Cloud : Une plateforme de traitement de DataFrame scalable et sans serveur

L'équipe Polars construit Polars Cloud, une plateforme d'API DataFrame flexible basée sur le calcul haute performance. Elle vise à combler le fossé entre Pandas et PySpark, offrant à la fois facilité d'utilisation et évolutivité. Polars Cloud prend en charge le calcul distribué, le calcul sans serveur, le matériel configurable (GPU et CPU), le scaling diagonal (horizontal et vertical), le support multi-cloud (AWS, Azure, GCP), les licences sur site, la tolérance aux pannes, la lineage des données et l'observabilité. Les utilisateurs peuvent exécuter des requêtes à distance avec des appels API simples, supportant les modes batch et interactif. Polars Cloud supporte également plusieurs stratégies d'évolutivité, incluant les requêtes distribuées, partitionnées et parallèles, pour gérer les différents besoins de traitement de données.

Développement