Polars Cloud Disponible : combler le fossé d'échelle des DataFrame
Polars Cloud est désormais disponible sur AWS, ainsi que la version bêta ouverte de son nouveau moteur distribué. Cette plateforme vise à combler le fossé entre la facilité d'utilisation de pandas en local et l'évolutivité de PySpark à distance, offrant une API unique qui s'adapte de manière transparente d'un ordinateur portable au cloud. Son moteur distribué tire parti de l'architecture de streaming innovante de Polars, permettant des stratégies d'évolutivité horizontale, verticale et diagonale, réduisant ainsi considérablement les coûts, la complexité et améliorant les performances. Les projets futurs incluent la prise en charge sur site, un tableau de bord de cluster en direct, l'orchestration des tâches, le scaling automatique, la prise en charge du catalogue et le déploiement multi-régional.
Lire plus