Polars Cloud: Una plataforma escalable y sin servidor para el procesamiento de DataFrames

El equipo de Polars está construyendo Polars Cloud, una plataforma de API de DataFrame flexible respaldada por computación de alto rendimiento. Su objetivo es cerrar la brecha entre Pandas y PySpark, ofreciendo facilidad de uso y escalabilidad. Polars Cloud admite computación distribuida, computación sin servidor, hardware configurable (GPU y CPU), escalamiento diagonal (horizontal y vertical), soporte multi-nube (AWS, Azure, GCP), licencias locales, tolerancia a fallos, linaje de datos y observabilidad. Los usuarios pueden ejecutar consultas de forma remota con sencillas llamadas a la API, admitiendo modos por lotes e interactivos. Polars Cloud también admite varias estrategias de escalamiento, incluidas consultas distribuidas, particionadas y paralelas, para gestionar diversas necesidades de procesamiento de datos.