Polars Cloud Lançado: Superando a Lacuna de Escala do DataFrame

2025-09-04
Polars Cloud Lançado: Superando a Lacuna de Escala do DataFrame

O Polars Cloud agora está disponível na AWS, juntamente com o lançamento beta aberto de seu novo mecanismo distribuído. Esta plataforma visa preencher a lacuna entre a facilidade de uso do pandas local e a escalabilidade do PySpark remoto, oferecendo uma única API que escala perfeitamente do laptop para a nuvem. Seu mecanismo distribuído utiliza a arquitetura de streaming inovadora do Polars, permitindo estratégias de dimensionamento horizontal, vertical e diagonal, reduzindo significativamente o custo, a complexidade e melhorando o desempenho. Planos futuros incluem suporte local, painel de cluster ao vivo, orquestração de tarefas, dimensionamento automático, suporte de catálogo e implantação em várias regiões.

Leia mais
Desenvolvimento

Polars Cloud: Uma Plataforma Escalável e Serverless para Processamento de DataFrames

2025-03-07
Polars Cloud: Uma Plataforma Escalável e Serverless para Processamento de DataFrames

A equipe Polars está construindo o Polars Cloud, uma plataforma de API de DataFrame flexível com base em computação de alto desempenho. Ele visa preencher a lacuna entre Pandas e PySpark, oferecendo facilidade de uso e escalabilidade. O Polars Cloud suporta computação distribuída, computação sem servidor, hardware configurável (GPU e CPU), escalonamento diagonal (horizontal e vertical), suporte multicloud (AWS, Azure, GCP), licenciamento local, tolerância a falhas, linhagem de dados e observabilidade. Os usuários podem executar consultas remotamente com chamadas simples da API, suportando modos batch e interativo. O Polars Cloud também suporta várias estratégias de escalonamento, incluindo consultas distribuídas, particionadas e paralelas, para lidar com várias necessidades de processamento de dados.

Leia mais
Desenvolvimento computação na nuvem