Polars Cloud 一般提供開始:DataFrameスケールギャップの解消

2025-09-04
Polars Cloud 一般提供開始:DataFrameスケールギャップの解消

Polars CloudがAWSで一般提供開始され、同時に革新的な分散エンジンがパブリックベータ版としてリリースされました。このプラットフォームは、ローカルpandasの使いやすさとリモートPySparkのスケーラビリティのギャップを解消することを目指し、ラップトップからクラウドまでシームレスにスケールする単一のAPIを提供します。分散エンジンはPolarsの革新的なストリーミングアーキテクチャを活用し、水平、垂直、対角線のスケーリング戦略を可能にし、コストと複雑さを大幅に削減し、パフォーマンスを向上させます。将来の計画には、オンプレミスサポート、ライブクラスタダッシュボード、タスクオーケストレーション、自動スケーリング、カタログサポート、マルチリージョン展開などがあります。

続きを読む
開発

Polars Cloud:スケーラブルでサーバーレスなDataFrame処理プラットフォーム

2025-03-07
Polars Cloud:スケーラブルでサーバーレスなDataFrame処理プラットフォーム

Polarsチームは、高性能コンピューティングを基盤とした柔軟なDataFrame APIプラットフォームであるPolars Cloudを構築しています。これは、PandasとPySparkのギャップを埋めることを目指し、使いやすさとスケーラビリティの両方を提供します。Polars Cloudは、分散コンピューティング、サーバーレスコンピューティング、設定可能なハードウェア(GPUとCPU)、対角線スケーリング(水平と垂直)、マルチクラウドサポート(AWS、Azure、GCP)、オンプレミスライセンス、フォールトトレランス、データリネージ、オブザーバビリティをサポートしています。ユーザーは、シンプルなAPI呼び出しでリモートでクエリを実行でき、バッチモードとインタラクティブモードの両方をサポートしています。Polars Cloudは、分散クエリ、パーティション化クエリ、並列クエリなど、さまざまなスケーリング戦略にも対応しています。

続きを読む
開発