xorq:マルチエンジンMLパイプラインをシンプルに

2025-03-27
xorq:マルチエンジンMLパイプラインをシンプルに

xorqは、宣言型パイプラインの再現性とパフォーマンスをPython MLエコシステムにもたらす遅延計算フレームワークです。メモリ不足になることがなく、中間結果を自動的にキャッシュし、SQLエンジンとPython UDF間をシームレスに移動できます。再現性を維持しながらです。IbisとDataFusion上に構築されたxorqは、宣言型式、マルチエンジンサポート、ビルトインキャッシュ、シリアライズ可能なパイプライン、移植可能なUDF、Arrowネイティブアーキテクチャなどの機能を備えています。対話型ライブラリとCLIの両方を提供し、探索的研究から本番環境対応アーティファクトへのスムーズな移行を可能にします。

開発