dataframely: مكتبة للتحقق من صحة إطارات البيانات الأصلية في Polars
2025-04-30
كشف جهد QuantCo لتحديث قاعدة بيانات قديمة عن خلل خطير في معالجة إطارات البيانات الخاصة بهم: وهو عدم وجود التحقق من الصحة. وقد أبرزت عملية الانتقال من pandas إلى Polars من أجل تحقيق مكاسب في الأداء هذه المشكلة. وقد ثبت أن المكتبات الموجودة مثل pandera و patito غير كافية. ولتدارك ذلك، قاموا بتطوير dataframely، وهي مكتبة أصلية في Polars تسمح بالتحقق من صحة إطارات البيانات بشكل وصفي. يُعرّف dataframely المخططات، ويُحقق من صحة محتوى إطار البيانات، ويدعم التحقق من صحة إطارات البيانات المتعددة، ويوفر التحقق من الصحة الناعم، مما يحسن بشكل كبير من متانة وقابلية قراءة خطوط الأنابيب. وهي تُستخدم بالفعل في العديد من الفرق والمشاريع.
اقرأ المزيد
التطوير