استخدام وحدة معالجة الرسومات بنسبة تقارب 100% لدمج ملايين الوثائق مع Daft

حقق فريق Daft استخدامًا لوحدة معالجة الرسومات يقارب 100% أثناء دمج ملايين الوثائق النصية باستخدام نموذج Qwen3-Embedding-0.6B. تُفصّل هذه المدونة خط أنابيب معالجة البيانات المكوّن من ثلاث خطوات: تقسيم النص، وإنشاء التضمين، والمعالجة الموزعة، مع توفير أمثلة على الأكواد. بعد ذلك، حسّنوا الأداء بمقدار 3 أضعاف دون الاعتماد على الاستخدام الأقصى لوحدة معالجة الرسومات.