Voyage-code-3: استرجاع أكواد أكثر دقة بتكلفة أقل
2025-01-14
كشفت Voyage AI عن Voyage-code-3، وهو نموذج جيل جديد لاسترجاع الأكواد يتفوق على OpenAI-v3-large و CodeSage-large بمعدل 13.80% و 16.81% عبر 32 مجموعة بيانات. باستخدام تقنية Matryoshka للتعلم والكمية (int8 و ثنائي)، يقلل Voyage-code-3 بشكل كبير من تكاليف التخزين والبحث مع الحد الأدنى من التأثير على جودة الاسترجاع. يدعم النموذج أبعادًا مدمجة من 2048 و 1024 و 512 و 256، بالإضافة إلى تنسيقات كمية متعددة، ويحتوي على طول سياق 32K توكن. تم تدريب Voyage-code-3 على مجموعة بيانات ضخمة ومتنوعة من الأكواد، ويتفوق في استرجاع الأكواد، خاصة في معالجة المنطق الخوارزمي وقواعد بناء الجملة الدقيقة، وقد تم تقييمه بدقة من حيث المتانة والدقة.