جوليوس ريسيرش تطلق DeepFinance: أفضل نموذج يحقق 54.8% في مهام الأسهم الخاصة والاستثمار المصرفي التي تستغرق 27 ساعة
تضع المهام الإحدى والعشرون، المبنية على بيانات صفقات مجهولة المصدر والمقيَّمة بـ84 معيارًا لكل منها، Claude Opus 5.5 في المقدمة بنسبة 54.8%، متقدمًا بفارق ضئيل على Claude Sonnet 5.5 (54.6%) وGPT-6 Astra (54.2%)؛ والنتائج من تشغيل جوليوس نفسها.
لماذا يهم
يطلب DeepFinance من النماذج إنجاز عمل متكامل في الأسهم الخاصة والاستثمار المصرفي، يقدّر جوليوس أنه يستغرق من محترف 20 إلى 30 ساعة لكل مهمة، بمتوسط 27.1. ويقيّم المصححون سير العمل والحكم، مثل كون الافتراضات موثقة وقابلة للتدقيق، إضافة إلى الناتج النهائي. وتقول جوليوس إنها استخدمت أداة سطر الأوامر الخاصة بكل مزود لا إطارها الخاص. وتتفاوت التكلفة أكثر بكثير من الدرجات: بلغ GPT-6.1 Sol نسبة 52.9% بتكلفة 0.81 دولار للمهمة مقابل 8.63 دولارًا للمتصدر. وكل الأرقام من Julius Research، المختبر وراء منتج تحليل البيانات Julius.
حقائق رئيسية
- 21 مهمة مجهولة المصدر في الأسهم الخاصة والاستثمار المصرفي
- متوسط 27.1 ساعة بشرية لكل مهمة؛ 84 معيارًا لكل منها
- Claude Opus 5.5 (max): 54.8% ± 9.1 بتكلفة 8.63 دولارًا للمهمة
- Claude Sonnet 5.5 بنسبة 54.6%؛ وGPT-6 Astra بنسبة 54.2%
- GPT-6.1 Sol: 52.9% بتكلفة 0.81 دولار للمهمة
- 16 تكوينًا للنماذج، قيّمتها جوليوس بنفسها