اختبار BioSimBench من CellType يُظهر أن النماذج الرائدة تتنبأ جزئيًا فقط باستجابة الخلايا للأدوية وإسكات الجينات
يقيّم الاختبار التنبؤات مقارنة بتجارب مخبرية محجوبة، وتقول CellType إن نموذجها الخاص بحجم 27B المدرب في BioSimGym يتفوق على أفضل نموذج رائد في كل المهام.
لماذا يهم
تختبر معظم مقاييس الأحياء لنماذج اللغة المعرفة المكتوبة، أما BioSimBench فيطلب من النماذج التنبؤ بالجينات التي يرتفع أو ينخفض نشاطها بعد دواء أو إسكات جين أو إشارة مناعية، ويقيّمها بنتائج مخبرية مقيسة، مع اعتبار التوافق بين التجارب المكررة سقفًا. وتتشارك مساراته الخمسة لوحة ترتيب واحدة. بنته شركة يتصدر نموذجها الخاص النتائج، لذا ستكون المشاركات المستقلة مهمة. يُترقب أي المختبرات ستقدم نماذجها وهل تضيق الفجوة مع قابلية التكرار التجريبي.
حقائق رئيسية
- خمسة مسارات ولوحة ترتيب واحدة
- المهام: أدوية وإسكات جينات وإشارات مناعية
- التقييم بتجارب مخبرية محجوبة
- نموذج CellType بحجم 27B يتفوق على أفضل نموذج رائد في كل المهام
- النماذج دُربت على وحدات NVIDIA Blackwell