بحث Aleph Alpha03/10/2026 في يوم توحيد ألمانيا، نحن نصدر نموذجنا الجديد: Kolibri. Kolibri هو نموذج دمجة الخبراء (Mixture-of-Experts Transformer) إنجليزي-ألماني بإجمالي 78B معلمات، 3B نشطة. يدعم أطوال سياق تصل إلى 1M رموز. يمكن تنزيل النموذج مع الأوزان الكاملة على Hugging Face واستخدامه وفقًا لشروط رخصة Apache 2.0.
Kolibri هو نتيجة لتكرار مستمر لجهود تدريب النموذجات. بنينا أولاً خط أنابيب تدريب النموذج وتحققنا منه من خلال بناء Kolibri Origin، نموذج بإجمالي 30B معلمات، 3B نشطة مع نافذة سياق أقصر حتى 65k رموز. مرّ Kolibri عبر الخط أنابيب نفسه: من استيعاب البيانات وتنظيمها، إلى اختبارات التحليل الجزئي، والتدريب ما قبل، والتدريب بعد، إلى التقييمات النهائية.
قمنا بتحسين Kolibri للأداء في مجال واسع من القطاعات باعتبار لغته الخاصة بالمجال، والأنظمة التنظيمية، والواقع الإجرائي الخاص بها. يوفر حجمه صغير وفعال لعملائنا مرونة لتنفيذه بكفاءة محلياً، دون إرسال البيانات الداخلية إلى خدمات استنتاج الطرف الثالث.
الكيانات الرئيسية: الشركات: Aleph Alpha
الأسئلة الشائعة: ما هي المواصفات الرئيسية لـ Kolibri؟
Kolibri هو نموذج دمجة الخبراء إنجليزي-ألماني بإجمالي 78B معلمات و3B نشطة، يدعم أطوال سياق تصل إلى 1M رموز. يمكن تنزيله مع الأوزان الكاملة من Hugging Face تحت رخصة Apache 2.0.
المصدر: Hacker News · لخّصه HeadlinesBriefing