HeadlinesBriefing favicon HeadlinesBriefing.com

الجدل حول ادعاءات معايرة Jev

Hacker News •
×

Jev، أول System One Model من Type Safe، يعد باحتمالات معايرة لمهام التصنيف دون بيانات تدريب. يجادل المقال بأنه بينما يمكن لـ Jev إنتاج درجات مفيدة، فإن ادعاء المعايرة الخاص به معيب. تعتمد المعايرة على كل من النموذج وتوزيع البيانات؛ النموذج المعاير على مجموعة بيانات واحدة قد يكون غير معاير على أخرى. يسلط المؤلف الضوء على مثال رمي عملة حيث يتنبأ Jev باحتمال 0.92 للوجه، مما يظهر سوء معايرة شديد. يوصي المؤلف بمعاملة مخرجات Jev كدرجات ترتيب بدلاً من احتمالات موثوقة ويقترح إعادة معايرة رخيصة باستخدام بضع مئات من الأمثلة المصنفة إذا كانت هناك حاجة إلى احتمالات دقيقة. يؤكد المقال أن قيمة Jev تكمن في قدرته على التصنيف دون بيانات، ولكن يجب على المستخدمين التحقق من المعايرة على بياناتهم الخاصة قبل الاعتماد على عتبات رقمية أو حسابات تكلفة.