HeadlinesBriefing favicon HeadlinesBriefing.com

GPT-5.6 Luna مقابل GPT-6 Astra: مراجعة كود بقيمة 1.20 دولار

Hacker News •
×

GPT-5.6 Luna يكلف 0.20 دولار لكل مليون رمز إدخال و1.20 دولار لكل مليون رمز إخراج. GPT-6 Astra يكلف 10 دولارات و50 دولارًا. على نفس pull requests، كلفت مراجعة Luna واحدة 0.0041 دولار وكلفت مراجعة Astra واحدة 0.113 دولار، بفارق 28x. وجد Luna 69 خطأً موثقًا عبر 50 pull request؛ وجد Astra 92. كلف Luna 0.20 دولار للتشغيل بأكمله وكلف Astra 5.66 دولار. كان Luna مخطئًا أكثر، حيث فشل 24 من أصل 93 اكتشافًا له في التحقق مقابل 4 من أصل 96 لـ Astra، ووجد 9 من أصل 24 خطأً أمنيًا حيث وجد Astra 19.

قراءتنا: Luna جيد بما يكفي لأخطاء الصحة اليومية بهذا السعر، ولن نسمح له بمراجعة كود المصادقة أو الأذونات بمفرده.

أعدنا استخدام الإعداد من منشور Astra مقابل Sol. pull requests هي 50 PR معيارية عامة في منظمة AI-Code-Review-Evals، عشرة من كل من Cal.com وSentry وDiscourse وKeycloak وGrafana. حصل Luna وAstra على نفس المطالبة على نفس diffs. لكل pull request، تذهب اكتشافات Astra وSol وLuna وتعليقات المراجع العام Entelligence إلى قائمة مجهولة الهوية. يحكم GPT-6 Astra وGPT-5.6 Sol على تلك القائمة بشكل منفصل مقابل diff. لا تُحتسب المشكلة كموثقة إلا عندما يعتبرها كلا الحكمين حقيقية.

وجد Luna 75% من عدد الأخطاء الموثقة التي وجدها Astra مقابل 3.6% من المال. لكل خطأ موثق، كلف Astra 20x أكثر. كتب Luna 3.1x من رموز الإخراج لكل مراجعة مقارنة بـ Astra ومع ذلك جاء أرخص بكثير، لأن سعر إخراجه أقل بـ 42x. كان أيضًا أسرع، بـ 23 ثانية لكل مراجعة مقابل 36.

الكيانات الرئيسية: الشركات: OpenAI، Cal.com، Sentry، Discourse، Keycloak، Grafana، Entelligence