HeadlinesBriefing favicon HeadlinesBriefing.com

GPT-5.6 Luna vs GPT-6 Astra: Revisión de código de $1.20

Hacker News •
×

GPT-5.6 Luna cuesta $0.20 por millón de tokens de entrada y $1.20 por millón de tokens de salida. GPT-6 Astra cuesta $10 y $50. En las mismas pull requests, una revisión de Luna costó $0.0041 y una revisión de Astra costó $0.113, una diferencia de 28x. Luna encontró 69 bugs verificados en 50 pull requests; Astra encontró 92. Luna costó $0.20 por toda la ejecución y Astra costó $5.66. Luna se equivocó con más frecuencia, con 24 de sus 93 hallazgos fallando la verificación frente a 4 de 96 de Astra, y encontró 9 de los 24 bugs de seguridad donde Astra encontró 19.

Nuestra lectura: Luna es suficientemente buena para bugs de corrección cotidianos a ese precio, y no dejaríamos que revisara código de autenticación o permisos por sí sola.

Reutilizamos la configuración del post de Astra vs Sol. Las pull requests son las 50 PRs de benchmark públicas en la organización AI-Code-Review-Evals, diez de cada una de Cal.com, Sentry, Discourse, Keycloak y Grafana. Luna y Astra recibieron el mismo prompt en los mismos diffs. Para cada pull request, los hallazgos de Astra, Sol, Luna y los comentarios del revisor público Entelligence van a una lista anonimizada. GPT-6 Astra y GPT-5.6 Sol juzgan esa lista por separado contra el diff. Un problema solo cuenta como verificado cuando ambos jueces lo consideran real.

Luna encontró el 75% de tantos bugs verificados como Astra por el 3.6% del dinero. Por bug verificado, Astra costó 20x más. Luna escribió 3.1x tantos tokens de salida por revisión como Astra y aún así resultó mucho más barata, porque su precio de salida es 42x menor. También fue más rápida, a 23 segundos por revisión frente a 36.

Entidades clave: Empresas: OpenAI, Cal.com, Sentry, Discourse, Keycloak, Grafana, Entelligence