HeadlinesBriefing favicon HeadlinesBriefing.com

Document FLAWED de 1Password critiqué pour des défauts

Hacker News •
×

Le chercheur en sécurité Suha Sabi Hussain critique le document de Off-by-1 Labs de 1Password intitulé 'FLAWED' pour des erreurs méthodologiques majeures et des échecs de citation. Le document, qui évalue le patchage de vulnérabilités par IA, contient des erreurs arithmétiques (2.8 ≠ 4), des diagrammes incorrects et des incohérences internes. Le point le plus critique, il cite seulement 19 sources — principalement des blogs corporatifs et XKCD — tout en affirmant qu'il existe 'très peu de travaux antérieurs', ignorant des recherches académiques comme Auto Patch Bench de Meta (73 citations) et le document NDSS 'Chasing Shadows'.

Le document attribue également incorrectement les participants de OpenAI à Patch the Planet, ne reconnaissant que les ingénieurs de Trail of Bits malgré la participation de HackerOne et Calif. Hussain, ancien employé de Trail of Bits et utilisateur de 1Password, argue que le document adopte la forme de rigueur académique sans ses normes. Elle appelle à la rétraction ou à la correction, exigeant que 1Password collabore avec des chercheurs académiques ou embauche du personnel formé à la recherche.

La controversy met en tension entre les laboratoires industriels produisant des recherches sur la sécurité et le maintien de normes rigoureuses, particulièrement lorsque ces travaux influencent les roadmaps de défense et la couverture médiatique, tout en éclipsant les efforts académiques mieux dotés.