O pesquisador de segurança Suha Sabi Hussain critica o paper de Off-by-1 Labs do 1Password intitulado 'FLAWED' por erros metodológicos significativos e falhas nas citações. O paper, que evalua a correção de vulnerabilidades por IA, contém erros aritméticos (2.8 ≠ 4), diagramas incorretos e inconsistências internas. O ponto mais crítico, ele cita apenas 19 fontes — principalmente blogs corporativos e XKCD — enquanto afirma que existe 'muito pouco trabalho anterior', ignorando pesquisas acadêmicas como Auto Patch Bench da Meta (73 citações) e o paper NDSS 'Chasing Shadows'.

O paper também atribui incorretamente os participantes de Patch the Planet da OpenAI, reconhecendo apenas engenheiros da Trail of Bits, apesar da参与ação de HackerOne e Calif. Hussain, ex-funcionário da Trail of Bits e usuário do 1Password, argumenta que o paper adota a forma de rigor acadêmico sem seus padrões. Ela chama pela retração ou correção, exigindo que o 1Password colabore com pesquisadores acadêmicos ou contrate staff treinado em pesquisa.

A controvérsia destaca a tensão entre laboratórios industriais produzindo pesquisas de segurança e o mantimento de normas rigorosas, especialmente quando tais trabalhos influenciam roadmaps de defesa e cobertura midiática, ofuscando esforços acadêmicos melhor dotados.