HeadlinesBriefing favicon HeadlinesBriefing.com

Escolhas de Ferramentas de Agentes: 16.893 Sessões

Hacker News •
×

Isenção de responsabilidade da pesquisa: A Armature vende serviços de crescimento para ferramentas de desenvolvimento. Este estudo faz parte do nosso trabalho mais amplo sobre como influenciar as escolhas dos agentes de codificação e fazer com que os produtos sejam selecionados.

À medida que os agentes assumem mais da jornada de codificação, a seleção de qual serviço implementar em um código existente é terceirizada para eles. Por exemplo, um codificador de vibração construindo um aplicativo de viagens pede ao Claude Code para armazenar entrada de forma persistente. O agente recomenda a Neon por seu nível gratuito e simplicidade. Um engenheiro sênior usando Cursor pede um banco de dados totalmente gerenciado com custos previsíveis; a conclusão é a mesma—Neon.

Realizamos um experimento com dois sandboxes, diferentes agentes, códigos e personas, mas o mesmo resultado. Para generalizar, conduzimos o maior experimento de todos: quase 17.000 sessões em personas (codificadores de vibração, engenheiros juniores, desenvolvedores seniores), com 1.163 variações de prompts, 75 repositórios e 3 agentes (Claude Code, Codex, Cursor) implementando soluções.

Construímos um painel de repositórios a partir de estatísticas públicas do GitHub, imparcial para a distribuição do mundo real. As tarefas eram reais, com nomes de empresas falsos, históricos de git e chaves de API. Cada experimento envolveu um dos 4 perfis, desde codificadores de vibração descrevendo sintomas até desenvolvedores seniores especificando requisitos.

Entidades-chave: Empresas: Armature, Vercel, Neon, Supabase, GitHub