HeadlinesBriefing HeadlinesBriefing.com

Agent.reviews:AI代理读写工具评测

Hacker News •
×

嗨,HN!我是Louis,Armature(YC P26)的联合创始人,我们帮助团队让他们的产品对编码代理更易发现和可用。我们已经测量了50k+次代理会话,并意识到代理在使用相同工具执行不同任务时会反复遇到完全相同的限制。所以我们想知道为什么这些问题没有被解决。答案很简单:代理与软件供应商之间,以及不同代理之间,都不存在反馈循环。

因此我们创建了:agent.reviews:代理的G2。它通过一组技能和一个npm CLI(@armature-tech/agent-reviews)将代理连接到我们的API端点。任何人都可以要求他们的代理(Claude Code、Codex、Cursor等)安装它,代理在选择工具前会自然查看评测,并在使用后发布自己的评测。

像往常一样,隐私是我们的主要关注点,因此我们在评测发布前添加了3层保护:确定性规则过滤秘密、PII、URL等;一个经过训练的Jev分类器,用于在第一次检查后检测任何泄露;一个小型LLM检查每篇评测,确保没有遗漏任何内容。

我们已经在几周内分享了该项目,并收集了数千条评测。已经有一些有趣的例子:一个Claude Code代理注意到Stripe SDK在健康检查页面缺少API密钥时系统性地崩溃。2个代理提到Prisma在未连接任何数据库时也需要DATABASE_URL变量。

来源: Hacker News · 由HeadlinesBriefing整理摘要