HeadlinesBriefing favicon HeadlinesBriefing.com

コーディングエージェントのツール選択:16,893セッション

Hacker News •
×

研究免責事項:Armatureは開発者ツール向けの成長サービスを販売しています。この研究は、コーディングエージェントの選択に影響を与え、製品が選ばれるようにするための私たちのより広範な取り組みの一部です。

エージェントがコーディングの旅の多くを担うにつれて、既存のコードベースにどのサービスを実装するかの選択は彼らに委託されます。例えば、旅行アプリを構築するバイブコーダーがClaude Codeに入力を永続的に保存するよう依頼します。エージェントは無料枠とシンプルさからNeonを推奨します。Cursorを使用するシニアエンジニアが予測可能なコストの完全管理データベースを要求します。結論は同じ—Neonです。

私たちは2つのサンドボックス、異なるエージェント、コードベース、ペルソナで実験を行いましたが、結果は同じでした。一般化するために、史上最大の実験を実施しました:ペルソナ(バイブコーダー、ジュニアエンジニア、シニア開発者)にわたる約17,000セッション、1,163のプロンプトバリエーション、75のリポジトリ、3つのエージェント(Claude Code、Codex、Cursor)がソリューションを実装しました。

公開GitHub統計からリポジトリのパネルを構築し、現実世界の分布に対して偏りがありませんでした。タスクは実際のもので、偽の会社名、git履歴、APIキーがありました。各実験には4つのプロファイルの1つが含まれ、症状を説明するバイブコーダーから要件を指定するシニア開発者までありました。

主要エンティティ:企業:Armature、Vercel、Neon、Supabase、GitHub