Peneliti melakukan studi empiris tentang desain rangkaian untuk agen pengode otonom, mengevaluasi bagaimana komponen individual memengaruhi kinerja rekayasa perangkat lunak. Mereka menggunakan rangkaian ringan dengan loop eksekusi tetap untuk menguji 176 pengaturan yang cocok pada empat model di SWE-Bench Verified dan Terminal-Bench 2.1, dengan mengubah komponen perencanaan, ruang tindakan, dan manajemen konteks.

Temuan utama meliputi: manajemen konteks menjadi semakin berharga seiring semakin ketatnya anggaran jendela konteks, terutama dengan mencegah kegagalan overflow konteks. Melakukan elision berbasis aturan sebelum peringkasan berbasis LLM memberikan efisiensi tertinggi, sementara membuat konten yang dielision dapat dipulihkan menambah kompleksitas tanpa peningkatan akurasi. Perencanaan beralih dari menjadi sokongan akurasi untuk model yang lebih lemah menjadi penghemat biaya untuk model yang lebih kuat dengan perubahan akurasi yang minimal. Alat yang ditetapkan sebelumnya meningkatkan performa untuk model dengan kemahiran bash yang lebih lemah, sementara model yang mampu bash mencapai biaya yang jauh lebih rendah dengan antarmuka hanya bash, terutama pada tugas yang berpusat pada baris perintah.

Analisis tingkat trajetori menunjukkan bahwa manajemen konteks memperpanjang trajetori eksekusi tanpa mengubah perilaku agen, perencanaan mengubah tempat trajetori berhenti, dan ruang tindakan mengubah ketelitian penulisan kode. Temuan ini memberi informasi untuk desain rangkaian yang sadar akan model dan anggaran serta memberikan kerangka kerja modular untuk mengevaluasi komponen rangkaian di masa depan. Studi ini diserahkan oleh Run-Ze Fan pada 17 September 2026.

Entitas Kunci: Orang: Run-Ze Fan