코딩 에이전트 하네스 설계에 대한 실증 연구 결과를 다룸.
이 연구는 코딩 에이전트의 계획 수립, 도구 구성, 컨텍스트 관리의 변화를 살펴보았습니다. 4개 모델과 2개 벤치마크를 통해 176개 설정을 비교한 결과, 효과는 모델과 작업에 따라 다르게 나타났습니다. 특히, 컨텍스트 관리가 대화의 연속성을 유지하는 데 중요한 역할을 하는 것으로 밝혀졌습니다.
This study examines the design of coding agent harnesses and their effectiveness.
This research investigates the changes in planning, tool configuration, and context management of coding agents. By comparing 176 configurations across four models and two benchmarks, the effects varied depending on the model and task. Notably, context management played a crucial role in maintaining conversational continuity.