개발 상태로의 복귀: 전체 샌드박스 스냅샷이 코딩 에이전트에 도움이 되는 시점
Returning to Development States: When Full Sandbox Snapshots Help Coding Agents
코딩 에이전트(coding agent)는 실패하기 전까지 유의미한 진전을 보이는 경우가 많지만, 처음부터 다시 시도(retry-from-scratch)하면 그 과정에서 생성된 머신 상태가 폐기됩니다. 이로 인해 실패 복구는 흥미로운 탐색 문제가 됩니다. 즉, 중간 환경(environment) 상태가 유의미한 진전을 보존하고 있다면, 이를 복원하고 그로부터 분기하는 것이 초기 상태에서 반복적으로 재시작하는 것보다 우수한 성능을 보일 수 있습니다. 본 연구에서는 전체 Daytona 스냅샷에 대해 Go-Explore 방식의 탐색을 구현하였으며, 더 높고 효율적인 해결률은 주로 데이터베이스, 서비스 및 기타 런타임 상태와 같이 저장소 외부에 존재하는 진전에 좌우된다는 점을 발견했습니다. 실험 결과는 전체 스냅샷 탐색이 단일 diff로는 재구성할 수 없는 여러 서비스에 걸쳐 상태가 존재하는 장기적(long-horizon) 코딩 작업에서 가장 효과적임을 시사합니다.