SemaDiff: 생성 코드와 테스트를 이용한 의미 변경 커밋 식별
SemaDiff: Identifying Semantic-Changing Commits with Generated Code and Tests
의미를 보존하는 커밋과 의미를 변경하는 커밋을 구별하는 것은 소프트웨어 저장소 마이닝(software repository mining)에서 여전히 해결되지 않은 과제이다. 기존 접근법은 리팩터링 커밋을 정확하게 탐지하지만, 행동을 변경하는 수정이 뒤섞이지 않은 순수하게 의미를 보존하는 커밋인지는 보장할 수 없다. 이러한 한계는 디버깅, 결함 국소화(fault localisation), 버그 데이터셋 구축, 롤백 분석, 버그 수정 백포팅(backporting) 등 여러 작업에 영향을 줄 수 있다. 이 간극을 메우기 위해, 우리는 SemaDiff를 제안한다. 이는 행동 기반 분석—커밋 전후 버전에서 유사한 테스트 실행을 비교하는 방식—을 통해 의미를 보존하는 커밋을 식별하는 새로운 접근법이다. 리팩터링의 영향을 받는 코드는 종종 테스트하기 어렵고 두 버전 간에 서로 다르기 때문에, 우리는 그 코드에 대한 추가 호출 메서드를 생성하여 테스트 대상으로 사용하는 방식을 제안한다. 커밋이 주어지면 SemaDiff는 diff를 분석하여 수정된 코드를 식별하고, 이를 호출하는 변경되지 않은 종속 코드를 추출한다. 그런 다음 언어 모델을 사용하여 추가 종속 클래스를 생성해 두 버전 모두에서 변경된 코드를 실행하도록 하고, 종속 코드에 대한 테스트를 자동으로 생성한다. 이를 통해 서로 다른 코드 버전에 대해 동일한 테스트를 얻을 수 있어 행동 차이 탐지가 가능해진다. 커밋은 생성된 모든 테스트가 두 버전에서 동일한 결과를 낼 때만 의미를 보존하는 것으로 분류된다. SemaDiff를 평가하기 위해, 잘 알려진 오픈소스 Java 프로젝트에서 수집한 183개 커밋으로 구성된 데이터셋을 수동으로 구축하고 주석을 달았다. 얻어진 결과는 SemaDiff가 전체 사례의 약 76%에서 의미를 보존하는 커밋과 의미를 변경하는 커밋을 정확히 구별하며, 의미 변경 커밋 탐지에서 100% 정밀도를 달성함을 보여준다.