VeriFast를 위한 LLM 생성 사양에 대한 실증 연구
An Empirical Study of LLM-Generated Specifications for VeriFast
SL 검증기 VeriFast로 303개 C 함수 검증에 필요한 사양을 LLM이 생성하도록 10개 모델, 8가지 프롬프팅, 3가지 입력 유형을 두 단계 실험으로 평가했다. 소스 코드와 사양의 기능적 동작 보존률은 각각 91% 이상이나 VeriFast 검증 성공률은 31.4%에 그쳤고, Gemini 2.5 Pro와 형식적 계약 제공 시 성공률이 높았으며 오류의 94%는 SL 검증기 도메인 지식에 대한 LLM의 실수에서 비롯되었다.