PyTorchKR Papers

최신 논문

총 1편
태그·기간 등 상세 필터

카테고리 탐색

로그인 후 이 태그 구독

arXiv:2605.01392v2cs.SE

소프트웨어 설계에서의 LLM 활용: GitHub 실증 연구 및 실무자 설문조사

Using LLMs in Software Design: An Empirical Study of GitHub and A Practitioner Survey

대규모 언어 모델(LLM)의 최근 발전은 전통적으로 인간의 전문성과 판단에 크게 의존한다고 여겨져 온 소프트웨어 설계를 포함하여, 다양한 소프트웨어 공학 작업 전반에서 상당한 잠재력을 입증했습니다. 그러나 소프트웨어 설계에서 LLM이 어떻게 활용되는지, 그리고 그에 따른 이점과 한계는 무엇인지 조사한 연구는 제한적이었습니다. 본 논문은 소프트웨어 개발자가 소프트웨어 설계에서 LLM을 어떻게 사용하는지 실증적으로 조사하여 이러한 공백을 해결합니다. 우리는 GitHub에서 공유된 291건의 개발자-ChatGPT 대화에 대한 마이닝 연구와 65명의 소프트웨어 실무자를 대상으로 한 설문조사를 결합한 혼합 연구 방법론을 수행했습니다. 마이닝된 대화로부터 아키텍처 설계, 데이터 모델 설계, 디자인 패턴 활용을 포함하여 ChatGPT가 지원하는 9가지 설계 작업 범주를 식별했습니다. 나아가 개발자-ChatGPT 간의 상호작용을 특성화하여, 마이닝된 대화 속 개발자들이 주로 지식 습득과 설계 관련 코드 생성을 위해 ChatGPT를 사용하며 대부분의 작업이 상세 설계 수준에 위치함을 보여줍니다. 설문조사 참가자들은 더 나은 기술 선택 및 설계 결함의 조기 발견 등 7가지 주요 이점과 긴 출력, 실행 불가능하거나 부정확한 코드, 프로젝트 맥락에 대한 의존성 등 6가지 한계를 보고했습니다. 이러한 연구 결과는 오픈소스 및 실무자 관점 모두에서 소프트웨어 설계 내 현재 LLM 사용에 대한 증거 기반의 특성화를 제공합니다.