arXiv:2611.23256v1 cs.SE

소프트웨어 테스팅에서의 생성형 AI: 실무자들이 바라본 이점, 과제, 기회 및 위험

Generative AI in Software Testing: Practitioners' Perspectives on the Benefits, Challenges, Opportunities, and Risks

Chamari Dasanayake, Rahul Mohanani, Vladimir Mandi\'c, Burak Turhan

제출 2026-11-19

한국어 초록

생성형 인공지능(GenAI)이 소프트웨어 테스팅을 점점 더 많이 지원하고 있으나, 실무자의 인식에 관한 실증적 근거는 여전히 제한적이다. 본 연구는 64명의 실무자를 대상으로 한 설문 조사를 통해 소프트웨어 테스팅에서 GenAI가 갖는 이점, 과제, 기회 및 위험에 대한 인식을 조사한다. 폐쇄형 응답은 기술통계로 분석하였고, 개방형 응답은 연구 결과의 맥락을 파악하기 위해 질적으로 코딩하였다. 응답자 중 34명은 사용자(테스팅에서 GenAI를 정기적으로 또는 시험적으로 사용하는 사람)였고 30명은 비사용자(테스팅에서 GenAI를 사용한 경험이 없는 사람)였다. 결과는 노력 절감, 테스트 생성, 디버깅 측면에서 GenAI에 대해 대체로 긍정적인 인식이 있음을 보여주며, 동시에 프롬프트 의존성, 신뢰, 잘못된 출력에 대한 우려도 나타난다. 사용자는 몇 가지 구체적인 이점에 대해 더 긍정적이었고 신뢰성 관련 위험을 더 자주 우선순위에 두었으며, 비사용자는 기술적으로 구체적인 일부 과제에 대해 더 큰 불확실성을 보였다. 종합하면, 본 연구 결과는 GenAI를 인간의 검증이 필요한 보조 기술로 규정하며, GenAI 지원 테스팅에 대한 인식을 해석할 때 실무자의 GenAI 사용 경험을 고려하는 것이 중요함을 강조한다.

원문 초록

Generative Artificial Intelligence (GenAI) increasingly supports software testing, yet empirical evidence on practitioners' perceptions remains limited. This study investigates perceived benefits, challenges, opportunities, and risks of GenAI in software testing through a questionnaire survey of 64 practitioners. Closed-ended responses were analyzed descriptively, while open-ended responses were qualitatively coded to contextualize the findings. Among the respondents, 34 were users (those with regular or experimental use of GenAI in testing) and 30 were non-users (those without prior use of GenAI in testing). Results show generally positive perceptions of GenAI for reducing effort, test generation, and debugging, alongside concerns about prompt dependence, trust, and incorrect outputs. Users were more positive about several concrete benefits while also more frequently prioritizing reliability-related risks, whereas non-users showed greater uncertainty about some technically specific challenges. Overall, the findings position GenAI as an assistive technology requiring human validation and highlight the importance of considering practitioners' experience with GenAI when interpreting perceptions of GenAI-assisted testing.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2611.23256v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.