지속적 통합 환경에서 회귀 테스트 기술의 비용효율성에 대한 실패 관심도 기반 분석

Abstract

지속적 통합 환경에서 비용효율적인 회귀 테스트 기술을 적용함으로써 개발자에게 테스트 실패에 대한 빠른 피드백이 가능하다. 본 연구는 테스트 수행 이력을 기반으로 하는 두 가지 테스트케이스 실행순서 결정 기술(Test Case Prioritization, TCP)을 세 개의 산업체 프로젝트에 적용하여 각 기술의 비용효율성을 측정하였다. 그리고 지속적 통합 환경에서는 각 테스트 실패에 대한 관심도가 서로 다르므로 이를 고려하여 실험하였다. 관심도를 다르게 하였을 경우, 두 TCP 기술을 적용한 경우가 TCP 기술을 적용하지 않은 경우와 비교하여 유사한 비용효율성을 보일 수 있음을 발견하였다. 실험결과는 최신 테스트케이스 실행순서 결정 기술의 개선 필요성을 시사한다.