QA · 전시·행사

베스트콘(BeSTCon) 2023, 티벨이 공개한 음성 테스트 자동화 사례

소프트웨어의 기능과 사용 환경이 다양해질수록
이를 검증하는SW 테스트와 품질 관리의 범위도 함께 넓어집니다.

그렇다면 실제 소프트웨어 테스트 현장에서는 어떤 기술과 방법을 활용하고 있을까요?

이러한 고민과 실제 현장의 경험을 공유하는 자리가
BeSTCon(Better Software Testing Conference)입니다.

BeSTCon은 어떤 행사일까?

BeSTCon은 ‘Better Software Testing Conference’의 약자로,
소프트웨어 테스트와 품질을 주제로 열리는 전문 콘퍼런스입니다.

한국소프트웨어테스팅협회가 주관하며, SW 테스트와 품질 분야의 기업 및 전문가들이 참여해
실제 테스트 현장에서 활용되는 기술과 적용 사례를 공유하는 자리입니다.

단순히 새로운 테스트 기술을 소개하는 데 그치지 않고,
실제 프로젝트에서 발생하는 품질 문제와 이를 해결하기 위해 적용한 테스트 방법, 자동화 사례 등을
함께 살펴볼 수 있다는 점이 특징입니다.

구분

내용

행사명

BeSTCon

영문명

Better Software Testing Conference

주관

한국소프트웨어테스팅협회

주요 분야

SW 테스트, QA, 소프트웨어 품질

주요 내용

테스트 기술 및 실제 적용 사례 공유

티벨과 BeSTCon의 인연도 이번이 처음은 아닙니다.
티벨은 앞선 BeSTCon에서도 SW 테스트 현장에서 축적한 기술과 경험을 공유해 왔습니다.

2021년에는‘BDD 기반 테스트 자동화 환경 구축’을 주제로 발표하며
BDD를 활용한 테스트 자동화 방법과 구축 경험을 소개했습니다.

그리고 2023년에는 한 단계 더 구체적인 자동화 사례를 가지고 다시 BeSTCon을 찾았습니다.


BeSTCon 2023에서 티벨이 공개한 ‘음성 테스트 자동화’

2023년 10월 31일 열린 BeSTCon 2023에서

티벨은‘Speech 테스트 자동화를 위한 Best Practice’를 주제로
음성 테스트 자동화 기술과 실제 적용 사례를 소개했습니다.

발표는이혜진 티벨 실장이 맡았으며,
BDD 방식과 TTS·STT 기술을 활용해 사람이 직접 수행하던 음성 테스트를 자동화하는 방법을 다뤘습니다.

구분

내용

행사

BeSTCon 2023

일자

2023년 10월 31일

발표자

이혜진 티벨 실장

발표 주제

Speech 테스트 자동화를 위한 Best Practice

주요 기술

BDD, TTS, STT

주요 성과

기존 Test Case의 약 80% 자동화 구현

이번 발표의 핵심은
사람이 직접 음성을 발화하며 반복적으로 수행하던 테스트를
어떻게 자동화할 것인가였습니다.

음성 테스트를 어떻게 자동화했을까?

음성을 사용하는 서비스를 테스트하려면 실제 음성 입력에 대한 검증이 필요합니다.

티벨이 BeSTCon 2023에서 소개한 사례에서는
테스터가 직접 육성으로 발화하는 대신TTS(Text-to-Speech)와 STT(Speech-to-Text) 기술을 활용해
음성 테스트를 수행하는 방식을 적용했습니다.

이를 통해 주변 소음이나 돌발 상황 등
테스트 환경에 따른 영향을 줄이면서 반복적인 음성 테스트를 수행할 수 있도록 했습니다.

또한BDD(Behavior Driven Development)방식을 활용해 요구사항을 사용자의 행동 관점에서 정의하고,
이를 기반으로 고객의 요구사항에 맞는 자동화 테스트를 구성했습니다.

음성 테스트 자동화 구조

사용자 요구사항
→BDD 기반 테스트 시나리오
→TTS를 통한 음성 입력
→테스트 수행
→STT를 통한 결과 확인
→테스트 결과 검증


기존 Test Case의 약 80%를 자동화

BeSTCon 2023에서 소개된 사례에서는기존 Test Case(TC)의 약 80%까지 자동화로 구현했습니다.

반복적으로 사람이 수행하던 테스트를 자동화하면서 지속적인 테스트 수행이 가능해졌고,
이를 통해테스트 효율화와 품질 향상, 비용 절감의 방향을 함께 제시했습니다.

또한 티벨은 테스트 자동화 단계를
기존DevOps 파이프라인에 통합하는 방식으로 자동화 환경을 구축했습니다.

즉, 개별 테스트를 자동으로 실행하는 것에서 끝나는 것이 아니라
개발과 테스트 과정에서 지속적으로 테스트를 수행할 수 있는TestOps 환경까지 연결한 것입니다.

자동화 테스트와 테스트 자동화는 무엇이 다를까?

티벨이 BeSTCon 2023에서 소개한 사례에서 주목할 부분은
개별 테스트의 자동화뿐 아니라테스트 프로세스 전반의 자동화입니다.

구분

핵심

자동화 테스트(Automated Test)

특정 테스트 수행을 자동화

테스트 자동화(Test Automation)

테스트 프로세스 전반을 자동화

TestOps

지속적으로 테스트를 수행할 수 있는 환경 구축

티벨의 테스트 자동화는 이러한 TestOps 환경을 기반으로
자동차, 교육, 금융, 전자상거래, 전자, 통신 등 다양한 소프트웨어 분야에 적용할 수 있습니다.


BeSTCon 2023, 티벨이 공유한 테스트 자동화 경험

이번 발표에서는
BDD를 기반으로 한 테스트 시나리오 구성부터
TTS·STT를 활용한 음성 테스트, DevOps 환경과 연계한 테스트 자동화까지
실제 적용 사례를 중심으로 소개했습니다.

특히 기존 Test Case의 약 80%를 자동화한 사례를 통해,
반복적으로 수행되는 음성 테스트를 자동화 환경으로 전환하는 과정과 결과를 함께 확인할 수 있었습니다.