여기 새로 출시된 온라인 쇼핑몰 앱이 있습니다. 로그인도 잘 되고, 상품 검색도 정확하며, 결제 버튼을 누르면 주문까지 완벽하게 이루어집니다. 모든 ‘기능’이 정상적으로 작동하는 것을 확인했습니다.
그런데 이 앱은 페이지를 넘길 때마다 5초씩 걸리고, 버튼이 너무 작아 자꾸 잘못 눌리며, 100명만 동시 접속해도 서버가 멈춰버립니다. 이 앱의 기능은 ‘정상’이지만, 과연 ‘품질’이 좋다고 말할 수 있을까요?
이처럼 소프트웨어의 품질을 결정하는 것은 눈에 보이는 기능 너머에 있습니다. 이번 글에서는 제품을 ‘작동하는’ 수준에서 ‘쓸만한’ 수준으로 끌어올리는 필수적인 활동, ‘비기능 테스트’에 대해 알아보겠습니다.
기능 테스트 vs. 비기능 테스트
소프트웨어 테스트는 크게 두 가지로 나눌 수 있습니다.
- 기능 테스트 (Functional Testing): “소프트웨어가 ‘무엇을’ 하는가?”를 검증합니다. 즉, 요구사항 명세서에 정의된 기능들이 올바르게 동작하는지 확인하는 것입니다.
- 예시: “올바른 아이디와 비밀번호를 입력하면 로그인이 되는가?”
- 비기능 테스트 (Non-functional Testing): “소프트웨어가 ‘어떻게’ 동작하는가?”를 검증합니다. 성능, 사용성, 안정성, 보안 등 소프트웨어의 특성과 품질 속성을 평가하는 것입니다.
- 예시: “로그인 버튼을 눌렀을 때 ‘얼마나 빨리’ 반응하는가?”, “로그인 과정은 ‘얼마나 쉬운가’?”, “비밀번호는 ‘얼마나 안전하게’ 전송되는가?”
기능 테스트가 건물의 설계도대로 방과 창문이 잘 만들어졌는지 확인하는 것이라면, 비기능 테스트는 그 건물이 얼마나 튼튼하고(안정성), 냉난방이 잘 되며(성능), 살기에 편리한지(사용성)를 점검하는 것과 같습니다.
반드시 알아야 할 대표적인 비기능 테스트 유형
비기능 테스트는 매우 광범위하며, 여러 종류가 있습니다. 그중 가장 대표적이고 중요한 유형은 다음과 같습니다.
1. 성능 테스트 (Performance Testing)
- 무엇을: 특정 부하 조건에서 시스템이 얼마나 빠르고 안정적으로 반응하는지를 측정합니다.
- 왜: 사용자가 답답함을 느끼지 않는 빠른 응답 속도를 보장하고, 많은 사용자가 동시에 접속했을 때 서비스가 멈추거나 다운되는 것을 방지하기 위함입니다.
- 주요 종류:
- 부하 테스트 (Load Testing): 예상되는 일반적인 사용자 수와 트래픽을 발생시켜 시스템의 성능을 측정합니다.
- 스트레스 테스트 (Stress Testing): 시스템이 감당할 수 있는 한계점까지 부하를 가하여, 장애 발생 시 어떻게 동작하는지를 확인합니다.
2. 사용성 테스트 (Usability Testing)
- 무엇을: 사용자가 소프트웨어를 얼마나 쉽고 편리하게, 직관적으로 사용할 수 있는지를 평가합니다.
- 왜: 아무리 뛰어난 기능이라도 사용자가 사용법을 모르거나 불편해서 쓰지 않는다면 아무 의미가 없기 때문입니다. 좋은 사용성은 사용자 만족도와 직결됩니다.
- 주요 방법: 실제 사용자가 주어진 과업을 수행하는 모습을 관찰하고, 설문조사나 인터뷰를 통해 피드백을 수집합니다.
3. 보안 테스트 (Security Testing)
- 무엇을: 외부의 악의적인 공격으로부터 시스템의 데이터와 리소스를 보호할 수 있는지, 잠재적인 보안 취약점을 찾아냅니다.
- 왜: 사용자의 민감한 개인정보나 결제 정보를 보호하고, 해킹으로 인한 서비스 장애 및 기업의 신뢰도 하락을 막기 위함입니다.
- 주요 점검 항목: SQL 인젝션, 크로스 사이트 스크립팅(XSS), 권한 없는 데이터 접근 등
4. 호환성 테스트 (Compatibility Testing)
- 무엇을: 소프트웨어가 다양한 환경에서 문제없이 동일하게 동작하는지를 검증합니다.
- 왜: 사용자들이 저마다 다른 환경을 사용하므로, 모든 사용자에게 일관된 경험을 제공하기 위함입니다.
- 주요 점검 환경:
- 웹 브라우저: Chrome, Safari, Firefox, Edge 등
- 운영체제: Windows, macOS, Android, iOS 등
- 디바이스 및 해상도: 다양한 스마트폰 기종, 태블릿, 데스크톱 모니터 등
결론: 진짜 품질은 보이지 않는 곳에 있다
기능적으로 완벽한 것은 좋은 품질을 위한 ‘기본 입장권’에 불과합니다. 실제 사용자가 느끼는 만족도와 서비스의 성공은 대부분 비기능적인 요소에서 결정됩니다.
성숙한 품질 보증(QA) 프로세스는 프로젝트 초기부터 어떤 비기능적 요소가 우리 서비스에 중요한지 정의하고, 이를 꾸준히 테스트하고 개선해 나갑니다. 단순히 ‘기능의 동작 여부’를 넘어, ‘사용자의 총체적인 경험’을 책임지는 것이 바로 현대 QA 엔지니어의 중요한 역할입니다.