개발자는 모르는 사용자의 진짜 마음, '사용성 테스트'로 알아보기

여기 기술적으로 완벽하고, 버그 하나 없는 새로운 기능이 있습니다. 개발자는 이 기능의 완성도에 자부심을 느낍니다. 하지만 막상 기능을 출시하자 사용자들의 불만이 쏟아집니다. “어디에 있는지 못 찾겠어요.”, “어떻게 쓰는지 너무 복잡해요.”

목차 숨기기

‘사용성 테스트(Usability Testing)’는 바로 이 간극을 메우기 위한 활동입니다. 실제 사용자가 우리 제품과 상호작용하는 모습을 직접 관찰함으로써, 개발팀의 ‘가정’이 아닌 사용자의 ‘현실’을 파악하고 더 나은 제품을 만드는 과정입니다.

사용성은 단순히 ‘사용하기 쉽다’는 막연한 느낌이 아닙니다. 세계적인 사용성 전문가 제이콥 닐슨은 좋은 사용성을 구성하는 5가지 핵심 속성을 다음과 같이 정의했습니다.

학습용이성 (Learnability): 사용자가 처음 제품을 접했을 때, 얼마나 쉽게 기본적인 기능을 익힐 수 있는가?
효율성 (Efficiency): 한번 기능을 익힌 사용자가 얼마나 빠르고 효율적으로 원하는 작업을 수행할 수 있는가?
기억용이성 (Memorability): 한동안 제품을 사용하지 않다가 다시 돌아왔을 때, 사용법을 얼마나 쉽게 다시 기억해낼 수 있는가?
오류 (Errors): 사용자가 얼마나 자주 실수를 하며, 그 실수가 얼마나 심각한가? 또한 실수로부터 얼마나 쉽게 복구할 수 있는가?
만족도 (Satisfaction): 전반적으로 이 제품을 사용하는 경험이 얼마나 즐겁고 만족스러운가?

이 5가지 요소를 평가하고 개선하는 것이 사용성 테스트의 궁극적인 목표입니다.

사용성 테스트에는 여러 가지 방법이 있으며, 상황과 목적에 맞게 선택할 수 있습니다.

방법: 진행자(QA, UX리서처 등)가 실제 사용자와 1:1로 마주 앉아 진행합니다. 진행자는 사용자에게 “회원가입 후, 첫 상품을 장바구니에 담아보세요”와 같은 과업을 주고, 사용자가 과업을 수행하는 동안의 행동, 표정, 말 등을 유심히 관찰합니다. 중간중간 “왜 이 버튼을 먼저 누르셨나요?”와 같은 질문을 통해 생각의 흐름을 파악합니다.
장점: 사용자의 행동 이면에 숨은 ‘왜’를 깊이 있게 파악할 수 있습니다.
단점: 시간과 비용이 많이 들고, 소수의 인원만 테스트할 수 있습니다.

방법: 사용자가 진행자 없이, 온라인 테스트 도구(Maze, UserTesting 등)를 이용해 혼자서 과업을 수행합니다. 사용자의 화면과 목소리는 녹화되며, 사용자는 ‘생각 발성법(Think-aloud)’에 따라 자신의 생각을 계속 말하면서 테스트를 진행합니다.
장점: 시간과 장소에 구애받지 않고, 저렴한 비용으로 많은 사람을 테스트할 수 있습니다.
단점: 예상치 못한 행동에 대해 즉각적인 추가 질문을 할 수 없습니다.

방법: 사용자에게 웹사이트의 첫 화면이나 앱의 메인 화면을 단 5초만 보여줍니다. 그리고 화면을 가린 뒤, “무엇을 보셨나요?”, “이 서비스가 무엇을 하는 곳 같나요?”와 같은 질문을 합니다.
목표: 서비스의 첫인상, 핵심 가치, 브랜드 이미지가 명확하고 직관적으로 전달되는지를 평가합니다.

QA 엔지니어는 사용성 테스트에서 중요한 역할을 수행할 수 있습니다.

현실적인 시나리오 설계: 제품의 기능 명세를 잘 이해하고 있으므로, 사용자가 겪을 만한 현실적이고 구체적인 테스트 시나리오(과업)를 설계할 수 있습니다.
객관적인 관찰: 사용자가 어려움을 겪을 때 정답을 알려주거나 도와주고 싶은 마음을 참고, 문제점이 자연스럽게 드러나도록 객관적으로 관찰하는 훈련이 필요합니다. 우리의 목표는 사용자를 가르치는 것이 아니라, 디자인의 문제점을 발견하는 것입니다.
결과 분석 및 보고: “사용자가 버튼을 못 찾았다”는 현상 보고에 그치지 않고, “버튼의 색상이 배경과 대비가 낮아 눈에 띄지 않았기 때문으로 보이며, 색상 변경을 제안합니다”와 같이 원인을 분석하고 실행 가능한 개선안을 제시해야 합니다.

사용성 테스트는 코드의 버그를 찾는 활동이 아니라, 사용자 경험의 ‘마찰(Friction)’을 찾아내는 활동입니다.

개발팀의 가정과 사용자의 실제 현실 사이의 다리를 놓는 것, 이것이 바로 사용성 테스트의 진정한 가치입니다. 사용자의 목소리에 귀 기울일 때, 우리는 비로소 ‘작동하는’ 제품을 넘어 ‘사랑받는’ 제품을 만들 수 있습니다.

개발자는 모르는 사용자의 진짜 마음, ‘사용성 테스트’로 알아보기