사용성 테스트의 개념과 중요성
사용성 테스트(Usability Test; UT)
실제로 유저가 화면을 조작하는 모습을 관찰할 수 있다.
유저가 어떤 어려움을 겪는지 직관적으로 알 수 있다.
사용성 테스트의 개념
프로토타입이 있으면 제품을 개발하는 어떤 단계든 활용할 수 있다.
의도한 시나리오에 따라서 유저들이 실제로 행동하는지, 사용하는데 예상치 못 한 문제가 있는지 관찰하기 위해 진행
유저가 실제로 사용할 때 어떤 생각을 가지고, 어떤 혼란을 겪는지 알 수 있다.
사용성 테스트의 중요성
우리는 유저가 아니기 때문
우리는 우리가 진행하는 프로젝트에 대해 너무 많이 알고 있어 시각이 오염될 수 있고 편향된 생각을 가질수 있기에 다시 초심으로 돌아가 유저 중점적으로 생각하고 문제를 개선하는데 집중할 필요가 있는데 이 때 사용성 테스트에 도움을 받을 수 있다.
유저가 실제로 화면을 조작하면서 마주치는 문제들이 어떤 것이 있는지 관찰을 할 수 있다.
예산이 제한적이거나 시간이 촉박해도 캐주얼한 사용성 테스트를 진행할 수 있기에 꼭 사용성 테스트를 하는 것을 권장한다.
사용성 테스트 준비
사용성 테스트의 구성 요소
진행자 - 참가자에게 어떤 절차와 목적에 의해서 테스트가 진행되는지 알려주게되고 참가자가 피드백을 전달할 때 자연스럽게 전달 할 수 있도록 분위기 조성.
참가자 - 유저들을 대표할 수 있어야한다. 유저와 유사한 특성을 가지고 있어야한다.
테스크 - 현실적으로 참가자가 수행할 수 있는 종류의 테스크여야 한다.
관찰자 - 참가자가 사용성 테스트를 진행 할 때 관찰하고 기록한다. 테스트를 진행하는 방에 진행자와 함께 들어가서 관찰하기도 한다.
사용성 테스트 공간 환경 구성
테스트가 진행되는 공간이랑 테스트를 실시간으로 관찰할 수 있는 공간이 필요하다.
참가자의 얼굴과 조작하는 화면
단방향 거울을 활용하는 경우도 있다.
줌과 구글 등을 활용하여 원경에서 사용성 테스트를 진행하기도 한다.
사용성 테스트 준비하기
목적 설정 - 사용성 테스트를 통해서 어떤것을 확인하고 싶은지
리크루팅, 스크리닝 - 테스트의 목적과 방식, 일정보상이 포함되도록 공지 작성. 필요한 경우 지원자의 적합 여부를 사전 질문을 통해서 스크리닝. (5명 정도면 85%)
테스크 선정 - 유저가 실제로 수행할 수 있는 현실적인 것으로 선정. 테스크는 유저에게 주어지는 미션같은 것.
사용성 테스트 시나리오 작성 - 테스크의 수행 요청하는 순서, 후속 질문 리스트 등.
파일럿 테스트 - 실제 테스트 환경과 동일한 환경에서 사전 테스트 진행. 예상치 못한 변수를 미리 확인하고 제 3자 입장에서 질문 관련 피드백을 받을 수 있다. 테스크를 시행하는 총 소요 시간을 알 수 도 있다.
사용성 테스트 실행
사용성 테스트 실행 과정
테스크 안내 - 사용성 테스트의 목적, 진행방법, 주의 사항 안내
영상/사진 촬영 동의 여부 체크, 기밀 프로젝트인 경우 보안서약서 작성
테스크 안내 - 참가자가 수행해야할 테스크를 알려줌
테스크 수행 & Think Aloud - 테스크를 수행할 때 자신의 생각이나 감정을 말로 표현하도록 요청
사후 인터뷰 - 이용 만족도 측정. 테스크를 진행하면서 어떤 부분이 기대했던것과 차이가 있는지 불편하게 하는 것은 무엇인지 파악
마무리 - UT가 종료되었음을 알리고 참여보상을 증정
관찰자도 사용성 테스트 시나리오를 숙지하는 것이 바람직함
☆★Think Aloud 이해하기★☆
머릿속에서 어떤 생각이 드는 지 말로 표현하는 방법
유저가 어떤 의도를 가지고 행동했는지, 어떤과정을 통해서 인지를 했는지를 이해할 수 있다.
설계에도 반영할 수 있다는 장점이 있다.
버튼, 아이콘 등 왜 클릭했는지 의도를 알 수 있다.
어떤 것을 기대하고 행동했는지, 테스크를 수행하면서 어디서 어려움을 느꼈는지, 실수했다면 왜 했는지를 이해해 볼 수 있다.
편안한 분위기에서 조작을 할 수 있도록 형성해줘야한다.
진행방법
1. 테스크를 수행과 동시에 진행
장점 - 정보를 찾고자 할 때 어떤 의도를 가지고 했는지 명확하게 파악
단점 - 말고 동시에 해서 집중도 하락. 수행능력이 떨어지면 다음 행동을 암시하는 힌트를 줄 수 있다.
- 테스크 종료 후 기억을 되살리며 진행
장점 - 테스크 수행 중에 테스크에만 집중할 수 있다.
단점 - 직전에 했던 행위를 기억 못 할 수도 있다. 표현하지 않고 생략하는 경우도 있다.
보통은 1번으로 진행
유의사항
질문을 할 때 최대한 답변을 주지 않아야 한다.
힌트를 주거나 고치려고 하지 말아야 한다.
사용성 테스트 결과 정리
사용성 테스트 결과 정리하기
"문제점이 무엇이고 원인이 무엇인데 개선을 어떻게 하면 좋을거 같아"
문제점 도출
진행자와 관찰자가 기록한 것을 종합하여 문제점을 파악할 수 있다.
원인 도출
유저가 예상한 것과 실제 경험이 어떻게 달라졌는지 파악
개선 방향 도출
테스크 별로 개선이 필요한 부분 리스트업
구조적으로 개선이 필요한 부분, 전반적으로 개선해야하는 부분 리스트업
우선순위 팁
사용성 테스크에서 유저의 이용만족도와 행동 데이터를 수집하여 의사결정의 근거로 활용을 하기도 한다.
참가자의 이용만족도 측정
테스크를 실패했는지 성공했는지 측정
테스크를 쉽게 달성할 수 있었는지 측정
우선순위 논의 TIP
제이콥 닐슨의 휴리스틱 평가 방법
휴리스틱 평가 이해하기
전문가가 UI를 평가하면서 문제점을 발견하는 방법
디자인 초기에 비교적 쉽고 빠르게 적용해볼 수 있다.
전문가 중심의 평가여서 실제 유저들의 경험을 완벽하게 대변하지는 못 한다.
제이콥 닐슨의 10가지 휴리스틱 평가 항목
시스템 상태 가시성
유저가 현재 무엇을 하고 있는지 정확한 상태를 보여주고 있는가?
시스템과 실제 세상 매칭
사용되고 있는 아이콘, 문구, 메뉴명이 실제 생활에서도 사용되고 있는 것으로 제공되고 있는가?
유저의 선택권 및 자유도
유저가 서비스를 자유롭게 조작할 수 있는가?
일관성과 규정
여러 개의 화면에서도 일관성있게 제공하고 있는가?
에러 방지
사용하면서 실수를 최대한 하지 않도록 하고 있는가?
기억보다는 인지
서비스를 사용할 때 학습을 하거나 별도의 기억을 하지 않아도 직관적으로 사용할 수 있는가?
유연성과 효율성
서비스 대상 모두가 사용할 수 있게 제공되고 있는가?
심미적이고 미니멀한 디자인
최소한의 디자인을 통해 심미성을 잘 느낄 수 있게 제공되고 있는가?
유저가 에러를 전달할 때 상황, 이유, 해결책을 말하기
에러가 발생했을 때, 유저가 잘 인지하고 스스로 해결할 수 있게 도와주고 있는가?
문제 해결과 문서화
유저에게 충분한 도움말을 제공하고 있는가?
