테스트는 끝났는데, 이 노트 더미로 뭘 하죠?

마지막 참여자가 인사하고 통화가 끝나요. 세션 5개가 남긴 걸 들여다보면, 노트 104개가 쌓인 문서, 스크린샷 몇 장, 반 페이지쯤 되는 인용문이 전부예요. 월요일이면 누군가 "그래서 뭘 알아냈어요?"라고 물을 텐데, 지금 솔직한 답은 이거예요. 많이 알아냈겠죠. 아마 이 안 어딘가에 있을 거예요.

사용성 테스트 결과 정리, 3단계면 돼요

정리는 결국 세 가지예요. 모든 관찰을 한곳에 모으고, 그 더미를 패턴으로 묶고, 패턴을 심각도와 빈도로 줄 세우는 거죠. 방법 자체는 도구를 가리지 않아요. 스티키 노트를 붙인 벽에서도, 스프레드시트에서도, 리서치 도구에서도 똑같이 돌아가요. 그리고 목표는 30페이지짜리 보고서가 아니에요. 근거를 단 문제 세 개쯤, 팀이 실제로 고칠 짧은 목록이죠.

세션 5개 규모라면 오후 한나절이면 끝나요. 단계별로 볼게요.

1단계: 한 더미로, 노트 하나에 관찰 하나

먼저 전부 한곳에 모아요. 세션 노트, 인용문, 녹취록에서 표시해 둔 순간까지요. NN/g는 이 단계를 리서치 질문에 답이 되는 관찰과 인용을 추려내는 과정으로 설명하면서, 경고를 하나 덧붙여요. 모든 데이터가 같은 무게는 아니라고요. 참여자가 하는 걸 직접 본 것이, 참여자가 스스로 밝힌 의견보다 무거워요. "참여자 3이 엉뚱한 탭을 두 번 눌렀다"는 증거지만, "참여자 3은 디자인이 깔끔하다고 생각한다"는 감상이거든요.

노트 하나에는 관찰 하나만 담고, 누가·언제를 꼭 붙여 두세요. "참여자 2, 12분: 팀원 이메일을 검색창에 입력"은 나중에 누가 따져 물어도 근거를 댈 수 있지만, "사람들이 초대를 헷갈려했다"는 그럴 수 없어요. 세션 중에 노트마다 시간이 찍혀 있었다면 이 단계는 사실상 끝나 있어요. 아니라면 기억이 바래기 전에 지금 정돈하세요.

2단계: 더미를 패턴으로 묶기

이제 고전적인 방법, 친화도 매핑이에요. 노트를 펼쳐 놓고, 같은 행동을 가리키는 것끼리 모아요. NN/g가 소개하는 진행 순서도 정확히 이래요. 노트를 만들고, 테마로 묶고, 그다음 묶음의 우선순위를 정하는 거죠. 화이트보드 앞에 팀이 모여도 되고, 스프레드시트에서 혼자 해도 똑같이 통해요.

묶음이 쓸모 있으려면 규칙 두 개면 충분해요.

• 화면이 아니라 행동으로 묶기. "설정 페이지 노트들"은 폴더지 발견이 아니에요. "사람들이 초대를 세 군데서 찾아 헤맨다"는 세 화면에서 나온 노트여도 하나의 발견이죠.
• 묶음 이름은 숫자가 붙은 주장으로. "초대 관련 이슈"가 아니라 "5명 중 4명이 팀원 초대 방법을 못 찾았다"로요. 그 이름만 Slack에 붙여 넣어도 말이 되어야 해요.

노트에 처음부터 종류 태그가 달려 있다면 이 단계가 한결 수월해요. 관찰·문제·인사이트·버그를 미리 갈라 두면, 의견이나 버그를 먼저 걷어내고 행동 관찰만 놓고 묶을 수 있거든요.

노트 100개는 보통 패턴 열몇 개로 줄어들어요. 큰 묶음도 있고, 로고 얘기 두 장짜리 묶음도 있을 거예요. 괜찮아요. 이 단계의 핵심은 흩어진 순간들 대신 근거를 댈 수 있는 주장을 손에 쥐게 된다는 거예요.

3단계: 심각도 먼저, 빈도는 그다음

패턴 열두 개가 전부 스프린트 티켓이 될 수는 없죠. 표준은 야콥 닐슨(Jakob Nielsen)의 심각도 등급이에요. 문제가 얼마나 자주 일어나는지, 겪었을 때 빠져나오기가 얼마나 어려운지, 알고 나서도 반복되는지 세 요인을 보고 0~4점을 매겨요.

여기에 몇 명이 겪었는지를 교차하면 순서가 나와요.

숫자를 읽을 땐 조심할 게 하나 있어요. 참여자 5명일 때 빈도는 측정값이 아니라 나침반이에요. "5명 중 4명"은 문제가 실재하고 흔하다는 뜻이지, 사용자의 80%가 겪는다는 뜻이 아니거든요. (작은 표본의 숫자가 그래도 방향은 맞게 가리키는 이유는 참여자 수를 다룬 글에서 다뤘어요.) 동점일 땐 심각도가 이겨요. 한 명만 겪은 재앙이, 모두가 본 겉치레 결함보다 앞서요.

실제 더미에서는 이렇게 굴러가요

프로젝트 도구의 온보딩을 세션 5개로 테스트했고, 노트는 104개예요. 정리하다 보면 세 장이 자꾸 나란히 놓여요. "참여자 2, 12분: 팀원 이메일을 검색창에 입력하며 '여기다 하는 건가?'", "참여자 4: 초대를 찾으러 설정을 열었다가 두 번 되돌아 나옴", "참여자 5: 포기하고 그냥 Slack으로 링크 보내겠다고 함". 화면은 제각각인데 행동이 같죠. 이 묶음에는 "메인 화면에서 팀원 초대가 보이지 않는다"(5명 중 4명)라는 이름이 붙고, 네 명 모두 몇 분씩 헤매거나 포기했으니 심각도 3을 받아요.

끝나고 보니 패턴은 11개예요. 둘은 심각도 3에 대부분이 겪었고, 하나는 참여자 1만 겪었지만 데이터가 날아가는 경로라, 심각도 4를 받고 맨 앞줄로 와요. 이 셋이 인용문을 붙인 채 스프린트 티켓이 되고, 나머지 여덟은 근거를 매단 채 백로그로 가요. 노트 104개가 들어가서 액션 3개가 나왔고, 전부 근거가 붙어 있으니 누구를 말로만 설득할 필요도 없죠.

손이 많이 가는 부분은 덜 수 있어요

여기까지가 방법이고, 전용 도구가 없어도 돌아가요. 다만 앞쪽의 손 많이 가는 일, 노트를 모으고 누가·언제를 맞추는 부분은 덜 수 있어요. Interbang에서는 세션 노트와 녹취록을 한 번에 Markdown으로 묶어 Claude나 ChatGPT에 그대로 넘길 수 있어요. AI에게 패턴 초안을 부탁하고, 어떤 걸 살리고 버릴지는 직접 정하면 되죠. 노트마다 근거가 붙어 있으니, AI가 묶어 준 덩어리도 어느 세션 몇 분에서 나왔는지 바로 되짚을 수 있어요. 정리를 대신 맡기는 게 아니라, 정리할 재료를 깔끔하게 받아서 시작하는 거예요.

30페이지 말고, 세 가지만 공유하세요

인사이트가 가장 많이 죽는 곳이 보고서예요. 그러니 읽힐 만큼만 작게 만들어요.

1. 상위 문제들. 각각 묶음 이름 그대로 쓰고, 심각도·인원수·증거가 될 인용문 한두 개를 붙여요.
2. 잘 작동한 것 하나. 방법에 대한 신뢰가 생기고, 멀쩡한 걸 "고치는" 사태도 막을 수 있어요.
3. 다음 계획. 어떤 수정이 들어가고 언제 다시 테스트할지요. 사용성 테스트는 테스트하고, 고치고, 다시 테스트하는 고리가 닫힐 때 값을 해요.

그런데 세 번째 항목을 적다 보면 질문이 하나 조용히 따라와요. 두 번째 라운드를 돌리면, 정말 나아졌다는 걸 어떻게 보여줄까요? 그건 따로 한 편이 필요한 이야기예요.

자주 묻는 질문

세션 끝나고 얼마 안에 정리해야 하나요? 하루 이틀 안에, 세션이 아직 생생할 때가 좋아요. 노트는 의외로 빨리 식어서, "참여자 4가 여기서 막힘" 같은 메모는 '여기'가 어디였는지 기억날 때만 쓸모가 있거든요. 세션을 잡을 때 정리할 오후를 같이 잡아 두는 게 제일 확실해요.

한 명만 겪은 문제는 어떻게 하나요? 빈도보다 심각도를 먼저 보세요. 과제가 막히거나 데이터가 날아가는 문제라면 한 번 본 것만으로도 움직일 이유가 충분해요. 가벼운 문제라면 백로그에 두고 다음 라운드에서 다시 나타나는지 지켜봐요. 5명 표본에서 빈도는 나침반일 뿐이니, 결정은 문제의 영향을 보고 내리세요.

전용 소프트웨어가 필요한가요? 아니요. 세션 5개 규모는 스티키 노트 벽이나 스프레드시트로 충분해요. 전용 도구가 값을 하는 건 연구가 쌓인 다음이에요. Dovetail이나 Condens 같은 리서치 분석 도구를 쓰면 예전 근거를 언제든 검색해 다시 꺼낼 수 있거든요.

결과물은 실제로 어떤 모양이어야 하나요? 한 페이지요. 우선순위를 매긴 문제 셋과 근거, 잘 작동한 것 하나, 날짜 박힌 다음 단계. 이해관계자용으로 긴 부록이 필요하면 전체 묶음 목록을 링크로 달되, 한 페이지는 부록 없이도 그 자체로 읽히게 쓰세요.