Devin.KR

실제 행동과 설명 기록

180분 안팎

학습 목표

행동 시각과 발화를 별도로 기록합니다.

개념

행동과 설명은 다른 증거입니다

P01이 “참가 확정된 거죠?”라고 말하면서 접수 화면을 닫으려 했다면 발화와 행동을 각각 남깁니다. “사용자가 헷갈림”만 적으면 무엇을 보고 어떤 행동을 했는지 다시 확인할 수 없습니다. 행동은 눈으로 본 사건이고 발화는 참여자가 말한 내용이며 해석은 작성자의 가설입니다. 셋을 나누어 두면 동료가 같은 관찰에서 다른 원인 가설을 제시할 수 있고 문구 수정이 필요한 이유를 구체적으로 설명할 수 있습니다.

한 관찰에는 되찾을 수 있는 ID를 붙입니다

S01은 세션이고 P01은 참여자이며 O01은 관찰 사건입니다. 한 참여자가 두 번 말할 수 있으므로 참여자 ID를 관찰 ID 대신 사용하지 않습니다. 과업 T01과 버전 v1도 함께 두면 수정 후 v2에서 같은 문제가 남았는지 추적할 수 있습니다. 새 기록을 추가할 때 O01을 재사용하면 수정 근거가 어느 사건인지 모호해집니다. ID는 의미를 담기보다 서로 다른 기록을 구별하는 약속으로 사용합니다.

순서는 경과 초로 기록합니다

과업 시작을 0초로 두고 첫 화면을 읽은 12초, 내역을 누른 35초처럼 적습니다. 두 사건의 시각을 정확히 보지 못했다면 나중에 그럴듯한 숫자를 만들지 않습니다. 실제 관찰에서는 측정하지 못했다는 메모를 먼저 남기고 구조화 전에 어떤 자료를 사용할 수 있는지 결정합니다. 제공 연습에서는 주어진 정수 초를 그대로 사용합니다. 한 세션의 시각이 거꾸로 가면 기록 정렬이나 과업 재시작이 있었는지 확인합니다.

행동은 동사와 대상을 포함합니다

“못 찾음”보다 “접수 화면에서 머무르며 진행자에게 다음 확인 위치를 질문합니다”가 정보가 많습니다. 질문 전 어떤 화면을 열었는지, 버튼을 눌렀는지와 결과를 읽었는지 적습니다. 표정만 보고 이해했다고 판정하지 않습니다. 행동과 발화가 충돌하면 둘 다 남깁니다. 버튼을 눌렀지만 참가 확정이라고 말한 경우에는 경로 탐색은 관찰되었고 상태 의미 이해는 확인되지 않았다는 두 판단이 가능합니다.

발화는 바꾸어 쓰지 않습니다

“승인 대기면 지금 가도 되나요?”를 “승인 정책 개선을 원함”으로 바꾸면 질문이 기능 요구로 변합니다. 제공 자료의 발화를 그대로 기록하고 필요하다면 interpretation에 의미를 추정합니다. 실제 발화를 정확히 기록하지 못했으면 요약 기록이라고 표시하고 직접 인용처럼 꾸미지 않습니다. 아무 말이 없을 때 utterance에 성공을 채우지 않습니다. 조용히 과업을 완료했는지는 행동과 완료 조건의 별도 확인으로 판단합니다.

생각 말하기도 관찰 조건입니다

참여자에게 생각을 말해 달라고 요청하면 상태 이해의 이유를 듣는 데 도움이 될 수 있습니다. 다만 말하는 과정이 행동 속도에 영향을 줄 수 있으므로 세션마다 다른 요청을 하지 않습니다. 발화를 강요해 사용자가 평소와 다른 경로를 설명하게 만들지 않습니다. 어떤 진행 방식이었는지 프로토콜에 적고 시간 수치를 다른 방식의 테스트와 직접 비교하지 않습니다. 여기서는 가상 발화가 제공되어 실제 대화 진행을 했다고 보고하지 않습니다.

도움 요청과 도움 제공을 나눕니다

P03은 45초에 다음 위치를 질문했고 진행자가 버튼을 가리켰습니다. help=direction은 질문 자체가 아니라 실제 제공된 안내를 뜻합니다. 도움을 주지 않고 과업만 반복했다면 repeat입니다. 의미를 설명했다면 meaning이고 아무 개입이 없으면 none입니다. 같은 도움 없이 완료한 P02와 P03을 같은 성공으로 합치면 화면이 스스로 설명한 정도를 과장하게 됩니다. 도움 종류와 시각을 남기는 이유가 여기에 있습니다.

후속 질문은 행동 뒤에 둡니다

사용자가 멈추는 순간 “버튼이 작아서 못 찾았나요”라고 묻는 대신 먼저 어떤 행동이 이어지는지 봅니다. 세션 뒤에는 “그때 무엇을 확인하려 했나요”처럼 열린 질문으로 이유를 듣습니다. 답변은 추가 발화이며 앞 행동의 원인을 확정하는 증거로 쓰지 않습니다. 사용자도 자신의 행동을 나중에 다르게 설명할 수 있습니다. 관찰된 경로와 사후 설명을 별도 사건으로 남기면 원인 가설을 검토할 때 혼동을 줄입니다.

성공 사례도 남깁니다

P02는 18초에 스스로 A001을 찾아 아직 참가 확정이 아니라고 말했습니다. 이 관찰 O03은 기존 문구로도 목적을 달성한 반례입니다. 실패만 모으면 누구나 같은 문제를 겪는 것처럼 보입니다. 성공을 남겨 경험·초안 조건의 차이를 질문하고 수정 후에도 잘 되던 경로가 유지되는지 확인합니다. 세 명 중 한 명이 성공했다는 사실만으로 나머지 문제가 사라지는 것은 아니며 두 방향의 자료를 함께 읽습니다.

판정은 종료 이유까지 씁니다

P01의 failure 이유는 제한 시간까지 참가 미확정 의미를 설명하지 못했다는 것입니다. 관찰의 마지막 사건이 35초여도 종료 판정은 정한 90초 시점의 기록을 근거로 합니다. 마지막 클릭 시각을 완료 시간으로 대신하지 않습니다. P03은 안내 뒤 목적을 설명하여 assisted이고 P02는 독립 완료하여 success입니다. 결과 칸만 있고 이유가 없으면 같은 데이터를 검토하는 사람이 왜 그렇게 분류했는지 확인할 수 없습니다.

없는 완료 기록을 실패로 채우지 않습니다

기록 파일이 끊겨 결과를 모르면 unknown으로 두고 이유에 완료 기록 누락을 씁니다. 사용자가 실패했다는 주장과 관찰자가 결과를 놓쳤다는 주장은 다릅니다. 다시 연락해 결과를 확인했다면 원래 관찰과 후속 확인을 구별하여 적습니다. 누락을 숨기고 가장 그럴듯한 판정으로 채우면 집계가 정밀해 보여도 판단 근거는 줄어듭니다. 다음 레슨에서는 unknown도 전체 건수에 포함해 자료 한계를 드러냅니다.

가상 사례를 자기 경험으로 쓰지 않습니다

provided-sessions.json의 세 사례는 기록 분리와 판정 연습을 위해 작성된 자료입니다. 학습자가 실제 세 명을 만나 관찰한 결과가 아닙니다. 가상 자료의 source를 실제 관찰로 바꾸면 동의와 조사 출처의 의미가 달라집니다. 실제로 참여자를 관찰할 경우에는 제공 사례와 혼합하지 않는 제출을 만들고 동일 과업·판정 규칙을 적용합니다. 모범 답안 문구를 그대로 실제 발화라고 적는 것은 근거를 만든 것과 같습니다.

관찰표 오류 메시지를 읽습니다

FAIL sessions: 제공 사례 행동·판정 원본 보존 필요는 가상 사례의 발화·행동 또는 결과를 바꾸었는지 확인하라는 뜻입니다. FAIL 경과 초는 비감소 정수는 시간 형식과 순서를 점검합니다. FAIL 관찰 ID 중복이면 새 사건에 다른 ID를 부여합니다. 방향·의미 도움을 독립 성공으로 셀 수 없음이라는 메시지는 결과 분류의 문제입니다. 오류를 없애려고 도움 흔적을 지우는 대신 도움 뒤 완료 여부를 다시 읽습니다.

기록의 품질을 서로 검토합니다

동료에게 해석을 가리고 행동과 발화만 보여 준 다음 결과를 판정하게 합니다. 서로 다르게 판단했다면 관찰 사실이 부족한지 완료 조건이 모호한지 확인합니다. 해석의 표현은 “가능성입니다”처럼 가설임을 드러내되 구체적 행동에서 출발해야 합니다. 마지막에는 관찰 ID로 사건을 찾아 설명할 수 있는지 확인합니다. 이 레슨의 제출물은 인상평이 아니라 다음 사람이 원래 행동과 개입을 되찾아 수정 근거를 검토할 수 있는 기록입니다.

따라하기

사건을 분리합니다

provided-sessions.json의 P01 사례를 읽고 S01에 O01·O02의 행동, 발화, 도움, 해석을 다른 필드로 옮깁니다. 원문과 경과 초를 그대로 유지합니다.

성공과 도움 사례를 보존합니다

P02를 S02에, P03을 S03에 옮깁니다. O03 성공 반례와 O04의 direction 개입을 남기고 각각의 판정 이유를 작성합니다.

기록만으로 판정합니다

동료에게 interpretation을 가린 기록을 읽혀 T01의 완료 조건으로 판정하게 합니다. P03을 독립 성공으로 세었다면 도움 제공 내용을 다시 대조합니다.

출처와 누락을 표시합니다

가상 기록은 provided-fiction과 not-applicable-fiction으로 표시합니다. 실제 관찰을 했다면 다른 제출에서 동의·가명화·판정 규칙을 확인하고 완료 누락은 unknown과 이유로 기록합니다.

확인 문제

실습

제공 가상 사례 P01·P02·P03을 sessions에 옮겨 행동·발화·도움·해석·시각·판정 이유를 분리합니다. 실제 동의 참여자 3명을 관찰했다면 가상 자료와 별도 제출에서 출처·동의·가명화 및 과업 조건을 기록합니다. 동료는 O03 반례와 O04 개입이 보존되고 설명을 사건으로 꾸미지 않았는지 검토합니다.

더 읽기

면접 질문

  • 인터뷰에서 사용자의 의견과 관찰 사실을 구분하는 방법을 설명해 주시면 됩니다.