비교 시험
24명을 두 조건으로 나눈다. 기본 조건은 물건마다 단일 허용 지점을 제시하고, 개선 조건은 자리 후보와 세 가지 공간 제약을 제공한다. 두 조건은 같은 방 크기·물건 수·시간을 쓴다. 끝난 뒤에는 새 방에서 같은 카메라와 약병을 배치하게 하고, 왜 그 자리를 골랐는지 묻는다. ‘예쁘다’도 유효한 답이며, 통로와 손 닿음의 근거를 말한 경우만 제약 이해로 따로 기록한다.
계산 예시는 제약 오류 E, 취소 뒤 재배치 C, 다음 방에서 반복 물건을 인식한 수 N으로 둔다. 진단값 P = N - 2E + 0.5C가 높다고 서사가 더 좋다는 뜻은 아니다. E=2, C=4, N=5라면 P=3이다. C는 망설임의 증거일 수도 탐색의 증거일 수도 있으므로 면담과 함께 본다.
개선 조건에서 참가자 12명 중 8명 이상이 통로·수납·접근성 중 둘을 화면에서 찾고, 기본 조건보다 완료 시간이 25% 이상 늘지 않으면 다음 방을 제작한다. 취소가 급증하면 물건의 후보가 너무 넓거나 이유 문장이 불명확한 것이다. 시간 제한을 늘려 가리는 대신 후보 수를 세 개에서 두 개로 줄인 재시험을 먼저 한다.
회귀 검사는 문 앞에 상자를 둔 뒤 되돌리기, 공용 선반을 다른 사람 물건이 차지한 경우, 고대비에서 작은 라벨 읽기, 저장 후 반복 물건의 배치 유지, 화면 낭독기로 후보 순환하기다. 실패 복구는 이전 장면의 선택을 삭제하지 않는다. 플레이어는 과거 방을 다시 열어 당시 배치를 보고, 현재 방만 바꿀 수 있다. 이 기록이 없으면 다음 장면의 변화가 시스템 오류처럼 보일 수 있다.
분모를 맞춘 관찰과 복구 시험
비교의 분모는 사람 수가 아니라 각 사람이 실제로 만난 판단 기회로 함께 기록한다. 침실에는 통로 판단 3회, 수납 판단 4회, 공용면 판단 3회를 배치해 한 회차에 10회다. 후보가 두 개 미만으로 생성된 버그, 튜토리얼을 건너뛴 사람, 중간에 멈춘 회차는 완료율의 분모에서 빼지 않고 별도 이탈 표로 남긴다. 예를 들어 개선 조건 12명 중 10명이 끝냈다면, 제약 찾기 비율은 ‘10명 중 둘 이상을 찾은 사람’과 ‘완료자 100회 중 올바르게 설명한 판단’ 두 수준으로 제시한다. 8명이라는 통과선만 보고 2명의 이탈을 지우면 후보가 읽혔는지와 끝까지 견딜 만했는지를 구분할 수 없다.
실패 복구는 의도적으로 막힌 배치를 만든 짧은 시험으로 본다. 참가자는 문 앞에 넓은 상자를 놓고 다음 상자를 열려다 막힌 뒤, 30초 안에 원인을 찾고 한 번의 이동으로 통로를 복구한다. 여기서 성공은 정답 좌표에 놓는 것이 아니라 통로 상태를 사라지게 하는 것이다. 기본 조건에는 모호한 경고와 전체 초기화만, 개선 조건에는 끊긴 보행선·이유 문장·다섯 단계 되돌리기를 제공한다. 복구 성공률은 복구한 막힘 수 / 실제로 막힘을 만든 수로 계산하고, 처음부터 막힘을 만들지 않은 사람을 성공으로 넣지 않는다. 개선안이 더 많은 탐색을 허용하면서도 복구율을 낮춘다면 후보 설명이나 되돌리기 위치를 고친다.
서사 인식도 기억 시험과 해석 시험을 나눈다. 다음 방에서 카메라를 본 뒤 “전에 본 물건인가”를 묻는 기억 문항은 전체 완료자만 분모로 하며, 이전 방을 열어 본 사람과 열지 않은 사람을 분리한다. 이어 “왜 여기 있나”라는 해석 문항에는 자유 응답을 받고, 연구자는 ‘창가에 뒀다’처럼 화면에서 확인 가능한 근거와 ‘이 사람은 외롭다’ 같은 단정적 추론을 따로 부호화한다. 목표는 후자의 비율을 높이는 것이 아니라, 전자의 근거를 말한 사람이 절반을 넘으면서 여러 배치가 공존하는지 확인하는 것이다.
접근성 회차는 보조 기능 사용자를 평균에서 지우지 않는다. 목록 모드, 고대비, 낭독 중 하나를 켠 참여자도 같은 10개 판단 기회를 수행하며, 완료 시간은 각 입력 방식 안에서 중앙값으로 비교한다. 드래그 모드가 8분이고 목록 모드가 11분이라는 결과만으로 목록 모드를 실패라 하지 않는다. 후보 이유를 정확히 찾는 비율, 실수 뒤 복구율, 주관적 피로를 함께 보고, 특정 모드에서만 공용면 후보가 누락되는지를 로그로 확인한다. MVP 통과 뒤에도 이 네 지표 중 하나가 20%p 이상 벌어지면 물건 수를 늘리지 않고 해당 모드의 후보 표현부터 고친다.