같은 품질의 펜이 든 두 상자를 따로 보았습니다. 작은 상자는 꽉 차 있고 큰 상자는 빈칸이 보입니다. 나중에 나란히 놓고 세어 보니 큰 상자에 펜이 더 많습니다. 첫 평가에서 무엇을 기준으로 좋다고 느꼈는지 돌아볼 필요가 있습니다. 이 글은 선택지의 수를 늘리는 효과와 구별하여, 따로 평가하기와 함께 비교하기의 차이를 다룹니다.
연구를 읽는 두 가지 질문
고전 실험의 어떤 부분을 다시 검토했나요?
Vonasch 등의 2023년 Collabra 논문은 Hsee의 1998년 연구 중 세 상황을 사전등록하여 가깝게 재현하고 확장했습니다. 미국 온라인 참가자 403명을 모집해 참여를 거부한 3명을 제외한 400명을 분석했습니다. 참가자는 높은 값의 선택지, 낮은 값의 선택지, 공동 평가 조건에 무작위 배정되었고, 세 상황의 제시 순서는 균형화했습니다. [1]
재현은 결과를 한 덩어리로 복사하지 않았습니다
분리 평가에서 적은 쪽이 더 높게 평가되는 현상은 세 상황에서 지지되었습니다. 공동 평가에서 많은 쪽이 더 좋게 평가되는 결과는 상대적으로 약하고 상황에 따라 달랐습니다. 비교 대상이 있으면 모든 판단이 같은 방식으로 정리된다는 단순 결론보다, 어떤 속성을 얼마나 쉽게 평가할 수 있는지와 측정 질문을 함께 살펴야 한다는 점이 중요합니다. [1]
꽉 찬 8개와 빈칸이 있는 10개
LTCT가 만든 펜 상자 A에는 사용 가능한 같은 품질의 펜 8개가 8칸에 들어 있습니다. 상자 B에는 같은 펜 10개가 12칸 중 10칸에 들어 있습니다. 표에서 충전 비율은 A가 100%, B가 약 83%입니다. 하지만 사용 가능한 펜 수는 B가 2개 더 많습니다. “채워진 비율”과 “얻는 물건의 양”은 서로 다른 지표입니다.
문제의 목표를 “같은 비용으로 사용 가능한 펜을 많이 얻기”로 명시하면 B가 맞습니다. 목표를 “추가 빈칸이 없는 진열 세트”로 바꾸면 A를 선택할 근거가 생깁니다. 실제 선호에는 휴대성·필요량·보관 공간도 영향을 줄 수 있으므로, 수량이 많은 선택을 모든 상황의 합리적 답으로 선언해서는 안 됩니다.
따로 보는 조건을 체험하려면 두 집단에 서로 다른 카드만 보여 주고 평가 기준을 적게 할 수 있습니다. 이후 모두에게 비교표를 보여 주어 기준이 어떻게 달라졌는지 토론합니다. 이 간단한 교실 활동은 연구의 재현 실험이 아니며, 원 논문의 선물·음식·식기 사례를 그대로 옮기지 않았습니다.
어디까지 말할 수 있을까요?
- 재현 연구에서도 모든 비교 조건이 같은 강도로 지지되지는 않았습니다. 성공 여부를 논문 전체에 하나의 표지로 붙이면 중요한 차이가 사라집니다.
- 가상 상황의 온라인 평가가 실제 구매 행동이나 모든 문화권의 선호를 대표하지는 않습니다.
원문에 근거한 한계와 LTCT의 적용 범위 검토입니다. [1]
교육 현장과 연결해 보면
수업에서는 제시문에 평가 목표를 명시하고, 절대량과 비율 중 그 목표에 맞는 지표를 고르게 할 수 있습니다. 다음 문항은 목표를 바꾸어도 답이 유지되는지 묻는 방식이 적절합니다.
반응 차이를 측정하려면 제시 순서와 이전 노출을 통제해야 하고, 수량 외의 속성을 동일하게 했는지도 확인해야 합니다.
B의 펜 수가 더 많다는 사실만으로 A를 고른 사람을 비논리적이라 할 수 있을까요?
생각을 비교할 해설 펼치기
평가 목표가 먼저 정해져야 합니다. 같은 품질·비용에서 펜 수만 최대화하라는 조건이라면 B가 답입니다. 그러나 무게나 빈칸 없는 구성이 중요한 상황이라면 A에도 이유가 있습니다. 논리 평가에서는 암묵적 취향을 정답 기준으로 삼지 말고, 무엇을 같게 두고 무엇을 비교하는지 명시해야 합니다.
원문과 출처 정보
한국어 제목은 이해를 돕기 위한 LTCT 번역입니다. 한글 제목 뒤 괄호에 원제를 함께 표기했습니다. 저자·학술지·원문 버전은 원문 서지정보를 기준으로 확인할 수 있습니다.
분리 평가의 적은 것이 더 좋음과 공동 평가의 많은 것이 더 좋음: 시 연구의 재현과 확장 (“Less Is Better” in Separate Evaluations Versus “More Is Better” in Joint Evaluations: Mostly Successful Close Replication and Extension of Hsee (1998))
Andrew J. Vonasch; Wing Yiu Hung; Wai Yee Leung; Anna Thao Bich Nguyen; Stephanie Chan; Bo Ley Cheng; Gilad Feldman (2023). Collabra: Psychology 9(1), 77859.
- 자료 성격
- 학술 논문 공개본
- 읽은 버전
- 2023-07-11 공개된 학술지 출판본
- 확인 범위
- 사전등록·절차·모집 및 분석 표본, 세 상황의 재현 결과와 일반 논의 확인. 원자료 재분석은 하지 않음
- 원문 확인일
이 글은 한국어 해설이며 원문 전문 번역이 아닙니다. 도식과 활동의 제작·재구성 범위는 각 그림과 본문에 표시했습니다. 자료 선정과 출처 기준