대규모 심리학 재현 프로젝트는 유의성 하나가 아니라 효과 크기·신뢰구간·주관 평가를 함께 봐야 함을 보여 줍니다. 이 글은 공개 원문에서 확인한 연구 질문·방법·결과를 협회의 적용 아이디어와 나누어 읽습니다.
연구를 읽는 두 가지 질문
연구 질문과 확인한 자료
Open Science Collaboration의 원자료를 공개 전문으로 확인했습니다. 2008년 세 심리학 저널에 실린 실험·상관 연구 100건을 가능한 한 원자료와 높은 검정력 설계로 직접 재현했습니다. [1]
방법과 핵심 결과
원 연구의 97%가 유의했지만 재현에서는 36%가 유의했고, 재현 효과 크기는 평균적으로 원 연구의 약 절반이었습니다. 성공 정의에 따라 비율은 달랐습니다. 수치와 범주는 원문이 보고한 범위에서만 사용했습니다. [1]
해석의 범위와 한계
세 저널·한 해의 선택 표본이며 재현 설계의 충실도와 맥락 차이도 결과에 영향을 줍니다. 재현 실패가 원 주장 거짓을 자동 확정하지 않습니다. 발표일과 확인한 버전을 구분하고 저자 국적은 추정하지 않았습니다. [1]
개념을 직접 점검하는 예시
같은 방향, 유의성, 효과 크기, 원 효과 신뢰구간 포함 여부라는 네 기준으로 하나의 재현 결과가 서로 다르게 분류될 수 있음을 표로 확인합니다.
그림은 원 연구 → 직접 재현 → 복수 기준 순서로 읽고 마지막 합류점에서 조건·범위·반례를 함께 확인합니다. 원 논문의 표나 그림을 복사하지 않고 LTCT가 개념 관계만 새로 그렸습니다.
어디까지 말할 수 있을까요?
- 세 저널·한 해의 선택 표본이며 재현 설계의 충실도와 맥락 차이도 결과에 영향을 줍니다. 재현 실패가 원 주장 거짓을 자동 확정하지 않습니다.
- 이 연구만으로 LTCT 교육·시험의 효과를 확인할 수 없습니다. 적용안은 별도 비교 조건과 측정 계획이 필요한 제안입니다.
원문에 근거한 한계와 LTCT의 적용 범위 검토입니다. [1]
교육 현장과 연결해 보면
원 연구와 재현 연구를 나란히 놓고 결과의 방향, 효과의 크기, 불확실성, 시행 조건을 비교합니다. 학생은 ‘같은 결과’라고 판단한 기준을 먼저 정하고 기준에 따라 판정이 달라지는지 살핍니다.
모둠 발표에서는 차이를 발견한 뒤 가능한 이유를 자료와 연결해 제안합니다. 교사는 재현 결과의 유의 여부 하나로 원 연구 전체를 확정하는 설명을 피하고, 추가로 필요한 확인을 적게 합니다.
재현에서 p값이 0.05를 넘으면 원 연구는 거짓인가요?
생각을 비교할 해설 펼치기
아닙니다. 검정력·효과 크기·신뢰구간·설계 충실도와 맥락을 함께 판단해야 합니다.
원문과 출처 정보
한국어 제목은 이해를 돕기 위한 LTCT 번역입니다. 한글 제목 뒤 괄호에 원제를 함께 표기했습니다. 저자·학술지·원문 버전은 원문 서지정보를 기준으로 확인할 수 있습니다.
심리과학의 재현가능성 추정 (Estimating the reproducibility of psychological science)
Open Science Collaboration (2015). Science, 349(6251):aac4716.
- 자료 성격
- 국제 학술지 대규모 재현 연구
- 읽은 버전
- 2015 출판본과 OSF 공개 자료
- 확인 범위
- 공개 원문 전문에서 연구 질문, 방법, 표본·비교 조건, 핵심 결과와 해석 한계를 확인. 2015 출판본과 OSF 공개 자료
- 원문 확인일
이 글은 한국어 해설이며 원문 전문 번역이 아닙니다. 도식과 활동의 제작·재구성 범위는 각 그림과 본문에 표시했습니다. 자료 선정과 출처 기준
같은 연구 흐름에서 이어 읽기
같은 원문, 저자·연구 흐름, 공통 개념 태그를 기준으로 연결한 관련 해설입니다.