증거·확률·인과관계

다음 결과를 잘 맞히는 모형이면 원인도 잘 설명할까?

설명과 예측은 서로 다른 질문입니다. 슈무엘리의 방법론 연구를 통해 모형의 목적, 사용할 수 있는 정보, 평가 방법을 함께 살펴봅니다.

어떤 모형이 버스 도착 시간을 잘 맞힙니다. 그렇다고 모형에 들어간 모든 변수가 버스의 속도를 바꾸는 원인일까요? 반대로 교통 흐름의 원리를 잘 설명하는 이론이 매번 정확한 도착 시각까지 알려 줄까요? “좋은 모형”이라는 말에는 설명의 적절성과 예측의 정확성이 함께 들어가지만, 둘은 따로 확인해야 하는 성질입니다.

학술 자료의 내용

연구를 읽는 두 가지 질문

연구는 무엇을 구분했는가?

슈무엘리의 2010년 논문은 통계 모형을 이용한 인과 설명과 새 관측값 예측을 구분하고, 이 차이가 변수 선택·자료 처리·모형 평가에 어떤 영향을 주는지 검토합니다. 연구 방법은 통계적 논의와 여러 분야의 사례 비교입니다. 어떤 교육 프로그램의 효과를 측정한 실험이 아닙니다. 설명하려는 이론과 실제로 관측한 변수를 연결하는 가정도 중요하게 다룹니다. [1]

설명력과 예측력을 어떻게 평가하는가?

이미 모형을 맞추는 데 사용한 자료에 잘 들어맞는 정도와, 새 자료를 잘 맞히는 정도는 다릅니다. 예측력은 따로 남겨 둔 자료나 교차검증 등으로 평가해야 합니다. 인과 설명에는 모형의 적합도 외에 인과 구조와 관련 가정의 근거가 필요합니다. 저자는 설명과 예측을 한 줄 위의 반대쪽 끝보다 서로 다른 두 차원으로 봅니다. 하나가 높다는 이유로 다른 하나도 높다고 추정하지 않는 것이 핵심입니다. [1]

그림으로 생각하기

우산 보관량으로 카페 방문을 예측한다면

다음은 LTCT의 가상 사례입니다. 비가 오는 날에는 건물 입구의 우산 수와 실내 카페 방문자 수가 함께 늘어납니다. 우산 수를 활용하면 방문자를 예측하는 데 도움이 될 수 있습니다. 그렇다고 우산을 더 꽂아 두는 조작이 카페 방문을 늘린다는 결론은 나오지 않습니다. 비가 두 값에 영향을 주는 경로를 생각할 수 있습니다.

예측 시점도 중요합니다. 오전에 오후 방문자를 예측하려는데 오후 마감 때 센 우산 수를 넣으면 실제 예측 시점에는 없는 정보를 쓴 것입니다. 어떤 변수가 결과와 관련 있는가와 언제 그 값을 알 수 있는가는 별도의 질문입니다. 이 예시는 두 문제가 동시에 생길 수 있음을 보여 줍니다.

그림은 “예측 목적”과 “원인 설명 목적”에서 물을 질문을 나란히 둡니다. 좋은 예측 모형이 과학적으로 가치 없다는 뜻도, 원인 설명에 예측 검사가 필요 없다는 뜻도 아닙니다. 서로 다른 근거를 요구하는 목표들을 정확히 분리해 평가하자는 뜻입니다.

예측 정확성, 정보의 관측 시점, 개입 효과, 자료와 가정을 구별하는 비교표.
LTCT 제작 교육용 비교표. 우산과 카페 사례는 연구 결과의 재현이 아닌 LTCT 가상 예시입니다. 개념 출처: [1]. 원문 도표·사진을 복제하지 않았으며, 예시와 배치는 LTCT가 구성했습니다. 그림 크게 보기 ↗

어디까지 말할 수 있을까요?

  • 관찰자료의 높은 적합도나 예측 정확도만으로 특정 변수에 개입했을 때의 효과를 알 수 없습니다. 인과 결론은 연구 설계와 가정에 의존합니다.
  • 이 글에서 읽은 것은 2010년 논문의 2011년 공개 재인쇄본입니다. 모형 비교를 실제로 재실행한 결과나 최신 모델 순위를 제공하지 않습니다.

원문에 근거한 한계와 LTCT의 적용 범위 검토입니다. [1]

배운 내용을 수업에 적용하기

교육 현장과 연결해 보면

자료 해석 문제에서 “예측에 쓸 만한 정보”와 “원인이라는 근거”를 따로 고르게 할 수 있습니다. 변수의 관측 시각을 표시한 표를 함께 주면, 관련성뿐 아니라 정보가 실제 판단 시점에 있었는지도 읽게 됩니다.

교사가 시험 점수로 학습 지원 대상을 예측하려 한다면 예측 대상과 검증 자료를 먼저 정해야 합니다. 점수가 다른 성취와 연결된다고 해서 시험 응시가 성취를 높였다고 발표하지 않습니다.

한 번 더 생각하기

방문자를 잘 예측하는 우산 수를 인위적으로 늘리면 방문자도 늘어날까요?

생각을 비교할 해설 펼치기

예측 관계만으로는 알 수 없습니다. 비가 공통 원인일 수 있고, 우산 수는 방문자가 늘어서 생긴 결과일 수도 있습니다. 예측에 유용한 지표와 개입 가능한 원인을 구별해야 합니다. 원인을 묻는 질문이라면 가능한 인과 구조와 그 구조를 구별할 추가 자료를 제시해야 합니다.

원문과 출처 정보

한국어 제목은 이해를 돕기 위한 LTCT 번역입니다. 한글 제목 뒤 괄호에 원제를 함께 표기했습니다. 저자·학술지·원문 버전은 원문 서지정보를 기준으로 확인할 수 있습니다.

  1. 설명할 것인가, 예측할 것인가? (To Explain or to Predict?)

    Galit Shmueli (2010). Statistical Science 25(3), 289–310.

    자료 성격
    학술 논문·전문 학술자료
    읽은 버전
    2010 학술지 논문의 arXiv 공개 재인쇄본 · 2011-01-05 등록
    확인 범위
    공개 PDF의 설명·예측 정의, 모형 평가·선택, 두 성능 차원의 논의 확인
    원문 확인일

이 글은 한국어 해설이며 원문 전문 번역이 아닙니다. 도식과 활동의 제작·재구성 범위는 각 그림과 본문에 표시했습니다. 자료 선정과 출처 기준

출처·개념 네트워크

같은 연구 흐름에서 이어 읽기

같은 원문, 저자·연구 흐름, 공통 개념 태그를 기준으로 연결한 관련 해설입니다.