공통 50:50 난이도 가중치로 표준화하면 A 60%, B 50%가 됨을 관찰값과 구분했다.

그림에서 무엇을 볼까요?

생각그림 7 · 공통 50:50 난이도 가중치로 표준화하면 A 60%, B 50%가 됨을 관찰값과 구분했다.

비교 목적이 “두 방법이 똑같은 난이도 구성을 만났다면 어느 쪽의 성공률이 높은가”라면 공통 가중치를 정해 표준화할 수 있다. 쉬운 과제와 어려운 과제를 각각 50%씩 놓으면 A는 0.5×90%+0.5×30%=60%, B는 0.5×80%+0.5×20%=50%다. 이 자료에서는 두 난이도 모두 A가 정확히 10%포인트 앞서므로 어떤 공통 가중치를 쓰더라도 A가 10%포인트 앞선다. 다만 50 대 50은 관찰된 전체 성공률이 아니라 비교를 위해 만든 기준 인구의 결과다. 표준화에는 어떤 대상 집단을 기준으로 삼았는지 밝혀야 한다.