시각적 논리

시각화 시험을 줄일 때 잘 맞히는 문항만 남기면 될까?

Mini-VLAT는 53문항을 12문항으로 줄이면서 통계적 관계와 내용 타당성을 함께 고려했습니다. 짧은 시험의 설계에서 남겨야 할 증거를 살펴봅니다.

A와 B는 막대 높이, C는 산점도 관계, D는 포함 구조 읽기로 분류하고 내용·응답·표현을 별도 점검 항목으로 적은 표.
출처 [1]의 단축형 개발 논의를 바탕으로 LTCT가 제작한 가상 문항 점검표. 원 검사 문항·그림·응답 통계를 복제하지 않았습니다.
그림 크게 열기 ↗SVG 저장

그림에서 무엇을 볼까요?

A와 B는 막대 높이, C는 산점도 관계, D는 포함 구조 읽기로 분류하고 내용·응답·표현을 별도 점검 항목으로 적은 표.

LTCT의 가상 문항은행에는 A ‘막대 높이 읽기’, B ‘다른 막대 높이 읽기’, C ‘산점도 관계 읽기’, D ‘포함 구조 읽기’가 있습니다. A와 B는 전체 점수와의 관계가 높을 수 있지만 사실상 비슷한 일을 묻습니다. 단축형 두 문항을 고를 때 A와 B를 모두 선택하면 산점도나 포함 관계는 전혀 확인하지 못합니다. 높은 상관과 넓은 내용 범위가 자동으로 같은 목표가 되지는 않습니다.

그렇다고 통계가 좋지 않은 문항을 범위만 채우려고 무조건 남길 수도 없습니다. 먼저 문장 표현과 그림의 모호함을 검토하고 다시 시험해야 합니다. C의 오답이 관계 이해 부족 때문인지, 축 이름을 읽기 어려워서인지도 구분해야 합니다. 원 연구의 표현 수정 단계는 이렇게 점수에 영향을 주는 불필요한 언어·배경 요인을 점검할 필요를 보여 줍니다.

함께 확인할 점

소규모 온라인 표본과 영어권 조건에서 얻은 결과를 한국어 응시자나 모든 연령에 그대로 적용할 수 없습니다. 신뢰도 계수는 특정 점수와 표본에서 추정된 값입니다.

짧은 검사와 원 검사 사이의 높은 상관만으로 모든 하위 능력을 같게 측정한다고 결론 낼 수 없습니다. 진단 목적의 세부 판정에는 별도 자료가 필요합니다.

생각해 볼 질문

문항 수를 절반으로 줄였는데 전체 점수 상관이 높다면 작업이 끝났을까요?

← 시각적 논리 그림 더 보기