좋은 토론을 숫자로 평가하려면 무엇을 관찰해야 할까?
담론 질 지수는 참여·정당화·공공선·존중 같은 규범을 관찰 가능한 발화 범주로 바꿉니다. 신뢰도와 타당도의 차이를 살펴봅니다.
그림에서 무엇을 볼까요?
숙의 규범이 관찰 가능한 발화 범주와 채점자 일치 검토를 거쳐 점수로 이어지는 흐름도
발언 A: ‘시험 시간을 늘려야 합니다.’ 발언 B: ‘읽기 시간이 평균 10분 부족했고 특히 긴 표 문항에서 미응답이 집중됐으므로 10분 연장을 검토해야 합니다.’ 두 발언은 결론이 같아도 정당화 수준이 다릅니다.
LTCT 예시표는 참여 기회, 근거의 구체성, 반대 입장 존중, 공공선 연결을 각 열로 나눕니다. 한 열의 높은 점수가 다른 열을 대신하지 못하도록 총점과 하위점수를 함께 봅니다.
함께 확인할 점
원 연구의 의회 토론 예시는 교실·온라인 대화에 그대로 일반화할 수 없습니다.
관찰자 신뢰도와 숙의의 구성타당성, 좋은 정책 결과는 서로 다른 검증 대상입니다.
생각해 볼 질문
채점자 두 명이 늘 같은 점수를 주면 그 지표는 타당하다고 할 수 있을까요?
