
두 평가자가 많이 동의하면 AI 검사는 믿을 만할까?
두 평가자의 2×2 판정표를 바꾸어 단순 일치율과 우연 기대 일치, 카파를 비교합니다.
게시 2026-09-22 · 약 12분논리학 학습 글 읽기 →
연구와 학습, 시험과 도서를 한곳에서 찾습니다.
검색 결과마다 자료의 코너와 성격을 표시합니다. 제목을 먼저 살펴보고 그림 카드와 기존 본문으로 이어 가세요.

관심 주제로 찾아보기

두 평가자의 2×2 판정표를 바꾸어 단순 일치율과 우연 기대 일치, 카파를 비교합니다.

핵심 근거는 2개로 같은 60단어·180단어 답을 길이 보너스 규칙과 근거 루브릭으로 채점해 선택이 뒤집히는 과정을 확인합니다.

다섯 번의 보이는 출력과 외부 정답을 나란히 두고, 높은 일치율이 도움이 되는 조건과 같은 오류가 반복되는 경우를 구분합니다.
관찰 일치에서 우연 기대 일치를 빼 카파로 가는 계산 흐름 옆에 범주별 혼동표가 별도 상자로 표시된다.
1–4 / 4편