AI 보이는 추론 실험실 · 집단 크기와 가중평균

AI 정확도 90퍼센트와 60퍼센트를 평균 내면 75퍼센트일까?

평가셋 크기가 다르면 두 백분율의 단순 평균과 전체 문항 정확도가 달라집니다. 정답 수·문항 수·통합 규칙을 바꾸며 차이를 확인합니다.

심화게시 2026-10-07읽기·실험 약 15분확인 문제 2개규칙 기반 실행한국논리학협회 자체 제작제작·검수 LTCT 편집부

공동 연구실에서 성인 분석가 세 명이 크기가 다른 평가 카드 묶음과 정답 토큰을 비교하고 작은 공식 갈색 안경 올빼미가 큰 묶음 쟁반으로 토큰을 옮기는 장면
주제 이해를 돕기 위한 AI 생성 이미지 · LTCT 자체 제작
오늘의 질문

10문항 평가의 90퍼센트와 100문항 평가의 60퍼센트를 그냥 평균 내도 전체 정확도일까요?

10문항 중 9개와 100문항 중 60개를 집단별 같은 비중과 문항 수 가중 방식으로 통합해 서로 다른 정확도를 얻는 그림입니다.
10문항 중 9개와 100문항 중 60개를 집단별 같은 비중과 문항 수 가중 방식으로 통합해 서로 다른 정확도를 얻는 그림입니다. · 한국논리학협회 자체 제작
그림 크게 보기 ↗
01

백분율 뒤의 분모를 함께 봅니다

A는 10문항 중 9개라 90퍼센트, B는 100문항 중 60개라 60퍼센트입니다. 두 백분율을 같은 비중으로 평균 내면 75퍼센트입니다.

전체 110문항에서 맞힌 69개를 합치면 62.7퍼센트입니다. 분모가 다르면 두 계산은 서로 다른 값을 답합니다.

02

가중평균은 어떤 관측을 얼마나 셀지 밝힙니다

NIST의 가중평균 문서는 값에 가중치를 곱한 합을 가중치 합으로 나누는 구조를 설명합니다. 전체 문항 정확도에서는 각 집단의 문항 수가 자연스러운 가중치입니다.

집단별 공정성을 살피려면 두 집단을 같은 비중으로 보는 값도 의미가 있습니다. 어떤 규칙을 썼는지 함께 밝혀야 합니다.

참고 · 미국 국립표준기술연구소(NIST) — 가중평균 계산 ↗

03

정확도 하나만으로 AI 품질을 닫지 않습니다

집단별 오류 유형·자료 대표성·위양성·위음성·불확실성도 확인해야 합니다. 큰 집단이 전체 평균을 지배하면 작은 집단의 심각한 오류가 가려질 수 있습니다.

활동은 집계 규칙의 차이를 보여 주는 고정 계산기이며 실제 모델을 평가하거나 호출하지 않습니다.

직접 확인하기 · 규칙 기반 실행

두 평가셋의 정답 수·문항 수와 통합 방식을 바꾸기

전체 문항 정확도는 (정답A+정답B)/(문항A+문항B)입니다. 집단 동일 비중 평균은 각 집단을 정책적으로 같은 비중으로 보는 다른 질문입니다.

A 정확도90.0%
B 정확도60.0%
통합 방식문항 수 가중
통합 정확도62.7%
전체 정답 수를 전체 문항 수로 나눴습니다.

둘 다 가능한 요약이지만 답하는 질문이 다릅니다. AI 평가 보고서에는 집단 크기와 통합 규칙을 함께 밝혀야 합니다.

관계를 읽고, 다른 상황에 적용하기

두 문제로 생각 확인

110개 중 9개, 100개 중 60개를 합친 전체 문항 정확도는?
2두 집단 정확도를 같은 비중으로 평균 낸 75%가 답하는 질문은?

두 문제의 답을 모두 선택하면 해설을 볼 수 있습니다.

나의 설명으로 마무리

오늘 발견한 관계

0 / 4,000자

메모는 현재 기기의 브라우저에만 보관됩니다. 계정이나 다른 기기에는 동기화되지 않습니다.

출처와 제작 안내

원문을 참고해 설명·도표·문항·실험을 새로 작성했습니다. 별도 표시가 없는 사례와 수치는 학습을 위한 가상 예시입니다. 원문 번역이나 실제 모델의 성능 평가 자료가 아닙니다.

  1. 가중평균 계산 ↗미국 국립표준기술연구소(NIST)Statistics LET Subcommands — WEIGHTED MEAN

    2026년 10월 7일 공개 문서에서 가중평균이 값에 가중치를 곱한 합을 가중치 합으로 나누는 방식임을 확인했습니다. 활동에서는 각 평가셋의 문항 수를 가중치로 쓰며 실제 AI 품질은 정확도 하나로 충분히 설명되지 않습니다.