
AI가 같은 답을 1위로 고르면서도 확신을 90%에서 60%로 낮출 수 있을까요? 로짓의 순서를 유지한 채 확률의 간격만 조절하는 온도 조정을 살펴보면, ‘무엇을 고르는가’와 ‘얼마나 확신한다고 말하는가’를 분리할 수 있습니다.
연구를 읽는 두 가지 질문
온도 조정은 무엇을 바꾸나?
Guo 등은 학습이 끝난 분류기의 로짓을 하나의 양의 온도 T로 나눈 뒤 소프트맥스를 적용했습니다. T는 검증 자료의 음의 로그우도를 줄이도록 정하며, 예측 확률의 날카로움을 바꾸지만 최댓값의 순서는 보존합니다. [1]
왜 정확도와 보정을 나눠 보나?
논문은 현대 신경망이 높은 정확도를 보여도 확률이 과신될 수 있음을 여러 자료와 구조에서 조사했습니다. 보정 오차와 분류 오류는 다른 질문이므로, 확률이 그럴듯해졌다는 사실을 정답을 더 많이 맞혔다는 뜻으로 읽지 않습니다. [1]
같은 세 후보, 다른 확률 간격
가상 분류기가 답 A·B·C에 2.4, 1.4, 0.4의 로짓을 냈다고 합시다. 온도 T가 1이면 소프트맥스 확률은 대략 66.5%, 24.5%, 9.0%가 됩니다. T를 2로 높이면 간격은 줄지만 양의 수로 모두 나누므로 A>B>C의 순서는 유지됩니다.
아래 활동에서는 로짓과 T를 직접 바꿉니다. 이는 실제 AI 호출이나 특정 제품의 현재 성능이 아니라 소프트맥스 계산을 눈으로 확인하는 교육용 모형입니다.
온도 조정은 검증 자료에서 T를 학습해 신뢰도를 맞추는 사후 보정입니다. 1위 답이 틀렸다면 같은 로짓에 적용한 양의 온도만으로 정답 후보가 바뀌지는 않습니다.
로짓과 온도를 바꾸어 확률 간격과 1위 답을 비교해 보세요
세 로짓과 양의 온도 T를 바꾸면 소프트맥스 확률이 즉시 달라집니다. 같은 로짓에서 T만 바꾸면 확률 차이는 달라져도 1위 순서는 유지됩니다.
| 답 | 로짓 | 확률 |
|---|---|---|
| A | 2.4 | 66.5% |
| B | 1.4 | 24.5% |
| C | 0.4 | 9.0% |
1위 A · 엔트로피 1.20비트
이 활동은 저장된 수식을 실행하며 실제 AI를 호출하지 않습니다. 온도 조정은 검증 자료에서 학습해야 하고, 1위가 틀렸다면 온도만으로 정답이 바뀌지 않습니다.
어디까지 말할 수 있을까요?
- Guo 등의 실험은 당시의 신경망과 자료에 관한 결과입니다. 이 페이지의 세 로짓은 LTCT가 만든 가상 값이며 최신 상용 AI의 신뢰도를 나타내지 않습니다.
- 온도 조정은 단일 스칼라를 쓰는 보정법입니다. 집단별 오류, 분포 변화, 클래스별 보정 문제를 자동으로 해결하지 않습니다.
- 확률이 잘 보정되어도 각 답의 사실성이나 윤리적 적합성이 자동으로 보장되지 않습니다.
원문에 근거한 한계와 LTCT의 적용 범위 검토입니다. [1]
교육 현장과 연결해 보면
AI 탐구 활동에서 AI 분류 결과를 공개할 때 1위 답과 함께 온도, 검증 자료, 확률 구간을 기록합니다. 같은 로짓에 온도만 바꾸어 확률 표현이 얼마나 달라지는지 먼저 확인합니다.
모둠 프로젝트에서는 보정 전후의 신뢰도 그림을 별도로 보되, 1위 답의 정오와 확률 보정 품질을 한 지표로 합치지 않습니다.
온도를 높여 확신을 낮췄는데 정답률도 자동으로 좋아질까요?
생각을 비교할 해설 펼치기
아닙니다. 같은 로짓에 양의 온도만 적용하면 후보 순서는 유지됩니다. 보정은 확률 표현을 다듬는 일이고, 1위 답의 정오는 별도로 평가해야 합니다.
원문과 출처 정보
한국어 제목은 이해를 돕기 위한 LTCT 번역입니다. 한글 제목 뒤 괄호에 원제를 함께 표기했습니다. 저자·학술지·원문 버전은 원문 서지정보를 기준으로 확인할 수 있습니다.
현대 신경망의 보정에 관하여 (On Calibration of Modern Neural Networks)
Chuan Guo, Geoff Pleiss, Yu Sun & Kilian Q. Weinberger (2017). Proceedings of the 34th International Conference on Machine Learning, PMLR 70, 1321–1330.
- 자료 성격
- 동료심사 학회 논문 · PMLR 공개 전문
- 읽은 버전
- ICML 2017 출판본
- 확인 범위
- PMLR 공개 전문에서 신뢰도 보정 문제, 온도 조정의 정의·최적화·순위 보존 성질, 실험 범위와 결론을 확인
- 원문 확인일
- 영구 식별
- DOI 미기재 · 아래 보존판 주소로 안내
이 글은 한국어 해설이며 원문 전문 번역이 아닙니다. 도식과 활동의 제작·재구성 범위는 각 그림과 본문에 표시했습니다. 자료 선정과 출처 기준
같은 연구 흐름에서 이어 읽기
같은 원문, 저자·연구 흐름, 공통 개념 태그를 기준으로 연결한 관련 해설입니다.
