학생과 올리가 원-핫 목표와 라벨 스무딩 목표의 차이를 비교합니다. 막대는 교육용 연출이며 실제 모델 출력이 아닙니다. · 한국논리학협회 · AI 생성 배경 · 공식 올리 원본오늘의 질문정답 분류의 목표를 1에서 조금 낮추면 나머지 목표값은 그대로 0일까요?
세 분류에서 스무딩 0일 때 목표 1,0,0과 스무딩 0.1일 때 목표 0.933,0.033,0.033을 비교한 막대 그림. · 한국논리학협회 자체 제작그림 크게 보기 ↗01원-핫 목표는 한 분류만 1이다
세 분류의 정답이 첫 번째라면 원-핫 목표는 [1,0,0]입니다. 세 값의 합은 1입니다.
02스무딩 양을 모든 분류에 나눈다
Keras 규칙에서 스무딩 s와 분류 수 C를 쓰면 정답 목표는 1-s+s/C, 비정답 목표는 각각 s/C입니다. C=3, s=0.1이면 [0.9333,0.0333,0.0333]이고 합은 여전히 1입니다.
03목표를 바꾼 것이 정답을 바꾼 것은 아니다
라벨 스무딩은 훈련 손실에 쓰는 목표 분포를 완화하는 설정입니다. 실제 라벨이 애매하다는 선언도, 정확도·보정·공정성이 자동으로 좋아진다는 보증도 아닙니다.
라벨 스무딩과 목표 분포
분류 3개의 목표값은 정답 1-s+s/3, 나머지 s/3입니다.
- 목표 1: 1.000 (정답)
- 목표 2: 0.000
- 목표 3: 0.000
고정 예측 [0.80, 0.15, 0.05]의 교차엔트로피: 0.223
목표 분포를 바꾸는 훈련 설정이며 실제 정답이 불확실하다는 뜻이나 성능 보증은 아닙니다.
관계를 읽고, 다른 상황에 적용하기두 문제로 생각 확인