인공지능(AI)는 빠진 전제가 있는 논증도 같은 유형으로 분류할 수 있을까?
ACL 2025 연구는 일곱 언어모델의 논증 유형 분류를 비교하며, 생략된 전제가 있는 엔티밈과 작은 모델에서 어려움이 커짐을 보였습니다.
그림에서 무엇을 볼까요?
표면 전제와 결론 사이 빈칸에 생략 전제를 복원한 뒤 유형 분류와 품질 평가로 갈라지는 도식
문장: ‘김 박사는 기후과학자다. 그러므로 이번 지역의 내일 강수량 예측이 맞다.’ 표면에는 전문가라는 전제와 결론이 있지만, 전문 분야가 단기 지역예보와 관련된다는 연결은 명시되지 않았습니다. 유형은 권위 논증일 수 있어도 품질은 낮을 수 있습니다.
AI가 ‘전문가’라는 단어만 보고 권위 논증을 고르면 표면 단서에는 성공하지만 생략 전제를 이해했다고 말하기 어렵습니다. 이름과 직업 표현을 바꾸고, 관련 분야와 무관한 분야를 최소쌍으로 비교해야 합니다.
함께 확인할 점
영어와 제한된 논증 유형에 관한 결과이며 한국어·다자 대화·복합 논증으로 바로 일반화되지 않습니다.
2025년 당시 모델 버전의 비교이고 프롬프트와 평가 예시에 민감하므로 최신 성능 주장에 사용할 수 없습니다.
생각해 볼 질문
논증 유형을 맞힌 AI가 그 논증의 질도 올바르게 평가했다고 말할 수 없는 이유는 무엇인가요?
