정리와 증명을 함께 늘리면 자동증명기가 더 강해질까?
Goedel-Prover는 Lean 4 명제와 새 증명을 반복해 학습자료로 늘렸습니다.
그림에서 무엇을 볼까요?
형식화 → 164만 명제 → Lean 4 / 반복학습 → 새 증명 → 다음 모델 / 평가 → 57.6% P@32 → Putnam 7를 비교하는 LTCT 교육용 도식
자연어 정리를 잘못 형식화하면 그 정리를 완벽히 증명해도 원문 해결이 아닙니다. Pass@32도 한 번 답할 때의 정확도가 아닙니다.
그림은 원문 도표를 복사하지 않고 핵심 관계를 검산하도록 LTCT가 새로 만들었습니다. 숫자는 본문과 맞추고, 순서는 시작과 도착을 문장으로 다시 읽으며, 카드 사이에 인과 화살표를 넣지 않아 단순 나열을 원인 관계로 오해하지 않게 했습니다.
함께 확인할 점
한 연구나 메타분석의 평균을 모든 연령·언어·과제에 자동 적용할 수 없습니다. 공개 원문의 확인 범위를 넘어선 세부 수치나 저자의 의도를 추측하지 않았습니다.
방법의 전제, 비교집단, 표본 구성, 측정오차와 외적 타당도를 함께 보지 않으면 결과를 과장할 수 있습니다. 형식 검증이나 통계적 유의성도 자연어 의미와 교육적 유용성을 자동 보장하지 않습니다.
생각해 볼 질문
그림의 세 칸을 본 뒤 연구 결과와 LTCT 적용 제안을 같은 주장으로 읽어도 될까요?
