논증과 대화

논리적으로 맞는 논증이면 설득력과 대화 기여도도 높은 걸까?

논증 품질 연구는 논리·수사·대화의 세 관점 아래 15개 차원을 구분하고 320개 논증을 다차원으로 주석해 단일 점수의 한계를 보여줍니다.

전제가 결론을 잘 뒷받침해도 표현이 모호하거나 상대의 쟁점에 답하지 않으면 좋은 토론 발언이라고 하기 어렵습니다. 반대로 유려하고 공손한 말이 자료와 연결되지 않을 수도 있습니다. ‘좋은 논증’은 한 축으로만 재기 어렵습니다.

학술 자료의 내용

연구를 읽는 두 가지 질문

이론 검토에서 세 관점과 15개 차원을 도출했습니다

Wachsmuth 등은 논증 품질 이론과 자연어처리 접근을 종합해 논리적, 수사적, 대화적 품질의 분류체계를 제시했습니다. 전체 품질 아래 인지 가능성, 관련성, 충분성, 효과성, 토론 기여도 등 15개 세부 차원을 둡니다. [1]

320개 논증을 같은 차원으로 주석했습니다

연구진은 서로 다른 논제의 320개 자연어 논증을 수집해 각 차원에 대한 사람 판단을 붙였습니다. 이 자료는 ‘좋음/나쁨’ 이진표보다 어떤 강점과 약점이 함께 나타나는지 비교하게 합니다. 논문은 주석 일치도와 차원 사이 상관도 함께 검토합니다. [1]

차원은 관련되지만 서로 대체되지 않습니다

명료한 표현은 논증 이해를 돕지만 전제의 참이나 추론의 충분성을 자동 보장하지 않습니다. 대화 쟁점에 직접 답한 말도 공격적 표현 때문에 수사적 효과가 낮을 수 있습니다. 품질을 한 숫자로 합치기 전에 평가 목적에 맞는 차원을 밝혀야 합니다. [1]

자동 평가는 공통 기반을 만들기 위한 출발점입니다

연구의 목적은 자연어 논증 품질 평가에 공통 언어와 자료를 제공하는 것입니다. 320개 영어 논증의 주석을 모든 장르의 객관적 품질 기준으로 볼 수 없고, 문화·주제·청중에 따른 판단 차이도 후속 검증이 필요합니다. [1]

그림으로 생각하기

한 논증을 세 렌즈로 나누기

‘학교 버스를 늘리자. 지난달 지각생 40명 중 28명이 첫차 만석을 이유로 썼다.’는 수치가 주장과 관련돼 논리적 근거가 됩니다. 그러나 조사 방식과 중복 응답 여부가 빠지면 충분성은 제한됩니다.

‘모두가 당연히 찬성할 현명한 방안’이라는 표현을 붙이면 자신감은 커져도 근거가 늘지는 않습니다. 반대 의견의 비용 쟁점에 답하지 않으면 대화적 기여도도 별도로 낮을 수 있습니다.

LTCT는 한 발언에 논리·수사·대화의 세 막대를 보여 주고, 학습자가 각 점수의 근거 문장을 표시하게 할 수 있습니다. 총점보다 차원별 증거 연결을 우선 채점합니다.

논증 품질을 논리적 품질, 수사적 품질, 대화적 품질의 세 축과 하위 항목으로 나눈 평가표
Wachsmuth 등의 15차원 분류를 LTCT용 세 축 점검표로 단순 재구성. 원문 표를 전재하지 않았습니다. 그림 크게 보기 ↗

어디까지 말할 수 있을까요?

  • 320개 영어 논증의 주석 자료이므로 한국어 학교 토론의 규범과 일치한다고 가정할 수 없습니다.
  • 품질 차원 사이 상관은 인과효과가 아니며, 자동 모형 점수는 사람의 숙고된 판단을 대신하지 않습니다.

원문에 근거한 한계와 LTCT의 적용 범위 검토입니다. [1]

배운 내용을 수업에 적용하기

교육 현장과 연결해 보면

논리적으로 타당하지만 이해하기 어려운 글과 읽기 쉽지만 근거가 약한 글을 비교합니다. 학생은 추론의 충분성, 표현의 명료성, 쟁점에 대한 기여를 각각 실제 문장으로 평가합니다.

수정할 때에는 한 기준을 높이기 위해 무엇을 바꾸었는지 적습니다. 교사는 여러 평가 차원을 소개하되 학생의 수준에 맞는 항목부터 사용하고, 총점으로 세부 차이를 덮지 않습니다.

한 번 더 생각하기

유려하지만 근거가 약한 발언을 단일 ‘설득력’ 점수로만 평가하면 무엇을 잃나요?

생각을 비교할 해설 펼치기

표현 효과와 추론 충분성이 합쳐져 어느 부분을 고쳐야 하는지, 왜 높은 점수를 받았는지 알기 어려워집니다.

원문과 출처 정보

한국어 제목은 이해를 돕기 위한 LTCT 번역입니다. 한글 제목 뒤 괄호에 원제를 함께 표기했습니다. 저자·학술지·원문 버전은 원문 서지정보를 기준으로 확인할 수 있습니다.

  1. 자연어 논증 품질의 계산적 평가 (Computational Argumentation Quality Assessment in Natural Language)

    Henning Wachsmuth, Nona Naderi, Yufang Hou, Yonatan Bilu, Vinodkumar Prabhakaran, Tim Alberdingk Thijm, Graeme Hirst, Benno Stein (2017). EACL 2017, 176–187.

    자료 성격
    공개 학술자료
    읽은 버전
    2017-04 ACL Anthology 공개 출판 PDF
    확인 범위
    공개 PDF 전체 12쪽: 이론 분류, 15차원, 320개 논증 말뭉치, 주석과 분석
    원문 확인일
    영구 식별
    DOI 미기재 · 아래 보존판 주소로 안내

이 글은 한국어 해설이며 원문 전문 번역이 아닙니다. 도식과 활동의 제작·재구성 범위는 각 그림과 본문에 표시했습니다. 자료 선정과 출처 기준

출처·개념 네트워크

같은 연구 흐름에서 이어 읽기

같은 원문, 저자·연구 흐름, 공통 개념 태그를 기준으로 연결한 관련 해설입니다.