가상 온라인 글쓰기 과정에 80명이 시작했고 50명이 마지막 과제를 냈습니다. 완료자 중 35명은 처음보다 점수가 올랐습니다. ‘참가자 대부분이 좋아졌다’라는 초고가 어떤 분모와 미확인 결과를 숨기는지 계산합니다.
1. 시작자·완료자·개선자를 한 흐름에 놓기
80명이 시작하고 50명이 완료했으므로 30명의 마지막 결과가 없습니다. 확인된 개선자는 완료자 중 35명입니다. 완료자 분모에서는 35÷50=70%지만 시작자 분모에서 확인된 개선자는 적어도 35÷80=43.8%입니다.
CONSORT 2025는 무작위시험 결과 보고에서 참여자가 모집부터 분석까지 어떻게 흘렀는지를 흐름도로 드러내도록 권고합니다. 이 글은 임상시험 기준을 가상 교육 과정의 효과 증명으로 옮기지 않고, 시작·완료·분석 인원을 숨기지 않는 보고 원칙만 참고합니다.
2. 미완료자의 결과를 관찰값처럼 채우지 않기
미완료 30명이 아무도 좋아지지 않았다고 두면 전체 개선의 하한은 35명, 43.8%입니다. 30명이 모두 좋아졌다고 두면 상한은 65명, 81.3%입니다. 실제 값은 추가 자료 없이는 이 범위 어디인지 모릅니다.
하한과 상한은 관찰 결과가 아니라 극단 가정입니다. ‘전체의 43.8%가 좋아졌다’고 단정하는 대신 ‘확인된 개선은 시작자의 43.8%이며, 미완료자 결과를 알 수 없어 전체 비율은 43.8%~81.3% 범위’라고 씁니다.
| 대상 | 계산 | 비율 | 허용되는 표현 |
|---|---|---|---|
| 완료자 | 35÷50 | 70.0% | 완료자 중 70% 개선 |
| 시작자 하한 | 35÷80 | 43.8% | 확인된 개선은 적어도 43.8% |
| 시작자 상한 | (35+30)÷80 | 81.3% | 모든 미완료자가 개선됐다는 가정의 최대 |
3. 표현 하나가 분모와 가정을 드러내게 하기
‘참가자 대부분이 좋아졌다’는 초고는 참가자가 시작자인지 완료자인지, 미완료자를 어떻게 처리했는지 모호합니다. ‘마지막 과제를 낸 50명 중 35명의 점수가 올랐다. 시작자 80명 가운데 30명의 마지막 결과가 없어 과정 전체의 개선 비율은 단정할 수 없다’로 고치면 관찰 범위가 보입니다.
활동에서 미완료자 가정을 바꾸면 전체값도 바뀌지만, 관찰된 완료자 35명은 변하지 않습니다. 어떤 숫자가 자료이고 어떤 숫자가 가정인지 문장 안에서 표시해야 합니다.
4. 실제 효과 주장에 더 필요한 조건
중도 이탈 이유가 시간 부족, 기술 문제, 불만족, 이미 충분한 숙련 등 무엇인지에 따라 남은 표본은 처음 집단과 다를 수 있습니다. 탈락률만으로 방향을 보정할 수 없습니다.
교육 효과를 말하려면 비교 조건, 같은 측정도구, 사전 점수, 평가자 일관성, 미완료자 추적과 개인정보 보호가 더 필요합니다. 이 가상 계산은 과정의 인과효과나 개인의 실패 원인을 판정하지 않습니다.
시작·완료·개선 인원을 바꾸어 결론 범위 고치기
출발값은 80명 시작·50명 완료·완료자 중 35명 개선입니다. 중도 이탈자의 결과를 관찰값과 섞지 않고 하한·상한을 따로 계산합니다.
완료자 50명 중 35명(70.0%)의 점수가 올랐습니다. 시작한 80명 전체의 개선 비율은 미완료자 결과가 없어 43.8%~81.3% 범위만 확인됩니다.
미완료자를 숨긴 결과 문장 고치기
- 출발값에서 미완료 30명, 완료자 개선 70.0%, 시작자 전체 범위 43.8%~81.3%를 확인합니다.
- 미완료자 가정을 모두 개선과 모두 미개선으로 번갈아 바꾸어 관찰된 35명은 같고 전체 가정값만 달라지는지 봅니다.
- 초기화 뒤 완료 인원을 80명으로 올리고 개선 56명으로 바꾸어 미완료자가 0명일 때 범위가 70.0% 한 값으로 모이는지 확인합니다.
- 완료 인원을 40명, 개선을 20명으로 바꾸어 완료자 비율과 시작자 전체 범위를 나누어 쓴 뒤 초기화합니다.
생각 확인 질문
120명이 시작하고 90명이 완료했으며 완료자 중 54명이 개선됐다면 완료자 비율, 시작자 전체의 하한과 상한을 계산하고 결과 문장을 고치세요.
내 답과 해설 비교하기
완료자 중 개선은 54÷90=60.0%입니다. 미완료자는 30명이고 시작자 전체 하한은 54÷120=45.0%, 상한은 (54+30)÷120=70.0%입니다. ‘완료자 90명 중 54명(60.0%)의 점수가 올랐다. 시작자 120명 중 30명의 마지막 결과가 없어 전체 개선 비율은 45.0%~70.0% 범위이며 단일값으로 확정할 수 없다’라고 고칩니다. 이 범위만으로 과정의 인과효과나 이탈 이유를 설명할 수 없습니다.
마지막으로 확인하기
- 시작자와 완료자 분모를 구분했나요?
- 미완료자 수를 밝혔나요?
- 하한·상한을 관찰값과 구분했나요?
- 효과와 이탈 원인을 단정하지 않았나요?
출처와 제작 안내
사례·표·연습·해설은 LTCT가 제작했습니다. 실제 조사 결과나 공식 시험 문항으로 제시한 자료가 아닙니다.
CONSORT 2025
SPIRIT–CONSORT Group
2026-09-16 공식 홈페이지에서 CONSORT 2025가 무작위시험 결과 보고를 위한 30개 항목 체크리스트와 참여자의 진행을 보여 주는 흐름도를 제공한다는 설명을 확인했습니다. 이 글은 교육 과정이 무작위시험이라고 주장하지 않고, 시작·완료·분석 인원을 투명하게 구분하는 원칙만 참고했습니다.