‘서로 검토하세요’만으로는 어떤 초고가 빠지거나 자기 글을 검토하고, 먼저 본 의견에 끌릴 수 있습니다. 필요한 검토 수와 시간 수용량을 계산하고, 자기 검토를 제외한 배정표와 불일치 해결 단계를 따로 만듭니다.
1. 독립 검토의 조건을 먼저 적습니다
Cochrane Handbook은 연구 포함 결정을 적어도 두 사람이 독립적으로 내리고, 불일치 해결 절차를 미리 정하도록 요구합니다. 같은 장의 설명은 중복 판단이 실수와 한 사람의 편향 가능성을 줄인다고 밝힙니다.
이 활동은 의료 체계적 문헌고찰 절차를 그대로 강제하지 않습니다. 초고·제안서·수업 답안에서 ‘작성자 제외, 서로의 의견을 보기 전 기록, 필요 인원 확보, 불일치 해결 단계 분리’라는 운영 원리만 가져옵니다.
참고: Cochrane · Cochrane Handbook Chapter 4: Searching for and selecting studies
2. 필요한 검토 수와 시간 수용량을 계산합니다
초고가 참여자 수만큼 한 편씩 있고 초고마다 두 명이 필요하면 총 검토 수는 참여자×2입니다. 한 검토자가 처리할 수 있는 수는 전체 검토 시간÷한 편 검토 시간에서 소수점을 버립니다.
출발값 6명·2명 검토·8분·24분이면 총 12건이 필요하고, 여섯 검토자는 각 3건까지 처리할 수 있어 수용량은 18건입니다. 수용량이 충분해도 자기 글과 같은 초고 중복 배정을 금지해야 합니다.
| 제약 | 규칙 | 어기면 생기는 문제 |
|---|---|---|
| 자기 검토 | 작성자는 자기 초고에서 제외 | 독립된 외부 관점이 사라짐 |
| 중복 | 한 사람이 같은 초고를 두 번 세지 않음 | 필요 인원을 채운 것처럼 보임 |
| 시간 | 개인 수용량 안에서 배정 | 끝내지 못할 검토 발생 |
| 독립성 | 합의 전에 각자 기록 | 첫 의견에 끌릴 수 있음 |
3. 덜 배정된 사람부터 순환 배정합니다
계산기는 각 초고에서 작성자를 제외하고, 아직 배정 수가 적은 활동 검토자를 먼저 고릅니다. 같은 조건이면 번호가 앞선 사람을 고르는 공개 규칙이라 결과를 재현할 수 있습니다.
결석자가 늘거나 시간이 줄어 수용량이 부족하면 미배정 수를 숨기지 않습니다. 검토 수를 줄이기 전에 시간 연장, 별도 검토자 투입, 초고 묶음 분할 중 무엇을 바꿀지 진행자가 결정합니다.
4. 독립 판단과 합의 단계를 섞지 않습니다
1차에는 검토자들이 서로의 의견을 보지 않고 기준표에 근거와 수정 제안을 적습니다. 2차에는 일치·불일치를 표시하고, 합의되지 않은 항목만 토의하거나 세 번째 진행자에게 넘깁니다.
이 배정표는 글의 질이나 사람의 전문성을 점수화하지 않습니다. 공식 인사평가·채용·법적 승인에는 이해충돌, 비밀유지와 조직 규정이 더 필요하며 이 수업용 규칙으로 대신할 수 없습니다.
자기 초고를 빼고 독립 검토 배정하기
출발값은 6명·초고마다 2명·결석 0명·검토 8분·전체 24분입니다. 인원과 시간을 바꾸면 배정표와 미배정 수가 다시 계산됩니다.
모든 초고에 필요한 독립 검토자를 배정했습니다. 자기 초고 배정은 0건입니다.
1번 초고
2번 · 3번
2번 초고
1번 · 4번
3번 초고
5번 · 6번
4번 초고
1번 · 2번
5번 초고
3번 · 4번
6번 초고
5번 · 1번
결석과 시간 경계에서 빠진 검토 찾기
- 출발값 6명·초고마다 2명·8분·24분에서 12건이 모두 배정되고 자기 검토가 0건인지 확인합니다.
- 전체 시간을 8분으로 줄여 수용량과 미배정 수가 함께 바뀌는지 봅니다.
- 결석자를 4명으로 늘리고 초고마다 3명을 요구해 작성자 제외 때문에 생기는 경계를 확인합니다.
- 참여자를 3명으로 줄인 최소 인원에서도 배정표가 잘리지 않는지 본 뒤 초기화합니다.
생각 확인 질문
초고 8편에 두 명씩 독립 검토가 필요하지만 6명의 활동 검토자가 20분 동안 한 편당 10분씩 검토할 수 있습니다. 총 수용량과 부족분은 얼마인가요?
내 답과 해설 비교하기
필요한 검토는 8×2=16건입니다. 한 사람은 2건, 6명은 12건을 처리하므로 4건이 부족합니다. 자기 검토 제외 여부까지 반영한 실제 배정표를 만든 뒤 시간 연장이나 검토자 추가를 정해야 합니다.
마지막으로 확인하기
- 작성자를 자기 초고에서 제외했나요?
- 필요 건수와 시간 수용량을 계산했나요?
- 합의 전에 독립 기록을 남기나요?
- 미배정과 불일치 해결 절차를 밝혔나요?
출처와 제작 안내
사례·표·연습·해설은 LTCT가 제작했습니다. 실제 조사 결과나 공식 시험 문항으로 제시한 자료가 아닙니다.
Cochrane Handbook Chapter 4: Searching for and selecting studies
Cochrane
2026-10-02 최신 공식 장의 4.6.4에서 적어도 두 사람이 독립적으로 판단하고 불일치 해결 절차를 미리 정하라는 C39 기준과, 중복 판단의 오류·단일 판단 편향 감소 이유를 확인했습니다. 초고 배정 수치와 순환 알고리즘은 LTCT 자체 제작입니다.
