“대조군을 두고 무작위로 배정해서 효과를 검증하고 싶다”는 계획을 세웠다면, 학위논문의 핵심 설계는 실험연구, 그중에서도 무작위 대조군 시험(Randomized Controlled Trial, RCT)입니다. 교육 중재, 심리 프로그램, 간호 중재 등 어느 분야든 무작위 배정을 실제로 어떻게 실행하고, 결과를 어떻게 보고해야 심사에서 방법론적 결함을 지적받지 않는지 정리합니다. 준실험설계처럼 배정이 불가능한 상황에서 쓰는 방법과는 출발점부터 다르므로, 무작위 배정이 실제로 가능한 연구 상황인지부터 먼저 판단해야 합니다.
RCT 학위논문 설계의 출발점
RCT는 참여자를 실험집단과 통제집단(또는 여러 처치집단)에 무작위로 배정한 뒤, 처치(중재) 여부만 다르게 하고 나머지 조건을 동일하게 통제해 효과를 인과적으로 추론하는 설계입니다. 준실험설계와 결정적으로 다른 지점은 “배정을 연구자가 무작위 절차로 통제할 수 있는가”입니다. 학교 학급처럼 이미 형성된 집단을 그대로 쓰거나, 자원자만 모집해 배정할 수밖에 없는 현장이라면 RCT가 아니라 준실험설계로 방향을 잡아야 합니다. 반대로 개별 참여자를 모집해 컴퓨터 난수나 제비뽑기로 집단을 배정할 수 있는 상황이라면 RCT를 학위논문 설계로 선택할 수 있습니다.
무작위 배정, 어떻게 실제로 하는가
“무작위로 배정했다”는 문장만으로는 심사를 통과하기 어렵습니다. 실제로 어떤 절차를 썼는지 구체적으로 밝혀야 합니다.
- 단순 무작위 배정: 난수표나 통계 프로그램의 난수 생성 함수로 각 참여자를 집단에 배정. 표본이 작으면 집단 간 인원수가 불균형해질 수 있습니다.
- 블록 무작위 배정: 참여자를 일정 크기(예: 4명, 6명)의 블록으로 묶어 블록 안에서 무작위 배정. 집단 간 인원수를 비슷하게 유지하고 싶을 때 사용합니다.
- 층화 무작위 배정: 성별, 연령대 등 중요한 변수를 먼저 층으로 나눈 뒤 각 층 안에서 무작위 배정. 집단 간 배경 변수의 균형을 미리 확보하고 싶을 때 사용합니다.
논문의 연구방법 장에는 어떤 배정 방식을 썼는지, 배정을 실행한 사람이 참여자 모집 담당자와 같은 사람인지 다른 사람인지(배정 은폐, allocation concealment)까지 구체적으로 서술해야 심사위원이 배정 절차의 타당성을 판단할 수 있습니다. 배정을 실행한 도구(난수 생성 소프트웨어명, 시드값 관리 여부)까지 명시하면 재현 가능성 측면에서도 더 높은 평가를 받을 수 있습니다.
CONSORT란 무엇이고 왜 중요한가
CONSORT(Consolidated Standards of Reporting Trials)는 무작위 대조군 시험을 어떻게 투명하게 보고할지 정한 국제 표준 가이드라인입니다. 원래 임상시험을 위해 만들어졌지만, 교육·심리·간호 등 여러 분야의 RCT 논문에서도 폭넓게 채택되고 있습니다. CONSORT의 핵심은 참여자 흐름도(flow diagram)로, 모집 단계부터 무작위 배정, 처치 이행, 추적관찰, 최종 분석까지 각 단계에서 몇 명이 남았고 몇 명이 탈락했는지를 도식으로 명시하는 것입니다.
단계별 튜토리얼: CONSORT 흐름도 그리기
- 1단계 — 모집 인원 기록: 연구 참여에 관심을 보인 전체 인원과, 그중 선정·제외 기준에 따라 실제로 등록된 인원을 각각 기록합니다.
- 2단계 — 무작위 배정 인원 기록: 등록된 인원 중 실제로 무작위 배정된 인원을 집단별로 나눠 기록합니다.
- 3단계 — 처치 이행 기록: 배정된 인원 중 실제로 처치(중재)를 받은 인원과, 받지 않은 인원 및 그 사유를 기록합니다.
- 4단계 — 추적관찰 및 탈락 기록: 추적관찰 기간 동안 탈락한 인원과 탈락 사유를 집단별로 기록합니다.
- 5단계 — 최종 분석 인원 기록: 최종적으로 분석에 포함된 인원을 집단별로 기록하고, 제외된 인원이 있다면 그 사유를 명시합니다.
이 다섯 단계를 상자와 화살표로 이은 흐름도 한 장이면, 심사위원은 표본이 처음부터 끝까지 어떻게 줄어들었는지 한눈에 파악할 수 있습니다. 탈락률이 두 집단 간에 크게 차이 난다면(차등 탈락, differential attrition) 결과 해석에 편향이 생길 수 있으므로, 이 흐름도는 단순한 형식이 아니라 결과의 신뢰도를 뒷받침하는 핵심 증거로 취급됩니다.
표본 크기는 어떻게 정하는가
RCT 학위논문에서 표본 크기를 임의로 정하면 심사에서 가장 먼저 지적받는 부분 중 하나입니다. 사전에 검정력 분석(power analysis)을 통해 효과크기, 유의수준, 검정력을 근거로 필요한 표본 수를 계산하고, 그 계산 과정을 방법론 장에 명시해야 합니다. 예상 탈락률까지 고려해 모집 목표 인원을 검정력 분석 결과보다 여유 있게 잡는 것이 일반적입니다. 예를 들어 검정력 분석 결과 집단당 30명이 필요하다고 계산되었는데 과거 유사 연구의 탈락률이 15% 수준이었다면, 집단당 35명 이상을 모집 목표로 잡아야 최종 분석 단계에서도 필요한 표본 수를 확보할 수 있습니다.
가상 사례로 보는 결과 서술법
설명을 위한 가상의 예시입니다. 실제 논문에는 자신의 연구 결과를 넣어야 합니다.
나쁜 예: “실험집단의 점수가 통제집단보다 높았다.”
좋은 예: “무작위 배정 후 실험집단(n=32)과 통제집단(n=30)의 사전 점수에는 유의한 차이가 없었다(t=0.42, p=.68). 8주 중재 후 실험집단의 사후 점수(M=78.4, SD=6.2)가 통제집단(M=71.1, SD=7.0)보다 유의하게 높았다(t=4.13, p<.001, Cohen’s d=0.94). CONSORT 흐름도 기준 최종 분석 대상은 실험집단 29명, 통제집단 28명으로 전체 탈락률은 8.1%였다.”
좋은 예는 배정 시점의 집단 간 동질성 확인, 처치 후 결과, 통계적 유의성과 효과크기, 그리고 최종 분석 인원과 탈락률까지 CONSORT 원칙에 맞춰 함께 보고합니다. 이 네 요소가 모두 갖춰져야 RCT 결과 보고로서 완결성을 갖춥니다.
RCT 학위논문에서 자주 지적받는 세 가지 실수
첫째, 배정 은폐가 불명확하다. 배정을 실행한 사람과 참여자를 모집·평가한 사람이 같으면, 의도치 않게 배정에 영향을 줄 수 있다는 의심을 받습니다. 가능하다면 배정 실행자와 평가자를 분리하고, 그 사실을 방법론 장에 명시해야 합니다.
둘째, 탈락자 분석을 생략한다. 최종 분석에 포함된 인원만 보고하고 탈락자가 왜, 어느 집단에서 더 많이 발생했는지 다루지 않으면 결과의 신뢰도를 의심받습니다. 탈락자의 인구통계학적 특성이 완주자와 다른지 비교하는 것도 권장됩니다.
셋째, 사전 등록 없이 사후에 가설을 바꾼다. RCT는 사전에 연구계획서나 임상시험 등록 시스템에 가설과 분석 계획을 등록해두는 것이 이상적입니다. 결과를 보고 나서 유의한 결과가 나온 지표를 주요 가설처럼 서술하면 데이터 준설(data dredging)로 의심받을 수 있습니다.
이 세 실수는 모두 “결과가 신뢰할 만한가”라는 질문으로 귀결됩니다. 배정 은폐가 불명확하면 애초에 무작위 배정이 제대로 지켜졌는지 의심받고, 탈락자 분석이 없으면 최종 결과가 편향된 부분집단만 반영한 것은 아닌지 의심받으며, 사후에 가설이 바뀌면 우연히 나온 결과를 의도한 발견처럼 포장한 것은 아닌지 의심받습니다. 세 가지 모두 연구 설계 단계에서 미리 문서로 남겨두면 심사 과정에서 반박할 근거를 확보할 수 있습니다.
윤리적 고려사항
RCT는 통제집단에 처치를 제공하지 않거나 지연 제공한다는 점에서 윤리적 쟁점이 따릅니다. 통제집단에게도 연구 종료 후 처치를 제공하는 대기자 통제(waitlist control) 설계를 쓰거나, 최소한의 표준 처치를 제공하는 방식으로 윤리적 부담을 완화하는 것이 일반적입니다. IRB(기관생명윤리위원회) 심의 시에는 배정 절차, 참여자에게 무작위 배정 가능성을 어떻게 고지했는지, 중도 탈락 시 불이익이 없다는 점을 어떻게 보장했는지를 구체적으로 서술해야 합니다.
눈가림(Blinding)은 얼마나 적용할 수 있는가
눈가림은 참여자, 처치 제공자, 결과 평가자 중 누가 집단 배정을 모르는 상태로 연구가 진행되는지를 가리킵니다. 약물 임상시험처럼 위약을 쓸 수 있는 경우와 달리, 교육·심리·간호 중재 연구는 참여자가 자신이 어떤 프로그램을 받는지 알 수밖에 없는 경우가 많아 완전한 이중눈가림이 어렵습니다. 이런 경우에도 최소한 결과를 채점하거나 평가하는 사람만큼은 참여자가 어느 집단인지 모르게 하는 평가자 눈가림(single blind)을 적용할 수 있는지 검토해야 합니다. 평가자 눈가림조차 불가능하다면, 그 사실과 이로 인해 발생할 수 있는 평가 편향 가능성을 한계점에서 정직하게 서술하는 것이 심사에서 오히려 더 좋은 평가를 받습니다. 눈가림 적용 여부와 그 수준(이중, 단일, 비맹검)은 방법론 장에 표 형태로 명시해두면 심사위원이 결과 해석 시 참고하기 편리합니다.
결측치 처리와 분석 원칙: ITT와 Per-Protocol
RCT에서는 무작위 배정 후 실제로 처치를 끝까지 이행하지 못한 참여자가 반드시 발생합니다. 이때 분석 대상을 어떻게 정하느냐에 따라 결과가 달라질 수 있으므로, 두 가지 분석 원칙 중 무엇을 주 분석으로 쓸지 미리 정하고 논문에 명시해야 합니다.
- 치료의도분석(Intention-to-Treat, ITT): 처치를 끝까지 이행했는지와 무관하게, 무작위 배정된 모든 참여자를 원래 배정된 집단 그대로 분석에 포함합니다. 무작위 배정의 장점(집단 간 초기 동질성)을 그대로 유지할 수 있어 RCT의 표준 분석 원칙으로 권장됩니다.
- 프로토콜준수분석(Per-Protocol): 처치를 계획대로 끝까지 이행한 참여자만 분석에 포함합니다. 처치를 제대로 받았을 때의 순수한 효과를 보여줄 수 있지만, 탈락자를 제외하면서 무작위 배정의 균형이 깨질 위험이 있습니다.
대부분의 RCT 학위논문은 ITT를 주 분석으로 제시하고, Per-Protocol 분석을 민감도 분석(sensitivity analysis)으로 함께 보고해 두 결과가 일관되는지 확인하는 방식을 씁니다. 결측치 자체를 어떻게 처리했는지도 명시해야 합니다. 단순히 결측 사례를 제외하는 목록별 삭제(listwise deletion) 대신, 다중대체법(multiple imputation)이나 마지막 관측값 이월(LOCF) 등 결측 처리 방법을 선택했다면 그 근거와 절차를 함께 서술해야 심사위원이 결과의 강건성을 판단할 수 있습니다. 결측치·이상치 처리 절차를 코드 수준까지 단계별로 정리하고 싶다면 논문 데이터 결측치·이상치 처리 실전 튜토리얼을 함께 참고하면 방법론 장을 훨씬 구체적으로 쓸 수 있습니다.
연구방법 장 작성 체크리스트
| 항목 | 포함해야 할 내용 |
|---|---|
| 참여자 모집 | 모집 경로, 선정·제외 기준, 최종 등록 인원 |
| 무작위 배정 | 배정 방식(단순/블록/층화), 배정 실행 도구, 배정 은폐 여부 |
| 처치 내용 | 실험집단과 통제집단 각각이 받은 처치의 구체적 내용과 기간 |
| 표본 크기 산출 | 검정력 분석 결과, 예상 탈락률을 반영한 모집 목표 |
| 결과 보고 | 사전 동질성 검정, 사후 결과 비교, 효과크기, CONSORT 흐름도 |
이 다섯 항목을 방법론 장의 소제목으로 그대로 사용해도 좋습니다. 심사위원이 RCT 논문에서 기대하는 정보가 이 체크리스트 안에 대부분 포함되어 있기 때문에, 항목별로 빠짐없이 서술하는 것만으로도 방법론적 엄격성에 대한 인상을 크게 개선할 수 있습니다. 통계 결과를 APA 형식 문장과 표로 정확히 옮기는 세부 규칙은 APA 7판 통계 결과 표기법에서 소수점·기호·자유도 표기까지 다루고 있으니 결과 장을 쓸 때 함께 참고하면 좋습니다.
AI로 RCT 논문 초안 잡을 때 주의할 점
통계 결과표를 문장으로 풀어 쓰거나 CONSORT 흐름도의 기본 틀을 잡는 데는 AI를 활용할 수 있지만, 실제 통계값(t값, p값, 효과크기)은 반드시 자신이 직접 수행한 분석 결과를 넣어야 합니다. AI가 그럴듯한 숫자를 예시로 채워 넣는 경우가 있으므로, 초안에 등장하는 모든 통계값이 실제 분석 출력물과 일치하는지 하나씩 대조해야 합니다. 준실험설계처럼 무작위 배정이 불가능한 상황과의 구분이 헷갈린다면 준실험설계(Quasi-experimental Design) 완전 가이드를 먼저 참고해 자신의 연구가 진짜 RCT인지 확인하는 것이 순서입니다. Tesify로 CONSORT 흐름도 서술과 방법론 체크리스트 초안을 잡은 뒤, 실제 통계값은 자신의 분석 결과로 직접 교체하는 순서를 권장합니다.
자주 묻는 질문
Q. 표본이 적은 학위논문도 RCT로 설계할 수 있나요?
A. 가능합니다. 다만 검정력 분석 결과 필요한 최소 표본 수를 확보하지 못하면 유의한 효과를 발견하지 못할 위험이 커지므로, 계획 단계에서 현실적으로 모집 가능한 인원과 필요한 표본 수를 함께 검토해야 합니다.
Q. 세 개 이상의 집단(다중 처치 조건)도 RCT로 설계할 수 있나요?
A. 가능합니다. 이 경우 집단 간 사전 동질성 검정과 사후 비교에 분산분석(ANOVA) 등 다집단 비교 방법을 사용하고, CONSORT 흐름도도 집단 수만큼 가지를 나눠 그려야 합니다.
Q. 사전 등록을 하지 않았는데 지금이라도 등록해야 하나요?
A. 자료 수집이 이미 끝났다면 사전 등록의 의미는 줄어들지만, 연구계획서 승인 시점에 가설과 분석 계획을 문서로 남겨두었다면 그 문서를 사전 등록에 준하는 근거로 논문에 명시할 수 있습니다.
Q. CONSORT 흐름도는 임상시험이 아닌 교육·심리 중재 연구에도 꼭 그려야 하나요?
A. 필수 규정은 아니지만, 참여자 수의 흐름을 투명하게 보여준다는 점에서 임상시험 이외 분야의 RCT 논문에서도 점점 더 널리 요구되는 추세이며, 그려두면 심사에서 방법론적 엄격성을 인정받는 데 유리합니다.
RCT 학위논문의 성패는 결과가 유의했는지 여부보다, 무작위 배정과 참여자 흐름을 얼마나 투명하게 기록했는지에 달려 있습니다. 배정 방식을 구체적으로 밝히고, CONSORT 흐름도로 모집부터 최종 분석까지의 인원 변화를 도식화하고, 표본 크기 산출 근거를 명시하면 심사위원이 결과를 신뢰할 근거를 스스로 확인할 수 있습니다. 준실험설계와 헷갈리지 않도록 무작위 배정이 실제로 가능한 상황인지부터 점검하고, 윤리적 쟁점까지 미리 검토해두면 RCT를 학위논문 설계로 안정적으로 끌고 갈 수 있습니다. 무엇보다 연구계획서 단계에서 무작위 배정 방식, 표본 크기 산출 근거, 눈가림 수준, 주 분석 원칙(ITT 여부)까지 미리 문서로 확정해두면, 자료 수집이 끝난 뒤 결과에 맞춰 방법을 짜맞췄다는 의심을 받지 않고 처음 계획한 대로 결과를 투명하게 보고할 수 있습니다.