문헌 스크리닝 도구 비교 2026: Rayyan vs Covidence vs 엑셀, 체계적 문헌고찰 선별을 어디서 할까

체계적 문헌고찰을 하겠다고 선언한 순간, 검색 결과 2,847건이 손에 들어옵니다. 이 중 최종적으로 논문에 들어가는 것은 열두 편쯤일 겁니다. 나머지 2,835건을 기록에 남는 방식으로 걸러내는 것이 선별(screening) 단계이고, 여기서 몇 주가 사라집니다.

일반적인 문헌고찰 장이라면 이 절차가 필요 없습니다. 그러나 방법론으로 체계적 문헌고찰이나 스코핑 리뷰를 선언했다면 이야기가 달라집니다. 몇 건에서 시작해 몇 건이 남았는지, 왜 제외했는지를 흐름도로 제시해야 하고, 두 사람이 독립적으로 판정한 뒤 이견을 조정한 기록이 있어야 합니다. 엑셀로도 할 수 있지만, 규모가 커지면 엑셀 자체가 오류의 근원이 됩니다.

이 글은 실제 선택지 세 가지 — Rayyan, Covidence, 엑셀 — 를 여섯 기준으로 비교합니다. 확인된 공식 요금은 그대로 적었고, 확인되지 않는 금액은 적지 않았습니다.

이 비교의 평가 기준 여섯 가지

1. 중복 제거 — 여러 DB에서 내려받은 서지를 합쳤을 때 같은 논문을 얼마나 정확히 잡아내는가.
2. 이중 선별과 이견 조정 — 두 사람이 서로의 판정을 모른 채 진행하고, 나중에 충돌만 모아 조정할 수 있는가.
3. PRISMA 흐름도 산출 — 단계별 건수를 자동으로 세어 흐름도를 만들어 주는가.
4. 전문 검토와 자료 추출 — 초록 선별 이후 전문(full-text) 검토와 데이터 추출까지 이어지는가.
5. 비용과 접근 경로 — 개인이 얼마를 내야 하는가, 학교 도서관이 계약했을 가능성이 있는가.
6. 한국어 문헌 적합성 — 국내 DB에서 내려받은 한국어 서지를 문제없이 다루는가.

한눈에 보는 세 방식 비교표

요금은 각 서비스가 2026년 8월 기준으로 공개한 미국 달러 금액입니다. 결제 시점의 환율, 부가세, 기관 계약 조건에 따라 실제 지출은 달라지므로 원화 환산액은 적지 않았습니다.

Rayyan — 무료로 시작할 수 있는 쪽

Rayyan은 개인 연구자가 계정을 만들고 바로 리뷰를 시작할 수 있는 웹 서비스입니다. 서지 파일을 올리면 중복을 잡아 주고, 판정을 쌓아 가면 AI가 남은 문헌의 관련성을 예측해 우선순위를 매겨 줍니다.

강점

• 무료 플랜이 실재합니다. 첫 체계적 문헌고찰을 비용 없이 시작할 수 있어, 학위논문 한 편이 목적인 대학원생에게 진입 장벽이 사실상 없습니다.
• 중복 탐지가 무료 플랜에도 포함되어 있습니다. 서지를 합치는 단계에서 가장 많은 시간을 잡아먹는 작업이 자동화됩니다.
• AI 관련성 예측이 무료 플랜에 포함됩니다. 판정을 몇백 건 쌓으면 남은 목록의 순서가 재배열되어, 포함될 논문을 앞쪽에서 만나게 됩니다.
• 모바일 앱이 있어 지하철에서 초록 판정을 이어 갈 수 있습니다. 무료 플랜은 판정 100건까지 제한됩니다.
• 유료로 올라가도 부담이 크지 않습니다. Essential 요금제가 연납 기준 월 4.99달러, Advanced가 월 8.33달러로 안내되어 있습니다.

약점

• 무료 플랜의 제한이 분명합니다. 활성 리뷰 3건, 무료 검토자 2명, 표본 생성 1회입니다.
• PRISMA 흐름도 생성이 무료 플랜에 없습니다. Essential 이상에서 제공됩니다. 흐름도를 직접 그려도 되지만 건수는 따로 세어야 합니다.
• PICO 자동 추출 같은 상급 AI 기능은 상위 요금제에서만 열립니다.
• 전문 검토 이후의 자료 추출 단계 지원은 Covidence보다 얕습니다.

이런 사람에게 맞습니다: 학위논문 한 편을 위해 체계적 문헌고찰을 처음 해 보는 대학원생, 검토자가 본인과 지도교수 둘뿐인 소규모 팀, 예산이 사실상 0원인 상황.

Covidence — 선별부터 추출까지 한 흐름으로

Covidence는 체계적 문헌고찰의 전 과정을 하나의 작업 흐름으로 묶은 서비스입니다. 초록 선별, 전문 검토, 비뚤림 위험 평가, 자료 추출이 단계로 연결되어 있고, 각 단계의 건수가 자동으로 집계됩니다.

강점

• 이중 선별과 이견 조정이 기본 절차로 설계되어 있습니다. 두 사람이 각자 판정하고 충돌만 모아 조정하는 흐름을 따로 만들 필요가 없습니다.
• 모든 요금제에서 협력자 수가 무제한입니다. 검토자가 셋 이상인 연구팀에서는 이 조건이 결정적입니다.
• 선별 이후 자료 추출까지 같은 자리에서 이어집니다. 엑셀로 옮겨 붙이는 과정이 사라집니다.
• EndNote, Zotero, Mendeley 등 주요 참고문헌 프로그램 및 여러 파일 형식과 연동됩니다. 어떤 관리 프로그램을 쓸지 정하는 단계라면 엔드노트와 조테로를 분야·규모별로 비교한 정리가 참고가 됩니다.
• 500건까지 무료로 시험해 볼 수 있어, 결제 전에 흐름이 맞는지 확인할 수 있습니다.
• 도서관 주도의 기관 구독이 가장 효과적인 형태라고 안내하고 있습니다. 기관 구독에는 리뷰·이용자·협력자 수 제한이 없습니다.

약점

• 개인이 사기에는 비쌉니다. 리뷰 1건 요금제가 연 339달러, 리뷰 3건까지가 연 907달러입니다. 학생 개인 예산으로는 부담이 됩니다.
• 무료 플랜이 없습니다. 시험 이용은 500건까지입니다.
• 기능이 많은 만큼 혼자 하는 소규모 리뷰에는 과합니다.

이런 사람에게 맞습니다: 검토자가 셋 이상인 연구팀, 학술지 투고를 전제로 한 정식 체계적 문헌고찰, 그리고 소속 도서관이 이미 기관 구독을 하고 있는 학교의 학생. 결제 전에 도서관에 반드시 문의하세요.

엑셀 — 규모가 작으면 여전히 유효한 선택

도구를 쓰지 않는 선택도 정당합니다. 검색 결과가 몇백 건이고 혼자 선별한다면 스프레드시트 한 장으로 끝날 수 있습니다.

강점

• 비용이 없고 배울 것이 없습니다.
• 제외 사유 항목을 내 연구에 맞게 자유롭게 설계할 수 있습니다.
• 파일이 손에 남습니다. 서비스 정책이 바뀌거나 계정이 만료되어 자료가 잠기는 일이 없습니다.
• 선별 시트를 그대로 논문 부록에 붙일 수 있습니다.

약점

• 중복 제거를 손으로 해야 합니다. 같은 논문이 DB마다 제목 표기가 조금씩 다르게 들어와, 단순 중복 제거 기능으로는 잡히지 않습니다.
• 이중 선별의 독립성을 지키기 어렵습니다. 같은 파일을 보면 서로의 판정이 보이고, 파일을 나누면 합치는 작업이 또 일이 됩니다.
• PRISMA 흐름도의 숫자를 직접 세어야 하고, 숫자가 맞지 않는 사고가 자주 납니다.
• 건수가 1천 건을 넘으면 스크롤과 필터만으로도 지칩니다.

이런 사람에게 맞습니다: 검색 결과 500건 이하, 검토자 1명, 방법론적으로 정식 체계적 문헌고찰까지는 아닌 문헌고찰. 범위 설정 방식은 스코핑 리뷰 설계 가이드를 참고하세요.

이중 선별을 왜 굳이 하는가

혼자 2천 건을 판정하면 뒤로 갈수록 기준이 흔들립니다. 앞의 300건과 뒤의 300건을 같은 잣대로 봤다고 장담하기 어렵고, 심사위원도 그것을 압니다. 두 사람이 독립적으로 판정하면 이 문제가 크게 줄어듭니다.

중요한 것은 독립성입니다. 같은 화면에서 상대의 판정이 보이면 두 번째 사람은 사실상 검토가 아니라 확인을 하게 됩니다. 전용 도구가 값을 하는 지점이 정확히 여기입니다. 판정이 서로 가려진 상태로 진행되고, 끝난 뒤 충돌한 건만 모아 놓고 조정 회의를 합니다.

조정 결과도 기록으로 남겨야 합니다. 몇 건이 충돌했고 어떻게 해결했는지(합의, 제3자 판정 등)를 방법 장에 한두 문장으로 적으면, 선별의 신뢰성에 대한 질문이 대부분 정리됩니다. 검토자가 정말로 한 명뿐이라면 그 사실을 숨기지 말고 한계로 명시하고, 대신 무작위 표본 10퍼센트를 다시 판정해 자기 일치율을 보고하는 방법이 있습니다.

선별에 들어가기 전에 끝내 두어야 할 세 가지

어떤 도구를 쓰든 앞 단계가 부실하면 도구가 구해 주지 못합니다.

1. 검색식을 확정하고 기록하세요. DB별로 어떤 검색어와 연산자를 썼고 몇 건이 나왔는지를 표로 남깁니다. 이 표가 논문의 방법 장에 그대로 들어갑니다. 어느 DB를 어떤 순서로 도는지는 논문 검색 사이트 비교에 정리해 두었습니다.
2. 포함·제외 기준을 문장으로 먼저 쓰세요. 선별을 시작한 뒤에 기준을 바꾸면 앞서 판정한 건들을 전부 다시 봐야 합니다. 연구 대상, 개입, 비교, 결과, 연구설계, 언어, 발행연도를 항목별로 못 박아 둡니다.
3. 예비 선별로 기준을 시험하세요. 무작위로 50건을 골라 두 사람이 각자 판정해 보고 일치율을 확인합니다. 일치율이 낮으면 기준의 표현이 모호한 것이지 사람이 잘못한 것이 아닙니다. 이 예비 단계가 몇 주를 아낍니다.

한국어 문헌을 다룰 때의 주의점

Rayyan과 Covidence 모두 서지 파일을 표준 형식으로 받으므로 국내 DB에서 내보낸 한국어 서지도 올라갑니다. 다만 다음 세 가지는 직접 확인해야 합니다.

• 중복 판정은 눈으로 다시 확인하세요. 자동 중복 탐지는 영문 서지를 전제로 설계되어 있어, 같은 한국어 논문이 DB마다 영문 병기 제목이 다르게 들어오면 별개로 잡힙니다. 반대로 제목이 비슷한 다른 논문이 중복으로 묶이기도 합니다.
• AI 관련성 예측을 과신하지 마세요. 한국어 초록에 대한 예측 정확도는 영문만큼 검증되어 있지 않습니다. 순서를 참고하되 목록 끝까지 판정하는 원칙은 지켜야 합니다.
• 초록이 비어 오는 경우가 있습니다. 국내 DB의 내보내기 형식에 따라 초록 필드가 누락되기도 합니다. 초록 없이 제목만으로 판정하면 놓치는 논문이 생기므로, 업로드 직후 초록 필드가 채워졌는지 표본으로 확인하세요.

상황별 최종 추천

선별 이후 효과크기를 합성하는 단계는 도구가 또 달라집니다. 설계와 절차는 메타분석 연구방법 완전 가이드에 정리되어 있고, 최종 문헌을 논문의 문단으로 배열하는 작업은 문헌고찰 작성법에서 다룹니다. 선별 과정의 메모와 판단 기록을 어디에 남길지 고민이라면 전자연구노트 작성 실전 튜토리얼도 참고할 만합니다.

자주 묻는 질문

Rayyan은 무료로 쓸 수 있나요?

무료 플랜이 있습니다. 다만 제한이 있습니다. 활성 리뷰 3건, 무료 검토자 2명, 표본 생성 1회, 모바일 앱 판정 100건까지이며 PICO 자동 추출 같은 상급 AI 기능은 포함되지 않습니다. 학위논문 한 편의 리뷰 하나를 둘이서 선별하는 규모라면 무료 플랜으로 대개 충분합니다.

Covidence는 얼마인가요?

공식 안내 기준 리뷰 1건 요금제가 연 339달러, 리뷰 3건까지의 요금제가 연 907달러이며 두 요금제 모두 협력자 수는 제한이 없습니다. 기관 단위 구독은 별도 견적입니다. 결제 시점의 환율과 부가세에 따라 실제 원화 금액은 달라집니다. 500건까지 무료로 시험해 볼 수 있습니다.

엑셀로 해도 되나요?

검색 결과가 수백 건 규모이고 혼자 선별한다면 가능합니다. 다만 중복 제거를 손으로 해야 하고, 두 사람이 독립적으로 선별한 뒤 이견을 조정하는 절차를 설계하기 어려우며, PRISMA 흐름도 숫자를 직접 세어야 합니다. 건수가 1천 건을 넘거나 검토자가 둘 이상이면 전용 도구가 확실히 낫습니다.

한국어 문헌도 이 도구들로 선별할 수 있나요?

서지정보를 RIS 형식으로 내보내 올리면 한국어 제목과 초록도 표시됩니다. 다만 AI 관련성 예측과 중복 판정은 영문 서지를 전제로 설계되어 있어 한국어에서는 정확도가 떨어질 수 있습니다. 한국어 문헌은 중복 판정 결과를 반드시 눈으로 다시 확인하세요.

학위논문 한 편에 이 도구가 꼭 필요한가요?

체계적 문헌고찰이나 스코핑 리뷰를 방법론으로 선언했다면 사실상 필요합니다. 선별 과정을 재현 가능하게 기록해야 하고 PRISMA 흐름도를 제시해야 하기 때문입니다. 일반적인 문헌고찰 장을 쓰는 것이라면 참고문헌 관리 프로그램과 엑셀만으로 충분합니다.