Limitations 섹션, 어떻게 써야 신뢰를 잃지 않을까

Limitations 섹션, 어떻게 써야 신뢰를 잃지 않을까

ByEditverse Korea Editorial Team

Discussion을 쓰다 보면 Limitations 문단에서 손이 멈춘다. 약점을 솔직하게 쓰면 심사위원에게 거절할 이유를 건네주는 것 같고, 짧게 쓰면 “한계를 충분히 논의하지 않았다”는 지적이 돌아온다. 그래서 많은 원고가 “표본 수가 작았다”, “단일 기관 연구였다”, “향후 대규모 연구가 필요하다”라는 세 문장으로 이 문단을 채운다. Ioannidis가 주요 저널 논문을 분석한 결과를 보면 이 문제는 국내만의 것이 아니다.[2] 이 글은 Limitations를 “변명”이 아니라 “해석의 지침”으로 쓰는 방법을 보고 지침과 방법론 문헌을 근거로 정리한다.

한눈에 보는 핵심 요약

  • 2005년 주요 저널 논문을 분석한 연구에서 한계를 뜻하는 단어를 한 번이라도 쓴 논문은 17%였고, 별도의 Limitations 섹션을 둔 논문은 다섯 편뿐이었다.[2]
  • STROBE 항목 19는 잠재적 편향과 부정확성의 원인을 고려해 한계를 논의하고, 편향의 방향과 크기를 모두 논의하라고 요구한다.[5]
  • CONSORT 2025 항목 30은 편향, 부정확성, 일반화 가능성, 그리고 해당하는 경우 다중 분석을 다루도록 한다.[6]
  • 좋은 한계 서술은 한계를 밝히고, 그 함의를 설명하고, 가능한 대안을 제시하고, 완화를 위해 취한 조치를 설명하는 네 요소로 이루어진다.[4]

왜 Limitations가 신뢰를 만드는가

Ioannidis는 2005년에 가장 많이 인용되는 연구 저널 여섯 곳과 새로 창간된 오픈액세스 저널 두 곳에서 처음 출판된 50편씩의 논문 전문을 검토했다. 그 결과 연구 자체의 한계를 뜻하는 단어를 한 번이라도 쓴 논문은 67편(17%)이었고, 초록에 “limitation”이라는 단어를 쓴 논문은 네 편(1%), 별도의 Limitations 섹션을 둔 논문은 다섯 편이었다.[2] 저자는 한계를 인정한다는 것이 오류의 크기와 방향을 나열하는 데서 끝나지 않고, 그 오류가 발표된 결과에 어떤 의미와 영향을 주는지 해석하는 일이라고 강조했다.[2]

Puhan 등은 출판 문화 속에서 많은 저자가 한계에 대한 “완전한 정직”과 출판 가능성 사이에서 균형을 잡고 있을 것이라고 지적하며, 한계가 연구 결과와 해석에 어떤 영향을 줄 수 있는지를 솔직하게 논의하는 논문이 의학 문헌에 너무 적다고 평가했다.[3] 심사위원 입장에서 생각하면 이유가 분명하다. 심사위원은 이미 원고의 약점을 찾아냈거나 찾아낼 것이다. 저자가 먼저 그 약점을 정확히 짚고 결과에 미치는 영향을 평가해 두면, 심사위원은 “저자가 자기 데이터를 이해하고 있다”는 인상을 받는다. 반대로 명백한 약점이 Limitations에 빠져 있으면 다른 서술 전체의 신뢰도가 떨어진다.

보고 지침은 무엇을 요구하나

관찰연구 보고 지침인 STROBE 항목 19는 “잠재적 편향 또는 부정확성의 원인을 고려하여 연구의 한계를 논의하라. 잠재적 편향의 방향과 크기를 모두 논의하라”고 요구한다.[5] 이어지는 항목 20은 목적, 한계, 다중 분석, 유사 연구의 결과와 기타 근거를 고려해 신중한 전반적 해석을 제시하라고 한다.[5] 즉 한계는 해석과 분리된 부록이 아니라 해석의 재료다.

무작위배정 임상시험의 CONSORT 2025는 항목 30에서 시험의 한계를 “잠재적 편향의 원인, 부정확성, 일반화 가능성, 그리고 해당하는 경우 다중 분석”을 다루며 서술하도록 한다. CONSORT 2025에서는 이전 판의 일반화 가능성 항목이 삭제되고 이 한계 항목으로 통합됐다.[6] ICMJE 권고안도 Discussion에서 연구의 한계를 밝히고, 향후 연구와 임상·정책에 대한 함의를 탐색하라고 명시한다.[1]

한계 하나를 제대로 쓰는 네 단계

Ross와 Bibler Zaidi는 많은 저자가 한계를 일반적인 표현으로 나열하는 데 그친다고 지적하고, 의미 있는 한계 서술은 잠재적 한계를 설명하고, 그 함의를 설명하고, 가능한 대안적 접근을 제시하고, 한계를 완화하기 위해 취한 조치를 설명해야 한다고 제안했다.[4] 이를 한 문단 안에서 순서대로 적용하면 다음과 같다.

  1. 무엇이 한계인가 — 유형(설계, 표본, 측정, 분석)과 발생 지점을 구체적으로 밝힌다.
  2. 결과에 어떤 영향을 주는가 — 추정치를 과대 또는 과소평가하게 만드는 방향인지, 정밀도만 낮추는지, 적용 범위를 제한하는지 쓴다. STROBE가 요구하는 “방향과 크기”가 여기에 해당한다.[5]
  3. 다르게 했다면 — 이상적인 설계나 자료가 무엇이었을지 제시한다. 후속 연구 제안은 여기서 구체성을 얻는다.
  4. 무엇으로 완화했는가 — 민감도 분석, 보조 분석, 검증된 측정 도구, 외부 자료와의 비교 등 이미 취한 조치와 그 결과를 쓴다.

흔한 한계 표현과 고쳐 쓴 예시

표 1. 일반적 한계 서술을 구체적 서술로 바꾸기 (예시 문장은 설명용 가상 사례)
한계 유형 흔한 서술 구체적 서술 (방향·크기·완화 포함)
표본 크기·검정력“The sample size was small.”“With 84 participants, the study had limited power to detect differences smaller than the prespecified minimal important difference; the wide confidence interval for the secondary outcome (…) is compatible with both a modest benefit and no effect.” — 어떤 결론이 불확실한지, 어느 방향으로 불확실한지를 밝힌다
선택편향“Selection bias may exist.”“Participants were recruited from a single tertiary hospital, where patients tend to have more advanced disease; the observed association may therefore overestimate the effect in primary-care populations.” — 편향의 방향을 제시한다
잔여 교란“Residual confounding cannot be ruled out.”“Smoking intensity and physical activity were not recorded in the claims data. Because both are associated with the exposure and the outcome, residual confounding would likely bias the estimate away from the null; a sensitivity analysis (…) suggested that …” — 빠진 변수를 구체적으로 열거하고 완화 노력을 덧붙인다
측정·오분류“There may be measurement errors.”“Depression was identified by diagnostic codes rather than structured interviews. Non-differential under-ascertainment would tend to attenuate the association toward the null.” — 오분류가 차등적인지 비차등적인지와 그 결과를 쓴다
일반화 가능성“Our results may not be generalizable.”“All participants were Korean adults aged 40 years or older; whether the findings apply to younger populations or to health systems with different referral patterns is uncertain.” — 누구에게까지 적용되고 누구에게는 불확실한지 경계를 긋는다
다중 분석(언급 없음)“We examined six secondary outcomes without adjustment for multiplicity; these findings should be regarded as exploratory.” — CONSORT 2025 항목 30이 관련 있는 경우 명시하라고 요구하는 요소다

구성 원칙은 STROBE 항목 19, CONSORT 2025 항목 30, Ross와 Bibler Zaidi의 네 요소를 근거로 했다.[5][6][4] 표 작성: Editverse.

Limitations 문단의 위치와 분량

대부분의 저널은 Discussion 안에서 주요 결과 요약과 선행연구 비교 뒤, 결론 앞에 한계를 두는 흐름을 쓴다. 별도의 소제목(Strengths and limitations)을 요구하는 저널도 있으므로 목표 저널의 투고 규정과 최근 게재 논문을 함께 확인한다. 분량은 한계의 개수보다 중요도로 정한다. 결론을 실제로 바꿀 수 있는 한계 두세 가지를 깊게 쓰고, 영향이 미미한 한계는 한 문장으로 묶는 편이 낫다. Ross와 Bibler Zaidi도 중복되거나 무관한 한계를 넣는 것은 제한된 분량을 비효율적으로 쓰는 일이라고 지적했다.[4]

피해야 할 서술 습관

  • “향후 대규모 연구가 필요하다”로 끝내기 — 어떤 설계로, 어떤 집단에서, 무엇을 측정해야 하는지가 빠지면 후속 연구 제안으로서 정보가 없다.
  • 한계를 쓰고 바로 부정하기 — “단일 기관 연구였으나 결과는 일반화 가능할 것이다”처럼 근거 없이 상쇄하면 오히려 신뢰를 잃는다. 근거가 있다면 그 근거(외부 자료와의 기저 특성 비교 등)를 제시한다.
  • 관찰연구에서 인과 추론의 한계를 빠뜨리기 — Ross와 Bibler Zaidi는 관찰연구가 인과를 귀속할 수 없다는 설계상의 근본적 한계를 독자에게 상기시키지 않는 경우가 많다고 지적했다.[4]
  • Results에서 보여주지 않은 분석을 한계에서 처음 언급하기 — 민감도 분석으로 완화했다고 쓰려면 그 결과가 Results나 보충자료에 있어야 한다.

투고 전 Limitations 체크리스트

  • 결론을 바꿀 수 있는 주요 편향(선택, 정보, 교란)을 각각 검토했는가[5]
  • 각 편향이 추정치를 어느 방향으로 움직일지, 대략 어느 정도일지 서술했는가[5]
  • 정밀도(신뢰구간 폭) 문제와 편향 문제를 구분해서 썼는가[6]
  • 결과를 적용할 수 있는 집단과 불확실한 집단의 경계를 밝혔는가[6]
  • 사전에 계획하지 않은 분석이나 여러 이차 결과를 탐색적이라고 명시했는가[6]
  • 한계마다 함의, 대안, 완화 조치를 함께 썼는가[4]
  • 결론 문장의 강도가 한계 서술과 모순되지 않는가

자주 묻는 질문

한계를 많이 쓰면 리젝트될 가능성이 높아지나요?

한계의 개수 자체보다 결론이 한계를 넘어서는지가 문제다. 명백한 약점을 숨기는 원고가 심사에서 더 불리하다. 보고 지침이 한계 논의를 필수 항목으로 둔 것도 이 때문이다.[5][6]

“표본 수가 작다”는 한계는 어떻게 써야 하나요?

표본 수 자체보다 그 결과가 어떤 해석을 불확실하게 만드는지를 쓴다. 신뢰구간이 의미 있는 효과와 효과 없음을 모두 포함한다면 그 사실을 밝히는 것이 핵심이다. 사전 표본 크기 계산을 했다면 그 근거도 함께 제시한다. 표본 크기 산정 방법은 표본 크기(Sample Size) 계산 완벽 가이드에서 다룬다.

강점(Strengths)도 같이 써야 하나요?

많은 Discussion이 강점과 한계를 함께 다루지만, 요구 여부와 형식은 저널마다 다르다. 강점을 쓴다면 “대규모 표본”처럼 일반적인 표현보다 이 연구가 선행연구의 어떤 약점을 보완했는지를 구체적으로 쓰는 편이 설득력 있다.

심사위원이 새로운 한계를 지적하면 어떻게 하나요?

타당한 지적이라면 Limitations에 반영하고 답변서에 반영 위치를 명시한다. 추가 분석으로 완화할 수 있다면 그 결과를 함께 제시한다. 답변서 작성은 리뷰어 답변(Response to Reviewers) 작성 가이드를 참고한다.

Discussion과 Limitations, 심사 전에 점검받고 싶다면

Editverse 논문 작성 지원은 해당 분야 박사·의사 출신 전문가와 통계 전문가가 결과 해석, 선행연구 비교, 한계 서술이 서로 모순되지 않도록 Discussion 전체의 논리를 점검합니다. 관찰연구는 STROBE, 임상시험은 CONSORT 기준에 맞춰 누락 항목을 확인하며, 연구윤리는 COPE·ICMJE 기준을 따릅니다.

논문 작성 지원 서비스 보기 →

문의하기 페이지에서 상담 신청 →  또는 [email protected]

마무리

Limitations는 연구의 약점을 고백하는 문단이 아니라, 독자가 결과를 얼마나 믿고 어디까지 적용해도 되는지를 알려주는 문단이다. 편향의 방향과 크기를 밝히고[5], 함의와 대안과 완화 조치를 함께 쓰면[4] 같은 약점이라도 심사위원에게 전혀 다르게 읽힌다. 결과와 해석을 나누어 쓰는 방법, 그리고 제목에서 주장의 강도를 조절하는 방법은 논문 제목(Title) 작성법에서도 다뤘다.

참고문헌

  1. International Committee of Medical Journal Editors. Recommendations — Preparing for Submission: Discussion. icmje.org (2026년 10월 확인)
  2. Ioannidis JPA. Limitations are not properly acknowledged in the scientific literature. J Clin Epidemiol. 2007;60(4):324-329. PMID: 17346604. DOI: 10.1016/j.jclinepi.2006.09.011
  3. Puhan MA, Akl EA, Bryant D, Xie F, Apolone G, ter Riet G. Discussing study limitations in reports of biomedical studies — the need for more transparency. Health Qual Life Outcomes. 2012;10:23. PMID: 22360847. DOI: 10.1186/1477-7525-10-23
  4. Ross PT, Bibler Zaidi NL. Limited by our limitations. Perspect Med Educ. 2019;8(4):261-264. PMID: 31347033. DOI: 10.1007/s40037-019-00530-x
  5. Vandenbroucke JP, von Elm E, Altman DG, et al. Strengthening the Reporting of Observational Studies in Epidemiology (STROBE): explanation and elaboration. PLoS Med. 2007;4(10):e297. PMID: 17941715. DOI: 10.1371/journal.pmed.0040297
  6. Hopewell S, Chan AW, Collins GS, et al. CONSORT 2025 statement: updated guideline for reporting randomised trials. BMJ. 2025;389:e081123. PMID: 40228833. DOI: 10.1136/bmj-2024-081123

이어서 읽기

원고 상담

이 주제로 원고를 준비 중이신가요?

연구 분야와 원고 단계를 남겨 주시면 PhD·MD·통계 전문가가 검토 방향을 이메일로 안내해 드립니다.

  • PhD · 의학박사(MD) · 통계 전문가 · 분야 전문가가 함께 검토
  • 선결제 없이 시작, 첫 초안 확인 후 결제
  • 대학·기관 지침과 COPE·ICMJE 기준 준수, 비밀유지(NDA)
  • 영업일 기준 24시간 이내 이메일 답변

    개인정보처리방침에 동의하며, 보내는 내용이 비밀유지(NDA) 원칙에 따라 처리됨을 확인합니다.

    영업일 기준 24시간 이내 이메일로 답변드립니다 (한국 시간). 선결제는 없습니다. 직접 문의: [email protected]

    Similar Posts