Turnitin AI Score란 무엇이며 투고 전 확인해야 하는 이유

2026년 6월, 세계 최고 권위의 인공지능 학회 NeurIPS는 포지션 논문 트랙에 제출된 969편 중 178편을 AI 탐지 도구 하나의 판정만으로 이의제기 기회조차 주지 않고 데스크 리젝트했다. 담당 위원회가 텍스트 판독 구간의 설정값을 바꾸자, AI 점수 90~100%로 판정된 논문의 비율은 42.7%에서 12.7%로 하룻밤 사이 30%포인트 넘게 요동쳤다.^[1] 이 사건은 세계 최상위 학술 커뮤니티조차 AI 탐지 점수 하나를 놓고 아직 명확한 기준을 세우지 못했다는 사실을 보여준다.

이런 흐름 속에서 많은 대학과 학술지가 표절 검사 도구로 익숙한 Turnitin AI Score를 원고 심사 단계에 함께 들여다보고 있다. Turnitin AI Score란 제출된 원고에서 대형언어모델(LLM)이 작성한 것으로 통계적으로 추정되는 문장의 비율을 백분율로 표시하는 지표다. SCI·SCIE·Scopus 저널에 투고하거나 학위논문을 제출하는 한국 연구자라면, 이 점수가 정확히 무엇을 의미하고 투고 전에 왜 반드시 확인해야 하는지 알아둘 필요가 있다. 이 글에서는 Turnitin의 공식 자료와 국제 학술 기구의 정책을 근거로, Turnitin AI Score의 작동 원리와 투고 전 실전 체크리스트를 정리한다.

Turnitin AI Score란 정확히 무엇인가

Turnitin AI Score는 제출된 원고 전체에서 “GPT 계열 대형언어모델이 생성했을 가능성이 높다”고 판단되는 문장의 비율을 0~100% 사이 숫자로 표시한다. 리포트는 이를 다시 두 항목으로 나눈다. 하나는 AI가 생성한 것으로만 판정된 텍스트이고, 다른 하나는 AI가 생성한 뒤 패러프레이징 도구로 다시 다듬어진 것으로 추정되는 텍스트다.^[2] 즉 AI로 초안을 쓴 뒤 문장만 손질하는 방식으로는 탐지를 피하기 어렵도록 설계되어 있다.

몇 가지 실무적으로 중요한 조건이 있다. 판정 대상 원고는 최소 300단어 이상이어야 하며, 3만 단어를 넘는 원고는 정확도가 보장되지 않는다.^[2] 또한 AI 판정 비율이 20% 미만인 경우, Turnitin은 구체적인 숫자 대신 별표(*%)만 표시한다. 오탐 가능성이 큰 낮은 구간에서 부정확한 숫자를 그대로 노출하지 않기 위한 설계다.^[2] 리포트에 “*%”라고만 뜬다면 20% 미만이라는 뜻이지, 0%라는 의미는 아니라는 점을 기억해야 한다.

언어 범위도 확인해 둘 필요가 있다. Turnitin은 영어·스페인어 원고에 대해서는 GPT-3.5, GPT-4, GPT-4o 계열까지 탐지하도록 학습되어 있고, 일본어 원고는 GPT-4·GPT-4o 계열까지만 다룬다.^[2] 한국어는 이 목록에 없다. 따라서 국내 학술지가 아닌 SCI·SCIE·Scopus 국제 학술지에 투고하는 원고라면, 실제로 점수가 매겨지는 대상은 한국어 초고가 아니라 최종적으로 제출하는 영문 원고 그 자체라는 점이 중요하다.

표 1. Turnitin AI Score 구간별 의미

리포트 표시	의미	비고
0%	AI 생성으로 추정되는 문장 비율이 0%로 계산됨	실제 AI 작성 문장이 있어도 놓치는 미탐(false negative) 가능성은 별도로 존재
*% (별표)	AI 판정 비율 20% 미만 구간	정확도가 낮아 구체적 수치 대신 별표로만 표시
숫자로 표시(예: 45%)	AI 판정 비율이 20% 이상인 경우에만 구체적 숫자로 표시	–
“AI-generated only” 항목	원문 그대로 LLM이 생성한 것으로 추정되는 비율	–
“AI-generated & AI-paraphrased” 항목	LLM 생성 후 패러프레이징 도구로 재가공된 것으로 추정되는 비율	–

출처: Turnitin Guides, “AI writing detection model.”^[2]

표절(유사도) 검사, 아이센티케이트, AI Score — 헷갈리기 쉬운 세 가지 구분하기

한국 대학원생 대다수는 “턴잇인”이라는 이름을 학위논문 표절 검사, 즉 유사도(Similarity) 검사로 먼저 접한다. 그런데 Turnitin AI Score는 이 유사도 검사와 계산 방식 자체가 다르다. 유사도 검사는 제출 원고의 문장이 기존에 발표된 문헌·웹페이지와 얼마나 겹치는지 대조해 백분율로 보여주는 반면, AI Score는 기존 문헌과의 일치 여부와 무관하게 문장의 통계적 패턴만으로 AI 작성 가능성을 추정한다. 두 점수는 같은 리포트 화면에 나란히 표시되지만 서로 다른 지표이므로, 유사도가 0%라고 해서 AI Score도 낮으리라는 보장은 없다. 국내 대학원별 표절 검사 기준과 통과 절차를 더 자세히 알고 싶다면 학위논문 표절 검사(턴잇인) 기준, 대학원별로 얼마나 다를까 글에서 확인할 수 있다.

또 하나 구분해야 할 개념이 아이센티케이트(iThenticate)다. 이는 같은 회사(Turnitin LLC)가 대학이 아니라 학술지·출판사·연구기관을 대상으로 제공하는 별도 제품으로, 매년 약 1,000만 건의 문서를 검사하는 데 쓰인다.^[3] iThenticate 2.0부터는 기존 유사도 검사에 더해 AI 작성 탐지 기능이 함께 제공된다.^[3] 즉 학위논문 심사 단계에서 접하는 “Turnitin”과 저널 투고 단계에서 편집부가 활용할 수 있는 “iThenticate”는 같은 회사의 탐지 엔진을 기반으로 하지만 별도의 제품이다. 다만 모든 SCI·SCIE 저널이 iThenticate의 AI 탐지 기능을 의무적으로 사용하는 것은 아니며, 저널마다 심사 과정에 이를 반영하는 방식과 비중은 다르다는 점도 함께 알아두는 것이 안전하다.

투고 전 반드시 확인해야 하는 이유 — 실제 사례로 보는 리스크

Turnitin AI Score를 투고 전에 미리 확인해야 하는 이유는 막연한 걱정이 아니라 구체적인 사례와 정책 근거에 바탕을 둔다.

앞서 언급한 NeurIPS 2026 사례가 대표적이다. 대회 측은 Pangram이라는 AI 탐지 도구로 포지션 논문 969편을 선별했고, 그중 273편(28.2%)이 Pangram AI 점수 100%로 판정되었다. 이 가운데 178편(18.4%)은 이의제기 절차 없이 그대로 데스크 리젝트되었고, 123편(12.7%)은 2026년 6월 15일까지 사람이 직접 작성했다는 버전 기록·수정 이력을 제출하지 않으면 탈락하는 조건부 통보를 받았다. 대회 측은 Pangram의 내부·외부 감사 기준 오탐률이 0.1% 미만이라고 밝혔지만, 같은 도구가 이미 동료심사를 통과한 ICLR 2026 논문 중에서도 약 1%를 AI 생성으로 표시했다는 점도 함께 공개했다.^[1] 저널이 아니라 학회 사례이긴 하지만, AI 탐지 점수 하나가 원고의 운명을 좌우할 수 있다는 사실을 가장 최근에, 가장 크게 보여준 사건이다.

정책적인 이유도 있다. ICMJE(국제의학학술지편집인위원회)는 저자가 투고 시 AI 지원 기술 사용 여부를 커버레터와 원고 본문 모두에 공개하도록 요구하며, 공개하지 않을 경우 “시정 조치가 필요하거나 연구 부정행위로 간주될 수 있다”고 명시한다.^[4] COPE(출판윤리위원회) 역시 AI 도구는 결과물에 대한 책임을 질 수 없으므로 저자로 등재될 수 없되, 사용한 경우 Materials and Methods 등에 투명하게 공개해야 한다는 입장이다.^[5] Elsevier는 여기에 한 가지 예외를 명시하는데, 단순 문법·철자 교정에는 별도의 AI 사용 선언이 필요 없다는 것이다.^[6] 즉 원고를 자연스럽게 다듬는 교정 자체가 문제가 되는 것이 아니라, 실질적인 내용 생성을 공개하지 않는 것이 문제가 된다.

마지막으로 한국 연구자에게 특히 중요한 배경도 있다. 스탠퍼드대 연구팀이 2023년 Patterns(Cell Press)에 발표한 연구에 따르면, TOEFL 에세이(비원어민 영어 작성) 91편 중 89편(97.8%)이 GPTZero를 포함한 7개의 범용 AI 탐지기 가운데 최소 하나에서 AI 생성물로 오판되었고, 7개 탐지기 평균 오탐률은 61.22%에 달했다.^[7] 이 연구가 Turnitin을 직접 검증한 것은 아니지만, 문법적으로 정확하고 정형화된 표현을 쓰는 비원어민 영어 작문이 AI 탐지기 전반에서 구조적으로 불리하다는 점을 보여준다. 이 주제를 더 깊이 다룬 내용은 ChatGPT로 쓴 논문, AI 탐지기에 걸릴까? 오탐(False Positive) 피하는 법에서 확인할 수 있다.

Turnitin AI Score, 얼마나 정확할까 — 공식 오탐률과 한계

Turnitin은 자사 AI Score의 정확도 수치를 스스로 공개하고 있다는 점에서 비교적 투명한 편이다. 공식 블로그에 따르면 문서 단위 오탐률, 즉 20% 이상 AI로 판정된 문서 가운데 실제로는 사람이 쓴 문서의 비율은 1% 미만이다.^[8][9] 다만 문장 단위로 좁혀 보면 이야기가 달라진다. Turnitin은 “AI가 작성한 것으로 표시된 특정 문장이 실제로는 사람이 쓴 문장일 확률은 약 4%”라고 공식적으로 밝히고 있으며, 이런 오탐은 사람이 쓴 문장과 AI가 쓴 문장이 섞여 있는 원고에서, 특히 두 문장이 전환되는 경계 지점에서 더 자주 나타난다고 설명한다.^[9]

이 수치가 처음부터 안정적이었던 것은 아니다. Turnitin이 2023년 5월 공개한 자료에 따르면 당시 전체 제출물 중 AI 판정 비율이 20%를 넘는 문서는 9.6%, 80%를 넘는 문서는 3.5%에 불과했다. 회사는 오탐률이 특히 높게 나타났던 문서 서두·말미 문장의 판정 방식을 수정하고, 최소 단어 수 기준을 150단어에서 300단어로 올리는 등 여러 차례 모델을 보완해 왔다.^[10] 이런 이력은 이 지표가 여전히 개선되고 있는 진행형 기술이라는 사실을 보여준다.

Turnitin 스스로도 이 점수의 한계를 명확히 인정한다. 공식 가이드는 “AI Writing 점수는 학생에게 불이익을 주는 유일한 근거로 사용되어서는 안 된다”고 명시하며, 담당자가 전문적인 판단과 맥락을 함께 고려해야 한다고 권고한다.^[2] 원래 교육 현장의 교수자를 대상으로 한 안내지만, 저널 편집자나 학위논문 심사위원에게도 그대로 적용될 수 있는 원칙이다.

표 2. Turnitin이 공식적으로 밝힌 AI Score의 주요 한계

항목	내용	출처
문서 단위 오탐률	20% 이상 AI로 판정된 문서 기준 1% 미만	[8][9]
문장 단위 오탐률	약 4% — 사람·AI 작성 문장이 전환되는 경계에서 특히 빈발	[9]
최소·최대 분량	300단어 미만 또는 3만 단어 초과 원고는 판정 정확도가 보장되지 않음	[2]
언어 범위	영어·스페인어(GPT-3.5/4/4o), 일본어(GPT-4/4o)까지만 학습 — 한국어 미포함	[2]
문서 내 위치	과거 도입부·결론 문장에서 오탐률이 특히 높았던 이력이 있어 판정 방식을 보완	[10]
공식 사용 원칙	“단독 근거로 불이익 조치를 취해서는 안 된다”	[2]

투고 전 체크리스트 — Turnitin AI Score, 이렇게 확인하고 대응하자

지금까지의 내용을 실제 투고 준비 과정에 적용할 수 있는 7단계로 정리했다.

1. 투고 전에 미리, 직접 확인하라. 저널이나 편집부로부터 판정 결과를 처음 통보받는 순간까지 기다리지 말고, 소속 대학 도서관의 Turnitin·iThenticate 접근 권한이나 전문 편집 서비스를 통해 투고 전 원고를 미리 점검한다.
2. 점수 자체보다 리포트를 읽어라. 몇 %인지보다 어떤 문장이 왜 AI 생성으로 표시되었는지 확인하는 것이 실질적인 대응에 더 도움이 된다.
3. 유사도 검사와 AI Score를 분리해서 확인하라. 두 지표는 같은 화면에 있어도 계산 방식이 다르다는 점을 기억하고 각각 따로 점검한다.
4. AI 패러프레이징 도구로 “세탁”하려 하지 마라. Turnitin의 모델은 애초에 AI 생성 후 패러프레이징된 텍스트를 별도 항목으로 잡아내도록 설계되어 있어, 오히려 어색한 문장만 남기고 점수는 낮아지지 않는 경우가 많다.^[2]
5. 초안 작성 이력을 보관하라. Google Docs 버전 기록이나 Word 변경 내용 추적 기능을 켜두면, NeurIPS 사례처럼 사람이 직접 작성했음을 입증해야 하는 상황에서 즉시 근거를 제시할 수 있다.
6. 실제로 AI를 사용했다면 정직하게 공개하라. ICMJE·COPE가 요구하는 대로 사용한 도구명과 용도를 커버레터와 본문에 명시한다. 구체적인 공개 방법은 논문에 AI 사용을 저널에 어떻게 공개해야 할까에서 더 자세히 다룬다.
7. 형식적이고 반복적인 문장은 사람 편집자와 함께 자연스럽게 다듬어라. 오탐 위험을 구조적으로 낮추는 동시에 원고의 가독성 자체를 높이는 방법이다.

자주 하는 실수 3가지

체크리스트 못지않게, 투고를 앞둔 연구자들이 자주 빠지는 착각도 짚어둘 필요가 있다.

첫째, “0%니까 완전히 안전하다”는 착각이다. 0%는 현재 원고에서 AI로 추정되는 문장이 없다는 뜻일 뿐, 이후 원고를 수정하거나 공동 저자가 새 문단을 추가하면 점수는 언제든 달라질 수 있다. 최종 투고본을 기준으로 다시 확인하는 습관이 필요하다.

둘째, “모든 저널의 기준이 같다”는 착각이다. ICMJE·COPE 어디에도 “AI Score 몇 % 이상이면 게재 거부”라는 산업 표준 수치는 없다. 저널마다, 심지어 같은 출판사 안에서도 저널별로 AI 관련 정책과 심사 절차가 다르므로, 투고 규정(Author Guidelines)에서 해당 저널의 AI 정책을 직접 확인하는 것이 가장 정확하다.

셋째, “번역만 하면 검사와 무관하다”는 착각이다. 한국어로 초고를 쓴 뒤 번역기로 옮기는 경우가 많은데, 앞서 살펴본 것처럼 Turnitin이 점수를 매기는 대상은 최종적으로 제출되는 영문 원고 그 자체다. 번역 과정에서 생기는 정형화되고 예측 가능한 문장 패턴은 AI Score뿐 아니라 저널 심사위원의 눈에도 부자연스럽게 읽힐 수 있다.

전문 서비스 안내: 학술 문체 교정

Turnitin AI Score를 둘러싼 불확실성을 근본적으로 줄이는 방법은 탐지기를 속이는 기법이 아니라, 애초에 오탐 소지가 적은 자연스러운 학술 문체로 원고를 다듬는 것이다. Editverse의 학술 문체 교정 서비스는 원고의 의미와 데이터를 그대로 유지하면서 문장을 자연스럽게 다듬어 GPTZero·Turnitin 기준 AI 감지 위험을 낮추는 데 초점을 맞춘 서비스다.

두 상품 모두 학술 문체 교정 페이지에서 구성과 절차를 더 자세히 확인할 수 있다. 투고 마감이 임박했거나 이미 한 차례 AI Score 관련 문의를 받은 원고라면, GPTZero·Turnitin 기준 점검과 결과 리포트가 포함된 프리미엄 등급이 실질적인 안전장치가 되어 줄 수 있다.

마무리: 점수 하나가 아니라 원고 자체를 준비하라

Turnitin AI Score는 원고가 표절되었는지를 판정하는 지표가 아니라, 문장이 통계적으로 AI가 쓴 것처럼 보이는지를 추정하는 별도의 지표다. Turnitin 스스로도 문서 단위 1% 미만, 문장 단위 약 4%의 오탐 가능성을 인정하고 있으며, NeurIPS 2026 사례는 이 불확실성이 실제 심사 결과에 어떤 영향을 줄 수 있는지를 보여주었다. 특히 비원어민 영어로 논문을 쓰는 한국 연구자에게는 이 점수를 투고 전에 미리 확인하고, 리포트를 꼼꼼히 읽고, 작성 이력을 남기고, 실제 AI 사용 여부를 정직하게 공개하는 절차가 그 어느 때보다 중요해지고 있다. 점수 하나에 일희일비하기보다, 원고 자체를 자연스러운 학술 문체로 다듬어 두는 것이 가장 확실한 대비책이다.

---

참고문헌

1. NeurIPS Blog. AI-Generated Papers in the NeurIPS 2026 Position Paper Track. 2026-06-02. blog.neurips.cc
2. Turnitin Guides. AI writing detection model. guides.turnitin.com
3. Turnitin Blog. iThenticate 2.0: Advancing Research Integrity With AI Writing Detection. turnitin.com
4. International Committee of Medical Journal Editors (ICMJE). AI Use by Authors — Recommendations. icmje.org
5. Committee on Publication Ethics (COPE). Authorship and AI tools — Position Statement. publicationethics.org
6. Elsevier. Generative AI policies for journals. elsevier.com
7. Liang W, Yuksekgonul M, Mao Y, Wu E, Zou J. GPT detectors are biased against non-native English writers. Patterns. 2023;4(7):100779. PMID: 37521038. DOI: 10.1016/j.patter.2023.100779
8. Turnitin Blog. Understanding false positives within our AI writing detection capabilities. turnitin.com
9. Turnitin Blog. Understanding the false positive rate for sentences of our AI writing detection capability. turnitin.com
10. K-12 Dive. Turnitin admits there are some cases of higher false positives in AI writing detection tool. k12dive.com