턴잇인 AI 점수 해설: 몇 퍼센트부터 높은 걸까?

Turnitin AI 점수는 제출물의 평가 대상 텍스트 중 Turnitin 모델이 AI가 생성했거나, AI가 생성한 뒤 패러프레이저나 우회 도구로 수정되었다고 예측한 부분의 비율입니다. 공식적으로 '너무 높은' 비율은 없습니다. Turnitin은 합격선을 정하지 않고, 1%에서 19%까지는 별표로만 표시하며, 이 점수를 학생에 대한 조치의 유일한 근거로 삼아서는 안 된다고 말합니다. 부정행위를 했을 확률도 아니고, 파일 전체에서의 비율도 아닙니다.

아래 내용은 모두 본문에 링크한 Turnitin의 공개 가이드와 블로그 글에서 가져왔습니다. Turnitin이 수치를 제시한 경우, 그 수치를 인용하고 누가 주장한 것인지 밝힙니다.

퍼센트가 실제로 측정하는 것

Turnitin의 AI 글쓰기 FAQ는 처리 과정을 몇 단계로 설명합니다. 제출물에서 문장을 뽑아 겹치는 구간으로 묶습니다. 탐지 모델이 각 구간에 0에서 1 사이의 값을 매깁니다. 평가 대상 문장은 자신이 속한 구간의 점수를 물려받고, 겹치는 점수는 하나로 합쳐지며, 문장 점수가 모여 화면에 보이는 문서 수치가 됩니다.

1. 산문 추출장문 글의 문단 안에 있는 문장만 평가 대상 텍스트로 칩니다.
2. 겹치는 구간으로 분할문장을 겹치는 구간으로 묶어 각 문장을 맥락 속에서 판단합니다.
3. 구간별 점수 매기기모델이 모든 구간에 0에서 1 사이의 값을 매깁니다.
4. 문장 점수 합치기문장이 구간 점수를 물려받고, 겹치는 점수는 하나로 합쳐집니다.
5. 비율 보고지표는 평가 대상 텍스트 중 AI 생성 또는 AI 수정으로 예측된 비율을 보여 줍니다.

결과를 읽을 때 중요한 세부 사항이 두 가지 있습니다. 첫째, '평가 대상 텍스트'는 산문 문장을 뜻합니다. 글머리 기호 목록, 표, 코드, 시, 대본, 주석 달린 참고문헌 목록은 제대로 평가되지 않으며, Turnitin은 참고문헌을 제외합니다. 퍼센트가 강조된 텍스트의 양과 어긋나 보일 수 있는 이유입니다. 둘째, AI 점수와 유사도 점수는 별개입니다. 유사도가 높다고 AI를 썼다는 뜻이 아니고, 낮다고 가능성이 배제되는 것도 아닙니다.

Turnitin의 모델 릴리스 노트에 따르면, 2024년 7월 업데이트 이후 리포트는 합계를 범주별로 나누어 보여 주며, 2025년 8월부터는 'AI 생성만' 범주에 AI 우회 도구를 거친 것으로 예측된 텍스트도 포함됩니다. 패러프레이즈 및 우회 도구 탐지는 영어 제출물에만 적용됩니다.

지표 상태 읽기

Using the AI Writing Report 가이드는 교수자가 볼 수 있는 상태를 나열합니다. 가장 혼란스러운 것은 별표입니다.

2024년 7월 이전에 생성된 리포트에는 여전히 20% 미만의 숫자가 보일 수 있습니다. 예컨대 12%가 적힌 오래된 리포트를 보고 있다면, 현재 규칙에서는 그 숫자가 *%로 가려졌을 것입니다.

점수에 영향을 주는 파일 요건

영어 제출물이 점수를 받으려면 Turnitin이 제시한 요건을 충족해야 합니다. 장문 형식의 산문이 최소 300단어, 최대 30,000단어여야 하고, 파일은 100MB 미만이며, .docx, .pdf, .txt, .rtf 중 하나여야 합니다. 장문 스페인어, 일본어, 현대 아랍어는 별도의 모델과 FAQ 페이지가 있습니다.

길이는 사소한 문제가 아닙니다. Turnitin의 FAQ에 따르면 몇백 단어짜리 문서에서는 모델이 겹침 없이 구간 하나만 평가하므로, 예측이 대체로 '전부 아니면 전무'가 됩니다. 직접 쓴 문장과 AI로 다듬은 문단이 섞인 짧은 성찰문이 통째로 표시되어 돌아올 수 있습니다. Turnitin은 2023년 12월 릴리스 노트에서도 텍스트가 조금만 길어져도 정확도가 올라간다고 밝혔습니다.

오탐에 대한 Turnitin의 설명

Turnitin은 AI 글이 20% 이상인 문서에서 문서 단위 오탐률이 1% 미만이라고 밝힙니다. Turnitin의 표현대로라면 사람이 쓴 문서 100개 중 하나가 표시될 수 있다는 뜻입니다. 회사는 모델을 업데이트할 때마다 ChatGPT 출시 전에 쓰인 학술 논문 70만 편 이상으로 이를 확인한다고 말합니다.

문장 단위는 이야기가 다릅니다. 2023년 6월 글에서 Turnitin의 최고제품책임자는 문장 단위 오탐률을 약 4%로 제시했고, 잘못 표시된 문장의 54%가 실제 AI 글 바로 옆, 흔히 사람과 AI 구간이 바뀌는 지점에 있었다고 밝혔습니다. Turnitin은 또한 일반적인 서론과 결론이 자리하는 문서의 처음과 마지막 몇 문장에서 오탐이 더 많았으며, 이를 줄이기 위해 2023년 5월에 로직을 바꿨다고 밝혔습니다.

Turnitin은 자신이 택한 상충 관계를 숨기지 않습니다. 오탐을 낮게 유지하려고 일부 AI 텍스트를 놓치는 것을 감수합니다. FAQ는 50%로 평가된 문서에 AI 글이 65%까지 들어 있을 수 있다는 예를 듭니다. 설계 자체가 덜 잡아내는 쪽으로 기울어 있습니다.

AI 비율이 몇 퍼센트면 너무 높은 걸까?

Turnitin은 허용 가능한 AI 비율을 공개하지 않습니다. 리포트에 들어 있는 유일한 기준선은 20%입니다. 1%에서 19%까지는 별표로 나오는데, Turnitin은 이 구간에서 오탐이 더 잦다고 설명합니다. 그 이상에서 무엇이 너무 높은지는 수업, 학과, 학술지가 정하며, 아무도 정하지 않은 경우도 있습니다. 국내 대학에서 카피킬러의 AI 작성률을 쓰는 경우도 마찬가지로 기준은 학교 정책에 달려 있습니다.

숫자를 아예 쓰지 않기로 한 대학도 있습니다. Vanderbilt는 2023년 8월 Turnitin AI 탐지기를 비활성화했습니다. 2022년에 Turnitin에 제출한 논문이 75,000편이었으므로, 오탐률 1%라도 약 750편이 일부 AI 작성으로 잘못 표시될 수 있었다는 설명입니다.

그러니 어떤 비율이든 맥락 속에서 읽으세요.

• 20%를 살짝 넘는 점수는 Turnitin 스스로 오탐이 더 많다고 보는 구간 바로 옆에 있습니다.
• 최소 기준인 300단어 근처의 짧은 파일은 거의 한 덩어리로 채점되므로 비율이 더 크게 흔들릴 수 있습니다.
• 어떤 숫자가 무엇을 뜻하는지는 탐지기가 아니라 적용되는 정책이 정합니다. 정책이 불분명하다면 서면으로 요청하세요.

점수가 알려 주지 않는 것

• 누가 썼는지. 모델은 단어 확률의 패턴을 예측할 뿐입니다. 초안, 메모, 들인 시간에는 접근하지 못합니다.
• 의도나 정책 준수 여부. 많은 수업과 학술지가 어느 정도의 AI 도움을 허용합니다. 퍼센트로는 사용이 허용된 범위였는지 교수자가 알 수 없습니다.
• 문서 전체에서의 비율. 목록, 표, 참고문헌은 빠지므로, 평가 대상 텍스트의 40%가 긴 파일에서는 작은 부분일 수 있습니다.
• 고정된 진실. Turnitin은 2025년 10월과 2026년 2월에 모델을 업데이트했습니다. 오래된 리포트는 다시 계산되지 않지만, 다시 제출한 파일은 현재 모델로 평가되므로 결과가 달라질 수 있습니다.

Turnitin의 FAQ는 잘못 읽히기 쉬운 사람의 글 유형도 나열합니다. 구조적 변화가 적은 글, 같은 말을 반복하는 글, 새로운 생각을 전개하지 않는 바꿔 쓰기입니다. 정형화된 학술 문장과 크게 겹치는 특징이며, 이 패턴은 격식 있는 글이 AI가 쓴 글처럼 보이는 이유에서 다룹니다. 독립 연구는 우려를 하나 더합니다. 2023년의 한 연구는 여러 탐지기가 비원어민의 영어 에세이를 높은 비율로 잘못 분류한다는 것을 발견했습니다. Turnitin은 이 편향을 줄이기 위해 제2 언어 필자의 글을 학습 데이터에 포함했다고 밝힙니다.

학생과 연구자는 어떻게 읽어야 할까

Turnitin이 교수자에게 주는 안내는 점수를 결론이 아니라 대화를 여는 하나의 자료로 다루라는 것입니다. 같은 관점을 쓰시면 됩니다.

• 숫자만이 아니라 리포트를 요청하세요. 학생은 기본적으로 AI 지표를 볼 수 없고, 교수자가 내려받아 공유할 수 있습니다. 강조된 문장이 대표 수치보다 훨씬 많은 것을 알려 줍니다.
• 길이와 형식을 확인하세요. 320단어짜리 답안은 최소 기준에 가까워 거의 한 덩어리로 평가됩니다. 글머리 기호가 많은 문서는 평가 대상 텍스트가 적을 수 있습니다.
• 강조 표시가 어디에 몰렸는지 보세요. 서론과 결론, 또는 정형화된 연구 방법 문구에 몰려 있다면 짚어 둘 가치가 있습니다. 참고문헌이나 인용문에 표시됐다면 턴잇인이 참고문헌과 인용을 AI로 표시하는 이유를 참고하세요.
• 작업 과정을 보여 주세요. 버전 기록과 메모는 어떤 두 번째 탐지기보다 무게가 있습니다. AI로 잘못 판정받았을 때 대처법에서 단계별로 안내합니다.
• 적용되는 규칙을 알아 두세요. 무엇이 허용되었는지는 수업과 학술지의 AI 정책이 정합니다. 점수가 정하지 않습니다.

학술지에 투고하는 연구자라면 출판사가 대학과 다른 검사를 할 수 있고, AI 지원 글쓰기의 공개 규정도 출판사마다 다르다는 점을 기억하세요. 제출 전에 정책을 읽는 편이 나중에 해명하는 것보다 훨씬 수월합니다.

Academic Humanizer의 역할

Academic Humanizer는 자신의 논증이 기계가 쓴 글로 읽히는 연구자를 위해 만들어졌습니다. AI 탐지 리포트는 원고의 어느 부분이 AI로 읽히는지 문장 단위로 보여 주고 초안과 수정본을 같은 기준으로 비교하며, 제품은 Turnitin, GPTZero, ZeroGPT, Copyleaks, Sapling, Originality.ai로 검증합니다. Humanizer는 표시된 문장만 고쳐 쓰고 다른 문장은 쓰신 그대로 둡니다. 어떤 도구도 특정 Turnitin 리포트의 결과를 약속할 수는 없으므로, 최종 확인과 무엇을 공개할지에 대한 결정은 여러분의 몫입니다. 리포트의 작동 방식은 AI 탐지 리포트 해설을 참고하세요.