교사를 위한 AI 탐지기: 결과를 공정하게 활용하는 법

탐지기 결과로 뒷받침할 수 있는 것과 없는 것

탐지기는 사람과 기계가 쓴 글에서 학습한 패턴과 텍스트를 비교해 모델 신호를 내놓아요. Textumi는 결과를 ‘사람이 작성’, ‘대부분 사람’, ‘혼합: 사람과 AI’, ‘대부분 AI’, ‘AI 생성’ 다섯 가지 라벨 중 하나로 표시해요.

각 라벨은 글의 문체를 바탕으로 한 추정일 뿐, 누가 썼는지에 대한 결론이 아니에요. ‘사람이 작성’은 사람이 썼다는 것을 확인해 주지 않고, ‘혼합’이나 ‘대부분 AI’는 글의 몇 퍼센트를 기계가 썼는지 보여 주지 않아요. 탐지기는 그런 비율을 측정하지 않아요. 어떤 라벨도 학생이 AI를 썼을 확률이 아니에요.

그러니 ‘사람이 작성’이 누군가의 혐의를 벗겨 주지 않듯, ‘AI 생성’도 누군가의 잘못을 입증하지 않아요.

• 결과는 여러 제출물 가운데 어떤 과제를 더 천천히, 더 꼼꼼히 읽어야 할지 정하는 데 도움이 될 수 있어요.
• 결과는 학생과 이야기를 나눌 때 물어볼 만한 구간을 짚어 줄 수 있어요.
• 결과로 누가 글을 썼는지 확정할 수는 없으며, 감점이나 부정행위 보고의 유일한 근거가 되어서는 안 돼요.
• 학생이 모델 신호에 대해 내용으로 반박할 방법이 없기 때문에, 결과로 이견을 판가름할 수는 없어요.

탐지기는 양쪽 방향으로 틀려요. 사람의 글을 AI로 표시하기도 하고, AI의 글을 놓치기도 해요. 2023년 OpenAI는 정확도가 낮다는 이유로 자체 AI 텍스트 분류기를 철회했어요. 어떤 도구의 결과든 다른 증거와 함께 확인하세요.

공정한 검토는 학생이 어떻게 썼는지에서 시작해요

작성자를 가장 강력하게 보여 주는 증거는 글이 어떻게 만들어졌는지인데, 탐지기는 그 과정을 전혀 보지 못해요. 제출물이 마음에 걸린다면 판단을 내리기 전에 다음 단계를 밟아 보세요.

1. 먼저 직접 과제를 읽고 이상해 보이는 점을 적어 두세요. 문체가 갑자기 바뀌는 부분, 존재하지 않는 참고 자료, 수업에서 다룬 적 없는 주장 같은 것들이요.
2. 같은 학생의 이전 과제, 가능하면 수업 시간에 쓴 글과 어휘, 문장 길이, 자주 하는 실수를 비교해 보세요.
3. 초안, 메모, 개요를 요청하세요. 온라인 편집기에서 쓴 문서에는 대개 몇 시간이나 며칠에 걸쳐 글이 늘어나는 모습을 보여 주는 버전 기록이 남아 있어요.
4. 학생과 따로, 비난하지 않는 태도로 이야기하세요. 논지를 설명하거나, 참고 자료를 어떻게 찾았는지 말하거나, 왜 문단을 그렇게 구성했는지 이야기해 달라고 해 보세요.
5. 무엇을 살펴보았고 무엇을 발견했는지, 학생에게 유리한 점까지 포함해 기록해 두세요.
6. 기관의 절차를 따르고, 탐지기 결과 하나가 아니라 모든 증거를 함께 놓고 결정하세요.

초안을 보여 주고 과제에 대해 자세히 이야기할 수 있는 학생은 탐지기가 던진 질문에 이미 답한 셈이에요. 그렇지 못하다면 다른 대화가 이어질 수 있지만, 그때도 결론은 탐지기의 라벨이 아니라 그 대화와 초안에 근거해야 해요.

짧은 답안과 비원어민 학생은 더 신중하게 봐야 해요

짧은 글은 탐지기가 판단할 근거가 거의 없어요. Textumi는 5단어부터 글을 받지만, 50단어 미만이면 라벨 대신 ‘판단하기에는 텍스트가 너무 적어요’라고 표시하며, 그보다 조금 긴 답안도 완성된 에세이보다 결과의 신뢰도가 낮아요. Textumi는 50단어 이상인 문단만 개별적으로 평가하기 때문에, 한 문단짜리 답안이나 토론 게시글은 탐지기로 판단하기에 너무 빈약해요.

모국어가 아닌 언어로 글을 쓰는 학생은 더 자주 잘못 표시돼요. 2023년 스탠퍼드 대학교 연구진은 탐지기가 영어 원어민보다 비원어민이 쓴 에세이를 더 자주 AI 생성으로 판정한다는 사실을 발견했어요. 어휘가 적고 문장이 규칙적이면 모델에게는 예측 가능하게 보이는데, 탐지기는 바로 그 예측 가능성을 기계가 쓴 글의 특징으로 읽어요.

실험 보고서나 요약문처럼 틀이 정해진 장르, 번역되었거나 많이 편집되었거나 일부를 다른 사람의 도움을 받아 쓴 글의 결과도 똑같이 신중하게 읽으세요.

언어도 중요해요. Textumi의 영어와 우크라이나어 탐지기가 가장 철저하게 검증되었어요. 나머지 열여덟 개 언어는 더 좁은 범위의 텍스트로 학습하고 테스트했어요. 프랑스어, 베트남어, 튀르키예어, 인도네시아어, 네덜란드어 탐지기는 다른 장르의 AI 글을 자주 놓치므로, 이 언어에서 나온 ‘사람이 작성’이나 ‘대부분 사람’ 결과는 알려 주는 것이 별로 없어요.

AI와 탐지에 관한 간단한 수업 정책

학생들은 첫 과제 전에 규칙을 알고 있을 때 더 잘 대처해요. 기관의 규정에 맞춘 한 페이지 분량의 안내로 다음 내용을 다룰 수 있어요.

• 수업에서 허용되는 AI 사용과 허용되지 않는 AI 사용이 무엇인지, 그리고 그 기준이 과제마다 달라지는지 알려 주세요.
• 허용된 AI 도움을 학생이 어떻게 밝혀야 하는지 정해 주세요. 예를 들어 과제 끝에 짧은 메모를 붙이는 방식이 있어요.
• 최종 성적이 나올 때까지 초안, 메모, 버전 기록을 보관해 달라고 요청하고, 그 이유도 함께 설명해 주세요.
• 탐지기를 쓸 수 있다는 것, 그 결과는 증거가 아니라 신호라는 것, 결과 하나만으로 불이익을 주지 않는다는 것을 밝혀 두세요.
• AI로 표시된 뒤에 무슨 일이 일어나는지 알려 주세요. 따로 대화하고, 초안을 살펴보고, 우려가 남을 때만 공식 절차로 넘어간다는 식으로요.
• 잘못 표시되었다고 생각하는 학생이 어떻게 이의를 제기하거나 재심을 요청할 수 있는지 안내해 주세요.

Textumi에서 텍스트를 확인하는 방법

1. Textumi 계정에 로그인하고 작업 공간을 연 다음 AI 탐지기를 고르세요.
2. 텍스트를 붙여 넣거나 최대 10MB의 DOCX, PDF, ODT, RTF, TXT, MD 파일을 가져오세요. PNG나 JPEG 형식의 스크린샷이나 사진 속 텍스트도 인식할 수 있지만, 검사하기 전에 꼭 검토하세요.
3. 언어는 자동 감지로 두거나, 글이 짧거나 여러 언어가 섞여 있다면 직접 고르세요.
4. ‘텍스트 분석’을 누르세요. 한 번의 검사에는 최대 12,000자까지 넣을 수 있으니, 긴 과제는 나눠서 확인하세요.
5. 원문 옆에 표시된 라벨과 강조 표시된 문단을 살펴보세요. 긴 글에서는 강조 표시가 모든 문단을 다루지는 않아요.

탐지기는 Textumi가 직접 개발했어요. 모델을 직접 만들고 조정했으며, 검사는 텍스트를 외부 AI 제공업체에 넘기지 않고 자체 서버에서 실행돼요. 웹 작업 공간에서, 개인 및 프로페셔널 요금제라면 macOS 앱에서, 또는 Textumi 커넥터를 통해 AI 어시스턴트와의 대화 안에서 바로 쓸 수 있어요. 저희는 탐지기를 꾸준히 개선하고, 일상적인 작업을 더 쉽게 해 주는 도구를 정기적으로 추가하고 있어요.

확인할 수 있는 단어 수는 요금제에 따라 달라요. 요금제별 사용 한도는 모두 요금제 페이지에서 볼 수 있어요. 개인 및 프로페셔널 요금제에서는 결과가 나만 볼 수 있는 기록에 30일 동안 남고, 그 전에 삭제할 수도 있어요. 기록이 없는 요금제에서는 결과가 나온 뒤 약 한 시간 동안 열 수 있고, 그 뒤에는 볼 수 없으며 7일 안에 삭제돼요.

AI 탐지기 열기요금제 비교개인정보 처리방침