ChatGPT가 쓴 글일까? AI 탐지기가 알려 줄 수 있는 것과 없는 것

탐지기가 읽는 것과 볼 수 없는 것

AI 탐지기는 완성된 텍스트만 읽어요. 누군가의 ChatGPT 대화 기록에 접근할 수 없고, 생성된 텍스트를 모아 둔 보관소도 없으며, 누가 무엇을 입력했는지에 대한 기록도 없어요.

대신 글쓰기 패턴을 봐요. 단어 선택이 얼마나 예측 가능한지, 문장 구조가 얼마나 획일적인지, 상투적인 접속어와 무난한 일반론이 얼마나 자주 나오는지예요. 모델은 사람과 AI가 쓴 대량의 텍스트에서 이런 패턴을 학습한 뒤, 새 텍스트가 각각에 얼마나 들어맞는지 평가해요.

많은 언어 모델이 이런 패턴을 공유해요. 그래서 Textumi 탐지기는 모델 이름을 밝히지 않으며, ChatGPT를 Claude, Gemini 같은 다른 모델과 구별하려 하지도 않아요. 어느 한 모델을 대상으로 따로 테스트하지 않았기 때문에 특정 모델에 대해서는 아무것도 주장하지 않아요.

결국 탐지기가 실제로 답하는 질문은 사람들이 묻는 질문보다 좁아요. 누가 썼느냐가 아니라, 이 표현이 AI가 쓴 글처럼 읽히는지, 그렇다면 어디가 그런지예요.

의심 가는 텍스트를 확인하는 방법

1. 50단어 이상의 온전한 구간을 고르세요. 여러 문단이면 더 좋아요. 문장 하나로는 판단할 근거가 너무 적어요.
2. 인용문, 참고문헌 목록, 제목이나 법적 고지 같은 정형화된 문구는 빼세요. 이런 부분은 글쓴이의 문체에 대해 아무것도 알려 주지 않아요.
3. 검사를 실행하고, 라벨만 보지 말고 표시된 구간과 함께 읽으세요.
4. 탐지기가 보여 주는 내용을 내가 아는 사실과 비교하세요. 글쓴이의 이전 글, 초안, 참고 자료, 텍스트가 만들어진 과정 같은 것들이에요.

Textumi AI 탐지기는 브라우저, macOS 앱, 그리고 내 AI 어시스턴트에서 쓸 수 있어요. 한 번에 최대 12,000자까지 검사하므로, 긴 문서는 나눠서 확인하면 돼요.

고쳐 쓴 글, 바꿔 쓴 글, 번역한 글

사람들이 확인하고 싶어 하는 텍스트는 대부분 챗봇이 내놓은 그대로가 아니에요. 누군가 ChatGPT에 초안을 부탁하고, 문장 몇 개를 고치고, 문법 교정 도구를 거치거나 번역했을 거예요. 이런 단계를 하나씩 거칠 때마다 텍스트는 탐지기가 학습한 패턴에서 멀어져요.

그래서 탐지기는 고쳐 쓴 AI 초안을 놓칠 수 있고, 많이 교정했거나 기계 번역을 거친 사람의 글을 AI로 표시할 수 있어요. 두 실수 모두 흔하며, 어떤 설정으로도 없앨 수 없어요.

혼합 결과는 섞인 작성 과정을 반영하는 경우가 많아요. 사람이 짠 개요에 생성된 문단을 넣었거나, 생성된 초안을 사람이 손으로 다시 쓴 경우예요. 라벨은 텍스트 전체가 어떻게 읽히는지를 나타낼 뿐, 모델이 쓴 부분의 비율을 측정하지는 않아요.

워터마크를 비롯해 통하지 않는 요령들

일부 AI 기업은 생성된 텍스트에 보이지 않는 워터마크를 넣는 실험도 해 왔어요. 예를 들어 Google은 SynthID라는 워터마크를 소개했어요. 이런 워터마크는 만든 회사의 도구로만 읽을 수 있고, 표현을 바꾸거나 번역하면 약해져요. Textumi는 워터마크를 찾지 않고 단어 자체를 읽어요.

그 밖에도 널리 퍼져 있지만 실제로는 통하지 않는 요령들이 있어요.

• ChatGPT에게 이 글을 네가 썼느냐고 묻기. 챗봇은 다른 사람의 대화를 찾아볼 수 없으며, 그렇다고도 아니라고도 똑같이 자신 있게 답할 수 있어요.
• 줄표나 자주 쓰는 단어 세기. 줄표(—), “살펴보겠습니다” 같은 표현, 깔끔한 세 가지 나열은 사람의 글에도 나오며, 습관 하나로는 아무것도 증명되지 않아요.
• 숨은 문자 찾기. 특이한 공백과 보이지 않는 문자는 챗봇만큼이나 복사해 붙여 넣기, 편집기, 키보드에서도 쉽게 생겨요.
• 백분율을 액면 그대로 받아들이기. 어떤 탐지기가 보여 주는 비율이든 모델의 점수일 뿐, 텍스트 중 생성된 부분의 비율이 아니에요.

텍스트를 꼼꼼히 읽고 어떻게 만들어졌는지 묻는 편이 이런 요령보다 훨씬 많은 것을 알려 줘요. 저희가 정리한 신호 목록에서 무엇을 살펴볼 만한지, 그리고 왜 어떤 신호 하나로도 결론을 낼 수 없는지 확인하세요.

AI가 쓴 글 구별법

결과를 읽는 방법

Textumi는 ‘사람’에서 ‘AI’까지 이어지는 게이지 위에 바늘을 놓고, 결과를 ‘사람이 작성’, ‘대부분 사람’, ‘혼합: 사람과 AI’, ‘대부분 AI’, ‘AI 생성’의 다섯 가지 라벨 중 하나로 나타내요.

각 라벨은 텍스트의 문체를 바탕으로 한 추정이에요. ‘AI 생성’은 표현이 AI가 쓴 글과 많이 닮았다는 뜻일 뿐, ChatGPT나 다른 모델이 썼다는 증거가 아니에요. 마찬가지로 ‘사람이 작성’도 사람이 썼다는 증거가 아니에요.

50단어 미만의 텍스트에는 라벨 대신 ‘판단하기에는 텍스트가 너무 적어요’가 표시돼요. 문장 몇 개로는 어떤 언어에서든 안정적인 결과를 내기에 근거가 너무 적어요.

계정이 있으면 결과에 가장 큰 영향을 준 구간도 볼 수 있어요. 긴 텍스트에서는 50단어 이상인 문단을 최대 세 개까지 따로 검사해 표시해요. 뻔한 문단 하나가 전체 결과를 좌우할 수 있으니 이 구간부터 살펴보세요.

사람이 쓴 글이 AI로 표시되는 이유AI 탐지기의 작동 방식

ChatGPT나 Claude 안에서 텍스트 확인하기

어차피 AI 어시스턴트로 작업한다면 대화를 떠나지 않고도 검사할 수 있어요. Textumi는 Claude, ChatGPT를 비롯해 MCP를 지원하는 어시스턴트와 연결돼요. MCP는 어시스턴트가 외부 도구를 쓰는 표준 방식이에요.

Textumi를 연결한 뒤 어시스턴트에게 Textumi로 텍스트를 확인해 달라고 요청하세요. 어시스턴트가 텍스트를 Textumi 탐지기로 보내고, 0에서 100 사이의 점수, 라벨, 단어 수를 돌려받아요. 판단은 어시스턴트의 짐작이 아니라 Textumi의 자체 모델에서 나와요.

커넥터는 MCP, 개인, 프로페셔널 요금제에 포함돼요. 설정 방법은 AI 어시스턴트 페이지에 단계별로 나와 있어요.

내 AI 어시스턴트에서 쓰는 Textumi요금제 비교