ZeroTell의 AI 탐지기는 글을 문장 단위로 읽고, 기계가 생성한 글과 가장 닮은 문장을 하이라이트한 다음, 그 신호들을 합쳐 문서 전체의 퍼센트로 보여 줘요. 글의 어느 부분이 AI 출력과 닮았는지 확인하는 유용한 방법이지만, 다른 모든 탐지기처럼 확률에 기반하므로 틀릴 수 있어요. 어떤 종류의 글에서든 성능을 정직하게 설명하는 숫자 하나는 없기 때문에, 저희는 정확도 퍼센트를 공개하지 않아요.
이 페이지는 ZeroTell을 만드는 팀이 썼어요. 도구가 무엇을 하는지, 어디서 부족한지, 결과를 어떻게 합리적으로 활용할지 이해하셨으면 해요.
ZeroTell이 점수를 매기는 방식
탐지기에 문서를 붙여 넣으면 몇 가지 단계를 거쳐요.
- 분할. 한 문서 안에 여러 문체가 섞여 있는 경우가 많아서, 글을 문장 단위로 나눠요. 서론은 일반적인데 본문은 개인적인 디테일로 가득할 수도 있으니까요.
- 문장 점수. 각 문장에서 아주 예측 가능한 단어 선택, 균일한 리듬, 상투적인 표현처럼 AI가 생성한 글에서 흔한 패턴을 평가해요. AI와 강하게 닮은 문장은 하이라이트돼요.
- 문서 점수. 문장 점수를 평균 내서 문서 전체의 퍼센트 하나로 만들어요. 이때 긴 문장일수록 더 큰 비중을 차지해요. 이 숫자는 글이 전체적으로 얼마나 AI처럼 읽히는지에 대한 추정치이지, 기계가 실제로 글의 얼마만큼을 썼는지를 측정한 게 아니에요.
가장 유용한 건 하이라이트예요. 어떤 문장이 점수를 끌어올렸는지 정확히 보여 주기 때문에, 숫자가 왜 나왔는지 추측할 필요가 없어요.
정확도 숫자를 공개하지 않는 이유
눈에 띄는 정확도 수치를 광고하는 탐지기를 보게 될 거예요. 저희는 그러지 않기로 했어요. 이유는 간단해요. 정확도는 숫자 하나가 아니기 때문이에요.
어떤 탐지기든 성능은 다음에 따라 달라져요.
- 길이. 긴 샘플이 짧은 샘플보다 훨씬 판단하기 쉬워요.
- 편집. 챗봇이 그대로 낸 출력은 사람이 다시 쓴 글과 아주 다르게 보여요.
- 장르. 개인 에세이와 화학 실험 보고서는 "정상"적인 패턴이 아주 달라요.
- 글쓴이의 배경. 제2언어로 쓴 글은 더 안전하고 예측 가능한 구조를 쓰는 경우가 많아요.
- 모델. 새롭거나 덜 알려진 AI 모델의 글은 덜 익숙해 보일 수 있어요.
신중하게 고른 테스트 세트 하나에서 측정한 수치는 도구가 내 글에서 어떻게 작동할지 거의 알려 주지 않아요. 저희는 차라리 근거를 문장 단위로 보여 드리고 한계를 분명히 밝히려고 해요.
ZeroTell 탐지기의 알려진 한계
약점을 솔직하게 밝히는 것도 탐지기를 책임 있게 쓰는 일의 일부예요. 저희 결과를 볼 때 가장 조심해야 할 경우는 다음과 같아요.
짧은 글
몇 문장뿐이라면 활용할 신호가 아주 적어요. 짧은 입력의 점수는 표현을 조금만 바꿔도 크게 출렁일 수 있어요. 기껏해야 대략적인 참고로만 보세요.
정형화된 글
템플릿은 예측 가능한 글을 만들어요. 초록, 연구 방법 섹션, 법률 상용 문구, 제품 사양, 구조가 엄격한 학교 에세이는 사람이 모든 단어를 썼어도 표시될 수 있어요.
영어가 모국어가 아닌 사람의 글
영어를 제2언어나 제3언어로 쓴다면 익숙한 어휘와 명확하고 표준적인 문장에 기댈 수 있어요. 좋은 습관이지만, 언어 모델이 만드는 안전한 표현과 닮을 수 있어요. 이런 글이 표시되었다면 특히 조심해서 봐야 해요.
섞이거나 편집된 글
많은 문서에 여러 도구가 관여해요. 문법 검사기, 번역 도구, 어쩌면 AI 브레인스토밍까지요. 섞인 글은 어중간한 점수와 흩어진 하이라이트를 내는 경우가 많아요. 그건 숨겨진 진실이 아니라 실제로 애매하다는 걸 반영해요.
목록, 정의, 사실
널리 알려진 사실을 말하거나 표준 용어를 정의하는 문장은 누가 쓰든 비슷하게 읽혀요. 그런 문장이 하이라이트되어도 놀라지 마세요.
AI 탐지기문장별 AI 점수결과 읽는 법
결과를 해석하는 단계별 방법이에요.
- 먼저 길이를 확인하세요. 글이 짧다면 점수를 진지하게 받아들이기 전에 더 모으세요.
- 퍼센트보다 하이라이트를 먼저 훑어보세요. 표시된 문장들의 공통점이 무엇인지 생각해 보세요. 일반적인 도입부인가요? 정의인가요? 연결 표현인가요?
- 나머지 글과 비교하세요. 하이라이트가 한 섹션에 몰려 있나요, 흩어져 있나요? 몰려 있다면 다르게 쓰인 부분을 가리킬 수 있어요.
- 장르를 고려하세요. 정형화된 문서는 개인적인 성찰 글보다 원래 점수가 높게 나와요.
- 글쓴이를 생각하세요. 평소 쓰는 방식과 일관되나요? 초안이나 메모가 있나요?
| 결과에서 보이는 패턴 | 가능성 높은 설명 |
|---|---|
| 한 섹션만 강하게 하이라이트, 나머지는 깨끗함 | 그 섹션이 다르게 쓰였거나 편집됨. 자세히 볼 만함 |
| 가벼운 하이라이트가 전체에 흩어져 있음 | 일반적인 표현이나 정형화된 문체. 사람이 쓴 경우가 많음 |
| 짧은 샘플에서 높은 퍼센트 | 데이터 부족. 신뢰할 수 없음 |
| 정의와 사실만 표시됨 | 누가 써도 비슷하게 읽히는 표준적인 내용 |
ZeroTell이 내 글을 표시했다면
먼저 당황하지 마세요. 표시는 의혹 제기가 아니고, 내 의도에 대해 아무것도 말해 주지 않아요.
하이라이트된 문장을 보세요. 어차피 내 글에서 가장 약한 부분인 경우가 많아요. 막연한 도입부, 군더더기 연결 표현, 이미 한 말을 되풀이하는 요약 같은 것들이요. 구체적인 예시, 나만의 추론, 구체적인 디테일로 다시 쓰면 대개 글이 좋아져요. 낮은 숫자를 쫓기 위해서가 아니라 독자를 위해 할 만한 일이에요.
작성 과정의 증거를 남겨 두세요. 저장된 초안, 워드프로세서의 버전 기록, 개요, 자료 조사 메모가 내 작업이 내 것임을 보여 주는 가장 강력한 방법이에요. 글이 AI로 표시되었을 때 해야 할 일 가이드에서 더 자세히 다뤄요.
탐지기가 모르는 것
탐지기가 결코 보지 못하는 정보가 무엇인지 분명히 해 두면 도움이 돼요. 탐지기는 내가 누구인지, 어떤 수업을 위해 쓴 글인지, 얼마나 오래 공을 들였는지, 그 과정에서 어떤 도구를 썼는지 몰라요. 내 글을 이전 과제와 비교하지도 않고, 브라우저 기록이나 초안을 읽을 수도 없어요. 탐지기가 가진 건 페이지 위의 단어뿐이에요.
그래서 맥락이 그토록 중요해요. 글쓴이, 과제, 초안 작성 과정을 아는 검토자는 글 한 덩어리만 보는 모델보다 언제나 상황을 더 잘 이해해요. 탐지기는 어떤 문장이 전형적인 AI 출력처럼 읽힌다고 알려 줄 수 있어요. 그게 특정 상황에서 무엇을 의미하는지는 사람만 판단할 수 있어요.
글이 바뀌면 결과도 바뀔 수 있다는 뜻이기도 해요. 문단을 하나 더하거나, 인용문을 빼거나, 오타를 고치면 문장 점수가 조금씩 움직이고, 전체 퍼센트도 함께 움직일 수 있어요. 그런 작은 변동은 정상이며, 의미 있는 변화로 받아들이지 않아야 해요.
휴머나이저를 책임 있게 쓰기
ZeroTell은 AI 휴머나이저도 제공해요. 딱딱하거나 기계적인 글을 더 자연스럽게 읽히도록 다시 써 주기 때문에, AI의 도움을 받아 초안을 쓰고 더 명확하고 개인적인 글을 원할 때 도움이 될 수 있어요. 휴머나이저는 편집 보조 도구이지, 누군가의 규칙을 피해 가는 수단이 아니에요. 학교나 회사가 AI 사용을 제한한다면 휴머나이저를 거친 글에도 그 규칙이 그대로 적용되고, 규칙을 따르고 필요한 곳에 AI 사용을 밝히는 책임은 나에게 있어요.
교사와 검토자를 위한 안내
ZeroTell로 학생이나 직원의 작업을 검토한다면, 결과를 출발점으로 다뤄 주세요. 하이라이트된 문장을 직접 읽으세요. 초안을 요청하세요. 글쓴이와 이야기하세요. 언어 배경과 과제 유형을 고려하세요. 탐지기는 이야기해 볼 만한 구절을 가리킬 수 있지만, 무슨 일이 있었는지 알려 줄 수는 없어요.
핵심 정리
- ZeroTell은 글을 문장 단위로 채점하고, AI 같은 문장을 하이라이트하고, 이를 문서 퍼센트로 요약해요.
- 성능은 길이, 장르, 편집, 글쓴이의 배경에 따라 달라지기 때문에 정확도 퍼센트를 공개하지 않아요.
- 짧은 글, 정형화된 글, 제2언어로 쓴 글은 사람이 썼어도 표시될 수 있어요.
- 숫자보다 하이라이트와 맥락을 먼저 읽으세요.
- 점수는 더 자세히 볼 이유일 뿐, 그 자체로 증거가 되지 않아요. 더 넓은 그림은 AI 탐지기는 얼마나 정확할까를 참고하세요.