콘텐츠가 AI로 생성되었는지 확인하려면 세 가지를 함께 쓰세요. 전형적인 AI 패턴을 찾는 꼼꼼한 읽기, 사실과 출처 검증, 그리고 여러 신호 중 하나로 활용하는 AI 탐지기예요. 그런 다음 결론을 내리기 전에 누가, 어떻게, 어떤 목적으로 썼는지 같은 맥락을 따져 보세요. 어떤 방법도 단독으로는 믿을 수 없지만, 함께 쓰면 판단의 탄탄한 근거가 돼요.
이 방법은 에세이를 검토하는 교사든, 프리랜서 기사를 검토하는 편집자든, 보고서를 확인하는 관리자든 똑같이 통해요.
1단계: 왜 확인하는지 정하기
나에게 실제로 중요한 질문에서 출발하세요. 그건 막연한 "AI가 개입했나?"인 경우가 드물어요.
- 교사는 보통 과제가 AI 정책에 맞는지, 학생의 배움을 반영하는지 알아야 해요.
- 편집자에게는 정확하고, 독창적이고, 유용하며, 매체의 가이드라인에 맞는 콘텐츠가 필요해요.
- 기업은 정확성, 브랜드 보이스, 법적 위험을 신경 써요.
목적에 따라 필요한 증거가 달라져요. 편집자는 AI를 썼다는 걸 증명하지 않고도 밋밋하고 부정확한 기사를 반려할 수 있어요. 학업 윤리 사안을 판단하는 교사에게는 훨씬 강력한 증거가 필요해요.
2단계: 경고 신호 읽기
도구를 돌리기 전에 노련한 독자처럼 글을 읽어 보세요. 편집하지 않은 AI 출력에서 자주 나타나는 패턴을 찾아보세요.
문체 신호
- 글 전체에 걸쳐 길이와 구조가 매우 비슷한 문장
- 거창한 연결 표현과 추상적이고 그럴듯해 보이는 어휘
- 스스로를 요약하며 끝나는 문단
- 정중하고 중립적이지만 말하는 게 별로 없는 어조
내용 신호
- 구체적이지 않고 일반적인 예시("어떤 회사는 ~할 수 있다...")
- 모든 주장이 완벽하게 균형 잡혀 있고 분명한 입장이 없음
- 출처 없는 확신에 찬 주장, 또는 지나치게 딱 맞아 보이는 출처
- 약간 오래되었거나 최근 일에 대해 이상하게 막연한 정보
맥락 신호
- 글쓴이의 평소 문체나 실력에서 갑자기 달라짐
- 구체적인 과제 질문, 수업 토론, 브리프에 맞춰 답하지 않는 내용
- 실제로 작업한 사람이라면 자연스럽게 넣었을 세부 사항이 빠져 있음
신호 한두 개는 의미가 별로 없어요. 사람도 일반적인 글을 써요. 여러 신호가 함께 보이면 더 자세히 볼 이유가 돼요.
3단계: 사실과 출처 검증하기
이 단계가 어떤 탐지기보다 더 많은 것을 드러내는 경우가 많아요. AI 모델은 권위 있게 들리지만 오류가 담긴 글을 만들 수 있어요.
- 모든 인용을 확인하세요. 참고한 논문이나 책을 하나하나 검색해 보세요. 실제로 존재하나요? 글에서 주장하는 내용을 말하고 있나요?
- 구체적인 숫자를 확인하세요. 통계와 날짜는 실제 출처로 거슬러 올라갈 수 있어야 해요.
- 인용문을 확인하세요. 인용된 문장을 검색해서 누가 말했는지 확인하세요.
- 오래된 정보를 확인하세요. 예전 데이터로 학습한 모델은 이후 바뀐 내용을 그대로 설명할 수 있어요.
지어낸 참고문헌은 원인이 AI든 부주의한 조사든 무언가 잘못되었다는 강력한 신호예요. 어느 쪽이든 그 콘텐츠는 고쳐야 해요.
팩트 체커주장을 출처와 대조해요4단계: AI 탐지기 돌리기
이제 탐지기를 쓰되, 결과를 꼼꼼히 읽으세요.
- 충분한 분량을 쓰세요. 짧은 샘플은 점수가 불안정해요.
- 문장 하이라이트를 보세요. 전체 퍼센트만 보지 마세요. 표시된 문장이 한 부분에 몰려 있나요?
- 장르를 고려하세요. 초록이나 상품 설명 같은 정형화된 글은 원래 점수가 높게 나와요.
- 글쓴이를 고려하세요. 제2언어로 쓰는 사람은 더 자주 표시될 수 있어요.
- 원하는 결과를 찾아다니지 마세요. 내 생각에 맞는 결과가 나올 때까지 여러 도구에 돌리는 건 증거가 아니에요.
| 탐지기 결과 | 얼마나 비중을 둘지 |
|---|---|
| 높은 점수, 긴 글, 다른 경고 신호와 일치 | 의미 있는 신호. 계속 조사 |
| 높은 점수, 짧거나 정형화된 글 | 약한 신호 |
| 하이라이트가 섞여 있고 도구마다 다름 | 회색 지대. 맥락에 의존 |
| 낮은 점수 | 사람이 썼다는 증명서는 아님 |
점수가 왜 달라지는지 배경을 알고 싶다면 AI 탐지기의 작동 원리를 참고하세요.
5단계: 표절 검사 돌리기
AI 탐지와 표절 탐지는 서로 다른 질문에 답해요. 표절 검사는 기존 출처와 일치하는 글을 찾아요. AI가 쓴 콘텐츠에도 베끼거나 거의 그대로 바꿔 쓴 내용이 들어 있을 수 있고, 사람의 글도 마찬가지예요. 공개하거나 채점할 글이라면 둘 다 확인하세요.
6단계: 맥락 모으기
중요한 사안이라면 글쓴이와 이야기하세요.
- 초안과 버전 기록을 요청하세요. 시간을 두고 자라난 문서는 한 번에 붙여 넣은 문서와 아주 다르게 보여요.
- 작성 과정을 물어보세요. 어떤 출처를 썼나요? 구조는 어떻게 정했나요?
- 한 부분을 설명해 달라고 하세요. 직접 쓴 사람은 보통 편하게 이야기할 수 있어요.
7단계: 목표에 따라 판단하기
1단계의 질문으로 돌아가세요.
- 출판의 경우: 콘텐츠가 정확하고, 독창적이고, 유용하며, 브랜드에 맞나요? 그렇다면 정책에 따라 AI 개입이 허용될 수 있어요. 아니라면 누가 썼든 수정이 필요해요.
- 교육의 경우: 과제가 AI 정책에 맞고 학생의 배움을 보여 주나요? 전체 그림을 바탕으로 판단하고, 기관의 절차를 따르세요.
- 비즈니스의 경우: 내 이름으로 보내기에 정확하고 적절한가요? 조직의 공개 규정을 따르고 있나요?
빠른 체크리스트
콘텐츠를 효율적으로 검토해야 할 때 활용하세요.
- 무엇을, 왜 판단하는지부터 분명히 하세요.
- 문체, 내용, 맥락 신호를 읽으세요.
- 출처 표기, 숫자, 인용문을 검증하세요.
- 충분한 분량으로 AI 탐지기를 돌리고 하이라이트를 읽으세요.
- 표절 검사를 돌리세요.
- 중요한 사안이라면 초안이나 설명을 요청하세요.
- 점수만 보지 말고 품질과 정책을 기준으로 판단하세요.
예시: 프리랜서 블로그 글 검토하기
작은 회사 블로그를 편집하는데, 가정 에너지 절약에 관한 1,200단어짜리 기사를 받았다고 상상해 보세요. 읽어 보니 모든 섹션이 깔끔한 요약으로 끝나고, 예시는 가상의 것이며, 통계 하나에는 출처가 없어요. 탐지기는 서론 대부분과 중간 섹션 두 개를 하이라이트해요.
조치를 취하기 위해 무언가를 증명할 필요는 없어요. 그 통계를 검색해 보세요. 실제 출처를 찾을 수 없다면 그것만으로도 글을 돌려보낼 이유가 돼요. 글쓴이에게 출처를 요청하고, 특정 가전제품이나 지역 전력 회사의 프로그램 같은 실제 예시를 한두 개 달라고 하세요. 매체가 편집을 거친 AI 보조 초안을 허용한다면 무엇을 바꿔야 하는지 설명하세요. 허용하지 않는다면 기고자 계약서를 근거로 삼으세요.
판단이 정확성과 품질, 즉 독자가 실제로 신경 쓰는 것에 근거한다는 점에 주목하세요. 탐지기는 어디를 봐야 할지 알려 주었고, 그게 바로 탐지기의 역할이에요.
미리 기대치 정하기
가장 쉬운 확인은 미리 준비한 확인이에요. 작가를 관리하거나 수업을 맡고 있다면, AI 정책을 일찍 분명하게 알리세요. 무엇이 허용되는지(브레인스토밍, 문법 도움), 무엇이 안 되는지(섹션 전체 작성), 사용 사실을 어떻게 밝히는지 말하세요. 과제 자체에 초안이나 개요 제출을 포함하세요. 기대치가 분명하면 분쟁이 줄고, 가끔 하는 확인도 훨씬 간단해져요.
확인 과정에서 의문이 생기면 어떻게 할지 미리 합의해 두는 것도 도움이 돼요. 먼저 대화하고, 그다음 초안을 요청하고, 필요할 때만 공식 검토로 넘어가는 것처럼 짧고 문서화된 절차가 양쪽을 모두 보호해요. 글쓴이는 자기 이야기를 들어 줄 거라는 걸 알고, 검토자는 압박 속에서 성급한 결정을 내리는 일을 피할 수 있어요.
핵심 정리
- 한 가지 방법에 의존하지 말고 꼼꼼한 읽기, 사실 검증, AI 탐지기를 함께 쓰세요.
- 지어낸 출처와 틀린 사실은 대개 조치하기 가장 분명한 문제예요.
- 탐지기 하이라이트는 맥락 속에서 읽으세요. 짧거나 정형화된 글은 점수를 믿기 어려워요.
- 표절은 따로 확인하세요. AI 사용과는 다른 질문이에요.
- 숫자 하나가 아니라 실제 목표와 전체 그림을 바탕으로 판단하세요.