주요 요약
- GPTZero는 교사가 텍스트의 난해성과 폭발성을 분석하여 원본 텍스트와 인공적으로 생성된 텍스트를 구별하는 데 도움을 주는 인공지능 검사 도구입니다.
- GPTZero는 무료 버전과 프리미엄 버전을 제공하며, 다양한 기능을 제공하고 한계를 가지고 있어 사용자는 매달 수백만 단어를 분석할 수 있습니다.
- GPTZero는 오탐을 최소화하기 위해 노력하고 있지만, 교육자들은 결과에 전적으로 의존해서는 안 되며, 공정하지 못한 평가를 피하기 위해 신중하게 사용해야 합니다.
OpenAI의 ChatGPT가 출시된 이후 학생들은 이를 에세이 작성 및 평가를 부정하는 데 사용하면서 전 세계 교육기관의 큰 관심사가 되었습니다. 챗봇이 생성하는 텍스트가 너무나 자연스러워 보여 강사들은 학생들의 과제가 독창적인 것인지 판단하는 데 어려움을 겪고 있습니다.
이러한 문제를 해결하기 위해 컴퓨터 과학 졸업생이 텍스트가 인공적으로 생성되었는지 여부를 판별하는 인공지능 검사 도구인 GPTZero를 개발했습니다. 이는 교사들이 학생들의 과제를 평가하는 데 도움을 주기 위함입니다.
이 모든 것이 매우 훌륭하고 좋아 보이지만, GPTZero가 인공지능으로 생성된 콘텐츠를 실제로 감지할 수 있으며 그 정확도는 어느 정도일까요?
GPTZero란 무엇이며 어떻게 작동할까요?
GPTZero는 컴퓨터 과학을 전공한 Edward Tian이 개발한 인공지능 텍스트 분석 도구입니다. 이 도구는 강사가 원본 과제물과 표절된 텍스트를 구별하는 데 도움을 줍니다. 텍스트의 난해함과 폭발성을 분석하여 텍스트가 인공적으로 생성되었는지 아니면 사람이 작성했는지 판단합니다.
이러한 용어의 의미를 자세히 살펴보겠습니다.
- 난해함(Perplexity)은 자연어 처리(NLP)에서 텍스트의 무작위성을 측정합니다. 사람이 작성한 텍스트는 구조가 덜 잡혀 있고 예측하기 어려운 경향이 있으므로 난해함 값이 더 높아야 합니다. 반대로 인공지능이 생성한 텍스트는 난해함 점수가 낮아야 합니다.
- 폭발성(Burstiness)은 텍스트 분석을 개선하기 위해 난해함으로는 설명되지 않는 다른 변수를 고려합니다. 이 용어는 무작위 클러스터에서 일반적이지 않은 항목이 나타나는 것을 나타냅니다. 인공지능이 생성한 텍스트는 사람이 작성한 텍스트보다 더 일관된 구조를 가지는 경향이 있으며, 폭발성은 이를 식별하는 데 도움을 줍니다.
GPTZero Classic은 2023년 초부터 공개적으로 이용 가능하며 무료로 사용할 수 있습니다. 하지만 무료 버전은 문서당 글자 수 제한이 5,000자이며, 한 번에 3개의 문서만 일괄 분석할 수 있습니다.
매달 수백만 단어를 분석하려는 사용자의 요구를 충족하기 위해 GPTZero는 Essential(월 10달러), Premium(월 16달러), Professional(월 23달러)의 세 가지 프리미엄 버전을 제공합니다. 프리미엄 버전은 무료 버전보다 문서당 글자 수 제한이 더 높으며, 시간당 더 많은 스캔을 수행할 수 있습니다.
프리미엄 버전을 구독하려면 다음 단계를 따르십시오:
- GPTZero 웹사이트로 이동합니다.
- 페이지 오른쪽 상단에 있는 대시보드 탭을 클릭합니다.
- 기존 계정으로 로그인하거나 새 계정을 만듭니다.
- 로그인 후 이용 가능한 요금제를 비교하고 필요에 가장 적합한 요금제로 업그레이드할 수 있습니다.
또는 GPTZero 홈페이지에서 텍스트 상자 아래에 있는 ‘업그레이드’ 버튼을 클릭하여 유료 요금제를 확인하고 비교한 후 구매할 수도 있습니다.
GPTZero를 사용하여 인공지능 생성 텍스트를 감지하는 방법
ChatGPT와는 달리 GPTZero는 등록이 필요하지 않습니다. 웹사이트를 통해 도구에 액세스할 수 있습니다.
- GPTZero로 이동합니다.
- 분석하려는 텍스트를 복사하여 상자에 붙여넣거나 파일을 업로드합니다.
- ‘원산지 확인’ 상자를 클릭합니다.
스캔이 완료되면 GPTZero는 텍스트가 사람이 작성한 것인지 인공지능으로 생성된 것인지 알려줍니다.
GPTZero의 Origin 확장 프로그램을 사용하여 인공지능 생성 텍스트를 감지하는 방법
Chrome 브라우저에 GPTZero의 무료 Origin 확장 프로그램을 다운로드하면 전체 웹 페이지와 Google Docs에서 인공지능 생성 텍스트를 검색할 수 있습니다. 이 새로운 기능은 온라인에서 정보를 확인하는 과정을 간소화합니다.
- Chrome 웹 스토어의 Origin 확장 페이지로 이동합니다.
- ‘Chrome에 추가’를 클릭하여 확장 프로그램을 다운로드합니다.
- 설치를 확인하여 진행합니다.
- 확장 프로그램이 설치되면 Google 계정을 사용하여 로그인하거나 새 계정을 만들 수 있습니다.
- 웹페이지 또는 Google 문서를 스캔하려면 화면에서 ‘Origin’ 버튼을 클릭하고 ‘전체 페이지 스캔’을 선택합니다.
이제 결과를 보고 콘텐츠가 사람이 작성한 것인지 아니면 인공지능으로 생성된 것인지 확인할 수 있습니다.
GPTZero를 사용한 작문 분석
GPTZero를 다른 여러 인공지능 감지 도구와 차별화하는 기능은 작문 패턴을 분석할 수 있다는 점입니다. 이 플랫폼은 도구를 사용하여 스캔한 텍스트를 검토하는 데 사용할 수 있는 스캔 기록을 제공합니다.
또한 특정 스캔 결과를 클릭하면 글쓰기에 대한 더 자세한 데이터가 표시됩니다. 당신의 글이 인간 또는 인공지능으로 생성된 것으로 간주되는 이유를 본질적으로 확인할 수 있습니다.
예를 들어 GPTZero가 작성한 글을 인공지능 생성으로 표시한 경우 글쓰기 분석에 접근하여 콘텐츠의 난해성이 낮고 폭발성이 높은 이유를 알 수 있습니다. 이러한 문제를 수정하여 콘텐츠의 품질, 가독성 및 신뢰성을 개선할 수 있습니다.
GPTZero는 인공지능 생성 텍스트를 올바르게 인식할 수 있나요?
GPTZero가 인공지능 생성 텍스트를 얼마나 정확하게 감지하는지 테스트하기 위해, 이 도구에 세 가지 텍스트, 즉 인공지능으로 생성한 텍스트, 사람이 작성한 텍스트, 그리고 다른 도구로 바꿔 표현한 인공지능 생성 텍스트를 분석하도록 했습니다. GPTZero가 각 입력에 어떻게 반응하는지 살펴보겠습니다.
1. GPTZero의 인공지능 생성 텍스트 분석
인공지능 생성 텍스트를 분석하기 위해 먼저 GPT 기술이 탑재된 인공지능 챗봇인 ChatGPT를 사용하여 텍스트를 생성해 보겠습니다. 그렇게 하려면 다음 단계를 따르십시오.
- OpenAI로 이동합니다.
- ‘ChatGPT 사용해보기’ 버튼을 클릭합니다.
- 계정을 만들려면 로그인하거나 가입합니다.
- 텍스트를 생성하기 위한 프롬프트를 입력합니다.
- 도구가 완료되면 도구에서 생성된 텍스트를 복사합니다.
- 앞서 설명한 대로 GPTZero에서 텍스트를 분석합니다.
이 테스트를 수행했을 때 GPTZero는 인공지능으로 작성된 다양한 텍스트에 대해 혼합된 결과를 보여주었습니다. 어떤 경우에는 텍스트가 인공지능으로 생성되었다는 것을 전혀 알 수 없었지만, 다른 경우에는 대부분의 텍스트가 인공지능으로 생성된 것이라고 정확하게 추측했습니다.
분석하고 싶은 텍스트를 생성하기 위해 다른 인공지능 글쓰기 도구를 사용할 수도 있습니다.
2. GPTZero의 의역된 인공지능 생성 텍스트 분석
수백 개의 다른 의역 도구 중에서 선택하여 텍스트를 다른 말로 표현할 수 있습니다. 이 경우 Scribbr을 사용했습니다. 동일한 도구를 사용하려면 다음 단계를 따르십시오.
- Scribbr로 이동합니다.
- 앞서 GPTZero에서 분석한 인공지능 생성 텍스트를 복사하여 도구에 붙여넣습니다.
- ‘의역’ 버튼을 클릭합니다.
- Scribbr이 텍스트를 의역해 드립니다.
- 의역한 후 GPTZero 테스트를 다시 실행합니다.
약간의 의역으로 인해 GPTZero가 텍스트가 인공지능으로 생성되었는지 여부를 판단하기가 조금 더 어려워졌지만 전반적으로 결과는 일관성이 없었습니다. 의역된 출력물의 품질이 좋지 않았다는 점을 덧붙이고 싶습니다. 왼쪽이 원본이고 오른쪽이 의역본이었습니다.
3. GPTZero의 사람이 작성한 콘텐츠 분석
경우에 따라 GPTZero와 같은 도구는 잘못된 긍정 결과를 반환합니다. 즉, 잘못된 것이 아닌데 잘못된 것으로 간주한다는 의미입니다. GPTZero가 오탐지를 생성하는지 확인하기 위해 이 도구에 다양한 사람이 작성한 텍스트 조각을 분석하는 여러 테스트를 실행했습니다.
GPTZero의 결과는 한 문장이 잠재적으로 인공지능으로 작성된 것으로 식별되었지만 대부분 정확했습니다.
GPTZero의 결과를 신뢰해야 할까요?
테스트 결과에 따르면 이 도구의 결과에만 의존하는 것은 위험할 수 있습니다. 실제로 도구를 사용하여 결과를 생성할 때마다 면책 조항이 나타나 교육자들에게 이 도구의 결과에 의존하지 말라고 경고합니다.
따라서 도구 개발자가 결과가 완벽하다고 보장하지 않는 한 교육자는 도구에 전적으로 의존해서는 안 됩니다. 왜냐하면 GPTZero가 오탐지를 반환했다는 이유만으로 학생이 낮은 성적을 받는 것은 부당하기 때문입니다.
오탐을 최소화하기 위한 GPTZero의 노력
아직 개선해야 할 부분이 많지만 GPTZero는 오탐을 줄이는 데 상당한 진전을 이루었습니다. 회사에서 배포한 새로운 딥 러닝 모델은 이러한 노력을 촉진하여 인공지능 감지 도구를 경쟁 서비스보다 훨씬 더 안정적으로 만들었습니다.
새로운 딥 러닝 모델은 교육 텍스트, 뉴스 기사, 소셜 미디어 게시물, 질의응답 콘텐츠 등 다양한 소스를 활용하여 더욱 다양한 검증 데이터 세트를 사용합니다. 이렇게 확장되고 다양해진 데이터 세트를 통해 GPTZero는 사람이 생성한 데이터와 인공지능으로 생성된 데이터를 더 잘 구별할 수 있습니다. 또한 회사는 GPTZero의 예측이 이전보다 훨씬 더 “확실하다”고 주장합니다.
인공지능 감지 결과를 항상 신뢰하지 마세요
OpenAI의 GPT 기술에 대한 잠재적 해독제로서 GPTZero는 큰 잠재력을 가지고 있습니다. 하지만 아직 갈 길이 멉니다. 현시점에서는 완전히 신뢰할 수는 없습니다. 그렇다면 GPTZero의 주요 버전이 모든 한계를 극복하고 인공지능 콘텐츠를 정확하게 잡아낼 수 있을까요? 알아낼 때까지 기다려야 할 것입니다.