목차
주요 시사점
- GPTZero는 교사가 당혹감 및 폭발성 분석을 사용하여 원본 텍스트와 인위적으로 생성된 텍스트를 구별하는 데 도움이 되는 AI 검사 도구입니다.
- GPTZero는 다양한 기능과 제한 사항이 포함된 무료 및 프리미엄 버전을 제공하므로 사용자는 매달 수백만 단어를 분석할 수 있습니다.
- GPTZero는 오탐을 최소화하기 위해 노력했지만 교육자는 결과에 전적으로 의존해서는 안 되며 불공정한 채점을 피하기 위해 신중하게 사용해야 합니다.
OpenAI의 ChatGPT는 출시 이후 학생들이 에세이를 작성하고 평가를 부정하는 데 사용하기 시작하면서 전 세계 교육 기관의 관심사가 되었습니다. 챗봇이 생성한 텍스트가 얼마나 자연스러워 보이는지 고려할 때 강사는 학생의 작업이 독창적인지 판단하는 데 어려움을 겪고 있습니다.
교사가 학생의 과제를 평가하는 데 도움을 주기 위해 컴퓨터 과학 졸업생이 텍스트가 인위적으로 생성되었는지 여부를 확인하는 AI 검사 도구인 GPTZero를 개발했습니다.
모든 것이 매우 훌륭하고 좋은 것처럼 들리지만 GPTZero는 AI가 만든 콘텐츠를 감지할 수 있으며 얼마나 정확합니까?
GPTZero란 무엇이며 어떻게 작동하나요?
GPTZero 는 강사가 원본 작업과 표절된 텍스트를 구별할 수 있도록 돕기 위해 컴퓨터 과학을 전공한 Edward Tian이 개발한 AI 텍스트 분석 도구입니다. 이 도구는 텍스트의 난해함과 폭발성을 검사하여 텍스트가 인위적으로 생성되었는지 아니면 인간이 제작했는지 확인합니다.
자세히 설명하지 않고 이러한 용어의 의미를 살펴보겠습니다.
- Perplexity는 NLP(자연어 처리)에서 텍스트 무작위성을 측정합니다. 사람이 작성한 텍스트는 덜 구조화되고 예측하기 어려운 경향이 있으므로 Perplexity 값이 더 높아야 합니다. 대조적으로, AI가 생성한 텍스트는 Perplexity 점수가 낮아야 합니다.
- Burstiness는 텍스트 분석을 개선하기 위해 Perplexity에서 설명되지 않은 다른 변수를 고려합니다. 이 용어는 무작위 클러스터에서 일반적이지 않은 항목이 나타나는 것을 나타냅니다. AI가 생성한 텍스트는 인간이 작성한 텍스트보다 더 일관된 구조를 갖는 경향이 있습니다. Burstiness는 우리가 그것을 식별하는 데 도움이 됩니다.
GPTZero Classic은 2023년 초부터 공개적으로 액세스할 수 있으며 무료로 사용할 수 있습니다. 하지만 무료 버전은 문서당 글자 수 제한이 5,000자이며, 한 번에 3개의 문서만 일괄 분석할 수 있습니다.
GPTZero는 매월 수백만 단어를 분석하려는 사용자의 요구를 충족하기 위해 Essential(월 10달러), Premium(월 16달러), Professional(월 23달러)의 세 가지 프리미엄 버전을 제공합니다. 문서당 글자 수 제한은 무료 버전보다 프리미엄 버전에서 더 높으며, 무엇보다도 시간당 더 많은 스캔을 수행할 수 있습니다.
프리미엄 버전을 구독하려면 다음 단계를 따르세요.
또는 GPTZero 홈페이지에서 텍스트 상자 하단에 있는 업그레이드 버튼을 클릭하여 유료 요금제를 보고 비교하고 구매할 수 있습니다.
GPTZero를 사용하여 AI 생성 텍스트를 감지하는 방법
ChatGPT와 달리 GPTZero에는 등록이 필요하지 않습니다. 웹사이트를 통해 도구에 액세스할 수 있습니다.
스캔이 완료되면 GPTZero는 텍스트가 인간에 의해 작성되었는지 아니면 인공 지능에 의해 생성되었는지 알려줍니다.
GPTZero의 Origin 확장을 사용하여 AI 생성 텍스트를 감지하는 방법
Chrome 브라우저에 GPTZero의 무료 Origin 확장 프로그램을 다운로드하면 전체 웹페이지와 Google Docs에서 AI 생성 텍스트를 검색할 수 있습니다. 이 새로운 기능은 온라인으로 정보를 확인하는 과정을 단순화합니다.
이제 결과를 보고 콘텐츠가 사람이 작성한 것인지 AI가 생성한 것인지 확인할 수 있습니다.
GPTZero를 사용하여 작문 분석
GPTZero를 다른 여러 AI 감지 도구와 차별화하는 기능은 글쓰기 패턴을 분석할 수 있다는 것입니다. 플랫폼은 도구를 사용하여 스캔한 텍스트를 검토하는 데 사용할 수 있는 스캔 기록을 제공합니다.
또한, 특정 검색 결과를 클릭하면 귀하의 글쓰기에 관한 더 자세한 데이터가 표시됩니다. 귀하의 글이 인간 또는 AI로 생성된 것으로 간주되는 이유를 본질적으로 확인할 수 있습니다.
예를 들어, GPTZero가 귀하가 작성한 글을 AI 생성으로 표시한 경우 글쓰기 분석에 액세스하면 콘텐츠의 난해성이 낮고 폭발성이 높은 등 그 이유를 알 수 있습니다. 이러한 문제를 수정하여 콘텐츠의 품질, 가독성 및 신뢰성을 향상시킬 수 있습니다.
GPTZero는 AI가 생성한 텍스트를 올바르게 인식할 수 있나요?
GPTZero가 AI 생성 텍스트를 얼마나 정확하게 감지하는지 테스트하기 위해 도구에서 세 가지 텍스트, 즉 AI가 생성한 텍스트, 사람이 작성한 텍스트, 다른 도구로 바꾸어 표현한 AI 생성 텍스트를 분석합니다. GPTZero가 각 입력에 어떻게 반응하는지 살펴보겠습니다.
1. GPTZero의 AI 생성 텍스트 분석
AI가 생성한 텍스트를 분석하기 위해 먼저 GPT 기술이 탑재된 AI 챗봇인 ChatGPT를 사용하여 텍스트를 생성해 보겠습니다. 그렇게 하려면 다음 단계를 따르세요.
이 테스트를 수행했을 때 GPTZero는 AI로 작성된 다양한 텍스트에 대해 혼합된 결과로 응답했습니다. 때로는 텍스트가 AI에서 생성되었다는 것을 어떤 식으로든 알 수 없는 반면, 다른 경우에는 대부분의 텍스트가 AI라고 정확하게 추측했습니다.
다른 AI 작성 도구를 사용하여 분석하려는 텍스트를 생성할 수도 있습니다.
2. GPTZero에서 의역된 AI 생성 텍스트 분석
수백 개의 다른 표현 도구 중에서 선택하여 텍스트를 다른 말로 표현할 수 있습니다. 이 경우 Scribbr을 사용했습니다. 동일한 도구를 사용하려면 다음 단계를 따르십시오.
약간의 의역으로 인해 GPTZero가 텍스트가 AI에서 생성되었는지 여부를 판단하기가 조금 더 어려워졌지만 전체적으로는 혼합된 가방이었습니다. 나는 또한 의역된 출력의 품질이 형편없다고 덧붙이고 싶습니다. 왼쪽이 원본이고, 오른쪽이 번역본이었습니다.
3. GPTZero에서 인간이 작성한 콘텐츠 분석
경우에 따라 GPTZero와 같은 도구는 잘못된 긍정 결과를 반환합니다. 즉, 잘못된 것이 아닌데 잘못된 것으로 간주한다는 의미입니다. GPTZero가 오탐지를 생성하는지 확인하기 위해 도구에서 여러 테스트를 실행하여 사람이 작성한 다양한 텍스트 조각을 분석했습니다.
GPTZero의 결과는 한 문장이 잠재적으로 AI로 작성되었음을 식별했음에도 불구하고 대부분 정확했습니다.
GPTZero의 결과를 신뢰해야 합니까?
테스트 결과에 따르면 이 도구의 결과에만 의존하는 것은 위험할 수 있습니다. 실제로 도구를 사용하여 결과를 생성할 때마다 면책조항이 나타나 교육자가 이 도구의 결과에 의존하지 말라고 경고합니다.
따라서 도구 개발자가 결과가 완벽하다고 보장하지 않는 한 교육자는 도구에 전적으로 의존해서는 안 됩니다. 왜? GPTZero가 거짓 긍정을 반환했다는 이유만으로 학생이 낮은 성적을 받는 것은 불공평하기 때문입니다.
오탐을 최소화하기 위한 GPTZero의 노력
아직 갈 길이 멀지만 GPTZero는 오탐지를 줄이는 데 상당한 진전을 이루었습니다. 회사에서 배포한 새로운 딥 러닝 모델은 이러한 노력을 촉진하여 AI 탐지 도구를 경쟁사 서비스보다 훨씬 더 안정적으로 만들었습니다.
새로운 딥 러닝 모델은 교육 텍스트, 신문 기사, 소셜 미디어 게시물, Q&A 콘텐츠 등의 소스를 활용하여 더욱 다양한 검증 데이터 세트를 사용합니다. 이 확장되고 다양한 데이터 세트를 통해 GPTZero는 인간이 생성한 데이터와 AI가 생성한 데이터를 더 잘 구별할 수 있습니다. 더욱이 회사는 GPTZero의 예측이 이전보다 더 “확실하다”고 주장합니다.
AI 탐지 결과를 항상 신뢰하지는 마세요
OpenAI의 GPT 기술에 대한 잠재적인 해독제로서 GPTZero는 큰 잠재력을 가지고 있습니다. 그러나 갈 길이 멀다. 현 시점에서는 완전히 신뢰할 수는 없습니다. 하지만 GPTZero의 메인 버전은 모든 한계를 극복하고 AI 콘텐츠를 정확하게 포착할 수 있을까요? 우리는 알아낼 때까지 기다려야 할 것입니다.