우리가 테스트하는 방법

이 페이지는 DeAIze가 정확히 무엇을 측정하는지, 재작성이 어떻게 승인되는지, 그리고 우리가 게시하는 수치를 어떻게 읽어야 하는지 설명합니다. 누구나 우리의 주장을 자신의 텍스트와 대조하여 확인할 수 있도록 작성되었습니다.

1. 탐지기 점수란 무엇인가

탐지기는 저자를 탐지하지 않습니다; 통계적 규칙성을 탐지합니다. 기계 생성 텍스트는 인간이 쓴 글보다 더 예측 가능한 경향이 있습니다 — 더 낮은 혼란도, 더 평탄한 문장 리듬, 더 적은 어휘적 놀라움. 우리 것을 포함하여 여러분이 보는 모든 점수는 그 신호로부터 나온 확률 추정치이며, 누가 텍스트를 썼는지에 대한 측정이 아닙니다.

2. 문장 수준 점수 매기기

단일 문서 점수는 문제가 어디에 있는지 알려주지 않습니다. 기계가 만든 것처럼 읽히는 문장만 재작성하고 이미 여러분의 것인 문장은 그대로 두세요. 우리의 자체 검사는 여러분이 한 단어를 쓰기 전에 어느 것이 어느 것인지 보여줍니다. 문장별 점수는 재작성 루프가 작동하는 대상이며, 워크벤치가 강조하는 것입니다.

3. 폐쇄 루프

몇 초 만에 사람이 쓴 것처럼 읽히는 글을 얻을 수 있으며, 의미는 그대로 유지되고 변경은 동의어 교체가 아닌 의미적 유사성에 의해 제한됩니다. 재작성 후보는 원문과의 의미적 유사성이 임계값을 통과할 때만 승인됩니다. 이것이 의미가 보존되는 이유이며, 도구가 구절을 개선할 수 없을 때 변경을 만들어내는 대신 "무변경 시 자동 환불"을 보고하는 이유입니다.

4. 탐지기 교차 검증

우리 자체 모델의 예측은 증거가 아닙니다. 탐지기 API가 구성된 경우, 검증 단계는 재작성된 텍스트를 실제 탐지기로 보내고 그 결과를 기록합니다. 그러한 실행 횟수는 통계 페이지에 게시되어 우리 수치 뒤에 있는 제3자 검사의 수를 볼 수 있습니다. 자체 수치는 교차 검증이 아닙니다: 실제로 탐지기 API로 전송된 실행만 그곳에 집계됩니다.

5. 우리 자체 패턴 점수의 의미

이것은 우리 자체 모델이 한 구절이 기계가 만든 것처럼 읽히는 패턴에 얼마나 의존하는지에 대한 추정치입니다 — 하나의 수정을 추적하기 위한 진단 도구이며, 어떤 제3자 탐지기의 공식 점수가 아닙니다. 우리가 제3자 수치(GPTZero, Turnitin, Copyleaks, Originality.ai, Sapling)를 인용할 때는 그렇게 밝히고, 가능한 경우 그 실행을 교차 검증으로 기록합니다.

자체 수치. DeAIze가 보고하는 모든 수치는 우리 자체 모델이 생성한 것이며, 탐지기 API를 호출할 수 있는 경우 §4에 따라 교차 검증으로 기록됩니다. 탐지기 공급업체는 우리 수치를 게시하거나 감사하지 않으며, 여기의 어떤 수치도 개별 문서에 대한 보증이 아닙니다. Turnitin의 AI 작성 지표에는 공개 점수 API가 없으므로, 이 사이트 어디에도 실시간 Turnitin 판독값은 없습니다. 우리는 수치에 날짜를 표시하며, 이를 독립적인 벤치마크로 제시하지 않습니다.

6. 한계 및 공개

• 탐지기 점수는 버전, 언어, 텍스트 길이 및 도메인에 따라 달라집니다. 날짜와 탐지기 버전이 없는 수치는 재현할 수 없으므로, 우리는 게시된 수치에 날짜를 표시합니다.
• 비영어 성능은 영어보다 약하며, 짧은 텍스트는 긴 텍스트보다 더 잡음이 많습니다.
• 벤치마크를 게시할 때는 표본 크기, 테스트 날짜 및 탐지기 버전을 함께 제공합니다. 자체 수치는 감사된 벤치마크가 아니라 자체 수치로 표시됩니다. 그것이 사실이기 때문입니다.
• 자동화된 점수는 추정치이지 증거가 아닙니다. 자신의 초안을 편집하는 것은 항상 정당합니다; 다른 사람의 작업을 허위로 표현하는 것은 결코 정당하지 않습니다.

정정

여기의 어떤 수치라도 재현할 수 없다면, 알려주시면 정정하겠습니다: [email protected].