テスト方法

このページでは、DeAIzeが何を測定するのか、リライトがどのように承認されるのか、そして公開している数値をどのように読むべきかを正確に説明します。誰でも私たちの主張を自分のテキストと照らし合わせて確認できるように書かれています。

1. 検出スコアとは何か

検出器は著者を検出するのではなく、統計的な規則性を検出します。機械生成されたテキストは人間の文章よりも予測しやすい傾向があります — より低いパープレキシティ、より平坦な文のリズム、より少ない語彙的な意外性。あなたが見るすべてのスコアは、私たちのものも含めて、そのシグナルからの確率推定であり、誰がテキストを書いたかの測定ではありません。

2. 文レベルのスコアリング

単一の文書スコアでは、問題がどこにあるかはわかりません。機械製のように読める文だけをリライトし、すでにあなた自身のものはそのままにしてください。私たちのチェックでは、一語を費やす前にどちらがどちらかを示します。文ごとのスコアは、リライトループが作用する対象であり、ワークベンチがハイライトするものです。

3. クローズドループ

数秒で、意味を保ったまま人間が書いたように読める文章が得られ、変更は意味的類似性によって制御されます — 同義語の置き換えではありません。リライト候補は、元のテキストとの意味的類似性がしきい値を超えた場合にのみ承認されます。だからこそ意味が保たれ、ツールが変更をでっち上げるのではなく、一節を改善できない場合に「ノーオペレーション時の自動返金」を報告するのです。

4. 検出器のクロスチェック

私たち自身のモデルからの予測は証拠ではありません。検出器APIが設定されている場合、検証ステップはリライトされたテキストを実際の検出器に送信し、その結果を記録します。それらの実行回数は 統計ページに公開されているため、私たちの数値の背後にある第三者チェックの数が可視化されます。ファーストパーティの数値はクロスチェックではありません：検出器APIに実際に送信された実行のみがそこにカウントされます。

5. 私たち自身のパターンスコアの意味

これは、一節が機械製のように読めるパターンにどれだけ依存しているかについての私たち自身のモデルの推定値です — 1回の改訂を追跡するための診断であり、第三者の検出器からの公式スコアではありません。第三者の数値（GPTZero、Turnitin、Copyleaks、Originality.ai、Sapling）を引用する場合はその旨を明記し、可能な場合はその実行をクロスチェックとして記録します。

ファーストパーティの数値。 DeAIzeが報告する数値はすべて私たち自身のものであり、私たち自身のモデルによって生成され、検出器APIを呼び出せる場合は§4に基づくクロスチェックとして記録されます。検出器ベンダーは私たちの数値を公開したり監査したりしておらず、ここにある数値は個々の文書に対する保証ではありません。TurnitinのAIライティング指標には公開スコアリングAPIがないため、このサイトのどこにもライブのTurnitin読み取り値はありません。私たちは数値に日付を付け、独立したベンチマークとして提示することはありません。

6. 限界と開示

• 検出器のスコアはバージョン、言語、テキストの長さ、ドメインによって異なります。日付と検出器のバージョンがない数値は再現不可能であるため、公開する数値には日付を付けています。
• 英語以外のパフォーマンスは英語より弱く、短いテキストは長いものよりノイズが多いです。
• ベンチマークを公開する際には、サンプルサイズ、テスト日、検出器のバージョンが付随します。ファーストパーティの数値は、監査済みベンチマークとしてではなくファーストパーティとしてラベル付けされます。なぜなら、それが実態だからです。
• 自動スコアは推定であり、証明ではありません。自分の草稿を編集することは常に正当です。他人の作品を偽って伝えることは決して正当ではありません。

訂正

ここにある数値が再現できない場合は、お知らせください。訂正します： [email protected]。