我们如何测试
本页明确说明 DeAIze 测量什么、改写如何被接受,以及如何解读我们发布的 数字。其撰写方式让任何人都能对照自己的文本核查我们的说法。
1. 什么是检测器分数
检测器检测的不是作者身份,而是统计规律性。机器生成的文本 往往比人类写作更可预测——更低的困惑度、更平缓的句子节奏、 更少的词汇意外。你看到的每一个分数,包括我们的,都是基于 该信号的概率估计,而不是对文本作者的测量。
2. 句子级评分
单一的文档分数无法告诉你问题出在哪里。只改写那些读起来像机器生成的句子,保留那些已经是你自己写的句子。我们自己的检查会在你花费一个字之前告诉你哪些是哪些。 逐句分数是改写循环所依据的,也是工作台 所高亮的。
3. 闭环
几秒钟内你就能得到读起来像人写的文字,你的意思保持不变,且改动受语义相似度约束——而不是同义词替换。只有当改写候选与原文的语义相似度 超过阈值时才会被接受,这就是为什么意思得以保留,也是为什么当工具无法改进一段文字时,它会报告 “无操作自动退款”,而不是凭空编造改动。
4. 检测器交叉验证
来自我们自己模型的预测不是证据。在配置了检测器 API 的地方, 验证步骤会将改写后的文本发送给真实检测器并记录该结果。这些运行的次数发布在 统计页面上,因此我们数字背后的 第三方检查次数是可见的。第一方数字不是交叉验证: 只有实际发送到检测器 API 的运行才会在那里被计入。
5. 我们自己的模式分数意味着什么
这是我们自己的模型对一段文字在多大程度上依赖读起来像 机器生成的模式的估计——用于跟踪一次修订的诊断指标,而不是来自任何 第三方检测器的官方分数。当我们引用第三方数字(GPTZero、Turnitin、Copyleaks、 Originality.ai、Sapling)时,我们会说明,并在可能的情况下将该次运行记录为交叉验证。
第一方数字。 DeAIze 报告的任何数字都是我们自己的,由我们自己的 模型生成,并且在可以调用检测器 API 的地方,会按 §4 记录为交叉验证。 检测器供应商不会发布或审计我们的数字,这里的任何数字都不构成对任何 单个文档的保证。Turnitin 的 AI 写作指标没有公开的评分 API,因此本网站任何地方都没有 实时的 Turnitin 读数。我们会标注数字的日期,并且不会将其作为 独立基准来呈现。
6. 局限与披露
- 检测器分数因版本、语言、文本长度和领域而异。没有日期和检测器版本的数字不可复现,因此我们会标注所发布数字的日期。
- 非英语表现弱于英语,短文本比长文本噪声更大。
- 当我们发布基准时,会附带其样本量、测试日期和检测器版本。第一方数字被标注为第一方,而不是经过审计的基准,因为它们本来就是如此。
- 自动分数是估计,不是证据。编辑你自己的草稿始终是正当的;歪曲他人的作品则从来不是。
更正
如果这里的任何数字无法复现,请告诉我们,我们会更正: [email protected]。