Como testamos

Esta página declara exatamente o que o DeAIze mede, como uma reescrita é aceita e como ler os números que publicamos. Ela foi escrita para que qualquer pessoa possa verificar nossas afirmações com seu próprio texto.

1. O que é uma pontuação de detector

Detectores não detectam autoria; eles detectam regularidade estatística. Texto gerado por máquina tende a ser mais previsível do que a escrita humana — menor perplexidade, ritmo de frase mais uniforme, menos surpresas lexicais. Toda pontuação que você vê, incluindo a nossa, é uma estimativa de probabilidade a partir desse sinal, não uma medição de quem escreveu o texto.

2. Pontuação por frase

Uma única pontuação de documento não diz nada sobre onde está o problema. Reescreva apenas as frases que parecem feitas por máquina e deixe as que já são suas. Nossa própria verificação mostra qual é qual antes de você gastar uma palavra. As pontuações por frase são o que o ciclo de reescrita usa, e são o que o workbench destaca.

3. O ciclo fechado

Em segundos você obtém uma escrita que parece ter sido feita por uma pessoa, com seu significado intacto e a mudança condicionada à similaridade semântica — não uma troca de sinônimos. Uma candidata a reescrita é aceita apenas quando a similaridade semântica com o original ultrapassa um limite, e é por isso que o significado é preservado e por que a ferramenta relata um "reembolso automático em caso de no-op" quando não consegue melhorar uma passagem, em vez de inventar uma mudança.

4. Verificações cruzadas de detectores

Uma previsão do nosso próprio modelo não é evidência. Onde uma API de detector está configurada, a etapa de verificação envia o texto reescrito ao detector real e registra esse resultado. A contagem dessas execuções é publicada na página de estatísticas para que o número de verificações de terceiros por trás dos nossos números seja visível. Um número próprio não é uma verificação cruzada: apenas execuções realmente enviadas a uma API de detector são contadas ali.

5. O que significa nossa própria pontuação de padrão

É a estimativa do nosso próprio modelo de quanto uma passagem se apoia em padrões que parecem feitos por máquina — um diagnóstico para acompanhar uma revisão, não uma pontuação oficial de qualquer detector de terceiros. Quando citamos um número de terceiros (GPTZero, Turnitin, Copyleaks, Originality.ai, Sapling) nós dizemos isso e, quando podemos, registramos a execução como uma verificação cruzada.

Números próprios. Qualquer número que o DeAIze relata é nosso, produzido pelo nosso próprio modelo e, onde uma API de detector pôde ser chamada, é registrado como uma verificação cruzada conforme §4. Os fornecedores de detectores não publicam nem auditam nossos números, e nenhum número aqui é uma garantia para qualquer documento individual. O indicador de escrita por IA do Turnitin não tem API pública de pontuação, então não há leitura ao vivo do Turnitin em nenhum lugar deste site. Datamos nossos números e não os apresentamos como um benchmark independente.

6. Limites e divulgação

• As pontuações dos detectores variam por versão, idioma, comprimento do texto e domínio. Um número sem data e sem versão do detector não é reproduzível, por isso datamos nossos números publicados.
• O desempenho em idiomas diferentes do inglês é mais fraco do que em inglês, e textos curtos são mais ruidosos do que longos.
• Quando publicamos um benchmark, ele traz seu tamanho de amostra, data do teste e versões dos detectores. Números próprios são rotulados como próprios, e não como um benchmark auditado, porque é isso que eles são.
• Uma pontuação automatizada é uma estimativa, não uma prova. Editar seu próprio rascunho é sempre legítimo; deturpar o trabalho de outra pessoa nunca é.

Correções

Se qualquer número aqui não puder ser reproduzido, avise-nos e nós o corrigiremos: [email protected].