Comment nous testons

Cette page indique exactement ce que DeAIze mesure, comment une réécriture est acceptée, et comment lire les chiffres que nous publions. Elle est rédigée pour que quiconque puisse vérifier nos affirmations par rapport à son propre texte.

1. Ce qu'est un score de détecteur

Les détecteurs ne détectent pas la paternité ; ils détectent une régularité statistique. Le texte généré par machine tend à être plus prévisible que l'écriture humaine — perplexité plus faible, rythme de phrase plus plat, moins de surprises lexicales. Chaque score que vous voyez, y compris le nôtre, est une estimation de probabilité à partir de ce signal, pas une mesure de qui a écrit le texte.

2. Notation au niveau de la phrase

Un score unique pour un document ne vous dit rien sur l'endroit où se situe le problème. Ne réécrivez que les phrases qui semblent générées par machine et laissez celles qui sont déjà les vôtres. Notre propre vérification vous montre lesquelles sont lesquelles avant que vous ne dépensiez un mot. Les scores par phrase sont ce sur quoi agit la boucle de réécriture, et ce que l'atelier met en évidence.

3. La boucle fermée

En quelques secondes, vous obtenez un texte qui se lit comme écrit par une personne, avec votre sens intact et la modification conditionnée par la similarité sémantique — pas un simple échange de synonymes. Un candidat de réécriture n'est accepté que lorsque la similarité sémantique avec l'original dépasse un seuil, ce qui explique pourquoi le sens est préservé et pourquoi l'outil signale un « remboursement automatique en cas de non-modification » lorsqu'il ne peut pas améliorer un passage plutôt que d'inventer une modification.

4. Vérifications croisées des détecteurs

Une prédiction de notre propre modèle n'est pas une preuve. Lorsqu'une API de détecteur est configurée, l' étape de vérification envoie le texte réécrit au détecteur réel et enregistre ce résultat. Le nombre de ces exécutions est publié sur la page de statistiques afin que le nombre de vérifications tierces derrière nos chiffres soit visible. Un chiffre de première partie n'est pas une vérification croisée : seules les exécutions réellement envoyées à une API de détecteur sont comptées ici.

5. Ce que signifie notre propre score de motifs

Il s'agit de l'estimation de notre propre modèle sur la mesure dans laquelle un passage s'appuie sur des motifs qui semblent générés par machine — un diagnostic pour suivre une révision, pas un score officiel d'un détecteur tiers. Lorsque nous citons un chiffre tiers (GPTZero, Turnitin, Copyleaks, Originality.ai, Sapling), nous le précisons et, lorsque nous le pouvons, enregistrons l'exécution comme vérification croisée.

Chiffres de première partie. Tout chiffre rapporté par DeAIze est le nôtre, produit par notre propre modèle, et lorsqu'une API de détecteur a pu être appelée, il est enregistré comme vérification croisée au §4. Les fournisseurs de détecteurs ne publient ni n'auditent nos chiffres, et aucun chiffre ici ne constitue une garantie pour un document individuel. L'indicateur d'écriture IA de Turnitin n'a pas d'API de notation publique, donc il n'y a pas de relevé Turnitin en direct nulle part sur ce site. Nous datons nos chiffres et nous ne les présentons pas comme un benchmark indépendant.

6. Limites et divulgation

• Les scores des détecteurs varient selon la version, la langue, la longueur du texte et le domaine. Un chiffre sans date ni version de détecteur n'est pas reproductible, c'est pourquoi nous datons nos chiffres publiés.
• Les performances en langue non anglaise sont plus faibles qu'en anglais, et les textes courts sont plus bruités que les longs.
• Lorsque nous publions un benchmark, il comporte sa taille d'échantillon, sa date de test et les versions des détecteurs. Les chiffres de première partie sont étiquetés comme tels plutôt que comme un benchmark audité, parce que c'est ce qu'ils sont.
• Un score automatisé est une estimation, pas une preuve. Modifier votre propre brouillon est toujours légitime ; présenter le travail de quelqu'un d'autre de manière trompeuse ne l'est jamais.

Corrections

Si un chiffre ici ne peut pas être reproduit, dites-le-nous et nous le corrigerons : [email protected].