Détecteur d’IA pour enseignants : utiliser un résultat avec équité

Ce qu’un résultat de détecteur peut établir, et ce qu’il ne peut pas établir

Un détecteur compare un texte aux régularités qu’il a apprises sur des textes humains et des textes produits par une machine, puis renvoie un signal du modèle. Textumi désigne le résultat par l’un de cinq libellés : « Écrit par un humain », « Majoritairement humain », « Mixte : humain et IA », « Majoritairement IA » et « Généré par l’IA ».

Chaque libellé est une estimation fondée sur le style du texte, pas un constat sur son auteur. « Écrit par un humain » ne confirme pas qu’une personne a écrit le texte, et « Mixte » ou « Majoritairement IA » n’indique pas quelle part du texte une machine a rédigée : le détecteur ne mesure pas cela. Aucun libellé n’est la probabilité que l’étudiant ait utilisé l’IA.

« Écrit par un humain » ne disculpe donc personne, et « Généré par l’IA » n’accuse personne.

• Un résultat peut vous aider à choisir les copies qui méritent une lecture plus lente et plus attentive que les autres.
• Un résultat peut vous indiquer les passages sur lesquels interroger l’étudiant lors d’un entretien.
• Un résultat ne peut pas établir qui a écrit un texte, et ne doit jamais être la seule base d’une sanction ou d’un signalement pour fraude.
• Un résultat ne peut pas trancher un désaccord, car un étudiant n’a aucun moyen de discuter sur le fond avec un signal de modèle.

Les détecteurs se trompent dans les deux sens : ils signalent des textes humains et laissent passer des textes d’IA. En 2023, OpenAI a retiré son propre classificateur de textes d’IA en invoquant sa faible précision. Confrontez donc le résultat de n’importe quel outil à d’autres éléments.

Un examen équitable part de la façon dont l’étudiant a écrit

La meilleure preuve de paternité, c’est la façon dont le texte est né, et un détecteur n’en voit rien. Quand un travail vous inquiète, suivez ces étapes avant de vous faire une opinion.

1. Lisez d’abord le travail vous-même et notez ce qui vous semble anormal : un changement de ton, des sources qui n’existent pas, des affirmations jamais abordées en cours.
2. Comparez-le aux travaux antérieurs du même étudiant, idéalement à un texte écrit en classe : vocabulaire, longueur des phrases, erreurs habituelles.
3. Demandez les brouillons, les notes et le plan. Un document rédigé dans un éditeur en ligne conserve en général un historique des versions qui montre le texte grandir sur des heures ou des jours.
4. Parlez à l’étudiant en privé et sans l’accuser. Demandez-lui d’expliquer son raisonnement, de raconter comment il a trouvé une source ou de dire pourquoi il a construit un paragraphe ainsi.
5. Notez ce que vous avez examiné et ce que vous avez constaté, y compris tout ce qui plaide en faveur de l’étudiant.
6. Suivez la procédure de votre établissement et décidez sur l’ensemble des éléments, non sur un seul résultat de détecteur.

Un étudiant qui présente ses brouillons et discute de son travail en détail a répondu à la question soulevée par le détecteur. S’il n’y parvient pas, la conversation peut prendre un autre tour, mais la conclusion repose alors sur cet échange et sur les brouillons, pas sur le libellé du détecteur.

Réponses courtes et textes en langue étrangère : prudence

Un texte court donne très peu de matière à un détecteur. Textumi accepte les textes dès 5 mots, mais sous 50 mots il affiche « Trop peu de texte pour conclure » au lieu d’un libellé, et même une réponse un peu plus longue donne un résultat moins fiable qu’un essai complet. Textumi n’évalue séparément que les paragraphes d’au moins 50 mots : une réponse d’un paragraphe ou un message de forum est trop mince pour être jugé par un détecteur.

Les étudiants qui écrivent dans une langue étrangère sont plus souvent signalés à tort. En 2023, des chercheurs de Stanford ont constaté que les détecteurs classaient plus souvent comme générés par l’IA les essais de personnes dont l’anglais n’est pas la langue maternelle. Un vocabulaire plus restreint et des phrases régulières paraissent prévisibles à un modèle, et c’est justement cette prévisibilité qu’un détecteur associe à la machine.

La même prudence vaut pour les genres très codifiés, comme les comptes rendus de TP et les résumés, ainsi que pour les textes traduits, très retravaillés ou écrits en partie avec l’aide de quelqu’un.

La langue compte aussi. Les détecteurs anglais et ukrainien de Textumi sont les plus rigoureusement testés. Les dix-huit autres langues ont été entraînées et testées sur un ensemble de textes plus restreint. Le français, le vietnamien, le turc, l’indonésien et le néerlandais laissent souvent passer des textes d’IA d’autres genres : dans ces langues, un résultat « Écrit par un humain » ou « Majoritairement humain » ne dit pas grand-chose.

Une courte charte du cours sur l’IA et la détection

Les étudiants s’en sortent mieux lorsqu’ils connaissent les règles avant le premier devoir. Une page, conforme au règlement de votre établissement, peut couvrir les points suivants.

• Les usages de l’IA autorisés dans le cours, ceux qui ne le sont pas, et si la réponse change d’un devoir à l’autre.
• La façon de déclarer une aide de l’IA autorisée, par exemple par une courte note en fin de travail.
• La demande de conserver brouillons, notes et historique des versions jusqu’aux notes définitives, avec la raison de cette demande.
• Le fait qu’un détecteur peut être utilisé, que son résultat est un signal et non une preuve, et qu’aucune sanction ne reposera sur lui seul.
• Ce qui se passe après un signalement : un entretien en privé, un examen des brouillons, et la procédure officielle seulement si des doutes subsistent.
• La façon dont un étudiant peut exprimer un désaccord ou faire appel s’il estime avoir été signalé à tort.

Comment vérifier un texte dans Textumi

1. Connectez-vous à votre compte Textumi, ouvrez l’espace de travail et choisissez « Détecteur d’IA ».
2. Collez le texte ou importez un fichier DOCX, PDF, ODT, RTF, TXT ou MD de 10 Mo maximum. Le texte d’une capture d’écran ou d’une photo au format PNG ou JPEG peut être reconnu, mais relisez-le avant la vérification.
3. Laissez la détection automatique de la langue ou choisissez-la vous-même si le texte est court ou mêle plusieurs langues.
4. Cliquez sur « Analyser le texte ». Une vérification accepte jusqu’à 12 000 caractères : vérifiez un long travail en plusieurs parties.
5. Regardez le libellé à côté de l’original, puis les paragraphes surlignés. Dans un long texte, le surlignage ne couvre pas tous les paragraphes.

Le détecteur est un développement propre de Textumi : nous avons conçu et réglé ses modèles, et les vérifications s’effectuent sur nos propres serveurs, sans transmettre le texte à un fournisseur d’IA externe. Vous pouvez l’utiliser dans le navigateur, dans l’application macOS avec les forfaits Individuel et Professionnel, ou grâce au connecteur Textumi directement dans une conversation avec votre assistant IA. Nous améliorons le détecteur en continu et ajoutons régulièrement des outils qui facilitent le travail au quotidien.

Le volume de mots que vous pouvez vérifier dépend de votre forfait ; la page des tarifs indique toutes les limites. Avec les forfaits Individuel et Professionnel, les résultats restent 30 jours dans un « Historique » privé, et vous pouvez les supprimer plus tôt. Avec les forfaits sans « Historique », vous pouvez ouvrir un résultat pendant environ une heure après la fin ; ensuite, il ne vous est plus accessible et il est supprimé sous 7 jours.

Ouvrir le détecteur d’IAComparer les forfaitsLire la politique de confidentialité