Turnitin détecte-t-il l’IA ? - Scores et fonctionnement

Author image
Écrit par  Dr. Lily Chen
2024-12-19 18:03:03 7 min de lecture

Salut! Vous êtes-vous déjà demandé comment Turnitin garde un œil sur le contenu généré par l'IA dans vos devoirs? 

Que vous soyez un étudiant stressé à cause d'un travail de session, ou un enseignant cherchant à maintenir l'équité, comprendre les outils de Turnitin est essentiel. 

Alors, explorons comment fonctionne ce système astucieux, ce qu'il peut détecter et qui a accès à quoi. Allons-y!

Turnitin détecte-t-il le bandeau d'IA

Turnitin détecte-t-il l'IA ?

Oui, Turnitin est capable de détecter le contenu créé par l'IA et de générer un rapport. Cette fonctionnalité a été intégrée aux services de Turnitin depuis le 4 avril 2023, garantissant que tous les devoirs soumis via la plateforme sont non seulement vérifiés pour le plagiat mais aussi pour le contenu généré par l'IA.

Qui peut accéder au rapport de détection de l'IA ?

L'accès aux rapports de détection de l'IA dépend si l'établissement ou l'enseignant a activé cette option. En général, ces rapports, qui comportent un score d'IA indiquant la probabilité que le contenu soit généré par l'IA, ne sont pas accessibles aux étudiants. Ils sont généralement réservés aux enseignants qui peuvent ensuite décider d'utiliser ces informations pour orienter des actions ou discussions supplémentaires sur l'intégrité académique.

Vous vous demandez ce que voit votre professeur lorsqu'il vérifie votre document sur Turnitin ?  

Pas de panique, il y a une solution si vous êtes curieux de tout savoir sur votre travail. Des services comme "EssayDone Turnitin Detector" sont là pour vous aider ! En utilisant les données officielles de Turnitin, ce service vous permet de voir exactement ce que votre enseignant voit. Vous obtenez un rapport qui inclut à la fois le pourcentage de similarité et les résultats de détection d'IA. C'est un excellent outil pour tout étudiant souhaitant approfondir, comprendre ses résultats et peaufiner ses devoirs avant la soumission finale.

Qui Peut Accéder au Détecteur d'Écriture par IA de Turnitin?

Seuls les utilisateurs disposant d'une licence Originalité Turnitin peuvent accéder à la détection de l'écriture par IA. Si vous utilisez Turnitin Similarity, Feedback Studio, ou Originality Check, vous devrez discuter des options d'accès avec votre responsable de compte Turnitin. Les utilisateurs d'iThenticate 2.0 peuvent également ajouter cette fonctionnalité en contactant leur responsable de compte.

À partir du 1er janvier 2024, la détection de l'écriture par IA sera exclusivement disponible via la licence Originalité. Sans cette licence, les utilisateurs n'auront pas accès aux scores et aux rapports d'IA, même pour les soumissions passées. Cependant, les institutions disposant du module complémentaire Originalité peuvent voir les données IA sur toutes les soumissions.

La détection par IA est disponible dans les Rapports de Similarité sur les plateformes LMS telles que Moodle, Blackboard, et Canvas, bien que les utilisateurs doivent accéder au rapport complet pour voir les détails d'IA.

University Turnitin LMS

Comment fonctionne l'indicateur d'IA de Turnitin

Aperçu 

Lorsque un document est soumis à Turnitin, le système commence son analyse en découpant le texte en morceaux d'environ cinq à dix phrases. 

Ces segments se chevauchent intentionnellement pour s'assurer que chaque phrase est analysée dans son contexte global. Le modèle de détection d'IA de Turnitin évalue ensuite chaque phrase sur une échelle de 0 à 1, où 0 indique qu'elle est probablement écrite par un humain et 1 suggère une génération par IA. 

Une moyenne de ces scores à travers le document est calculée pour offrir une estimation globale de l'ampleur du contenu potentiellement généré par l'IA.

Modèles d'IA détectables

Les capacités de détection d'IA de Turnitin incluent actuellement :

  • GPT-3 et GPT-3.5 : Modèles initiaux sur lesquels Turnitin s'est concentré pour identifier le texte émanant d'outils comme ChatGPT.

  • GPT-4 : Après diverses évaluations, Turnitin a confirmé que son système détecte souvent les textes de GPT-4, connu aussi sous ChatGPT Plus.

  • Projets d'expansion : Turnitin développe l'intégration de modèles comme GPT-4o et LLaMA pour élargir ses capacités de détection, suivant ainsi le développement continu des LLMs.

Capacités de détection

Le détecteur d'IA de Turnitin identifie notamment :

  • Contenu généré par l'IA : Textes intégralement produits par une IA.

  • Contenu paraphrasé par l'IA : Textes d'abord générés par une IA puis révisés par des outils de paraphrasage comme Quillbot ou Scribbr. Cette fonctionnalité accroît la détection de modifications subtiles visant à éviter d'être repérées.

Indicateurs et rapport

Dans le rapport d'évaluation de Turnitin, le code couleur est utilisé pour distinguer plusieurs types d'interaction IA, aidant les instructeurs à interpréter les résultats facilement.

Le modèle de Turnitin exige une certitude de 98% avant de signaler un contenu comme créé par l'IA, garantissant ainsi un haut niveau de précision pour minimiser les faux positifs, mais reconnaît que 15% des textes générés pourraient passer inaperçus.

Turnitin Report- 83 Percent Detected as AI

Intégration LMS

Les fonctionnalités de détection d'IA de Turnitin sont intégrées via le rapport de similarité dans des plateformes LMS comme Moodle, Blackboard et Canvas. Néanmoins, les indicateurs ne sont pas affichés directement; il faut consulter le rapport détaillé pour l'évaluation IA.

Considérations pour le biais

En reconnaissant le risque de biais, notamment contre les apprenants d'une seconde langue ou des domaines moins fréquents, Turnitin a conçu son modèle en s'assurant de réduire les désavantages pour les groupes sous-représentés, visant une utilisation équitable dans les divers contextes académiques.

Rapport d'IA de Turnitin : Score, Indicateurs Visuels & Pourcentage

Dans le Rapport de Similarité de Turnitin, la section du Rapport d'IA détaille deux scores spécifiques :

  • Texte généré par IA : Ce score identifie le texte provenant probablement d'un outil d'IA, spécifiquement d'un Modèle de Langage de Grande Taille (LLM).

  • Texte paraphrasé par IA : Ce score indique le texte qui semble généré par IA avant d'être modifié par des outils de paraphrase IA tels que Quillbot.

Indicateurs Visuels dans le Rapport

Turnitin utilise diverses couleurs dans ses rapports pour indiquer différents niveaux d'implication de l'IA :

  • Surlignage cyan : Marque le texte probablement généré par IA.

  • Surlignage violet : Indique le texte généré et paraphrasé par IA.

  • Bleu avec un pourcentage (0-100) : Indique la portion du texte de la soumission probablement générée par IA, avec un accent sur la prose.

  • Gris (sans pourcentage) : Signale que la soumission ne peut pas être traitée pour détection de l'IA, probablement en raison de fichiers incompatibles.

  • Erreur (!) : Indique un échec de traitement, nécessitant un nouvel essai ou une action supplémentaire si la soumission est conforme.

Pour éviter les faux positifs, les scores de détection IA inférieurs à 20% sont traités avec prudence :

  • 0%-19% (*%) : Ces pourcentages faibles sont signalés par un astérisque et un pourcentage (*%) sans être quantifiés dans le rapport, afin de réduire les erreurs d'identification de texte humain comme généré par IA.

Score de Similarité de Turnitin

Quelle quantité d'IA est autorisée dans Turnitin ?

Turnitin n'impose pas de limite maximale sur le contenu généré par IA ; il se contente de signaler une implication notable de l'IA. L'acceptation des contenus générés par l'IA dépend des politiques d'intégrité académique de chaque institution, donc étudiants et professeurs doivent se référer à leurs directives pour comprendre l'utilisation permise de l'IA dans les travaux académiques.

Facteurs Conduisant à de Mauvais Scores de Similarité de Turnitin

Distinction avec les Scores de Similarité

  • Score de Similarité : Évalue le pourcentage de texte qui correspond à des sources dans la vaste base de données de Turnitin.

  • Pourcentage de Détection IA : Analyse de manière indépendante combien du texte peut avoir été généré par des outils d'IA. Ce score est séparé du score de similarité, se concentrant uniquement sur le contenu généré par IA.

Gestion des erreurs de jugement dans la détection par IA de Turnitin

La détection par IA de Turnitin vise une grande précision mais peut parfois se tromper, surtout avec des textes présentant peu de variations structurelles ou un fort remaniement. Si vous pensez qu'une soumission est incorrectement signalée :

  1. Fournir des commentaires : Utilisez le bouton de commentaires dans le rapport d'écriture par IA pour informer Turnitin. Cela aide à améliorer la précision au fil du temps.

  2. Revue contextuelle : Pour les documents longs, tenez compte du mélange entre texte généré par IA et texte original. Dans les textes courts, l'approche "tout ou rien" du système peut considérer un contenu mixte comme entièrement généré par IA.

  3. Discrétion des enseignants : Les enseignants devraient se servir des résultats de détection de l'IA avec d'autres évaluations et discussions avec les étudiants pour assurer une évaluation équitable de leur travail, en reconnaissant les limites du modèle pour distinguer le texte généré par IA du texte humain.

FAQ Green

FAQ

La détection d'IA de Turnitin est-elle gratuite ?

Non, Turnitin commencera à facturer ses services de détection d'écriture IA à partir de janvier 2024.

La détection d'IA peut-elle analyser les documents soumis précédemment ?

Oui, vous pouvez vérifier l'écriture IA dans les devoirs soumis précédemment si ceux-ci sont resoumis pour analyse et si la détection d'IA est activée sur votre compte.

Quelles langues Turnitin prend-il en charge ?

La détection d'IA de Turnitin prend actuellement en charge les documents en anglais et, à partir de septembre 2024, en espagnol pour les contenus longs. Cependant, les capacités de détection de paraphrase IA ne sont disponibles que pour les soumissions en anglais.

Comment masquer le rapport d'IA ?

Les administrateurs ont la possibilité de désactiver la fonctionnalité de détection d'IA dans les paramètres du compte Turnitin, ce qui masque effectivement le rapport d'IA des résultats.

La technologie de détection d'IA évoluera-t-elle avec le temps ?

Oui, à mesure que Turnitin continue de développer et d'affiner son modèle, les capacités de détection et, par conséquent, les pourcentages d'IA peuvent changer. Cependant, le pourcentage d'IA pour un document spécifique restera statique, à moins qu'il ne soit resoumis pour traitement.

Turnitin marque-t-il le texte modifié par Grammarly comme étant généré par IA ?

Le détecteur de Turnitin ne marque généralement pas le texte modifié par les outils de base de correction orthographique, grammaticale et de ponctuation de Grammarly comme généré par l'IA. Cependant, le contenu produit à l'aide des fonctionnalités génératives basées sur l'IA de Grammarly (comme la rédaction et le paraphrasage) sera probablement identifié comme généré par l'IA.

Conclusion

En résumé, Turnitin dispose de capacités robustes pour détecter le contenu généré par l'IA, fournissant des outils essentiels pour maintenir l'intégrité académique.

Bien que les enseignants puissent examiner tous les détails des rapports, les étudiants devront probablement chercher ailleurs pour obtenir les mêmes informations.

Rappelez-vous, l'efficacité de Turnitin dépend vraiment de la façon dont votre établissement l'utilise. Nous espérons que cette explication vous a été utile — merci d'avoir écouté !