Turnitin repère QuillBot? Voilà comment il vous attrape
Turnitin peut-il détecter Quillbot ? En résumé, oui. Mais comment et pourquoi précisément ?
Depuis 2023, le détecteur d'IA de Turnitin repère non seulement le contenu généré par l'IA, mais identifie aussi les textes reformulés par des outils d'IA tels que Quillbot.
Autrement dit, même si vous créez du contenu avec ChatGPT (ou un autre modèle d'IA) et que vous l'injectez ensuite dans Quillbot pour en changer la formulation, Turnitin peut fort probablement en retrouver la source artificielle. Mais quel type de texte est détecté, et comment ? Examinons pourquoi les modifications de Quillbot ne sont peut-être pas aussi discrètes qu'on le pense.
Qu'est-ce que Turnitin ?
Turnitin est un outil académique largement utilisé par les établissements scolaires et universitaires pour détecter le plagiat et les contenus générés par l'IA dans les travaux étudiants. Il compare les soumissions à une vaste base de données comprenant des pages web, des travaux d'étudiants et des sources académiques. Désormais, il utilise également des modèles de détection d'IA pour identifier les contenus susceptibles d'avoir été rédigés ou reformulés par des modèles linguistiques importants tels que ChatGPT.
Il indique :
Rapports de similarité (mettant en évidence les passages copiés ou présentant de fortes similitudes)
Indicateurs de rédaction IA (signalant les contenus potentiellement générés ou reformulés par une IA)
Comment le modèle a-t-il été entraîné ?
Le modèle de détection d'IA de Turnitin a été développé à partir d'un vaste ensemble de données comprenant deux types principaux de textes : des articles universitaires authentiques rédigés par des humains et des textes générés par l'IA. Cet ensemble de données couvre un large éventail de sujets et de disciplines académiques, reflétant ainsi la diversité des travaux étudiants.
Les données d'entraînement comprennent également des échantillons de textes provenant de différentes régions et populations, notamment des étudiants utilisant l'anglais comme langue seconde, afin de réduire les biais de détection. En incluant des domaines moins courants tels que l'anthropologie, la géologie et la sociologie, le modèle vise une précision élevée dans divers domaines.
Le modèle apprend à identifier les motifs statistiques dans le choix des mots et la structure des phrases qui distinguent les contenus générés par l'IA de la rédaction humaine. Cette méthode d'entraînement permet au modèle de généraliser au-delà d'exemples spécifiques et de détecter la rédaction par IA, même lorsque les modèles linguistiques évoluent.
Qu'est-ce que QuillBot ?
QuillBot est une plateforme d'écriture polyvalente offrant divers outils pour faciliter les tâches de rédaction, notamment la vérification grammaticale, la synthèse et la reformulation.
Il propose deux fonctionnalités dédiées à la réécriture de texte : QuillBot Paraphrase et AI Humanization Tool. Cette dernière ne prend actuellement en charge que les variantes anglaises (australienne, canadienne, britannique et américaine). Ces outils permettent de réécrire un texte en modifiant la structure des phrases, en remplaçant des synonymes et en ajustant les règles de grammaire, tout en conservant le sens initial.
Toutefois, les reformulations sont souvent assez légères, ce qui implique que les modifications sont généralement subtiles. Par conséquent, son efficacité pour déjouer la détection de l'IA peut être limitée.
Comment Turnitin détecte-t-il Quillbot ?
Comme indiqué précédemment, Turnitin est capable de détecter non seulement les contenus générés par l'IA, mais aussi ceux qui ont été paraphrasés à l'aide d'outils comme Quillbot. Mais comment cela fonctionne-t-il concrètement ?
Fonctionnement détaillé :
Lorsqu'un document est soumis, Turnitin le divise en plusieurs segments qui se chevauchent, généralement des blocs de 2 à 3 phrases. Cette approche permet d'analyser chaque phrase dans son contexte plutôt que de manière isolée.
Chaque segment reçoit une note de 0 à 1, un score élevé indiquant une forte probabilité que le segment ait été produit par une IA.
Si un segment est fortement suspecté d'avoir été généré par une IA, Turnitin effectue une analyse plus approfondie pour détecter une éventuelle paraphrase. Le système vérifie alors si le texte a été réécrit par un outil d'IA plutôt que d'avoir été créé de toutes pièces.
Les outils tels que Quillbot reformulent les textes en modifiant la structure des phrases, en remplaçant des synonymes et en ajustant la grammaire. Cependant, ces modifications laissent souvent des "signatures" caractéristiques de l'IA, comme des tournures de phrase répétitives ou un style d'écriture artificiel.
Le modèle de détection de paraphrase de Turnitin repère ces indices subtils et évalue la probabilité qu'une IA ait été utilisée pour reformuler le texte, toujours sur une échelle de 0 à 1.
Alors, Turnitin détecte-t-il Quillbot ?
Ce processus montre clairement que Turnitin est tout à fait capable de repérer les contenus générés ou paraphrasés par une IA. Bien que la reformulation opérée par Quillbot puisse réduire les correspondances directes qui déclenchent les contrôles anti-plagiat classiques, elle ne supprime pas complètement les schémas propres à l'IA que les modèles de détection de Turnitin sont conçus pour identifier.
Turnitin ne se contente pas de rechercher les passages copiés : il analyse également la structure des phrases, le choix des mots et le sens général du texte. Ces indices, souvent discrets, subsistent dans les reformulations de Quillbot, surtout si elles n'ont pas été réalisées avec suffisamment de soin.
La capacité de Turnitin à identifier les contenus Quillbot dépend en grande partie de l'étendue des modifications apportées au texte original et de la qualité de la paraphrase. La technologie de détection d'IA de Turnitin étant en constante évolution, il devient de plus en plus difficile pour les reformulations superficielles de passer inaperçues.
Quelle est la fiabilité de la détection d'IA de Turnitin ?
Dans quelle mesure Turnitin est-il fiable pour identifier les contenus écrits ou paraphrasés par une IA ? D'après les données de Turnitin, la détection est plutôt précise, mais pas infaillible. L'entreprise reconnaît d'ailleurs ces limites.
Turnitin a d'abord entraîné et testé son système sur 800 000 travaux d'étudiants rédigés avant l'apparition de ChatGPT. Cette base de données, constituée de véritables textes rédigés par des humains, a permis d'éviter de faussement accuser des étudiants d'avoir utilisé une IA.
L'objectif principal est de limiter au maximum les faux positifs. Voici comment cela se traduit :
Les scores faibles sont assortis d'un avertissement. Si Turnitin attribue à votre document un score inférieur à 20 % en matière d'IA, un astérisque indique que le résultat est potentiellement peu fiable.
Les faux positifs sont rares. Moins de 1 % des travaux entièrement rédigés par des humains sont signalés à tort comme contenant de l'IA, alors qu'ils n'en contiennent pas (ou moins de 20%).
Pour maintenir un taux de faux positifs aussi bas, le système est prudent, ce qui signifie qu'il peut parfois ne pas détecter un contenu réellement généré par une IA. Turnitin estime ainsi qu'environ 15 % des contenus générés par une IA échappent à sa détection. Par conséquent, si 50 % de votre travail est signalé comme ayant été écrit par une IA, la proportion réelle pourrait être plus proche de 65 %.
Le système a besoin d'un minimum de 300 mots pour réaliser son analyse, car les textes courts sont plus difficiles à évaluer avec précision. Turnitin a également récemment amélioré sa gestion de l'introduction et de la conclusion des travaux, qui étaient auparavant plus susceptibles de déclencher de fausses alertes.
Qu'en est-il des textes paraphrasés par une IA ?
Le détecteur de paraphrase de Turnitin fonctionne légèrement différemment. Il ne s'active qu'une fois que le détecteur principal a identifié un texte comme étant probablement généré par une IA. Son action n'a donc pas d'incidence directe sur les taux de précision mentionnés précédemment.
La détection de paraphrase n'est cependant pas parfaite. Elle peut parfois :
Confondre un texte généré par une IA avec un texte paraphrasé par une IA.
Confondre un texte paraphrasé par une IA avec un simple texte généré par une IA.
Autrement dit, le modèle peut se tromper sur le "type" d'IA utilisé, mais il détecte généralement l'intervention d'une IA.
Comment obtenir un rapport Turnitin après avoir utilisé Quillbot ?
Si vous avez reformulé votre contenu avec Quillbot et que vous souhaitez évaluer la façon dont Turnitin pourrait l'analyser, plusieurs options s'offrent à vous pour obtenir un rapport Turnitin. Il est toutefois important de noter que Turnitin n'est pas directement accessible aux particuliers. Il s'agit d'un service proposé sous licence à des établissements, principalement des universités et des écoles.
Voici les principales possibilités :
1. Soumettre votre travail par l'intermédiaire de votre établissement
Si vous êtes étudiant, c'est la solution la plus simple. Déposez votre travail modifié par Quillbot de la manière habituelle. Une fois le document soumis, votre professeur (ou le système, selon la configuration) générera un rapport Turnitin. Vous pourrez généralement consulter ce rapport sur la plateforme d'apprentissage de votre établissement (Moodle, Blackboard ou Canvas, par exemple), en fonction des paramètres définis par votre école.
2. Demander une copie du rapport à votre professeur
Certains établissements autorisent les étudiants à consulter leurs rapports de similarité et d'IA, tandis que d'autres ne le permettent pas. Si votre école ne vous communique pas automatiquement les résultats, vous pouvez demander à votre professeur de vous les transmettre, notamment si vous souhaitez vérifier la présence d'éventuels passages plagiés ou signalements d'IA.
3. Utiliser un système de dépôt de brouillon intégré à Turnitin (si disponible)
Certains établissements proposent aux étudiants de soumettre une version préliminaire de leur travail à Turnitin avant la date limite. Cette option vous permet de consulter l'indice de similarité et d'apporter les modifications nécessaires. C'est une bonne occasion de tester la résistance de la paraphrase de Quillbot.
4. Effectuer une vérification préalable avec d'autres outils de détection de similarité
Si vous n'avez pas directement accès à Turnitin, vous pouvez néanmoins avoir une idée des performances de votre texte modifié par Quillbot en utilisant des outils tiers qui reposent sur des systèmes de détection similaires. Veillez simplement à utiliser des plateformes qui ne conservent pas votre document afin d'éviter tout auto-plagiat involontaire.
Par exemple, le site turnitindetector.com fournit une évaluation instantanée du plagiat et de la présence de contenu généré par une IA, en s'appuyant sur le système de détection officiel de Turnitin. Il vous fournit un rapport similaire à celui que votre établissement pourrait consulter, avec notamment les pourcentages de similarité et les indicateurs de contenu IA.
FAQ
Peut-on se faire prendre pour plagiat en utilisant QuillBot ?
Oui. Bien que QuillBot puisse reformuler un texte, il ne supprime pas complètement les traces de l'original. Turnitin peut toujours détecter les schémas paraphrasés ou générés par l’IA, surtout si la réécriture est légère.
Turnitin peut-il détecter l’IA si je paraphrase ?
Dans de nombreux cas, oui. Si l’original a été écrit par l’IA, puis paraphrasé (même avec un outil comme QuillBot), le détecteur d’IA de Turnitin peut toujours reconnaître la structure sous-jacente et le signaler.
QuillBot est-il efficace contre Turnitin ?
Pas entièrement. QuillBot peut aider à réduire les correspondances exactes, mais il ne garantit pas que vous éviterez la détection. Turnitin est conçu pour repérer le contenu paraphrasé et rédigé par l’IA, et pas seulement les textes copiés.
Turnitin peut-il détecter ChatGPT ?
Oui. Turnitin peut détecter ChatGPT. Son modèle de détection de l’IA est spécifiquement entraîné pour identifier les schémas typiques des grands modèles linguistiques. Bien que ce ne soit pas parfait, il peut signaler de manière fiable le contenu qui montre des signes de génération par l’IA, en particulier dans les textes plus longs.
Réflexions finales
Alors, Turnitin peut-il détecter QuillBot ? Comme nous l'avons vu dans cet article, la réponse est oui, et ce pour une bonne raison.
Bien que QuillBot puisse aider à réduire les correspondances directes en reformulant le contenu, il ne supprime pas les schémas d'IA sous-jacents que les modèles de détection de Turnitin sont conçus pour repérer.
L'efficacité de QuillBot dépend grandement du niveau de réécriture du texte et de la sophistication des modèles de Turnitin. Actuellement, Turnitin continue de s'améliorer, et une simple reformulation ne suffit pas à garantir que vous éviterez d'être détecté.