Qu’est-ce que GPTZero ? Comment l'utiliser pour détecter le texte généré par l'IA
Points essentiels à retenir
- GPTZero est un outil de détection d'IA qui aide les professeurs à différencier les écrits authentiques des textes produits artificiellement, en s'appuyant sur l'analyse de la perplexité et du caractère aléatoire.
- GPTZero offre des versions gratuites et payantes, chacune avec ses propres fonctionnalités et limites, permettant aux utilisateurs d'examiner des millions de mots chaque mois.
- Bien que GPTZero s'efforce de réduire les faux positifs, les professeurs ne doivent pas se fier uniquement à ses conclusions et doivent l'utiliser avec prudence pour éviter d'évaluer injustement les travaux.
Depuis son lancement, ChatGPT d'OpenAI a suscité des inquiétudes dans les établissements scolaires du monde entier, car les étudiants ont commencé à l'exploiter pour rédiger des dissertations et tricher lors des examens. Vu la fluidité des textes générés par le chatbot, les enseignants ont de plus en plus de difficultés à déterminer si les travaux des élèves sont originaux.
Pour aider les professeurs à évaluer les devoirs, un étudiant en informatique a mis au point GPTZero, un outil de détection d'IA qui identifie si un texte a été généré artificiellement.
Cela semble prometteur, mais GPTZero est-il réellement capable de déceler le contenu créé par l'IA, et quelle est sa fiabilité ?
Qu'est-ce que GPTZero et comment cela fonctionne-t-il ?
GPTZero est un outil d'analyse de texte par IA créé par Edward Tian, un diplômé en informatique, pour aider les enseignants à distinguer les travaux plagiés des créations originales. Cet outil examine la perplexité et l'aspect aléatoire d'un texte pour déterminer s'il a été généré par une intelligence artificielle ou écrit par un humain.
Sans rentrer dans les détails techniques, examinons ce que ces termes signifient :
- La perplexité évalue le caractère aléatoire d'un texte dans le traitement du langage naturel (TLN). Un texte rédigé par un humain a tendance à être moins structuré et plus imprévisible, ce qui se traduit par une valeur de perplexité plus élevée. À l'inverse, un texte généré par une IA devrait avoir un score de perplexité bas.
- L'aléatoire évalue d'autres facteurs non pris en compte dans la perplexité afin d'améliorer l'analyse du texte. Ce terme désigne l'apparition d'éléments inhabituels dans des groupes aléatoires. Un texte généré par une IA tend à avoir une structure plus uniforme qu'un texte écrit par un humain. L'aléatoire nous aide à identifier cela.
GPTZero Classic est accessible au public depuis début 2023 et son utilisation est gratuite. Cependant, la version gratuite est limitée à 5 000 caractères par document et ne permet d'analyser que trois documents à la fois.
GPTZero offre trois versions premium pour répondre aux besoins des utilisateurs qui souhaitent analyser des millions de mots chaque mois : Essentiel (10 $/mois), Premium (16 $/mois) et Professionnel (23 $/mois). La limite de caractères par document est plus élevée dans les versions premium que dans la version gratuite, et elles permettent d'effectuer plus d'analyses par heure, parmi d'autres avantages.
Suivez ces étapes pour vous abonner à ces versions premium :
Vous pouvez également, depuis la page d'accueil de GPTZero, cliquer sur le bouton Mettre à niveau sous la zone de texte pour consulter, comparer et acheter une offre payante.
Comment utiliser GPTZero pour détecter les textes générés par l'IA ?
Contrairement à ChatGPT, aucune inscription n'est requise sur GPTZero. Vous pouvez utiliser l'outil directement via le site web.
Une fois l'analyse terminée, GPTZero vous indique si le texte a été écrit par un humain ou généré par une intelligence artificielle.
Comment utiliser l'extension Origin de GPTZero pour détecter les textes générés par l'IA ?
En installant l'extension gratuite Origin de GPTZero sur votre navigateur Chrome, vous pouvez analyser des pages web entières et des Google Docs pour repérer les textes générés par l'IA. Cette nouvelle fonctionnalité simplifie le processus de vérification des informations en ligne.
Vous pouvez désormais visualiser les résultats et déterminer si le contenu a été écrit par un humain ou produit par une IA.
Utiliser GPTZero pour analyser votre propre style d'écriture
Une fonctionnalité qui différencie GPTZero de nombreux autres outils de détection d'IA est sa capacité à analyser vos propres schémas d'écriture. La plateforme conserve un historique de vos analyses, ce qui vous permet de consulter n'importe quel texte que vous avez analysé avec l'outil.
De plus, en cliquant sur un résultat de recherche spécifique, vous pouvez accéder à des données plus détaillées concernant votre style d'écriture. Vous pourrez ainsi comprendre pourquoi votre texte a été considéré comme étant écrit par un humain ou généré par une IA.
Ainsi, par exemple, si GPTZero a identifié un texte que vous avez rédigé comme ayant été généré par une IA, l'analyse d'écriture vous fournira les raisons, par exemple un faible score de perplexité et un caractère aléatoire élevé. Vous pouvez rectifier ces problèmes afin d'améliorer la qualité, la lisibilité et l'authenticité de votre contenu.
GPTZero est-il capable de reconnaître correctement les textes générés par l'IA ?
Afin de tester la précision de GPTZero dans la détection des textes générés par l'IA, nous allons soumettre trois textes à l'analyse : un texte produit par l'IA, un texte écrit par un humain et un texte généré par l'IA ayant été reformulé par un autre outil. Voyons comment GPTZero répond à chaque type de texte.
1. L'analyse d'un texte généré par l'IA dans GPTZero
Afin d'analyser un texte généré par l'IA, commençons par produire un texte à l'aide de ChatGPT, un chatbot d'IA utilisant la technologie GPT. Voici comment procéder :
Lors de ce test, GPTZero a donné des résultats mitigés sur une série de textes produits par l'IA. Parfois, l'outil n'arrivait pas à déterminer si le texte avait été généré par l'IA, tandis que d'autres fois, il identifiait correctement la majeure partie du texte comme étant produit par une IA.
Vous pouvez également utiliser d'autres outils de rédaction d'IA pour générer le texte que vous souhaitez analyser.
2. L'analyse d'un texte reformulé généré par l'IA dans GPTZero
Vous avez le choix parmi des centaines d'outils de reformulation pour paraphraser un texte. Dans ce cas, nous avons utilisé Scribbr. Si vous souhaitez utiliser le même outil, suivez ces étapes :
Nous avons constaté qu'une légère reformulation rendait un peu plus difficile pour GPTZero de déterminer si le texte avait été produit par l'IA, mais le résultat était globalement mitigé. Il convient également de noter que le texte reformulé était de très mauvaise qualité. Le texte de gauche était l'original, et le texte de droite la version reformulée.
3. L'analyse d'un texte écrit par un humain dans GPTZero
Dans certains cas, des outils tels que GPTZero renvoient de faux positifs, c'est-à-dire qu'ils considèrent quelque chose comme incorrect alors que ce n'est pas le cas. Afin de déterminer si GPTZero génère aussi des faux positifs, nous avons effectué plusieurs tests dans l'outil, en analysant différents textes écrits par des humains.
Les résultats de GPTZero étaient globalement exacts, malgré l'identification d'une phrase comme étant potentiellement écrite par une IA.
Peut-on se fier aux résultats de GPTZero ?
D'après nos tests, il serait risqué de se fier uniquement aux résultats de cet outil. En fait, un avertissement s'affiche chaque fois que vous générez un résultat, prévenant les professeurs de ne pas se fier aveuglément à ses conclusions.
Ainsi, à moins que le développeur de l'outil ne garantisse que ses résultats sont infaillibles, les enseignants ne devraient pas s'y fier totalement. Pourquoi ? Parce qu'il serait injuste qu'un élève soit pénalisé uniquement parce que GPTZero a renvoyé un faux positif.
Les efforts de GPTZero pour minimiser les faux positifs
Bien qu'il reste encore un long chemin à parcourir, GPTZero a réalisé des progrès importants dans la réduction des faux positifs. Un nouveau modèle d'apprentissage profond mis en œuvre par l'entreprise a permis de faire avancer ces efforts, rendant l'outil de détection d'IA bien plus fiable que les services concurrents.
Le nouveau modèle d'apprentissage profond utilise un ensemble de données de validation plus diversifié, s'appuyant sur des sources comme des textes pédagogiques, des articles de journaux, des publications sur les réseaux sociaux et du contenu de questions-réponses. Cet ensemble de données étendu et varié permet à GPTZero de mieux faire la distinction entre les textes écrits par des humains et ceux produits par l'IA. De plus, l'entreprise affirme que les prédictions de GPTZero sont désormais plus "fiables" qu'auparavant.
Ne vous fiez pas toujours aux résultats de détection d'IA
En tant qu'antidote potentiel à la technologie GPT d'OpenAI, GPTZero possède un grand potentiel ; cependant, il reste encore beaucoup de chemin à parcourir. À ce jour, il n'est pas totalement fiable. Mais la version principale de GPTZero permettra-t-elle de surmonter toutes les limites et de repérer le contenu produit par l'IA avec précision ? Nous devrons attendre pour le savoir.