Comment détecter un texte écrit par un IA ?

Comment reconnaître un texte généré par l’IA ?

Vous en avez assez ? Moi aussi.

Clairement, j’en ai assez de me connecter à Internet, que ce soit depuis mon ordinateur ou mon smartphone, et de consulter des sites ou des comptes qui m’intéressaient jusqu’alors, avant de réaliser que leurs contenus ont été générés par des intelligences artificielles. Au lieu de retrouver leur patte, leur style, ce qui me donnait envie de les lire, je me retrouve face à des textes creux, neutres et parfois mêmes agaçants.

Vous avez peut-être déjà ressenti la même chose… et si c’est le cas, vous vous êtes peut-être demandé s’il s’agissait véritablement d’une intelligence artificielle, ou bien si vous accusiez, à tort, votre influenceur•se préféré•e.

Alors comment savoir s’il s’agit d’une IA, étant donné qu’aucun outil de détection d’IA ne fonctionne ?

J’ai pour ma part récupéré des textes générés par Gemini, Claude, ChatGPT et Vibe (Mistral) ; systématiquement, les outils de détection se trompent. Ils ne reconnaissent pas un texte généré à 100 % par une IA ou, à l’inverse, accusent des auteurs publiés bien avant l’arrivée des IA génératives d’avoir été générés par une machine…

Nous sommes donc loin du compte.

Aujourd’hui, le seul moyen de réussir à reconnaître un texte d’IA est de la détecter soi-même et ce, avec votre joli cerveau fait de gras, de sang et de neurones efficaces. 🧠

YouTube player

Détecter ChatGPT, Claude ou Gemini en repérant les probabilités

Commençons par la base : le fonctionnement mécanique de l’IA générative en matière de contenu textuel.
La spécificité de l’intelligence artificielle est qu’elle « travaille » par probabilités. À partir d’un mot, d’une phrase et d’un contexte donné, elle va générer un mot qui lui semble logique. En réalité, on parle plutôt de tokens que de mots, mais ne compliquons pas les choses !
En somme, chaque mot suit le précédent en suivant une logique probabiliste.

Voici un exemple fictif généré par ChatGPT, qui illustre bien l’idée :

ContexteTokens candidatsProbabilité (exemple)
« Je bois un »café≈ 47 %
thé≈ 29 %
verre≈ 13 %
jus≈ 6 %
chocolat≈ 5 %

ChatGPT précise : «Les pourcentages sont donnés à titre d’illustration. Les probabilités réelles varient selon le modèle, le contexte de la phrase, la température et d’autres paramètres de génération. »

Là où un humain cherche de la variété, trouve des mots qui font référence à sa propre histoire, à sa propre culture, l’IA, elle, se base sur des pourcentages et des probabilités. Elle utilise donc régulièrement les mêmes mots, surtout dans des contextes classiques.

Ces textes générés par des IA nourrissent le Web… et nourrissent les IA génératives qui viennent puiser sur Internet pour générer de nouveaux textes. C’est le serpent qui se mord la queue se mange la queue.
Ce phénomène porte un nom : le model collapse.

Une fois qu’on a compris ce système, il est plus facile de repérer des textes générés par IA, puisque le vocabulaire est beaucoup plus prévisible, probable et neutre que s’il s’agissait d’un humain.
Cherchez les aspérités !

Les structures d’opposition, la plus grande faille de l’IA générative

À mon sens, la plus grande faiblesse de l’IA réside dans la génération de structures par opposition.

« Ce n’est pas… c’est… »

« Pas seulement… »
En voici un exemple concret (tiré d’un vrai post LinkedIn) :

Ici nous avons un magnifique « Ce qui m’inquiète, ce n’est pas », suivi de près par un «Le langage ne se télécharge pas. Il se… » et pour terminer un « Ce que je ne veux pas (…) c’est ».
Notez également les autres tics de l’IA générative : répétitions du « Nous », phrases courtes, «.C’est », «Ce que… ».

Ça vous plait ?

D’autres exemples de structures d’opposition un peu lus subtils :

« Elle accompagne les moments clés sans jamais les submerger»

« La famille n’est pas une question de biologie, mais de choix et d’amour »

« il ne se contente pas de raconter une histoire ; il dissèque les âmes »

L’IA générative peut faire cela plusieurs fois par paragraphe, comme vous avez pu le voir dans la capture d’écran.

Allez, un petit dernier pour le plaisir et pour célébrer la contradiction de ce post :

La fausse profondeur, l’émotion surjouée : des indices pour reconnaître un texte généré par IA

Que celui ou celle qui a lu l’excellent livre de Marcus du Sautoy Le code de la créativité lève la main !
Personne ? Alors je vous le dis tout de suite : c’est une pépite.

L’auteur décortique tous les domaines dans lesquels l’IA excelle et nous explique, par la démonstration, la différence entre créativité et génération.

Il se trouve justement que l’écriture est un art (créatif, mais c’est sans doute un pléonasme) qui nous permet, entre autres, de partager des émotions. L’intelligence artificielle, voulant absolument faire comme nous, tente de reproduire artificiellement ces fameuses émotions.

Cela crée un effet de fausse profondeur dans les textes. l’IA n’a rien vécu, rien ressenti, elle se base simplement sur des probabilités pour générer des tokens. Les sensations sont exagérées, tandis que le contenu semble neutre, facile et déjà vu.

Un petit exemple provenant de Vibe :

« chaque plan, chaque silence, chaque regard échangé entre les personnages résonne avec une intensité rare. »

Et un autre avec ce faux compte de psychologie 100 % IA :

/

La neutralité, un signe typique de l’intelligence artificielle

Dernier point dont je voulais vous parler : la neutralité de l’IA générative.

L’IA ne peut pas partager un point de vue (elle n’en a pas) et ne peut surtout pas s’engager sur quoi que ce soit. Elle a été conçue pour être NEUTRE afin de ne heurter personne.

Vous l’avez d’ailleurs peut-être remarqué, elle est excellente pour neutraliser toute émotion lorsqu’on est en colère ou agacé. Cet aspect peut être très pratique pour régler un conflit, mais plutôt gênant lorsqu’il s’agit de partager un point de vue.

Bref, si vous trouvez qu’un texte manque un peu de piquant alors qu’il aurait dû être engagé, ce peut être un signe que l’IA est passée par là, mais attention, cet aspect doit être combiné aux autres.

Ouf, j’ai assez écrit pour aujourd’hui. À force d’utiliser l’IA, j’ai un peu perdu la main.

Cet article vous a donné envie d’aller plus loin et d’obtenir votre badge de rédacteur/rédactrice sans IA, ce sera par ici : label écrire sans IA.

À très vite,

Lucie Rondelet

Partager l'article

Laisser un commentaire

Votre adresse e-mail ne sera pas publiée. Les champs obligatoires sont indiqués avec *

Ce site utilise Akismet pour réduire les indésirables. Découvrez comment les données de vos commentaires sont traitées.

Newsletter
error: Content is protected !!