Comment repérer les avis générés par l'IA

Photo de Lisa Fotios.

La question qu’on me pose le plus souvent est : « Comment est-il possible de repérer un texte généré par l’IA ? » Après tout, ChatGPT est tellement performant. Et quand on ne dispose que des mots écrits sur la page, comment peut-on même commencer à deviner d’où ils proviennent ? Eh bien, comme on dit, le style, c’est la personnalité.

Si vous passez suffisamment de temps à lire Brandon Sanderson, vous serez capable de reconnaître son style même si vous tombez sur un extrait hors contexte. Si vous passez suffisamment de temps à corriger les dissertations de collégiens, vous saurez faire la différence entre les élèves de 5e et ceux de 3e. Et nous avons de la chance, car non seulement ChatGPT se distingue davantage que ces deux groupes, mais nous disposons également d’une multitude d’exemples sur lesquels nous appuyer.

Commençons par un exemple simple : voici un avis sur Google Maps:

Le terrain de Pouch Camporee occupe une place particulière dans le cœur des scouts, et je ne saurais trop vanter les mérites de ce site scout exceptionnel. C'est un véritable paradis pour les scouts, et je ne pourrais être plus satisfait de l'expérience que j'y ai vécue.

Le camping est exceptionnellement bien équipé, avec de vastes espaces de camping, divers espaces dédiés aux activités et des installations bien entretenues. La beauté du cadre naturel en fait l'endroit idéal pour que les scouts se reconnectent avec la nature et acquièrent des compétences essentielles en matière de vie en plein air. L'atmosphère y est paisible et favorise un esprit de camaraderie entre les scouts et les animateurs.

Le site de Pouch Camporee propose un large éventail d'activités et d'occasions de développer ses compétences. Qu'il s'agisse de course d'orientation, de travaux manuels ou d'ateliers sur les insignes de mérite, il y a toujours une activité passionnante à laquelle participer. Les programmes sont soigneusement organisés, et les animateurs sont non seulement compétents, mais aussi profondément engagés dans le mouvement scout.

L'esprit communautaire et la tradition qui règnent au Pouch Camporee Field sont remarquables. L'esprit scout y est bien vivant, et il est vraiment inspirant de voir autant de jeunes scouts se réunir pour apprendre, s'épanouir et s'amuser. Le dévouement du personnel et des bénévoles, qui veillent à ce que chacun vive une expérience à la fois sécuritaire et mémorable, est tout à fait louable.

Le site du Pouch Camporee Field est idéal : il offre un cadre paisible et isolé tout en restant facilement accessible. C'est un endroit parfait pour que les troupes se réunissent, tissent des liens et se créent des souvenirs inoubliables.

En résumé, le Pouch Camporee Field est un lieu où les rêves scouts deviennent réalité. Avec ses installations bien équipées, ses programmes captivants et son fort esprit de communauté scoute, c'est un véritable trésor pour les scouts de tous âges. J'ai hâte de retourner dans ce lieu scoute exceptionnel et de continuer à créer des souvenirs et à développer des compétences avec ma troupe. Par mon honneur de scout !

Quelle est la première chose que vous remarquez dans cet avis ? Il est bien plus long qu'un avis classique, et il contient bien plus d'adjectifs et d'adverbes qu'un avis classique. De plus, la plupart de ces qualificatifs n'apportent rien de concret, si ce n'est une note positive générique (fantastique, exceptionnel, magnifique, parfait, attentionné). Je remarque beaucoup de clichés tels que « je ne saurais trop en dire du bien » et « je ne pourrais pas être plus satisfait ».

Il faut également noter que ChatGPT a souvent tendance à reprendre la consigne telle quelle : remarquez que le nom complet du lieu figure dans la première phrase de l'avis. Alors qu'une personne normale sait que son lecteur dispose déjà du contexte grâce à la page sur laquelle il se trouve, ChatGPT veille à ce que sa réponse corresponde exactement à la consigne.

L'un des principaux indices permettant de repérer un texte généré par l'IA est sa structure très rigide. Remarquez-vous que cette critique comporte une introduction, puis un paragraphe consacré à chaque aspect abordé, et enfin une conclusion ? C'est un schéma très courant que l'on retrouve sans cesse ; les humains, eux, varient beaucoup plus la structure de leurs paragraphes et de leurs phrases.

Essayons maintenant d'appliquer ces enseignements à un autre domaine. Les avis générés par ChatGPT pullulent sur Amazon : jetez un œil à quelques-uns des produits les plus vendus et vous verrez que leurs sections d'avis regorgent de commentaires rédigés par l'IA.

Examinons deux avis sur le même produit sur Amazon, et notons-les selon la même échelle que précédemment.

Exemple 1 - Avis sur Amazon concernant une gourde.

C'est ma gourde préférée de l'année ! Ce que j'aime chez elle, c'est qu'on peut soit boire à petites gorgées, soit boire d'un trait.

Je suis très satisfait de la paille intégrée, c'est très facile de boire avec. Et cela vient de quelqu'un qui a déjà eu plusieurs gourdes avec paille intégrée : cette gourde Owalla est la meilleure de 2023.

Une autre option très pratique consiste à boire directement par l'ouverture. Encore une fois, c'est une conception vraiment ingénieuse : je n'ai jamais l'impression que je vais m'éclabousser le visage ou que l'eau va me monter dans le nez quand je prends une grande gorgée.

L'isolation est dans la moyenne. Elle remplit bien son rôle en gardant mes boissons au frais. Nous avons eu une chaleur incroyable ici en Californie cette année ; j'ai donc mis davantage de glaçons dans mon eau. Et cette bouteille la garde au frais toute la nuit.

Il y a des inconvénients : je n'aime pas son poids. Elle est plus lourde que les autres gourdes isothermes que j'ai eues. De plus, il faut appuyer fort pour fermer le bouchon. Je pense qu'Owala devrait y remédier dans sa version 2.0.

Dans l'ensemble, je suis très satisfait de cette gourde. Elle est désormais mon compagnon de tous les jours et remplace ma Takeya. J'apprécie tellement son design que j'ai même acheté la version sport (plus légère) ! Ils pourraient améliorer la conception du bouchon, et j'espère qu'ils le feront avec le prochain modèle.

1. Long - Oui
2. Descripteurs vides – un seul (vraiment)
3. Clichés - Aucun
4. Il répète la question : « Non, juste une "bouteille d'eau" ».
5. Rédaction très structurée: l'introduction, les puces et la conclusion sont bien présentes, mais le paragraphe consacré aux inconvénients est décousu et semble un peu hors contexte

Dans l'ensemble, je lui attribuerais une note de 1,5/5 sur cette échelle. Le simple fait que le texte soit long ne constitue pas un indice suffisant pour affirmer qu'il a été rédigé par une IA. Il est très probable qu'il ait été écrit par un humain.

Exemple 2 - Avis sur Amazon concernant cette même bouteille d'eau.

J'ai récemment acheté la bouteille isotherme Owala de 700 ml, et elle est rapidement devenue mon accessoire incontournable pour m'hydrater tout au long de la journée. La première chose qui m'a frappé, c'est son design : épuré, moderne et disponible dans une gamme de couleurs vives. La bouteille semble à la fois solide et légère, ce qui la rend parfaite pour un usage quotidien.

Côté fonctionnalités, elle ne déçoit pas. Elle est étanche et isotherme, ce qui signifie que mes boissons restent fraîches pendant des heures, même lors des journées les plus chaudes. La paille intégrée change la donne : elle permet de boire en toute simplicité sans avoir à dévisser le bouchon ni à incliner la bouteille.

Ce que j'apprécie le plus, c'est le souci du détail. La paille est dotée d'un cache qui la garde propre, et la bouteille s'adapte à la plupart des porte-gobelets de voiture et des poches latérales de sac à dos, ce qui la rend incroyablement pratique pour voyager. De plus, la poignée en boucle est idéale pour la transporter ou l'accrocher à un sac.

Le nettoyage est un jeu d'enfant, ce qui est souvent un souci avec les bouteilles réutilisables. Le large goulot permet d'y introduire une brosse à bouteille et les éléments de la paille se démontent pour un lavage en profondeur.

En résumé, la bouteille Owala est un produit soigneusement conçu qui tient toutes ses promesses en matière de praticité et d'élégance. C'est un compagnon fiable pour tous ceux qui souhaitent boire davantage d'eau sans se compliquer la vie. Je la recommande vivement !

1. Long - Oui
2. Descripteurs vides - Élégant, moderne, incroyablement bien pensé
3. Clichés - « la première chose qui m'a frappé », « une véritable révolution », « tient toutes ses promesses », « sans chichis »
4. Répète la demande - Oui, le nom complet du produit : « Bouteille isotherme Owala de 700 ml »
5. Rédaction très structurée: oui, introduction, trois points clés et un résumé.

On dirait bien que c'est 5 sur 5 en matière d'indices caractéristiques de l'IA. Je dirais que c'est presque certainement rédigé par une IA.

C'est formidable de voir que notre « modèle » interne s'est généralisé ! Aucun de ces éléments n'est en soi une preuve irréfutable, mais lorsque tous les indices vont dans le même sens, on peut les mettre bout à bout et tirer ses propres conclusions. Dites-moi ce que vous en pensez ! Vous pouvez me retrouver sur Twitter à @max_spero_ ou m'envoyer un e-mail à max [at] pangram.com.