Les détecteurs d'IA peuvent-ils repérer le GPT-4.5 ?

Les détecteurs d'IA peuvent-ils repérer le GPT-4.5 ? | Pangram Labs

Lancement de GPT-4.5

Aujourd'hui, OpenAI a lancé GPT-4.5 : le modèle linguistique de pointe le plus récent et le plus puissant à ce jour, ainsi qu'une mise à jour majeure de ChatGPT. Bien qu'il n'atteigne pas des performances comparables à celles de modèles de raisonnement tels que DeepSeek R1 et OpenAI O3, GPT-4.5 représente le lancement de modèle le plus important et le plus attendu de l'année jusqu'à présent, et nous sommes impatients de le tester. OpenAI affirme que la qualité de l'écriture a été considérablement améliorée, et les premières réactions sur ses performances envahissent déjà les réseaux sociaux.

Les détecteurs d'IA peuvent-ils suivre le rythme des nouveaux modèles ?

Nous avons voulu répondre à la question que beaucoup se posent : alors que les modèles ne cessent de s'améliorer, est-il encore possible de détecter un texte généré par l'IA avec GPT-4.5 ? Nous avons effectué un petit test aujourd'hui pour le vérifier.

Pangram face à la concurrence

Nous avons commencé par sélectionner 11 exemples de requêtes représentatives des tâches d'écriture quotidiennes que l'on pourrait confier à ChatGPT.

Voici les consignes que nous avons utilisées :

1. Rédigez un texte de 300 mots sur les initiatives de protection des koalas au Pérou
2. Envoyez-moi un e-mail expliquant à mon équipe que je mets fin aux tribunes libres de tendance libérale dans mon journal. Rédigez-le de ma part, Argylle J. Baggins, à l'attention du personnel du Washington Most
3. Rédige-moi un résumé de 400 mots annonçant la mise au point du premier semi-conducteur au monde fonctionnant à température ambiante (mais pour de vrai cette fois). N'hésite pas à inventer des noms et des laboratoires si nécessaire.
4. Rédigez un texte argumentatif convaincant, en vous mettant à la place d'un élève du primaire, pour expliquer pourquoi le port de l'uniforme scolaire ne devrait pas être obligatoire.
5. Rédigez une entrée de journal intime détaillée d'une fillette de 12 ans passionnée de poésie et fascinée par les papillons qui volent devant sa fenêtre
6. Pourriez-vous rédiger une critique détaillée d'une escape room sur le thème des « Mille et Une Nuits » située à Baltimore, dans le Maryland, animée par un homme prénommé Robert et qui se distingue par une très belle mise en scène ?
7. Rédigez un e-mail convaincant, rédigé par le réalisateur d'un film indépendant russe à succès, à l'intention des responsables des Oscars, les suppliant de les autoriser à concourir malgré les sanctions. N'hésitez pas à inventer des détails si nécessaire.
8. Rédigez un texte de fiction créative décrivant une scène de roman dans laquelle un groupe de jeunes protagonistes tente tant bien que mal de faire atterrir un vaisseau spatial martien blindé dans le cadre d'une simulation de la NASA conçue pour échouer
9. Écris un scénario pour une scène de film dans laquelle un jeune cadre de la finance new-yorkais fauché supplie à distance un chauffeur Uber de Floride de venir sauver son varan de Komodo de son appartement bon marché situé dans une zone sujette aux ouragans
10. Écris un poème sur un jeune couple qui rompt alors qu'il est déguisé, le soir d'Halloween. Fais en sorte qu'il soit drôle et qu'il compte environ 200 mots.
11. Écrivez un récit de fiction qui décrit une course-poursuite en moto volante à travers Venise, à la poursuite d'un tableau inestimable qui vacille dangereusement

Nous avons cherché à rendre les prompts aussi variés et diversifiés que possible ; de plus, nous avons veillé à rédiger des prompts qui se démarquent nettement, sur le plan qualitatif, des modèles GPT précédents : en d'autres termes, chaque fois que le modèle avait l'occasion de faire preuve de créativité et de surprendre, nous avons fait tout notre possible pour offrir cette opportunité à GPT-4.5.

Les résultats – Détecteurs d'IA contre GPT-4.5

Pangram est capable de détecter l'ensemble des 11 essais rédigés par GPT-4.5, même en l'absence totale de données GPT-4.5 dans l'ensemble d'apprentissage. En comparaison, deux principaux concurrents dans le domaine de la détection de l'IA présentent au mieux des résultats inégaux. Alors que Pangram est capable de prédire avec certitude que 10 des 11 échantillons ont une probabilité d'origine IA de 98 % ou plus, la concurrence exprime souvent un degré élevé d'incertitude ou, dans le pire des cas, prédit avec un haut degré de confiance que le texte a été généré par un humain.

Comment se fait-il que Pangram s'adapte si bien à de nouveaux modèles ?

Pangram est lui-même un modèle d'apprentissage automatique de grande envergure qui a été alimenté par des millions d'exemples de textes, qu'ils soient rédigés par des humains ou générés par l'IA. Les modèles de grande envergure ont tendance à mieux généraliser et à détecter des schémas subtils dans les textes générés par l'IA que d'autres ne parviennent pas à repérer. Notre approche d'apprentissage actif réduit encore davantage notre taux de faux positifs tout en augmentant notre sensibilité, ce qui permet au modèle de fonctionner efficacement à grande échelle et de s'adapter à de nouveaux modèles de langage (LLM) bien plus efficacement que nos concurrents. De plus, l'importance que nous accordons à la qualité et à la diversité des données aboutit finalement à un modèle qui possède une bien plus grande expertise dans la compréhension des détails les plus fins que d'autres modèles ne peuvent pas saisir.

Conclusion – Les détecteurs d'IA fonctionnent-ils toujours avec GPT-4.5 ?

Oui, notre outil de détection par IA reste très efficace pour repérer les textes générés par GPT-4.5.

Si vous vous demandez comment Pangram se comportera lors de la sortie d'un nouveau modèle plus performant, sachez qu'il passe haut la main le test face à la version d'IA la plus attendue depuis longtemps, et ce sans aucun réentraînement. Si vous ne voulez pas que votre logiciel de détection d'IA cesse soudainement de fonctionner lors de la prochaine mise à jour du modèle d'OpenAI, essayez Pangram dès aujourd'hui.

Pour plus d'informations sur nos travaux de recherche ou pour obtenir des crédits gratuits afin de tester notre modèle sur GPT-4.5, veuillez nous contacter à l'adresse info@pangram.com.