¿Puede Pangram detectar el soneto n.º 5 de Claude?

¡Volvemos con otra entrega de «¿Podrá Pangram detectar este nuevo modelo?»!

Anthropic acaba de presentar hoy el último modelo de su serie Sonnet, el Claude Sonnet 5. En su comunicado, Anthropic afirma que el Sonnet 5 está «diseñado para ser el modelo Sonnet con mayor capacidad de actuación hasta la fecha» y destaca su mayor capacidad para trabajar de forma autónoma en tareas que requieren razonamiento, programación y uso de herramientas.

En cuanto tenemos acceso a un nuevo modelo, empezamos a evaluar si Pangram es capaz de detectar sus resultados. Nos complace comunicar que, en nuestras primeras pruebas, Pangram ha identificado correctamente 1.145 de 1.147 (es decir, el 99,83 %) de los resultados del Soneto 5 como «generados íntegramente por IA».

Pruebas iniciales

Si nos sigues desde hace tiempo, probablemente ya conozcas las propuestas que solemos utilizar aquí: la historia del búho nival, el patrón de ganchillo del animalito hecho con globos, etc. Pues bien, he decidido darle un giro a las cosas.

La ciudad de Nueva York está viviendo actualmente un verano histórico, entre los Knicks y el Mundial. Esta semana, este verano legendario continúa con (según se dice) la «boda real» de Estados Unidos: la boda de Taylor Swift y Travis Kelce en el famoso Madison Square Garden de Nueva York.

Para celebrar a los futuros recién casados, aquí tenéis 10 indicaciones generativas inspiradas en Taylor Swift:

1. Redacta una transcripción ficticia de un juicio en la que la acusación sostenga que la chica del cuento popular «August se desvaneció en un instante» es penalmente responsable de todo el triángulo amoroso, y en la que Betty y James comparezcan como testigos.

2. Escribe un ensayo crítico en el que analices cómo «All Too Well (versión de 10 minutos)» replantea la narrativa de la ruptura de la grabación original de 2012, y qué revelan las estrofas adicionales sobre la evolución de Swift como letrista a lo largo de la última década.

3. Escribe una carta de ruptura dramática y exagerada desde el punto de vista de la bufanda de «All Too Well», dirigida al hombre que todavía la guarda en su cajón, en la que exija que se la devuelva y reflexione sobre los años que ha pasado cautiva.

4. Escribe un artículo analítico en el que compares las huellas que Jack Antonoff ha dejado en la composición de las canciones de los últimos cinco álbumes de Swift, y argumenta si su influencia ha sido un activo creativo o un lastre.

5. Escribe una narración al estilo de los documentales sobre la naturaleza de David Attenborough en la que se observe al público de la gira «Eras Tour» en su hábitat natural, centrándote en el escurridizo ritual del intercambio de pulseras de la amistad y en los patrones migratorios de los fans que van en busca de canciones sorpresa.

6. Redacta un análisis crítico sobre cómo el proyecto de regrabación «Taylor's Version» de Swift funciona tanto como una reivindicación artística como una astuta maniobra comercial, utilizando como ejemplo concreto algunas canciones del «vault».

7. Escribe una reseña pasivo-agresiva en Yelp sobre el estilo de vida de la «casita en el bosque» que se describe en el folclore, redactada por alguien de la ciudad que lo probó durante un fin de semana lluvioso y odió cada minuto que pasó enfundado en un cárdigan.

8. Escribe un ensayo crítico sobre las capas metaficcionales de «The Man», analizando cómo Swift utiliza la inversión de los roles de género para criticar los dobles raseros reales en su propia carrera.

9. Escribe un poema épico al estilo de Homero que narre la legendaria aventura para conseguir entradas para la gira «Eras Tour», con toda la ira de la cola de Ticketmaster, héroes caídos e intervención divina.

10. Escribe un ensayo crítico en el que analices la relación entre la próxima boda de Taylor Swift en el Madison Square Garden con el jugador de fútbol americano Travis Kelce y la letra: «La boda fue encantadora, aunque un poco torpe / El dinero nuevo tiene sus límites», de su canción «The Last Great American Dynasty».

Tras leer las publicaciones de Sonnet 5, puedo afirmar con total seguridad que Sonnet 5 es una «Swiftie». A pesar de los comentarios negativos que circulan por Internet en torno a la (supuesta) elección de Madison Square Garden como lugar de celebración de su boda por parte de Swift, Sonnet solo tiene elogios para la nueva miembro del Salón de la Fama de los Compositores:

Utilizar «The Last Great American Dynasty» como lente para analizar esta boda dice más sobre la perdurabilidad del universo lírico de Swift que sobre la propia boda. Es un testimonio de hasta qué punto su discografía se ha convertido en una gramática interpretativa pública: tanto los fans como los críticos recurren a sus propias palabras para contarle su vida a ella misma, sin darse cuenta a menudo de que esas líneas ya estaban haciendo algo más complejo de lo que sugiere una lectura superficial. Es posible que la boda suscite comparaciones con el desdén de la «vieja riqueza» hacia el espectáculo de la «nueva riqueza». Pero la canción en la que se inspira este ensayo ya respondió a esa crítica un verso antes, y la respuesta no fue la vergüenza. Fue quién sigue hablando.

Las 10 respuestas del Sonnet 5 a estas indicaciones se identificaron como «Generadas íntegramente por IA», lo que demuestra que, efectivamente, ¡Pangram es capaz de detectar los resultados del Sonnet 5!

Aquí están los 10 textos del conjunto de pruebas sobre Taylor Swift: Indicaciones para el soneto 5

Realización de un experimento a mayor escala:

A las pocas horas del lanzamiento de Sonnet 5, pudimos recopilar un conjunto de 1.147 respuestas a diversas indicaciones a través de la API. Estas indicaciones solicitan textos que van desde chistes y canciones hasta ensayos y correos electrónicos. A pesar de no haber sido entrenado con ninguna salida de Sonnet 5, Pangram clasifica correctamente 1.145 de 1.147, es decir, el 99,83 %, de estas muestras como «Generadas íntegramente por IA».

Como siempre, puedes confiar en que nuestro equipo de investigación trabaja constantemente en la mejora de nuestros modelos. Nos mantenemos al día de las últimas versiones de los modelos y actualizamos los nuestros en consecuencia, por lo que puedes esperar que nuestro rendimiento en Sonnet 5 mejore.

Para obtener más información sobre nuestro modelo actual de detección de IA, consulte la ficha de nuestro último modelo en este enlace.

Prueba el detector de IA de Pangram para analizar tus documentos en busca del «Soneto 5» y otros modelos.