Kann Pangram „Claude Sonnet 5“ erkennen?

Wir sind wieder da mit einer neuen Folge von „Kann Pangram dieses neue Modell erkennen?!“

Anthropic hat heute das neueste Modell seiner Sonnet-Reihe vorgestellt: Claude Sonnet 5. In der Ankündigung erklärt Anthropic, Sonnet 5 sei „das bisher agentischste Sonnet-Modell“, und hebt dessen verbesserte Fähigkeit hervor, Aufgaben, die logisches Denken, Programmieren und den Einsatz von Werkzeugen erfordern, autonom zu bewältigen.

Sobald wir Zugang zu einem neuen Modell erhalten, prüfen wir, ob Pangram dessen Ergebnisse erkennen kann. Wir freuen uns, berichten zu können, dass Pangram in unseren ersten Tests 1.145 von 1.147 (das entspricht 99,83 %) der Ergebnisse von Sonnet 5 korrekt als vollständig KI-generiert identifiziert hat.

Erste Tests

Wenn ihr uns schon eine Weile folgt, kennt ihr wahrscheinlich die Themen, die wir hier immer behandeln – die Geschichte von der Schnee-Eule, die Häkelanleitung für Ballontiere und so weiter. Nun, ich habe beschlossen, mal etwas Abwechslung reinzubringen.

New York City erlebt derzeit einen Sommer der Superlative – zwischen den Knicks und der Fußball-WM. Diese Woche geht dieser legendäre Sommer mit (angeblich) Amerikas „königlicher Hochzeit“ weiter: der Hochzeit von Taylor Swift und Travis Kelce im berühmten Madison Square Garden in New York City.

Zu Ehren des baldigen Brautpaares gibt es hier 10 generative Prompts zum Thema Taylor Swift:

1. Verfassen Sie ein fiktives Gerichtsprotokoll, in dem die Staatsanwaltschaft argumentiert, dass das Mädchen aus der Volkssage, das „in einen Augenblick der Zeit entschwand“, strafrechtlich für das gesamte Liebesdreieck verantwortlich ist, wobei Betty und James als Zeugen geladen sind.

2. Verfassen Sie einen kritischen Aufsatz, in dem Sie untersuchen, wie „All Too Well (10-Minute-Version)“ die Trennungsgeschichte der Originalaufnahme aus dem Jahr 2012 neu interpretiert und was die zusätzlichen Strophen über Swifts Entwicklung als Songtexterin im Laufe des vergangenen Jahrzehnts aussagen.

3. Schreibe einen dramatischen, übertriebenen Abschiedsbrief aus der Perspektive des Schals aus dem Song „All Too Well“, adressiert an den Mann, der ihn noch immer in seiner Schublade aufbewahrt, in dem der Schal seine Rückgabe fordert und über die Jahre nachdenkt, die er in Gefangenschaft verbracht hat.

4. Verfassen Sie einen analytischen Beitrag, in dem Sie die Spuren vergleichen, die Jack Antonoff als Songwriter auf Swifts letzten fünf Alben hinterlassen hat, und erörtern Sie, ob sein Einfluss ein kreativer Gewinn oder eine Krücke war.

5. Verfasse einen Naturdokumentarfilm-Kommentar im Stil von David Attenborough, in dem du das Publikum der „Eras Tour“ in seinem natürlichen Lebensraum beobachtest, wobei du den Fokus auf das schwer fassbare Ritual des Austauschs von Freundschaftsbändchen und die Wanderungsmuster der Fans legst, die auf der Jagd nach Überraschungssongs sind.

6. Verfassen Sie eine kritische Analyse darüber, inwiefern Swifts Neuaufnahme-Projekt „Taylor’s Version“ sowohl als künstlerische Rückeroberung als auch als geschickter geschäftlicher Schachzug fungiert, und stützen Sie sich dabei auf konkrete „Vault“-Titel als Belege.

7. Verfasse eine passiv-aggressive Yelp-Bewertung über den in der Volkskunde beschriebenen „Hüttenleben im Wald“-Lebensstil, geschrieben von einem Stadtmenschen, der es an einem regnerischen Wochenende ausprobiert hat und jede Minute in seinem Strickjacke-Outfit gehasst hat.

8. Verfassen Sie einen kritischen Aufsatz über die metafiktionalen Ebenen in „The Man“ und analysieren Sie dabei, wie Swift die Umkehrung der Geschlechterrollen nutzt, um die tatsächlichen Doppelmoralvorstellungen in ihrer eigenen Karriere zu kritisieren.

9. Verfasse ein episches Gedicht im Stil Homers, das die legendäre Suche nach Tickets für die „Eras Tour“ schildert – komplett mit dem Zorn der Ticketmaster-Warteschlange, gefallenen Helden und göttlichem Eingreifen.

10. Verfassen Sie einen kritischen Aufsatz, in dem Sie den Zusammenhang zwischen Taylor Swifts bevorstehender Hochzeit mit dem Footballspieler Travis Kelce im Madison Square Garden und dem Liedtext „Die Hochzeit war bezaubernd, wenn auch ein wenig ungeschickt / Neureiches Geld reicht eben nur bis zu einem gewissen Punkt“ aus ihrem Song „The Last Great American Dynasty“ erörtern.

Nachdem ich die Beiträge von Sonnet 5 gelesen habe, kann ich mit Sicherheit sagen, dass Sonnet 5 ein „Swiftie“ ist. Trotz der negativen Diskussionen im Internet rund um Swifts (angebliche) Wahl des Madison Square Garden als Ort für ihre Hochzeit hat Sonnet nur das größte Lob für die neueste Aufnahme in die Songwriters Hall of Fame übrig:

„The Last Great American Dynasty“ als Blickwinkel für diese Hochzeit zu nutzen, sagt mehr über die Beständigkeit von Swifts lyrischem Universum aus als über die Hochzeit selbst. Es ist ein Beweis dafür, wie sehr ihr Werk zu einer öffentlichen Interpretationsgrammatik geworden ist – Fans und Kritiker greifen gleichermaßen auf ihre eigenen Worte zurück, um ihr Leben für sie nachzuerzählen, wobei sie oft übersehen, dass die Zeilen bereits etwas Komplizierteres bewirken, als die oberflächliche Lesart vermuten lässt. Die Hochzeit mag in der Tat Vergleiche mit der Verachtung des alten Geldes gegenüber dem Spektakel des neuen Geldes hervorrufen. Doch der Song, auf den sich dieser Essay stützt, hat diese Kritik bereits einen Vers zuvor beantwortet, und die Antwort war nicht Scham. Es ging darum, wer noch immer das Sagen hat.

Alle 10 Antworten von Sonnet 5 auf diese Eingabeaufforderungen wurden als „vollständig von einer KI generiert“ ausgewiesen, was zeigt, dass Pangram die von Sonnet 5 erzeugten Ergebnisse tatsächlich erkennen kann!

Hier sind alle 10 Texte aus unserem Taylor-Swift-Testset: Aufgaben zu Sonett 5

Durchführung eines umfangreicheren Experiments:

Innerhalb weniger Stunden nach der Veröffentlichung von Sonnet 5 konnten wir über die API insgesamt 1.147 Antworten auf verschiedene Eingabeaufforderungen sammeln. Diese Eingabeaufforderungen erfordern Texte, die von Witzen und Liedern bis hin zu Aufsätzen und E-Mails reichen. Obwohl Pangram nicht mit den Ausgaben von Sonnet 5 trainiert wurde, stuft es 1.145 von 1.147 dieser Beispiele, also 99,83 %, korrekt als „vollständig KI-generiert“ ein.

Wie immer können Sie sich darauf verlassen, dass unser Forschungsteam unsere Modelle kontinuierlich weiterentwickelt. Wir halten uns über die neuesten Modellversionen auf dem Laufenden und passen unsere Modelle entsprechend an, sodass Sie davon ausgehen können, dass sich unsere Leistung bei Sonnet 5 weiter verbessern wird.

Weitere Informationen zu unserem aktuellen KI-Erkennungsmodell finden Sie in unserer aktuellen Modellbeschreibung unter diesem Link.

Probieren Sie den KI-Detektor von Pangram aus, um Ihre Dokumente auf „Sonnet 5“ und andere Modelle zu überprüfen.