Será que o Pangram consegue detetar o Soneto 5 de Claude?

Estamos de volta com mais uma edição de «Será que o Pangram consegue identificar este novo modelo?!»

A Anthropic acaba de anunciar hoje o mais recente modelo da sua série Sonnet, o Claude Sonnet 5. No seu comunicado, a Anthropic afirma que o Sonnet 5 foi «concebido para ser o modelo Sonnet com maior capacidade de ação até à data» e destaca a sua capacidade melhorada de trabalhar de forma autónoma em tarefas que exigem raciocínio, programação e utilização de ferramentas.

Assim que obtemos acesso a um novo modelo, começamos a avaliar se o Pangram consegue detetar os resultados gerados por esse modelo. Nos nossos primeiros testes, temos o prazer de informar que o Pangram identificou corretamente 1 145 de 1 147, ou seja, 99,83%, dos resultados do Sonnet 5 como «Totalmente gerados por IA».

Testes iniciais

Se já nos acompanhas há algum tempo, provavelmente já estás familiarizado com os temas que costumamos abordar aqui — a história da coruja-das-neves, o padrão de croché do animal feito com balões, etc. Bem, decidi dar uma mudança.

A cidade de Nova Iorque está atualmente a viver um verão memorável, entre os Knicks e o Campeonato do Mundo de Futebol. Esta semana, este verão lendário continua com (segundo se diz) o «casamento real» dos Estados Unidos: a união de Taylor Swift e Travis Kelce no famoso Madison Square Garden, em Nova Iorque.

Para celebrar os futuros recém-casados, eis 10 sugestões generativas inspiradas na Taylor Swift:

1. Escreva uma transcrição simulada de um julgamento em que a acusação defenda que a rapariga do folclore, aquela que «agosto se esvaiu num instante», é criminalmente responsável por todo o triângulo amoroso, tendo Betty e James como testemunhas.

2. Escreva um ensaio crítico que analise a forma como «All Too Well (10 Minute Version)» reformula a narrativa de separação da gravação original de 2012 e o que os versos adicionais revelam sobre a evolução de Swift como letrista ao longo da década que se seguiu.

3. Escreve uma carta de rompimento dramática e exagerada, na perspetiva do lenço da canção «All Too Well», dirigida ao homem que ainda o guarda na gaveta, exigindo que lhe seja devolvido e refletindo sobre os anos que passou em cativeiro.

4. Escreva um artigo analítico comparando as marcas deixadas por Jack Antonoff na composição das canções dos últimos cinco álbuns de Swift, discutindo se a sua influência tem sido um trunfo criativo ou um apoio excessivo.

5. Escreve uma narração ao estilo dos documentários sobre a natureza de David Attenborough, observando o público da digressão «Eras Tour» no seu habitat natural, com destaque para o ritual esquivo da troca de pulseiras da amizade e para os padrões migratórios dos fãs em busca de músicas surpresa.

6. Escreva uma análise crítica sobre a forma como o projeto de regravação «Taylor's Version», de Swift, funciona tanto como uma recuperação artística como uma manobra comercial astuta, utilizando faixas específicas do «vault» como prova.

7. Escreve uma crítica passivo-agressiva no Yelp sobre o estilo de vida da «casinha na floresta» retratado no folclore, escrita por alguém da cidade que experimentou essa vida durante um fim de semana chuvoso e detestou cada minuto passado de casaco de malha.

8. Escreva um ensaio crítico sobre as camadas metaficcionais em «The Man», analisando a forma como Swift recorre à inversão de papéis de género para criticar os verdadeiros duplos padrões presentes na sua própria carreira.

9. Escreve um poema épico ao estilo de Homero que narre a lendária busca para garantir bilhetes para a Eras Tour, com toda a ira da fila da Ticketmaster, heróis caídos e intervenção divina.

10. Escreva um ensaio crítico que analise a ligação entre o próximo casamento de Taylor Swift no Madison Square Garden com o jogador de futebol americano Travis Kelce e a letra: «O casamento foi encantador, embora um pouco desajeitado / O dinheiro recém-adquirido tem os seus limites», da sua canção «The Last Great American Dynasty».

Depois de ler as publicações do Sonnet 5, posso afirmar com toda a certeza que o Sonnet 5 é um Swiftie. Apesar do discurso negativo que circula na Internet em torno da (suposta) escolha de Taylor Swift do Madison Square Garden como local do seu casamento, o Sonnet 5 só tem elogios para a mais recente nomeada para o Songwriters Hall of Fame:

Utilizar «The Last Great American Dynasty» como lente para analisar este casamento diz mais sobre a durabilidade do universo lírico de Swift do que sobre o próprio casamento. É uma prova de como o seu repertório se tornou, de forma tão profunda, uma gramática interpretativa pública — tanto fãs como críticos recorrem às suas próprias palavras para lhe narrar a sua vida, muitas vezes sem perceberem que as letras já estavam a fazer algo mais complexo do que a leitura superficial sugere. O casamento pode, de facto, suscitar comparações com o desdém da «velha riqueza» perante o espetáculo da «nova riqueza». Mas a canção de que este ensaio se inspira já respondeu a essa crítica um verso antes, e a resposta não foi a vergonha. Foi quem ainda está a falar.

Todas as 10 respostas do Sonnet 5 a estas perguntas foram classificadas como «Totalmente geradas por IA», o que demonstra que, de facto, o Pangram consegue detetar os resultados do Sonnet 5!

Aqui estão os 10 textos do nosso conjunto de testes sobre a Taylor Swift: Temas do Soneto 5

Realizar uma experiência de maior dimensão:

Poucas horas após o lançamento do Sonnet 5, conseguimos recolher um conjunto de 1 147 respostas a vários prompts através da API. Estes prompts solicitam textos que vão desde piadas e canções até ensaios e e-mails. Apesar de não ter sido treinado com quaisquer resultados do Sonnet 5, o Pangram classifica corretamente 1 145/1 147, ou seja, 99,83%, destas amostras como «Totalmente geradas por IA».

Como sempre, pode confiar que a nossa equipa de investigação está constantemente a aperfeiçoar os nossos modelos. Mantemo-nos a par dos mais recentes lançamentos de modelos e atualizamos os nossos modelos em conformidade, pelo que pode contar com uma melhoria do nosso desempenho no Sonnet 5.

Para mais informações sobre o nosso modelo atual de deteção por IA, consulte a ficha do nosso modelo mais recente neste link.

Experimente o detetor de IA da Pangram para analisar os seus documentos à procura do Sonnet 5 e de outros modelos.