O Pangram consegue detetar o GPT-6.1 Sol?

O GPT-6.1 Sol é um modelo de IA lançado pela OpenAI a 29 de setembro de 2026. A OpenAI afirma que o GPT-6.1 Sol oferece «inteligência quase ao nível do Astra por um quinto do preço» em várias tarefas relacionadas com o trabalho, como programação e utilização de computadores. Ao contrário dos lançamentos mais recentes a que temos assistido ultimamente, a OpenAI não faz quaisquer afirmações sobre a capacidade de escrita ou a clareza do GPT-6.1 Sol; assim, será que escreve da mesma forma que os modelos anteriores e será que o Pangram consegue detetá-lo?

Testámos o desempenho do Pangram 4.1 em 2 215 exemplos de prompts e constatámos que o Pangram 4.1 classificou 6 respostas do GPT-6.1 Sol como sendo de autoria humana, 21 como mistas e 2 188 como totalmente geradas por IA, alcançando uma precisão de 98,78% no GPT-6.1 Sol.

Para gerar o conjunto de referência, utilizámos 1 200 prompts de primeira resposta do conjunto de dados LMSYS (Zheng et al., 2023). Em seguida, submetemos esses prompts ao GPT-6.1 Sol, com os níveis de raciocínio médio e elevado, e processámos os resultados através do Pangram 4.1.

Resultados por categoria

No geral, o GPT-6.1 Sol apresentou uma taxa de falsos negativos de 1,27 % em 1 105 respostas no nível de raciocínio elevado e uma taxa de falsos negativos de 1,17 % em 1 110 respostas no nível de raciocínio médio. No geral, não se verificou uma diferença significativa na taxa de deteção entre os níveis de raciocínio médio e elevado (p = 0,85).

Raciocínio avançado

Quando o GPT-6.1 Sol foi configurado para um nível elevado de raciocínio, o Pangram 4.1 classificou 3 respostas como humanas, 11 como mistas e 1 091 como totalmente geradas por IA, atingindo uma taxa de recuperação de 98,73%.

Raciocínio médio

No raciocínio de nível médio, o Pangram 4.1 classificou 3 respostas como humanas, 10 como mistas e 1 097 como totalmente geradas por IA, alcançando uma taxa de recuperação de 98,83%.

O que achas do nome Sol?

O GPT-6.1 Sol tem um estilo de pontuação característico; por exemplo, utiliza apóstrofos curvos em 74% das suas respostas e quase nunca utiliza apóstrofos retos, especialmente quando comparado com outros modelos recentes.

Além disso, gosta muito tanto de travessões longos como de travessões curtos, utilizando, em média, 1,3 travessões longos por cada 1 000 palavras — muito mais do que o Haiku 5.5 ou o Gemini 4 Argon.

Na escrita criativa, o GPT-6.1 Sol revelou alguns hábitos recorrentes. Mostrou uma forte preferência por dar aos seus personagens femininos os nomes Mara ou Maya (pelo menos um dos quais apareceu em 65 respostas) e, geralmente, atribuía-lhes as iniciais M.V., preferindo sobretudo o apelido Vale (embora também tenham surgido Mara Velez e Mara Venn). Quanto aos nomes próprios masculinos, o favorito do GPT-6.1 Sol é Daniel, que apenas duas vezes associou a um apelido (uma vez com Vale e outra com Mercer). Das 418 respostas de escrita criativa, o GPT-6.1 Sol iniciou com «O primeiro...» 36 vezes; uma frequência muito superior à do Haiku e do Gemini, que o fizeram 11 e 1 vezes, respetivamente.

O Sol recusou-se a responder a 23 pedidos e recusou parcialmente outros 32. No caso das recusas parciais, o Sol substituiu o pedido por uma versão mais moderada ou diferente do que tinha sido solicitado. A maioria destas recusas parciais deve-se ao facto de o nosso conjunto de prompts incluir, por acaso, pedidos de escrita criativa de caráter sugestivo. O Sol lidou com esta situação evitando escrever conteúdo explícito, optando, em vez disso, por um «fade to black».

O Sol escreve, por vezes, respostas muito curtas: 95 com menos de 50 palavras no nível elevado e 90 no nível médio. A mediana das respostas do Sol foi de 300 palavras, variando entre 50 e 10 513 palavras.

Testes de desempenho anteriores

O Pangram demonstra robustez face ao GPT-6.1 Sol em prompts de linguagem natural e deteta-o com uma precisão observada de 98,73% no nível de raciocínio elevado. Deteta o GPT-6.1 Sol no nível de raciocínio médio com uma precisão observada de 98,83%, totalizando 2 188 em 2 215 (98,78%) em ambas as configurações. O Pangram é capaz de generalizar para novos modelos porque os novos lançamentos tendem a herdar grande parte do estilo e da voz dos seus antecessores, pelo que o Pangram não precisa de ser retreinado para cada novo lançamento.

Eis uma comparação entre o GPT-6.1 Sol e os nossos testes de desempenho de outros modelos de vanguarda recentes:

Se quiseres consultar um documento específico, podes experimentar o Pangram aqui.