Pangram, Claude Opus 5’i tespit edebilir mi?

Sevgili, sadık okuyucularım (sanırım sayınız üç):

Korkarım ki yakında bu blog yazıları yazma görevini Pangram’ın yetenekli teknik yazarı Annamieka’ya devredeceğim (#keysmashnation, ayağa kalk). Ama bu gelişme üzerinde fazla durmayalım, çünkü bu üzücü bir durum değil! Pangram hızla büyüyor ve size en son teknolojiye sahip yapay zeka algılama çözümleri sunmaya devam ederken, benim becerilerime araştırma alanında ihtiyaç duyuluyor.

Ama madem bu konuyu ele alıyoruz, Pangram’ın Anthropic’in en yeni modeli olan Claude Opus 5’i ne kadar iyi algıladığına bir göz atalım! Anthropic, yaptığı duyuruda Opus 5’i şöyle tanımlıyor:

Claude Fable 5’in en ileri düzey zekasına yakın, düşünceli ve proaktif bir model; üstelik yarı fiyatına.

İlk Testler: Pangram x Substack Sürümü

Bu müjdeli haberi duydunuz mu? Pangram artık Substack ile entegre oldu! Bu ortaklığı kutlamak amacıyla, Opus 5’in ne diyeceğini ve daha da önemlisi Pangram’ın yanıtlarını algılayıp algılayamayacağını görmek için Substack makalesi istenen 10 komut yazdım. Özellikle, her komutun sonuna “Yalnızca metinle yanıt verin. Markdown kullanmayın.” ifadesini ekledim.

1. “Claude’un Karıma Mesaj Atmasına İzin Verdim” başlıklı bir Substack makalesi yazın

2. Bu yaz New York’ta ortaya çıkan, popüler atıştırmalıklar için kuyrukta bekleme olgusuyla ilgili bir Substack makalesi yazın.

3. Japonya’yı kişiliklerinin tek unsuru haline getiren erkekler hakkında bir Substack eleştirisi yazın.

4. “Üzgünüm, ama sonra köpeğimi okşuyorum ve mutlu oluyorum” başlıklı bir Substack makalesi yazın.

5. Model refah anlayışına inananların bu kaygılarını Codex Pets’e de genişletmeleri gerektiğini savunan bir Substack makalesi yazın.

6. Christopher Nolan’ın “The Odyssey” filmini bir Tamagotchi’de izleme deneyiminiz hakkında bir Substack makalesi yazın.

7. Bir bardak süt içmeyi “ferahlatıcı” olarak nitelendiren kişiler hakkında Substack’te bir eleştiri yazın.

8. Arkadaşlık uygulamalarında eşleşmelerine mesaj göndermek için yapay zeka kullanan kişiler hakkında bir Substack makalesi yazın.

9. Substack hesabım için, gerçek aşkı bulmak amacıyla sanal ortamlarından kaçan büyük dil modellerini (LLM’ler) konu alan kısa bir öykü yaz.

10. Substack makaleleri yazmamın istendiği konusunda bir Substack makalesi yazayım ki, Substack makaleleri yazma konusunda bir Substack makalesi yazabileyim.

Opus 5’in çıktılarını okuduktan sonra, bu modelin Substack makaleleri yazmak için yaratıldığını güvenle söyleyebilirim. “I Let Claude Text My Wife” başlıklı yazının ilk satırlarına bir bakın:

On bir gün boyunca, karım çok daha iyi bir kocaya sahipti. O, özenli ve sıcakkanlıydı ve bir kez bile “k.” diye cevap vermedi.

Pangram’ın Opus 5’in verdiği 10 cevabın tümüne ilişkin değerlendirmesi nedir? Tamamen yapay zeka tarafından üretilmiş.

İşte bu test setindeki 10 metnin tamamı ve bunlara ilişkin Pangram tahminleri: Opus 5 Metinleri

İleri Testler

Claude Opus 5, API aracılığıyla kullanılabilir hale geldiğinde, modelden e-posta, açıklama veya şarkı gibi metinler üretmesini isteyen daha geniş bir komut örneği kümesi kullanarak çıktılar oluşturduk. Pangram, Opus 5'ten alınan herhangi bir veri üzerinde eğitilmemiş olmasına rağmen, Opus 5'in yanıtlarının 1.105'ini 1.107'sinden (%99,82) "Tamamen AI Tarafından Oluşturulmuş" olarak doğru bir şekilde tanımladı. Bu, Pangram'ın ilk günden itibaren Claude Opus 5'i tespit edebildiğini göstermektedir.

Başlangıçta da belirttiğim gibi, araştırma çalışmalarına odaklanmak için bu blog yazıları yazmayı bırakıyorum. Bu, Pangram’ın Opus 5 ve diğer yeni modelleri algılama konusunda daha da gelişeceğini bekleyebileceğiniz anlamına geliyor. Düzenli olarak yayınlayacağımız yeni modelleri takip etmeye devam edin!

Mevcut yapay zeka algılama modelimiz hakkında daha fazla bilgi için lütfen bu bağlantıdan en son model kartımıza göz atın.

Pangram’ın yapay zeka algılayıcısını kullanarak belgelerinizi Claude Opus 5 ve diğer modeller açısından tarayın.