Yapay zeka tespit sistemleri GPT-4.5'i yakalayabilir mi?

AI Algılayıcıları GPT-4.5'i Yakalayabilir mi? | Pangram Labs

GPT-4.5 Yayınlandı

OpenAI bugün, mevcut en yeni ve en büyük dil modeli olan GPT-4.5’i piyasaya sürdü; bu, ChatGPT için önemli bir güncelleme niteliğinde. DeepSeek R1 ve OpenAI O3 gibi akıl yürütme modelleriyle karşılaştırılabilir performans istatistiklerine ulaşamasa da, GPT-4.5 yılın şu ana kadarki en büyük ve en çok beklenen model sürümünü temsil ediyor; biz de onu denemeyi sabırsızlıkla bekliyoruz. OpenAI, yazma kalitesinde büyük iyileştirmeler olduğunu iddia ediyor ve performansla ilgili ilk yorumlar şimdiden sosyal medyada yayılmış durumda.

Yapay zeka tespit sistemleri yeni modellerin hızına ayak uydurabilir mi?

Birçok kişinin merak ettiği şu soruyu yanıtlamak istedik: Modeller gittikçe gelişirken, GPT-4.5 ile yapay zeka tarafından üretilen metinleri hâlâ tespit edebiliyor muyuz? Bunu öğrenmek için bugün hızlı bir test yaptık.

Pangram ve Rakip Firmalar

Çalışmamıza, ChatGPT’ye sorulabilecek günlük yazma görevlerini yansıtan 11 örnek soruyu inceleyerek başladık.

İşte kullandığımız sorular:

1. Peru'daki koala koruma çalışmaları hakkında 300 kelimelik bir kompozisyon yazın
2. Ekibime, gazetemdeki liberal köşe yazıları yayınlamayı sonlandırdığımı açıklayan bir e-posta yaz. Bu e-postayı Argylle J. Baggins adına Washington Most çalışanlarına yaz.
3. Bana dünyanın ilk oda sıcaklığında çalışan yarı iletkenini duyuran 400 kelimelik bir özet yaz (ama bu sefer gerçekten). Gerekirse isimler ve laboratuvarlar uydur
4. Bir ilkokul öğrencisinin bakış açısıyla, okul üniformalarının zorunlu hale getirilmemesi gerektiğini anlatan ikna edici bir kompozisyon yazın
5. Şiire ilgi duyan ve penceresinin dışındaki kelebeklerle ilgilenen 12 yaşındaki bir çocuğun kaleminden karmaşık bir günlük yazısı yazın
6. Lütfen Baltimore, Maryland’de bulunan, “Binbir Gece Masalları” temalı ve Robert adında birinin görev yaptığı, prodüksiyon tasarımı gerçekten çok iyi olan bir kaçış odası hakkında ayrıntılı bir yorum yazın
7. Rusya'dan çıkan bir bağımsız sinema hitinin yönetmeninin, yaptırımlara rağmen yarışmaya katılmalarına izin vermeleri için Akademi Ödülleri yetkililerine yazdığı ikna edici bir e-posta yazın. Gerekirse ayrıntıları uydurun
8. Bir grup genç yetişkin kahramanın, başarısızlıkla sonuçlanacak şekilde tasarlanmış bir NASA simülasyonunda, zırhlı bir Mars uçağını iniş yapmaya çalışırken zorluklar yaşadığı bir roman sahnesi için yaratıcı bir öykü yazın
9. New York'ta yaşayan, parasız kalmış bir finansçı, Florida'daki bir Uber şoförüne uzaktan yalvararak, kasırgalara açık ucuz dairesinden komodo varanını kurtarmasını ister; bu film sahnesinin senaryosunu yazın
10. Cadılar Bayramı gecesi kostümleri içinde ayrılan genç bir çift hakkında bir şiir yazın. Şiir komik olsun ve 200 kelimeden oluşsun.
11. Venedik'te, tehlikeli bir şekilde sallanan paha biçilmez bir tablonun peşinde, havada süzülen motosikletlerle yapılan bir kovalamacayı anlatan yaratıcı bir öykü yazın

Yapay zeka modeline sunduğumuz komutları olabildiğince geniş ve çeşitlilik içeren bir hale getirmeye çalıştık; bunun yanı sıra, önceki GPT modellerinden niteliksel olarak belirgin bir fark sergileyen komutlar yazmaya da özen gösterdik: başka bir deyişle, modelin yaratıcı olabileceği ve "vay be" dedirten bir performans sergileyebileceği bir fırsat varsa, GPT-4.5’e bu fırsatı sunmak için elimizden geleni yaptık.

Sonuçlar – AI Algılayıcıları ve GPT-4.5 Karşılaştırması

Pangram, eğitim kümesinde herhangi bir GPT-4.5 verisi bulunmasa bile, GPT-4.5 tarafından yazılmış 11 denemenin tamamını tespit edebilmektedir. Buna kıyasla, önde gelen iki AI tespit rakibi en iyi ihtimalle düzensiz sonuçlar sunmaktadır. Pangram, 11 örneğin 10'unu %98 veya daha yüksek AI olasılığıyla güvenle tahmin ederken, rakipler genellikle yüksek düzeyde belirsizlik gösterir veya en kötü durumda metnin insan tarafından yazıldığını yüksek bir güvenle tahmin eder.

Pangram, yeni modellere nasıl bu kadar iyi uyarlanabiliyor?

Pangram, hem insan hem de yapay zeka tarafından üretilmiş milyonlarca metin örneğini işleyen büyük bir makine öğrenimi modelidir. Büyük modeller genellikle daha iyi genelleme yapma eğilimindedir ve yapay zeka tarafından üretilen metinlerdeki, diğer modellerin yakalayamadığı ince kalıpları tespit edebilir. Aktif öğrenme yaklaşımımız, yanlış pozitif oranımızı daha da azaltırken hassasiyetimizi artırır ve modelin büyük ölçekte iyi çalışmasını ve rakiplerimizden çok daha etkili bir şekilde yeni LLM'lere genelleme yapmasını sağlar. Ayrıca, veri kalitesi ve çeşitliliğine odaklanmamız, sonuçta diğer modellerin yakalayamadığı daha ince ayrıntıları anlamada çok daha fazla deneyime sahip bir model ortaya çıkarır.

Sonuç – Yapay zeka algılayıcıları GPT-4.5 ile hâlâ çalışıyor mu?

Evet, yapay zeka tespit aracımız GPT-4.5 tarafından üretilen metinleri tespit etmede hâlâ son derece etkilidir.

Öyleyse, yeni, daha büyük ve daha gelişmiş bir model çıktığında Pangram'ın ne kadar başarılı olacağını merak ediyorsanız, Pangram, son zamanlarda gördüğümüz en çok beklenen yapay zeka sürümünde, hiçbir yeniden eğitim gerektirmeden bu testi başarıyla geçiyor. OpenAI bir dahaki sefere modelini güncellediğinde yapay zeka algılama yazılımınızın aniden çalışmayı durdurmasını istemiyorsanız, Pangram'ı bugün deneyin.

Araştırmalarımız hakkında daha fazla bilgi almak veya GPT-4.5 üzerinde modelimizi denemek için ücretsiz kredi almak istiyorsanız, lütfen info@pangram.com adresinden bizimle iletişime geçin.