Pangram, GPTZero ile karşılaştırıldığında nasıl bir performans sergiliyor?
Günümüzde AI Algılama Pazarı, birkaç büyük oyuncudan oluşmaktadır. Bunları duymuş olabilirsiniz: Pangram, GPTZero, Turnitin, ZeroGPT ve daha fazlası. Bu araçların birbirleriyle karşılaştırmalı bir değerlendirmesini görmek için, şu anda piyasada bulunan en iyi AI algılayıcılarına dair rehberimize göz atın.
Bu şirketlerin çoğu, modellerini düzenli olarak güncelliyor ve performanslarına ilişkin verileri yayınlıyor. Kısa bir süre önce GPTZero, yaz dönemi model güncellemesini başlattı ve çeşitli yeni modeller üzerindeki performansına ilişkin yeni verileri paylaştı. Bu blog yazısında, GPTZero’nun yeni modelinin performansını, en son GPT-5 modelleri de dahil olmak üzere Pangram’ın yapay zeka algılama sistemiyle karşılaştıracağız .
Pangram ve GPTZero: Yayınlanmış Rakamlar
| Model | Pangram Tespit Oranı | GPTZero Algılama Oranı | Daha İyi Dedektör |
|---|---|---|---|
| GPT-5 | 99.81% | 95.0% | Pangram |
| GPT-5-sohbet-en-son | 99.97% | Test edilmemiş | Yok |
| GPT-5-mini | 99.92% | 92.2% | Pangram |
| GPT-5-nano | 99.97% | 96.1% | Pangram |
| GPT-OSS-120b | 100.00% | Test edilmemiş | Yok |
| GPT-OSS-20b | 99.74% | Test edilmemiş | Yok |
| GPT4.1 | 99.48% | 96.8% | Pangram |
| GPT-4.1-mini | 99.94% | 98.7% | Pangram |
| o3 | 99.86% | 89.9% | Pangram |
| o3-mini | 100.00% | 98.4% | Pangram |
| Gemini 2.5 Pro | 99.91% | 95.7% | Pangram |
| Gemini 2.5 Flash | 99.75% | 98.2% | Pangram |
| Claude Sonnet 4 | 99.91% | 99.1% | Pangram |
Not: GPTZero, iç değerlendirme veri setlerini kamuya açıklamamaktadır; dolayısıyla bu rakamlar tam olarak aynı belgelerden elde edilmemiştir. Ayrıca, GPTZero test ettiği belge sayısını da açıklamadığından, sayısal açıdan bir karşılaştırma yapamıyoruz. Bununla birlikte, Pangram’ın performans rakamları için, gerçek dünya kullanımını simüle etmek amacıyla her model için binlerce belgeyi ve çok çeşitli alanları ve komut şemalarını değerlendirmeye aldık.
Ayrıca, Pangram’ın doğruluğu yalnızca en fazla AI belgesini tespit etmekle sınırlı değildir. Pangram, yanlış pozitif oranlarını düşük tutma konusunda da pazar lideridir. İnsanlar tarafından yazılmış belgeleri AI tarafından üretilmiş gibi işaretlememek bizim için ciddi bir önceliktir. Aşağıda, Pangram ve GPTZero için bildirilen Yanlış Pozitif Oranları arasındaki fark özetlenmiştir:
| Pangram | GPTZero | |
|---|---|---|
| Yanlış Pozitif Oranı (%) | 0.01% | 1% |
| Yanlış Pozitif Oranı (sayı) | ~10.000 belgeden 1'i | ~100 belgeden 1'i |
GPTZero Yanlış Pozitif Oranı Blog Yazısı
Burada GPTZero’nun performansının Yanlış Pozitif Oranı’nı (FPR) %1 olarak gösterdiğini görüyoruz.
Araştırma neyi gösteriyor? Pangram ve GPTZero karşılaştırması
Pangram ve GPTZero, hakemli yapay zeka araştırma makalelerinde de karşı karşıya gelmiştir. Bu durum, Maryland Üniversitesi’nin yakın zamanda yayınlanan “Yazma görevleri için ChatGPT’yi sık sık kullanan kişiler, yapay zeka tarafından üretilen metinleri doğru ve güvenilir bir şekilde tespit edebilmektedir” başlıklı çalışmasında en iyi şekilde ortaya konmuştur . Bu çalışma, uzman insan değerlendiricilerin insan tarafından yazılan metinlerle yapay zeka tarafından üretilen metinler arasındaki farkı sınıflandırma becerisini incelemiştir.
Çalışma kapsamında, insan denetçilerin performansları piyasada bulunan ve açık kaynaklı algılayıcılarla karşılaştırıldı. Pangram, her bir insan denetçiden daha iyi performans gösterdi; ayrıca GPTZero dahil olmak üzere tüm ticari alternatiflerden de daha iyi sonuçlar elde etti.
| GPT-4o | Claude | |
|---|---|---|
| Pangram | 100% | 100% |
| GPTZero | 100% | 97.6% |
| Yorumcu 1 | 96.7% | 100% |
| Annotator 2 | 96.7% | 100% |
| Annotator 3 | 86.7% | 80% |
| Annotator 4 | 90.0% | 96.7% |
| Annotator 5 | 93.3% | 93.3% |
Çok Dilli Performans
Pangram’ın amiral gemisi modeli ile GPTZero arasındaki farklar bununla sınırlı değil. Her iki model de “çok dilli”dir; yani sadece İngilizce’nin ötesinde, farklı dillerde de yapay zeka kullanımını tespit edebilmektedirler. Pangram, internette en çok kullanılan ilk 20 dilin tümünde çok dilli çalışmaktadır. GPTZero ise İngilizce, Fransızca ve İspanyolca dillerini desteklemektedir. Her bir modelin test edildiği diller şunlardır:
| Dil | Pangram Yanlış Pozitif Oranı (FPR) | GPTZero Yanlış Pozitif Oranı (FPR) | Pangram Yapay Zeka Algılama Oranı | GPTZero Yapay Zeka Algılama Oranı |
|---|---|---|---|---|
| İspanyolca | 0.00% | 5.6% | 100.0% | 96.4% |
| Fransızca | 0.00% | 3.1% | 100.0% | 93.1% |
| Arapça | 0.10% | Test edilmemiş | 100.0% | Test edilmemiş |
| Çek | 0.00% | Test edilmemiş | 99.89% | Test edilmemiş |
| Almanca | 0.00% | Test edilmemiş | 99.68% | Test edilmemiş |
| Yunanca | 0.00% | Test edilmemiş | 99.79% | Test edilmemiş |
| Farsça | 0.00% | Test edilmemiş | 100.0% | Test edilmemiş |
| Hintçe | 0.00% | Test edilmemiş | 99.58% | Test edilmemiş |
| Macarca | 0.10% | Test edilmemiş | 99.05% | Test edilmemiş |
| İtalyanca | 0.00% | Test edilmemiş | 100.0% | Test edilmemiş |
| Japonca | 0.00% | Test edilmemiş | 100.0% | Test edilmemiş |
| Hollandaca | 0.10% | Test edilmemiş | 100.0% | Test edilmemiş |
| Lehçe | 0.00% | Test edilmemiş | 100.0% | Test edilmemiş |
| Portekizce | 0.00% | Test edilmemiş | 100.0% | Test edilmemiş |
| Romence | 0.10% | Test edilmemiş | 100.0% | Test edilmemiş |
| Rusça | 0.00% | Test edilmemiş | 100.0% | Test edilmemiş |
| İsveççe | 0.00% | Test edilmemiş | 99.89% | Test edilmemiş |
| Türkçe | 0.00% | Test edilmemiş | 99.79% | Test edilmemiş |
| Ukraynaca | 0.00% | Test edilmemiş | 99.89% | Test edilmemiş |
| Urduca | 0.00% | Test edilmemiş | 98.84% | Test edilmemiş |
| Vietnamca | 0.00% | Test edilmemiş | 99.89% | Test edilmemiş |
| Çince | 0.00% | Test edilmemiş | 99.89% | Test edilmemiş |
Pangram'ın çok dilli metinlerdeki performansı hakkında daha fazla bilgi için bu blog yazısına göz atın
ESL Performansı
Ayrıca, yapay zeka dedektörlerinin ana dili İngilizce olmayan kişilere karşı önyargılı olabileceğine dair yaygın bir endişe olduğu için, her iki model de ESL performansına özel önem verilerek eğitilmiştir. Hem GPTZero hem de Pangram, özellikle ESL metinlerine ilişkin sonuçlar yayınlamıştır. Aşağıda bu sonuçları karşılaştırabilirsiniz:
| Yanlış Pozitif Oranı | Örneklem Büyüklüğü | |
|---|---|---|
| Pangram | 0.032% | 25,021 |
| GPTZero | 1.1% | 91 |
Pangram’ın ESL metinlerine yönelik yaklaşımı hakkında daha fazla bilgi edinmek için şu blog yazısına göz atın: https://www.pangram.com/blog/how-accurate-is-pangram-ai-detection-on-esl
Henüz Piyasaya Çıkmamış Modeller ve GPT-5
Yapay zeka algılama çözümleri arayanların bir diğer endişesi, henüz piyasaya sürülmemiş modeller üzerindeki performanstır. Yapay zeka rekabeti giderek genişlerken, büyük yapay zeka laboratuvarları ve küçük yeni şirketler düzenli olarak önemli modeller yayınlamaktadır. Bir yapay zeka algılama çözümünün, doğrudan üzerinde eğitim yapmamış olabilecekleri modellerde de doğru sonuçlar sunmaya devam etmesi önemlidir.
GPT-5'in yakın zamanda piyasaya sürülmesi, bunu anlamak için harika bir fırsat sundu! Yeni modelin piyasaya sürülmesinden birkaç saat sonra, Pangram ekibi GPTZero ve Pangram'ın performansını çeşitli komut türleri üzerinde test etti. İşte sonuçlar:
| Pangram | GPTZero | |
|---|---|---|
| Belge 1 | 100% | 2% |
| Belge 2 | 100% | 0% |
| Belge 3 | 100% | 0% |
| Belge 4 | 100% | 0% |
| Belge 5 | 100% | 9% |
| Belge 6 | 99% | 0% |
| Belge 7 | 100% | 0% |
| Belge 8 | 100% | 0% |
| Belge 9 | 100% | 29% |
| Belge 10 | 100% | 0% |
| Belge 11 | 100% | 10% |
Not: GPTZero, GPT-5 üzerinde daha iyi performans gösterdiğini iddia eden bir model güncellemesi yayınladı! İlk karşılaştırmamızla ilgili daha fazla ayrıntı için lütfen bu blog yazısına göz atın. Ayrıca, kullanıcıların herhangi bir zamanda performans karşılaştırması yapmak üzere kendi testlerini gerçekleştirmelerini öneririz.
Sonuç
Sonuç olarak, Pangram yapay zeka tarafından üretilen içeriği tespit etmek için sağlam ve güvenilir bir seçenek olmaya devam ediyor. İhtiyaçlarınız ister eğitim, yayıncılık, içerik denetimi ya da daha özel bir alan olsun, doğru ve adil bir yapay zeka tespit hizmeti sunmak için buradayız. Blogumuzdan daha fazla bilgi edinebilir veya info@pangram.com adresinden bize ulaşabilirsiniz.
Bradley, bir yapay zeka araştırmacısı ve endüstride derin öğrenme ürünleri geliştirme konusunda uzman bir isimdir. Son olarak, üretken yapay zeka ile ilaç keşfi yapan Absci şirketinde derin öğrenme araştırma grubuna liderlik etmiş ve daha önce Tesla Autopilot’un temel bilgisayar görme ekibinin bir üyesi olarak görev yapmıştır.
Bradley, yüksek lisans öğrencisiyken Stanford Vision Lab bünyesinde derin öğrenme alanında birçok makale kaleme almıştır. Stanford Üniversitesi’nden fizik lisans ve yapay zeka yüksek lisans derecelerine sahiptir. Yapay zekanın yanı sıra eğitim ve felsefe konularına da ilgi duymakta olup, aynı zamanda tutkulu bir golfçüdür.
İlgili makaleler
Pangram, ICLR makalelerinin %21’inin yapay zeka tarafından yazıldığını öngörüyor
Hangi AI Algılayıcı En Doğru Sonuçları Veriyor? Test Edilen 30 Araç (2026)
AI konferans bildirileri giderek daha fazla yapay zeka tarafından yazılıyor: 2023'ten bu yana %370 artış
Quora, yapay zeka tarafından yazılan cevapları yönetmek için Pangram'ı nasıl kullanıyor?
İşletmenizi LLM ve GenAI'ye Uygun Hale Getirmek
Amazon'daki ilk sayfadaki yorumların yüzde üçü artık yapay zeka tarafından oluşturuluyor
adresinden güncellemelerimize abone olun
