Hangisi daha iyi: Pangram mı, Turnitin mi?

İki önde gelen AI dedektörünün karşılaştırılması

Bana sık sık "Pangram, Turnitin'in yapay zeka yazma dedektöründen ne farkı var?" sorusu sorulur. Sonuçta, birçok okul Turnitin'in geleneksel intihal dedektörünü kullanıyor. Turnitin yapay zeka yazma dedektörü kullanımı kolaydır, ancak birçok eğitimci bunun yerine Pangram'ı tercih ediyor. Neden? Bence bunun iki ana nedeni doğruluk ve kullanılabilirliktir.

Pangram Doğruluğu ve Turnitin Doğruluğu

Pangram ve Turnitin ne kadar doğrudur? Her iki şirket de doğruluğu ayrıntılı olarak açıklayan kendi teknik raporlarını yayınlamıştır ve her ikisinin doğruluğu farklı akademik çalışmalarda ölçülmüştür.

	Pangram	TurnItIn
GPT-4 algılama oranı	>99.9%	76.8%
Yanlış Pozitif Oranı	10.000'de 1	200'de 1

Turnitin'in Eylül 2024 teknik raporunda, GPT-4 tarafından oluşturulan metinlerde %76,8 oranında geri çağırma olduğunu bildiriyorlar. Bu, Turnitin'in GPT-4 tarafından oluşturulan metinlerin yaklaşık %77'sini tespit ettiği anlamına geliyor.

Buna karşılık, Pangram'ın teknik raporu, AI tarafından üretilen metinlerde ve özellikle GPT-4 metinlerinde genel olarak %99,9'luk bir geri çağırma oranını göstermektedir. Bu rakamlar, üç bağımsız çalışmanın Pangram'ın doğruluğunun %99'un üzerinde olduğunu ortaya koyduğu üçüncü taraf akademik araştırmalarla desteklenmektedir.

Yanlış pozitif oranı

Yanlış pozitif oranı, doğruluğun önemli bir bileşenidir ve sınıf ortamında tartışmasız en önemli unsurdur. Dedektörünüzün sonuçlarına güvenemiyorsanız, o zaman bu dedektörün gerçekte ne kadar yararlı olduğu sorgulanabilir.

Turnitin'in teknik raporu, %0,51'lik bir yanlış pozitif oranı, yani yaklaşık 200'de 1 oranını ölçmektedir.

Turnitin'in web sitesinde bildirilen yanlış pozitif oranı

Öte yandan Pangram'ın, 0,01% (10.000'de 1) oranında iyi belgelenmiş bir genel yanlış pozitif oranı vardır. Turnitin'in değerlendirmesine benzer bir akademik makale veri setinde Pangram, 25.000'de 1 oranında yanlış pozitif oranı sergilemektedir.

	Pangram
Genel Yanlış Pozitif Oranı	10.000'de 1
Akademik Makale Yanlış Pozitif Oranı	25.000'de 1

ESL Önyargısı

Hem Pangram hem de Turnitin, ana dili İngilizce olmayanlara karşı tarafsız olduklarını iddia ediyorlar.

Pangram, dört ayrı ESL veri setinde %0,032'lik bir yanlış pozitif oranı ölçmüştür.

Turnitin, ESL yazma performanslarını incelemiş ve ESL yazmada %1,4'lük bir yanlış pozitif oranı ölçmüştür. Bu oran, ESL dışı yazmada %1,3'lük FPR ile karşılaştırılmıştır.

Pangram, aynı veri setini karşılaştırmalı olarak ölçebildi ve ESL yazılarında %0,02, ESL dışı yazılarda ise %0 gibi önemli ölçüde daha düşük bir FPR değeri elde etti.

Veri kümesi	Pangram FPR	TurnItIn FPR
ESL İngilizce 300+ kelime	0.02%	1.4%
ESL dışı İngilizce 300+ kelime	0.00%	1.3%

Mevcudiyet

Pangram, okullarının kurumsal lisansı olup olmadığına bakılmaksızın tüm öğretmenler tarafından kullanılabilir. Öğretmenler günde beş kez ücretsiz kontrol yapabilirler, ancak Pangram'ı yüksek hacimde kullanmak için abonelik satın alabilirler. Bir okul kurumsal lisans satın alırsa, tüm öğretmenler ve öğretim üyeleri Pangram'a sınırsız erişim hakkına sahip olurlar.

Turnitin yalnızca kurumsal lisansla kullanılabilir. Kurumsal lisansa abone olmadan Turnitin'in AI algılama ürününü ücretsiz olarak test etmenin bir yolu yoktur.

Pangram'ı nasıl kullanabilirim?

Pangram'ı kullanmanın üç temel yolu vardır:

1. Kontrol paneli: Pangram'ın ücretsiz kontrol panelini kullanarak metin yapıştırmak veya belge yüklemek ve bunları AI içeriği açısından kontrol etmek mümkündür. Kontrol panelinden, AI'nın bulunduğu yerlerin bir grafiği ve yaygın AI ifadeleriyle ilgili önemli noktalar da dahil olmak üzere AI yazımına ilişkin ayrıntılı bir rapor görüntülenebilir.
2. Chrome uzantısı: Pangram Chrome uzantısını kullanarak herhangi bir metni seçip sağ tıklama menüsünden "AI İçeriğini Kontrol Et" seçeneğini seçerek AI içeriğini kontrol edebilirsiniz. Bu, Canvas Speedgrader ve tartışma panoları dahil olmak üzere internetin her yerinde çalışır. Uzantı ayrıca Google Dokümanlar'a, belgeyi anında AI açısından kontrol etmek için bir düğme ekler.
3. LMS Entegrasyonu: Pangram, Canvas ve Google Classroom entegrasyonları dahil olmak üzere çeşitli entegrasyonlara sahiptir. Bunlar yalnızca kurumsal lisansla kullanılabilir. Entegrasyonlarımızın güncel listesi için buraya tıklayın.

Hangi diller desteklenmektedir?

Pangram, İngilizce, Arapça, Çince, Felemenkçe, Çekçe, Fransızca, Almanca, Yunanca, Hintçe, Macarca, İtalyanca, Japonca, Korece, Farsça, Lehçe, Portekizce, Romence, Rusça, İspanyolca, İsveççe, Türkçe, Ukraynaca, Urduca ve Vietnamca dahil olmak üzere 24 dili desteklemektedir.

Turnitin üç dili desteklemektedir: İngilizce, Japonca ve İspanyolca.

Pangram ve Turnitin Özeti

Genel olarak, hem Pangram hem de Turnitin, doğruluk konusundaki iddialarını destekleyen önemli kanıtlar sunmuştur, ancak Pangram, Turnitin'den iki kat daha doğrudur. Pangram 24 dili desteklerken, Turnitin sadece üç dili desteklemektedir. Pangram ücretsiz bir kontrol paneli, Chrome uzantısı ve bireysel veya kurumsal lisanslar sunarken, Turnitin sadece kurumsal lisanslar sunmaktadır.

Turnitin'den Pangram'a geçiş hakkında daha fazla bilgi edinmek istiyorsanız, lütfen bizimle iletişime geçin. Görüşlerinizi duymaktan memnuniyet duyarız!

Bugün kaydolun ve Pangram'ı günde beş kredi ile ücretsiz deneyin. Halihazırda Turnitin kullanıyorsanız ve diğer seçeneklerle ilgileniyorsanız, lütfen bizimle iletişime geçin!