Evet, yapay zeka tabanlı algılama doğru sonuçlar verebilir

Özetle: Akademisyenler ve içerik denetçileri, yapay zeka tespit araçları veya yapay zeka kontrol programlarına ilişkin değerlendirmelerini yeniden gözden geçirmelidir. 2023 yılında akademik makaleler ve popüler medya kaynaklarından oluşturulan önceki genel kanı artık geçerliliğini yitirmiştir. Pangram gibi en yeni yapay zeka tespit modelleri, sadece en güncel büyük dil modellerine (LLM) ayak uydurmakla kalmamış, aynı zamanda geleceğe dönük olarak tasarlanmaktadır.

Bu noktaya nasıl geldik: Yapay zeka algılamasının kısa tarihi

ChatGPT 2022'de piyasaya sürüldüğünde, yazarlar ve içerik üreticiler yaratıcılık için bu yeni yapay zeka aracına akın etti. O günden beri bu akın hiç durmadı. İçerik üreticiler, araştırma makaleleri ve romanlar gibi uzun metinlerden e-postalar, Reddit yorumları ve Amazon yorumları gibi kısa metinlere kadar her şeyi yazmak için ChatGPT'yi (ve diğer yapay zeka modellerini) ve rakiplerini kullandılar. Yapay zeka tarafından üretilen içerikler interneti sardı. Ancak, LLM'lerin ortaya çıkmasından bu yana, insan tarafından yazılanlarla yapay zeka tarafından yazılanları ayırma talebi ortaya çıktı. OpenAI bu ihtiyacı fark etti ve metinleri yapay zeka tarafından yazılmış olarak sınıflandıran bir ürün geliştirdi. Yapay zeka kullanımının yaygınlaşmasıyla birlikte, özellikle akademik dürüstlüğün ön planda olduğu okul ve üniversitelerde yapay zeka dedektörlerine veya sınıflandırıcılara olan talep arttı. Bazı öğrenciler (genellikle erken benimseyenler), ödevlerini tamamlamak, sınavlara girmek ve üniversiteye başvurmak için en yeni modelleri kullandılar. Bazı araştırmacılar, zaman baskısı altında, işin kolayına kaçarak yayınlar için AI tarafından yazılmış veya AI'nın yardımıyla hazırlanmış çalışmalar sundu. Bu nedenle, bu endişeleri gidermek umuduyla birçok araç piyasaya sürüldü. TurnItIn gibi akademik yazılım sektörünün önde gelen şirketleri, mevcut eğitim müşterilerinin ihtiyaçlarını karşılamak için Nisan 2023'te AI Checker adlı bir araç piyasaya sürdü. Grammarly de 2024'te Grammarly Authorship adlı kendi aracını piyasaya sürdü. Bu şirketlerin genel düşüncesi, araçlarının intihali tespit edebiliyorsa, yapay zekayı da tespit edebilmesi gerektiğiydi. Özellikle yükseköğretimde, "intihal denetleyicilerinden" "yapay zeka denetleyicilerine" geçiş yapılması gerekiyordu. Ancak, bunun işe yaramayacağı başından beri belliydi.

İlk yapay zeka tespit araçları, “perplexity” ve “burstiness” kavramlarını kullanarak yüksek doğruluk vaat ediyordu. Pangram’ın CTO’su Bradley Emi bu terimleri şöyle açıklıyor:“Perplexity, bir metindeki her kelimenin ne kadar beklenmedik ya da şaşırtıcı olduğunu ifade eder. Burstiness ise bir belge boyunca perplexity değerindeki değişimi ifade eder. Eğer belge boyunca şaşırtıcı kelimeler ve ifadeler serpiştirilmişse, o zaman belgenin burstiness değeri yüksektir.”

Bu terimlere fazla takılmayacağız, ancak bir yapay zeka algılama aracı geliştirirken bu faktörlere aşırı derecede güvenmek, üç temel kusura yol açar:

• Bu araçlar, Claude, GPT-4 vb. gibi farklı modellerde kullanıldığında bazen güvenilir olmayabilir.
• Bu araçlar zamanla gelişmez; bu nedenle, büyük dil modellerinde (LLM) yapılacak küçük iyileştirmeler doğruluğu düşürür.
• İngilizceyi ana dili olarak konuşmayanların metinlerini (ESL) yanlış bir şekilde yapay zeka olarak sınıflandırdılar

Bunlar özellikle akademik kurumlar için ciddi endişe kaynaklarıdır. Öğrencileri ve araştırmacıları çalışmalarında ve makalelerinde yapay zeka kullandıkları yönünde haksız yere suçlamanın ağırlığı çok büyüktür. Bu, kariyerleri mahvedebilir. Yapay zekayı filtrelemek için etkinliği %95 olan araçlara bile güvenmek son derece risklidir. Bu nedenle, MIT, Vanderbilt ve UC Berkeley gibi birçok önde gelen akademik kurum, öğretmenlerinin AI dedektörlerini kullanmasını desteklememektedir. Çoğu durumda, AI dedektörlerinin ne kadar kötü performans gösterdiğini özetleyen " AI ile Oluşturulmuş Metinler için Algılama Araçlarının Test Edilmesi" gibi belirli araştırma makalelerine ve " AI Yazı Dedektörleri Neden İşe Yaramıyor?" gibi sektör makalelerine atıfta bulunmuşlardır.

OpenAI bu sorunları o kadar zor buldu ki , Temmuz 2023’te “yapay zeka sınıflandırıcısı, düşük doğruluk oranı nedeniyle artık kullanılamıyor” gerekçesiyle bu projenin peşini bıraktı. Birçok okul yöneticisi şu sonuca vardı: Eğer OpenAI bunu başaramıyorsa, muhtemelen imkansızdır.

En iyi üniversiteler ve genel kamuoyu, yapay zeka ile intihal tespitinin vaatlerinin imkansız ya da hatta sahte bir çözüm olduğu konusunda fikir birliğine varmışken, Pangram Labs gibi şirketler bu alanda önemli gelişmeler kaydettiler ve yapay zeka ile intihal tespitini üniversite ve kurumsal ortamlarda vazgeçilmez bir araç haline getirdiler.

2025'te yapay zeka tespiti neden farklı olacak?

AI algılama, genellikle kestirme yollar arayan öğrenciler ile insan tarafından yazılmış olanı ve olmayanı ayıklamaya çalışan eğitimciler arasındaki bir silahlanma yarışı olarak nitelendirilir. 2025 yılında, algılayıcılar çıtayı daha da yükseltti.

Ağustos 2025’te, Chicago Booth’tan iki araştırmacı, Brian Jabarian ve Alex Emi, Yapay Yazım ve Otomatik Algılamaadlı bir makale yayınladılar. Makalede, "çoğu ticari AI dedektörünün oldukça iyi performans gösterdiğini, özellikle Pangram'ın Yanlış Pozitif Oranları ve Yanlış Negatif Oranları'nı neredeyse sıfıra indirdiğini" belirttiler. Pangram'ı, "AI metinlerini doğru bir şekilde tespit etme yeteneğinden ödün vermeden, sıkı bir politika sınırını (Yanlış Pozitif Oranları ≤ 0,005) karşılayan tek dedektör" olarak nitelendirdiler. Bu, yapay zeka algılamasının birkaç kısa yıl içinde ne kadar ilerlediğinin bir örneğidir. Peki bu nasıl oldu?

İlk olarak, yapay zeka araştırmacıları, daha geniş bir yelpazede insan tarafından yazılmış metinler ve yapay zeka tarafından üretilmiş metinler toplayarak veri kümelerini geliştirdiler. Bu, sadece akademik makaleleri değil, e-postalar ve haberler gibi diğer yazıları da içeriyor. İkinci olarak, geliştiriciler yanlış pozitif oranlarını azaltmak için aktif öğrenme yöntemini kullandılar. Bu, sınıflandırması en zor olan metinleri (yapay zeka mı yoksa insan mı yazdığı belirsiz olanları) bulup, bunları modellerine yeniden dahil ettikleri anlamına geliyor.

Ve bu rekabet ortamında, genel yapay zeka geliştiricileri, bazı yapay zeka tespit araçlarını atlatacak kadar etkili bir yanıt veremediler. OpenAI’nin büyük bir heyecanla beklenen GPT-5 modeli piyasaya sürüldüğünde, daha az halüsinasyon, daha gelişmiş üslup ve daha yaratıcı yazım vaat ediyordu. 12 saat içinde, Pangram Labs'ın kurucu ortağı Max Spero, LinkedIn'de herhangi bir ek eğitim olmaksızın Pangram'ın AI tespit aracının GPT-5 testlerini önceki modellerle benzer bir oranda sınıflandırabildiğini belirten bir paylaşımda bulundu:

“Pangram, GPT-5’i bu amaçla özel olarak eğitilmeden güvenilir bir şekilde tespit edebilen tek yapay zeka dedektörüdür.”

Kurumlar yeni gerçekliğe ayak uyduruyor

AI tespit araçlarının kullanımı konusunda haklı endişeler bulunmaktadır. Bu araçların çoğunda hâlâ endişe verici düzeyde yanlış pozitif oranları görülmekte ve doğrulukları konusunda yanıltıcı reklamlar yapılmaktadır. Bununla birlikte, en yeni teknolojilerden bazıları son derece güvenilirdir ve kurumsal işletmeler ile üniversitelerde aktif olarak kullanıma alınmaktadır. Örneğin, uzman kaynak bulma şirketi Qwoted, "uzmanlar" tarafından yazılan AI metinlerini azaltmak için yakın zamanda AI algılama sistemini iş akışına entegre etti. "Gazeteciliğin geleceği güvene bağlıdır. Bu nedenle, AI algılama ve atıf konusunda altın standardı belirleyen Pangram ile ortaklık kurmaktan büyük mutluluk duyuyoruz."

Araştırmacılar ve gazeteciler de bu alana geri dönüyor. Uzun süredir eleştiri getirenler, önceki görüşlerini değiştiriyor ve AI tespitini daha geniş bir AI politikasına dahil etmenin yollarını araştırıyor. Press Gazette'den Rob Waugh, AI tarafından üretilmiş yazıları tespit etmek isteyen kullanıcılara yakın zamanda Pangram'ı önerdi. "Bu tür araçlar %100 güvenilir değildir, ancak Pangram diğer çevrimiçi AI kontrol araçlarına kıyasla doğru sonuçlar verdiği için beğeni topladı ve AI tarafından üretilmiş haber önerilerini ve metinleri tespit etmek için Qwoted gibi gazetecilere yönelik hizmetlere entegre edildi."

Kullanım senaryonuzu görüşmek ve Pangram'ın kuruluşunuz için faydalı olup olmayacağını değerlendirmek isteriz. Hizmetlerimizi deneyin ve kurumsal çözümlerimiz hakkında bizimle iletişime geçin.