Yapay zeka tespiti nasıl çalışır: yöntem
ScanForAI bir yazıyı bir makinenin okuduğu gibi okur ve ne kadarının yapay zeka yazısına benzediğini tahmin eder. 0–100 arası bir puan ve sade bir düzey verir, puanı yükselten özellikleri de gösterir: bir gösterge, hüküm değil. Şimdilik ScanForAI yalnızca İngilizce metinleri analiz eder. Türkçe metinler için yapay zeka tespiti hazırlanıyor, ama ne zaman hazır olacağı henüz belli değil. Bu sayfada anlatılan her şey İngilizce metinler için geçerlidir. Dedektör sayfası ve sonuç ekranındaki yazılar da şimdilik İngilizce.
Dedektör neyi ölçer
Tek bir sözcük ya da cümle hiçbir şeyi kanıtlamaz. ScanForAI düzinelerce ayrı dil ipucunu birlikte değerlendirir ve makine yazısında görülen ipuçlarının metinde ne kadar yoğun biçimde bir arada bulunduğuna bakar. Bu ipuçları beş grupta toplanır:
- Ritim. İnsanlar içgüdüsel olarak kısa ve uzun cümleleri değiştirir; düzenlenmemiş makine yazısı ise genellikle hep aynı tempoda ilerler. Dedektör bu değişkenliği ölçer.
- Sözcük dağarcığı. Yapay zeka modelleri tanınabilir bir sözcük ve kalıp ifade kümesine insanlardan çok daha sık başvurur; bkz. yapay zekanın aşırı kullandığı sözcükler (İngilizce).
- İfade biçimi. Kısaltmalar, araya giren kişisel yorumlar ve kalıplaşmış yapılar (“bu yalnızca X değil, Y” kalıbı ve benzerleri) bir insan yazdığında, makinenin yazdığından farklı görünür.
- Öngörülebilirlik. Makine yazısında bir sonraki sözcüğü tahmin etmek alışılmadık derecede kolaydır; bu, metnin nasıl üretildiğine dair istatistiksel bir parmak izidir.
- Yapı. Yapay zekanın alışıldık iskeleti (düzenli listeler, başlıklarla işaretlenmiş bölümler, kalıplaşmış açılış ve kapanışlar), düzenlenmemiş makine metninin en net izlerinden biridir.
Her grup birkaç ölçüm ekler. Hangi ipucunun ne kadar önemli olduğunu, kimin yazdığını bildiğimiz insan ve yapay zeka yazılarına bakarak ayarlıyoruz; yapay zeka modelleri değiştikçe bu yazıları yeniliyoruz. Puanın doğru kalmasını sağlayan bu ağırlıklandırmadır ve onu yayımlamıyoruz.
Puan nasıl oluşur
Tek tek ipuçları tek bir sayıda birleştirilir: 0 (insan yazısı gibi) ile 100 (yapay zeka yazısı gibi) arasında. Önemli olan, sonucun sayıda bitmemesi: metninizde hangi ipuçlarının ne kadar güçlü öne çıktığını gösterir; böylece kara bir kutuya güvenmek yerine gerekçeleri görürsünüz. Size söz verdiğimiz şey, her sonuç için bu açıklamadır; tespitten kaçmaya çalışan bir yapay zeka modelinin kendini ona göre ayarlayabileceği, herkese açık bir tarif değil.
Her sonuçta puanın yanında bir güvenilirlik düzeyi de yer alır: yüksek, orta ya da düşük. Böylece çok az metne dayanan ya da belirsiz orta bölgede kalan bir sonuç bunu açıkça belirtir; bir tahmini kesin bir sonuç gibi göstermez.
Yazı türü duyarlılığı
Birçok iz belirli bir yazı türüne özgüdür. Resmi ve akademik yazı doğal olarak az kısaltma ve düzgün cümleler kullanır; yalnızca bunun için işaretlemek yanlış olurdu. ScanForAI önce metnin yazı türünü belirler ve yalnızca gündelik yazıda anlam taşıyan özelliklere daha az önem verir; böylece gerçekten resmi (ya da ikinci dilde yazılmış) insan yazısı resmi olduğu için cezalandırılmaz. İnsan yazısının yanlışlıkla yapay zeka sanılmasına karşı korunmak, bizim için biraz daha fazla yapay zeka metni yakalamaktan daha önemlidir.
Kendi donanımımızda çalışır
Analiz, denetimimizdeki bir altyapıda yapılır. ScanForAI metninizi hiçbir zaman üçüncü taraf bir yapay zeka API'sine göndermez ve anonim analizler hiç saklanmaz; metin puanı üretmek için işlenir ve sonra silinir. Ayrıntılar için Gizlilik Politikası sayfasına bakın.
Sınırlar, açıkça
- Hiçbir dedektör %100 doğru değildir, bizimki de. Her puan bir tahmindir.
- Resmi, teknik ya da ikinci dilde yazılmış insan yazısı yüksek puan alabilir; düzenlenmiş ya da daha yeni yapay zeka metni düşük puan alabilir.
- Metni biraz yeniden yazmak ya da düzenlemek göze çarpan izlerin çoğunu siler; insan gibi yazacak biçimde geliştirilmiş en yeni yapay zeka modellerinin metinleri tespitten neredeyse tamamen kaçabilir. Düşük bir puan, metnin insan yazısı gibi okunduğu anlamına gelir; nasıl üretildiğini kanıtlamaz.
- Yapay zeka modelleri değiştikçe izler eskir; bu yüzden dedektörü yeni yazılarla sürekli yeniden ayarlıyoruz.
- Dedektör en güvenilir sonucu 300 sözcük ve üzerindeki yazılarda verir; kısa ya da çok teknik metinlerde en az güvenilirdir.
Puanı göz önüne aldığınız şeylerden yalnızca biri olarak görün; bir kişi hakkında karar vermek için asla tek dayanak yapmayın ve asla suçlamak için gerekçe saymayın. Bir sonucu sorumlu biçimde nasıl okuyacağınız için puanınızı yorumlama sayfasına bakın.