Bu metni ChatGPT mi yazdı? Bir yapay zekâ dedektörünün söyleyebilecekleri ve söyleyemeyecekleri

Bir dedektör neyi okur, neyi göremez

Bir yapay zekâ dedektörü yalnızca bitmiş metni okur. Kimsenin ChatGPT geçmişine erişimi, üretilmiş metinlerden oluşan bir arşivi ya da kimin ne yazdığına dair bir kaydı yoktur.

Onun yerine yazım örüntülerine bakar: kelime seçiminin ne kadar tahmin edilebilir olduğuna, cümle yapısının ne kadar tekdüze olduğuna, kalıp bağlaçların ve risksiz genellemelerin ne sıklıkla geçtiğine. Model bu örüntüleri büyük bir insan ve yapay zekâ metni kümesinden öğrenir, ardından yeni bir metnin her iki türe ne kadar uyduğunu değerlendirir.

Birçok dil modeli bu örüntüleri paylaşır. Textumi’nin dedektörünün hiçbir zaman bir model adı vermemesinin ve ChatGPT’yi Claude’dan, Gemini’den ya da başka bir modelden ayırmaya çalışmamasının nedeni budur. Onu tek bir model üzerinde ayrıca test etmedik; bu yüzden belirli bir model hakkında iddiada bulunmuyoruz.

Yani bir dedektörün gerçekte cevapladığı soru, insanların sorduğundan daha dardır. Bunu kimin yazdığını değil, bu ifadelerin yapay zekâ yazısı gibi okunup okunmadığını ve nerede öyle okunduğunu cevaplar.

Şüphelendiğiniz bir metni nasıl kontrol edersiniz

1. En az 50 kelimelik, tercihen birkaç paragraftan oluşan bütün bir pasaj alın. Tek tek cümleler bir yargıya varmak için çok az şey taşır.
2. Alıntıları, kaynakçaları ve başlıklar ya da yasal uyarılar gibi standart metinleri dışarıda bırakın; bunlar yazarın üslubu hakkında hiçbir şey söylemez.
3. Kontrolü çalıştırın ve etiketi tek başına değil, işaretli pasajlarla birlikte okuyun.
4. Dedektörün gösterdiğini bildiklerinizle karşılaştırın: yazarın önceki metinleri, taslaklar, kaynaklar ve metnin nasıl ortaya çıktığı.

Textumi Yapay Zekâ Dedektörü tarayıcıda, macOS uygulamasında ve kendi yapay zekâ asistanınız üzerinden çalışır. Tek bir kontrol en fazla 12.000 karakter kabul eder; bu yüzden uzun bir belge parçalar hâlinde kontrol edilir.

Düzenlenmiş, parafraz edilmiş ya da çevrilmiş metin

İnsanların kontrol etmek istediği metinlerin çoğu, sohbet botunun ham çıktısı değildir. Biri ChatGPT’den bir taslak istemiş, birkaç cümlesini değiştirmiş, bir dil bilgisi aracından geçirmiş ya da çevirmiştir. Her adım metni, dedektörün öğrendiği örüntülerden biraz daha uzaklaştırır.

Sonuç olarak bir dedektör düzenlenmiş bir yapay zekâ taslağını kaçırabilir; yoğun düzeltmeden ya da makine çevirisinden geçmiş bir insan metnini de işaretleyebilir. İki hata da yaygındır ve hiçbir ayar onları ortadan kaldırmaz.

Karışık bir sonuç çoğu zaman karışık bir geçmişi yansıtır: üretilmiş paragraflarla doldurulmuş, insanın yazdığı bir taslak plan ya da elle yeniden yazılmış üretilmiş bir taslak. Etiket metnin bütün olarak nasıl okunduğunu anlatır. Metnin ne kadarını bir modelin yazdığını ölçmez.

Filigranlar ve işe yaramayan diğer kestirmeler

Bazı yapay zekâ şirketleri üretilmiş metinlerde görünmez filigranlarla da denemeler yaptı; örneğin Google, SynthID adlı birini tanıttı. Bu filigranlar yalnızca onları oluşturan şirketin aracıyla okunabilir; yeniden ifade etme ya da çeviri onları zayıflatır. Textumi filigran aramaz: kelimelerin kendisini okur.

Yaygın olarak dolaşan başka kestirmeler de pratikte işe yaramaz:

• ChatGPT’ye bir metni onun yazıp yazmadığını sormak. Bir sohbet botu başkalarının sohbetlerine bakamaz ve aynı kendinden emin tavırla evet de diyebilir, hayır da.
• Tireleri ya da sevilen kelimeleri saymak. Uzun tireler, “kritik öneme sahip” gibi kalıplar ya da derli toplu bir üçlü liste insan yazısında da görülür; tek bir alışkanlık hiçbir şey kanıtlamaz.
• Gizli karakterler aramak. Alışılmadık boşluklar ve görünmez karakterler bir sohbet botundan olduğu kadar kopyalamadan, düzenleyicilerden ve klavyelerden de gelebilir.
• Bir yüzdeyi olduğu gibi kabul etmek. Herhangi bir dedektörün gösterdiği bir oran bir modelin puanıdır, metnin üretilmiş kısmının payı değildir.

Metni dikkatle okumak ve nasıl ortaya çıktığını sormak, bu numaraların hepsinden daha çok şey söyler. Belirtiler listemiz neye bakmaya değer olduğunu ve neden tek bir belirtinin hiçbir şeyi kesinleştirmediğini gösteriyor.

Bir metnin yapay zekâ tarafından yazılmış olabileceğine dair 12 belirti

Sonuç nasıl okunur

Textumi “İnsan”dan “Yapay zekâ”ya uzanan bir göstergede ibreyi bir noktaya yerleştirir ve sonucu beş etiketten biriyle adlandırır: “İnsan yazımı”, “Büyük ölçüde insan”, “Karışık: insan ve yapay zekâ”, “Büyük ölçüde yapay zekâ” ya da “Yapay zekâ üretimi”.

Her etiket metnin üslubundan yapılan bir tahmindir. “Yapay zekâ üretimi”, ifadelerin yapay zekâ yazısına çok benzediği anlamına gelir; metni ChatGPT’nin ya da başka bir modelin yazdığını kanıtlamaz. Aynı şekilde “İnsan yazımı” da onu bir insanın yazdığını kanıtlamaz.

50 kelimenin altındaki bir metin için Textumi etiket yerine “Değerlendirmek için metin çok az” mesajını gösterir. Birkaç cümle, hiçbir dilde istikrarlı bir sonuç için yeterli kanıt sunmaz.

Hesabınız varsa en çok ağırlık taşıyan pasajları da görürsünüz: uzun bir metinde 50 kelime ve üzerindeki en fazla üç paragraf ayrıca kontrol edilip işaretlenir. Bu pasajlarla başlayın, çünkü tek bir genel geçer paragraf bütün sonucu kendine çekebilir.

İnsan yazısı neden işaretlenirYapay zekâ dedektörleri nasıl çalışır

Bir metni ChatGPT ya da Claude içinde kontrol etmek

Zaten bir yapay zekâ asistanıyla çalışıyorsanız kontrolü sohbetten çıkmadan yapabilirsiniz. Textumi; Claude, ChatGPT ve bir asistanın dış araçları kullanmasının standart yolu olan MCP’yi destekleyen diğer asistanlara bağlanır.

Textumi’yi bağladıktan sonra asistandan bir metni onunla kontrol etmesini isteyin. Asistan metni Textumi dedektörüne gönderir ve 0 ile 100 arasında bir puan, bir etiket ve kelime sayısını geri alır. Değerlendirme asistanın tahmininden değil, Textumi’nin kendi modelinden gelir.

Bağlayıcı MCP, Bireysel ve Profesyonel planlara dahildir. Asistanlar sayfası kurulumu adım adım anlatır.

Yapay zekâ asistanınızda TextumiPlanları karşılaştırın