Bir Metnin Yapay Zeka Ürünü Olduğu Nasıl Anlaşılır
Yazar Chatday Editorial Team ·
Üzerinde durmaya değer bir sayı var: on binlerce web sayfasını inceleyen araştırmacılar, internette yayınlanan yeni makalelerin yaklaşık yarısının artık yapay zeka tarafından yazıldığını ortaya koydu. İnternetin ücra bir köşesinden bahsetmiyoruz. Yarısından. Bu da büyük olasılıkla bugün zaten bir ürün incelemesinde, bir haber derlemesinde, bir LinkedIn gönderisinde, hatta bir e-postada fark etmeden yapay zeka metni okuduğun anlamına geliyor.
Peki bunu nasıl anlarsın? Dürüst cevap şu: kendi gözlerini ve doğru aracı bir arada kullanarak, her birinin neyi kanıtlayıp neyi kanıtlayamayacağını bilirsen, bu konuda gerçekten iyileşebilirsin. Bu rehber sana ikisini birden sunuyor: kendi gözlerinle otuz saniyede fark edebileceğin işaretleri ve ikinci bir görüş almak istediğinde yapay zeka dedektörlerinin nasıl çalıştığını.
İnternetin Yarısını Artık Makineler Yazıyor
Girişteki istatistik, 2020’den bu yana yayınlanmış on binlerce İngilizce makaleyi analiz eden ve her birini birkaç yapay zeka dedektöründen geçiren bir SEO araştırma şirketi olan Graphite’tan geliyor. Bulgularına göre, yapay zeka tarafından üretilen makalelerin payı 2022 sonunda ChatGPT’nin piyasaya sürülmesinin ardından hızla arttı, ardından 2025 ve 2026 boyunca yaklaşık %50’de sabitlendi. Bazı çeyreklerde bu oran yarının biraz üzerine çıkarken, bazılarında biraz altında kalıyor.
Ve bu sadece blog spam’inden ibaret değil. 15 milyondan fazla biyomedikal makale özetini inceleyen ayrı bir analiz, 2024 itibarıyla bunların en az %13,5’inde, ChatGPT’nin çıkışından sonra sıçrama yapan belirgin kelime kullanımlarına dayanarak, yapay zeka tarafından yazıldığı veya düzenlendiğine dair izler bulundu. Bilimsel dergilerde oluyorsa, her yerde oluyor demektir.
Bunların hiçbiri yapay zeka metninin otomatik olarak kötü olduğu anlamına gelmiyor. Çoğu faydalı ve birçok insan yapay zekayı bir taslak ortağı olarak kullanıp sonra ciddi şekilde düzenliyor. Ama bir ödevi notlandırırken, göklere çıkaran bir ürün incelemesi okurken veya bir haberin güvenilir olup olmadığına karar verirken, “bunu gerçekte kim yazdı?” sormak gayet makul bir soru. İşte cevabını nasıl bulacağın.
Kendi Başına Fark Edebileceğin İşaretler
Herhangi bir araca başvurmadan önce gözlerini kullan. Yapay zeka modelleri, muazzam büyüklükte bir internet metni yığınından yazmayı öğrendi, sonra değerlendiricilerin beğendiği bir tona doğru cilalandı: akıcı, uyumlu, hafifçe resmi. Bu cila bir parmak izi haline geldi. Başkasının yazdığı bir metni okurken şunlara dikkat et.
| İşaret | Neye benzer |
|---|---|
| Kalıp ifadeler | ”Günümüzün dijital dünyasında”, “belirtmek gerekir ki”, “hadi konuya girelim”, “oyunun kurallarını değiştiren” |
| Şüpheli derecede düzenli ritim | Her paragraf aynı boyutta, her cümle aynı orta uzunlukta, üçlü düzenli listeler |
| Özgüvenli ama içi boş | Herhangi bir konuya uyabilecek, yaşanmışlık içermeyen bol miktarda cilalı cümle |
| Doğrulanabilir ayrıntı yok | İsim, tarih, fiyat veya ilk elden anlar yok, ya da bunlar yanlış çıkıyor |
| Kusursuz dilbilgisi, sesi yok | Sıfır yazım hatası, sıfır kısaltma, sıfır kişilik, hiçbir şey hakkında olmayan bir basın bülteni gibi |
| Formül bağımlılığı | ”Sadece X değil, Y”, “X’ten Y’ye”, açılış olarak retorik bir soru |
En güçlü insan kontrolü ayrıntı testidir. Gerçek yazarlar, sıradan olanları bile, gerçek bir deneyimin izlerini bırakır: belirli bir mağaza, tuhaf bir ayrıntı, bir şeye mal olan bir görüş. Yapay zeka ise doğru olan değil, doğru gibi görünen metni tercih eder. Bir iki somut iddiayı seç ve kontrol et. Bir restoran “incelemesi” hiçbir yemekten bahsetmiyorsa veya bir makale bulamadığın bir araştırmaya atıfta bulunuyorsa, şüphen yerinde. Bu başarısızlık biçiminin bir adı var ve daha önce yapay zekanın neden bilgi uydurduğunu sade bir dille ele almıştık.
İnsanları suçlamaya başlamadan önce bir uyarı: o tablodaki her işaret bir alışkanlıktır, kesin kanıt değil. İnsanlar ChatGPT’den çok önce de kalıp ifadelerle yazıyordu. İşte bu yüzden ikinci bir görüş almak faydalı.
Yapay Zeka Dedektörleri Gerçekte Nasıl Çalışır
Bir yapay zeka dedektörü bir metni okur ve tek bir temel soru sorar: Bu ne kadar tahmin edilebilir?
Dil modelleri, tekrar tekrar istatistiksel olarak en olası bir sonraki kelimeyi seçerek yazar. Bu bir iz bırakır. Yapay zeka metinleri genellikle akıcı ve tahmin edilebilirdir, sürpriz kelime seçimleri azdır ve ritim düzgün, sabittir. İnsan yazısı daha dağınıktır. Cümlelere yeniden başlarız, tuhaf kelimeler seçeriz, bir uzayıp bir aniden kısalırız. Dedektörler bu tahmin edilebilirliği (araştırmacılar buna “perplexity” der) ve ritimdeki değişkenliği (buna da “burstiness” derler) ölçer ve bir olasılık üretir: bu metin %85 olasılıkla yapay zeka tarafından üretilmiş görünüyor.
Kilit kelime olasılık. Bir dedektör kelimeleri kimin yazdığını asla gerçekten bilmez. Az önceki bölümde senin yaptığın gibi, sadece his yerine matematik kullanarak istatistiksel bir tahmin yapıyor.
Skorun bu şekilde davranmasının nedeni de bu:
- Daha uzun metinler daha iyi sonuç verir. İki cümlelik bir mesaj basitçe yeterli sinyal içermez. Çoğu dedektör birkaç yüz kelimenin altında güvenilmezdir.
- Karma metinler dedektörü şaşırtır. Yapay zeka tarafından cilalanmış bir insan taslağı veya bir insan tarafından düzenlenmiş bir yapay zeka taslağı gri alana düşer, çünkü gerçekten ikisi birdendir.
- Resmi yazılar daha “yapay zeka” skoru alır. Üslup ne kadar tahmin edilebilir ve alışılmış olursa, bir insan yazmış olsa bile o kadar makine gibi okunur.
Dedektörlerin Yanıldığı Noktalar
Çoğu makalenin atladığı kısım burası, oysa en çok ihtiyacın olan kısım da bu. Yapay zeka dedektörlerinin gerçek ve belgelenmiş başarısızlık noktaları var.
En ünlü örnek OpenAI’ın kendisinden geliyor. 2023’ün başında şirket kendi yapay zeka metin sınıflandırıcısını piyasaya sürdü ve altı ay sonra “düşük doğruluk oranı” gerekçesiyle kapattı. Kendi verilerine göre, yapay zeka tarafından yazılmış metinlerin sadece %26’sını yakalayabildi ve insan yazısını %9 oranında hatalı bir şekilde yapay zeka olarak işaretledi. ChatGPT’yi yaratan şirket ChatGPT’yi güvenilir şekilde tespit edemiyorsa, kesinlik vaat eden herhangi bir aracı şüpheyle karşıla.
İkinci başarısızlık türü daha kötü, çünkü haksız. Patterns dergisinde yayınlanan bir Stanford araştırması, gerçek kişiler tarafından yazılmış denemeler üzerinde yedi popüler yapay zeka dedektörünü test etti. Ana dili İngilizce olan kişilerin denemelerinde dedektörler gayet iyi sonuç verdi. Ana dili İngilizce olmayan kişilerin denemelerinde ise dedektörler bunları %61 oranında yapay zeka olarak işaretledi. Bunun nedeni yönteme içkin: ikinci bir dilde yazan insanlar daha güvenli, daha alışılmış ifadeler kullanma eğiliminde ve bu da matematiğe “tahmin edilebilir” görünüyor. Dikkatli, resmi, kurallara uygun yazı, dedektörlerin bir makineden bekledikleri sesin tam da kendisi.
Bir Metni Adım Adım Nasıl Kontrol Edersin
Hepsini bir araya getirdiğinde, işe yarayan rutin bu. Yaklaşık iki dakika sürüyor.
- Metni bir kez işaretler için oku. Kalıp ifadeler, düzenli ritim, formül açılışlar, kişiliksizlik. İçgüdünü not al ama orada durma.
- Ayrıntı testini uygula. Bir iki somut, kontrol edilebilir iddia bul. Bunları araştır. Uydurma kaynaklar, yanlış fiyatlar ve doğrulanamayan araştırmalar var olan en güçlü kırmızı bayraktır.
- Bir dedektörden geçir. Metni bir yapay zeka dedektörüne yapıştır ve olasılık skorunu al. Ücretsiz, on saniye sürer, denemek için kayıt gerekmez.
- Uzunluğu tart. Birkaç yüz kelimenin altındaysa skoru çok fazla önemsemeyi bırak. Uzun ve düzenlenmemiş bir metinde ona gerçek ağırlık ver.
- Kimin yazdığını düşün. Resmi bir üslup mu, yoksa ana dili farklı biri mi? Eşiğini buna göre ayarla, çünkü yanlış işaretlemeler tam olarak burada yoğunlaşıyor.
- Her şeyi birleştir. İnsan işaretleri + başarısız ayrıntı testi + yüksek skor = büyük olasılıkla yapay zeka. Tek bir sinyal = suçlamanı kendine sakla.
Ne Zaman Önemli, Ne Zaman Gerçekten Önemsiz
Yapay zeka tarafından yazılan her metin bir sorun değil. Yapay zekanın yazdığı bir hava durumu özeti veya bir ürün açıklaması kimseye zarar vermez. Bu soru belirli durumlarda önem taşıyor:
- Öğretmenler ve öğretim üyeleri, bir çalışmanın gerçekten öğrenciye ait olup olmadığını kontrol ederken. Yukarıdaki rutini kullan ve sadece bir skora dayanarak hareket etmeden önce Stanford bulgusunu hatırla.
- İşe alım yöneticileri, şüpheli derecede cilalı ön yazılar okurken. Bir dedektör ve mülakatta sorulacak tek bir somut soru (“bu projeden biraz daha bahseder misin?”) meseleyi hızla çözer.
- İncelemeleri okuyan alıcılar. Ürün hakkında hiçbir somut ayrıntı içermeyen beş yıldızlı yorumlar klasik bir örüntüdür.
- Haber okuyan herkes. Bir makalenin bilgileri doğrulanamıyorsa, hatayı bir insanın mı yoksa bir makinenin mi yazdığı, hatanın kendisinden daha az önemli.
Ve bir de madalyonun diğer yüzü var. İkinci bir dilde dikkatli yazıyorsan veya sadece resmi bir üslubun varsa, senin dürüst çalışman bir gün işaretlenebilir. Kendi temel çizgini bilmek işe yarar: yazını dedektörden geçir ve nasıl bir skor aldığına bak. Gerçekten insan eliyle yazılmış metnin robotik okunmaya devam ediyorsa, bu bir adalet sorunundan çok bir üslup sorunudur; biz de yapay zeka yazısını insan gibi göstermenin tam bir rehberini yazdık, ve bu tavsiyeler makine gibi yazan insanlar için de aynı derecede işe yarıyor. Yapay zeka insanlaştırıcı katı bir taslağı bir tıkla yeniden şekillendirebilir.
Edinmeye Değer İki Dakikalık Alışkanlık
Okuduklarının yarısı artık makine yapımı ve bu oranın düşmesi beklenmiyor. İyi haber şu ki, adli dilbilimci olmana gerek yok. İşaretleri oku, bir bilgiyi kontrol et ve istatistiksel kısmı dedektöre bırak. Bu üç adım bir arada, tek başlarına yakalayabileceklerinden çok daha fazlasını yakalar ve seni bu oyundaki tek gerçek hatadan korur: gerçek bir insanın yazısı hakkında kendinden emin bir şekilde yanılmak.
Bir dahaki sefere bir metin sana biraz fazla akıcı geldiğinde, sadece merak etme. Kontrol et.