Sunucu loglarını yapay zekâ alıntılarıyla eşleştirdik: ChatGPT ve Perplexity'nin tarayıcıları bizi kaynak göstermeden önce ne yaptı

Neyi neyle eşleştirdik

Üretimden iki tablo. Birincisi promvia.app için takip ettiğimiz kendi sorularımız; OpenAI'ın web aramalı API'sine ve Perplexity'nin API'sine soruluyor. Dört soru var ve dördünde de adımız geçiyor: "Is Promvia any good?", "Promvia reviews", "Promvia vs Otterly" ve "What is Promvia by Atlaven?". 26 Ağustos ile 5 Ekim 2026 arasında 63 ChatGPT cevabı ve 104 Perplexity cevabı en az bir promvia.app URL'sini kaynak gösterdi. İkinci tablo, kullanıcı aracısı (user agent) ChatGPT-User, OAI-SearchBot, GPTBot, PerplexityBot ya da Perplexity-User olduğunu söyleyen ve promvia.app'e gelen her istek; 25 Ağustos'tan beri kayıtlı.

• "Doğrulanmış" etiketi, isteğin tarayıcının sahibinin yayımladığı IP aralığından geldiğini gösterir. Kullanıcı aracısı tek başına herkesin yazabileceği bir iddiadır.
• URL'ler yol (path) üzerinden karşılaştırılır; sorgu dizesi ve sondaki eğik çizgi atılır. Böylece ChatGPT'nin eklediği ?utm_source=openai eşleşmeyi bozmaz.
• Kontrol zamanı, sağlayıcı cevabı döndürdükten sonra cevabı kaydettiğimiz an. "Cevaptan önce", o ana kadarki 10 dakika demek.
• İki istek kaynağını kendimizinki olarak işaretledik: her pazartesi 13:00 UTC'de ana sayfamızı her tarayıcı kullanıcı aracısıyla birer kez isteyen Promvia'nın tarayıcı erişim kontrolü ve elle test için kullandığımız bir adres.

Cevap anındaki çekimler arka plan gürültüsünden ayırt edilemedi

63 ChatGPT cevabının 7'sinde, cevaptan önceki 10 dakikada doğrulanmış bir ChatGPT-User isteği vardı ve bunlardan yalnızca biri cevabın sonra kaynak gösterdiği bir sayfaya aitti. 63'te 7, logun geri kalanına bakana kadar bir şey gibi görünüyor. ChatGPT-User bu dönemde 593 doğrulanmış istek yaptı, 561'i ana sayfamıza; saat ayırt etmeden, kabaca 100 dakikada bir. Bu hızla, rastgele seçilen herhangi bir 10 dakikada en az bir istek olma payı %9,6. Bizim 63'te 7'miz %11,1, aralığı %5,5–21,2. Aynı sayı.

Perplexity daha da sessizdi. 104 cevabın 2'sinde, önceki 10 dakikada doğrulanmış bir PerplexityBot isteği vardı ve ikisi de kaynak gösterilen bir sayfaya ait değildi. Perplexity'nin bir kişinin istediği çekimler için kullandığı Perplexity-User ise logda hiç görünmedi.

Burada sayılara az kalsın giren bir tuzak var. Sekiz Perplexity cevabının hemen öncesinde gerçekten bir "PerplexityBot" isteği vardı. Sekizi de ana sayfamıza gelmişti ve o cevapların yedisi ana sayfayı kaynak gösterdi. Sekizi de IP doğrulamasından geçemedi. Hepsi, pazartesi 13:00'teki alıntı kontrollerimizle aynı saatte çalışan kendi tarayıcı erişim kontrolümüzdü. Doğrulama olmasa bunlar, kaynak gösterilen sayfanın cevap anında çekildiği yedi kusursuz örnek olurdu; yedisi de bizdik.

Önce dizin taraması geldi

Gerçekten tutan örüntü daha eski ve daha yavaş olanıydı. Bir cevabın kaynak gösterdiği her URL için, cevaptan önce motorun arama tarayıcısının aynı yolu doğrulanmış biçimde çekip çekmediğine baktık.

• ChatGPT: OAI-SearchBot sayfayı 129 durumun 116'sında önceden çekmişti (%89,9, aralık %83,5–94,0). 13 kaçağın hepsi 27–29 Ağustos'ta, logumuz başladıktan sonraki dört gün içinde; bu sayfaların bir kısmı biz kaydetmeye başlamadan önce taranmış olabilir.
• Perplexity: PerplexityBot sayfayı 174 durumun 174'ünde önceden çekmişti. Cevaplar hep aynı beş sayfaya döndü: bir karşılaştırma rehberi 60 kez, yardım sayfası 43, ana sayfa 33, bir araç derlemesi 31 ve künye sayfası 7.

Bu API cevapları için logumuzdaki her şey, motorların daha önce topladıkları sayfalardan cevap verdiğiyle uyumlu. Bir alıntıyla örtüşen istek, sorunun cevaplandığı sırada yapılan bir çekim değil, arama tarayıcısının önceki ziyaretiydi.

Logumuzdaki sahte botların çoğu bizdik

Aynı dönemde IP doğrulamasının ham hata oranları ürkütücü görünüyor: GPTBot 68 istekte 16 (%24), PerplexityBot 34'te 9 (%26), ChatGPT-User 610'da 17 (%3), OAI-SearchBot 390'da 7 (%2). Sonra kendi isteklerimizi, yani haftalık erişim kontrolünü ve elle yaptığımız testleri çıkardık.

• GPTBot: 16 hatanın hepsi bizdik. Geri kalan: 52'de 0.
• PerplexityBot: 9'unun hepsi bizdik. Geri kalan: 25'te 0.
• OAI-SearchBot: 7'sinin hepsi bizdik. Geri kalan: 383'te 0.
• ChatGPT-User: 7'si bizdik, 10'unu açıklayamıyoruz; 603'te 10 (%1,7). Bu 10 istek, dönem içinde hesabını veremediğimiz tek istekler.

Bot kullanıcı aracısı gönderen bir uptime izleme aracınız, tarayıcı erişim denetleyiciniz ya da SEO aracınız varsa, onun istekleri de sizin logunuzda. Sahte botlardan söz etmeden önce bu istekleri çıkarın.

Bir düzenleme tarayıcıyı ne kadar bekliyor

OAI-SearchBot 89 farklı sayfaya 383 doğrulanmış istek yaptı. Bir sayfayı yeniden çektiğinde aradaki ortanca süre 24,0 saatti. Bu ortancayı, kabaca her gün uğradığı yaklaşık on iki sayfa belirliyor; 89 sayfanın 49'u 41 gün içinde yalnızca bir kez çekildi. PerplexityBot 11 sayfaya 25 istek yaptı, yalnızca 3'ünü birden fazla kez çekti ve bunlarda ortanca süre 40,7 saatti.

Bilinen bir değişiklik bunu somutlaştırıyor. 4 Ekim'de 18:05 UTC'de dört sayfanın metnini değiştiren bir sürüm yayımladık: ana sayfa, /pricing, /methodology ve /help. OAI-SearchBot ana sayfayı ve /methodology'yi 36 saat sonra yeniden çekti. 7 Ekim 09:00 UTC itibarıyla /pricing'i (son ziyaret 1 Ekim) ve /help'i (son ziyaret 30 Eylül) çekmemişti. PerplexityBot dördünden hiçbirini çekmedi; sitemizdeki herhangi bir sayfaya son doğrulanmış isteği 26 Eylül'deydi. Perplexity 5 Ekim'de hâlâ ana sayfamızı ve /help'i kaynak gösteriyordu; PerplexityBot bu sayfaları en son 20 ve 12 Eylül'de çekmişti.

Bununla ne yapmalı

• Bir şey saymadan önce tarayıcı IP adreslerini doğrulayın; bir isteğe sahte demeden önce kendi izleme araçlarınızı çıkarın.
• ChatGPT-User gibi canlı çekim ajanlarını, bir cevabın az önce sayfanızı kullandığının işareti olarak okumayın. Bizim sitemizde bunların sürekli bir akışı gün boyu ana sayfaya geldi ve cevaplarımızın yanındakiler başka herhangi bir andakinden daha sık değildi.
• Bunun yerine arama tarayıcılarını izleyin. Bir cevabın kaynak gösterdiği her sayfada OAI-SearchBot ya da PerplexityBot neredeyse her zaman daha önce oradaydı.
• Bir sayfayı değiştirdikten sonra, cevapların değişikliği yansıtıp yansıtmadığına karar vermeden önce her arama tarayıcısının o sayfayı en son ne zaman çektiğine bakın. Düzenlemeden sonra geri gelmediyse, o tarayıcı yeni hâli görmedi.
• CDN loglarınızı Promvia'ya gönderirseniz, AI tarayıcıları sayfası taranan her sayfanın yanında "Sonradan alıntılandı" sütununu gösterir: aynı eşleştirme, kendi sitenizde, tarama ile alıntı arasında bir ilişkilendirme olarak etiketlenmiş hâlde.

Tarayıcı belirteçlerinin kendisi için robots.txt ve yapay zekâ botları rehberine, yapay zekâ cevaplarından gelen ziyaretlerin analitikte nasıl göründüğü için yapay zekâ trafiği neden doğrudan görünür rehberine bakın.

Sık sorulan sorular