Karıştırılan iki soru
Anılmak ile çekilmek ayrı şeyler. Bir asistan uygulamanızı eğitim sırasında öğrendiğinden anabilir, sitenizi hiç istemeden. Cevap anında sitenizi çekip yine de sizi anmayabilir. Birini ölçmek diğeri hakkında hiçbir şey söylemiyor ve bu konudaki tavsiyelerin çoğu ikisini sessizce birleştiriyor.
Birinci soruyu zaten ölçüyor ve sıfırlarıyla birlikte yayımlıyoruz. Bu sayfa ikincisi: belirli bir pencerede bu alan adından hangi tarayıcılar gerçekten sayfa istedi.
2026-09-21 tarihine kadar 14 günde gelenler
| User agent | İşleten | Görev | İstek |
|---|---|---|---|
| Amazonbot | Amazon | arama dizini | 1140 |
| ClaudeBot | Anthropic | eğitim | 901 |
| Googlebot | arama dizini | 797 | |
| bingbot | Microsoft | arama dizini | 435 |
| Applebot | Apple | arama dizini | 121 |
| GPTBot | OpenAI | eğitim | 67 |
| PerplexityBot | Perplexity | cevap anı | 10 |
| Bytespider | ByteDance | eğitim | 5 |
| OAI-SearchBot | OpenAI | cevap anı | hiç gelmedi |
| ChatGPT-User | OpenAI | cevap anı | hiç gelmedi |
| Claude-User | Anthropic | cevap anı | hiç gelmedi |
| CCBot | Common Crawl | eğitim | hiç gelmedi |
| meta-externalagent | Meta | eğitim | hiç gelmedi |
| Google-Extended | eğitim | hiç gelmedi | |
| Perplexity-User | Perplexity | cevap anı | hiç gelmedi |
| Claude-SearchBot | Anthropic | cevap anı | hiç gelmedi |
| DuckAssistBot | DuckDuckGo | cevap anı | hiç gelmedi |
| MistralAI-User | Mistral | cevap anı | hiç gelmedi |
Düzeltme, 11 Ekim 2026: bu tablodaki görevler nasıl okunmalı
Bu sayfadaki tablo ve metin 21 Eylül 2026 tarihinde yayımlandığı hâliyle duruyor. Yeniden ölçüm yapılmadı; bu not üç noktanın nasıl okunacağını düzeltiyor.
Google-Extended bir tarayıcı değil. Google'ın tarayıcı belgesi (sayfanın son güncellemesi 14 Temmuz 2026, okunduğu gün 11 Ekim 2026) şöyle diyor: “Google-Extended doesn't have a separate HTTP request user agent string. Crawling is done with existing Google user agent strings; the robots.txt user-agent token is used in a control capacity.” Yani Google-Extended ayrı bir user agent ile istek göndermiyor; taramayı Google'ın mevcut tarayıcıları yapıyor. Bu ad yalnız robots.txt'te kullanılan bir denetim belirteci: Google'ın zaten taradığı sayfaların Gemini modellerinin eğitiminde ve cevaplarının dayandırılmasında kullanılıp kullanılmayacağını belirliyor, Google Arama'yı etkilemiyor. Hiçbir erişim günlüğünde görünemez; bu yüzden yukarıdaki satırı bir gözlem değil ve gelmeyen ajanlar arasında sayılmamalı. Google'ın bu penceredeki istekleri Googlebot satırında: 797.
“Cevap anı” etiketi iki ayrı işi kapsıyordu. İşletenlerin kendi belgelerine göre (OpenAI, Perplexity, Anthropic, DuckDuckGo ve Mistral; okunduğu gün 11 Ekim 2026) OAI-SearchBot, PerplexityBot ve Claude-SearchBot arama tarayıcısı: asistanın sonradan arayacağı dizini kuruyor ve kendi takvimiyle çalışıyor. ChatGPT-User, Claude-User, Perplexity-User ve MistralAI-User ise biri soru sorduğu için sayfayı o anda çekiyor; DuckAssistBot da DuckDuckGo'nun AI destekli cevapları için gerçek zamanlı tarıyor.
| User agent | Yukarıdaki tabloda | İşletenin belgesindeki görev | İstek (değişmedi) |
|---|---|---|---|
| PerplexityBot | cevap anı | arama tarayıcısı | 10 |
| OAI-SearchBot | cevap anı | arama tarayıcısı | hiç gelmedi |
| ChatGPT-User | cevap anı | kullanıcının sorusuyla tetiklenen çekim | hiç gelmedi |
| Claude-User | cevap anı | kullanıcının sorusuyla tetiklenen çekim | hiç gelmedi |
| Google-Extended | eğitim | robots.txt denetim belirteci, istek göndermez | hiç gelmedi |
| Perplexity-User | cevap anı | kullanıcının sorusuyla tetiklenen çekim | hiç gelmedi |
| Claude-SearchBot | cevap anı | arama tarayıcısı | hiç gelmedi |
| DuckAssistBot | cevap anı | AI cevapları için gerçek zamanlı tarama | hiç gelmedi |
| MistralAI-User | cevap anı | kullanıcının sorusuyla tetiklenen çekim | hiç gelmedi |
Böyle okununca bir sonraki bölümün başlığı, günlüğün gösterdiğinden fazlasını söylüyor. Soru sorulduğu anda sayfa çeken 5 ajanın hiçbiri gelmedi; hepsi sıfırda. Perplexity'den gelen, arama tarayıcısıydı: 10 istek. OpenAI'ın ve Anthropic'in arama tarayıcıları gelmedi. Sıfırdaki 7 “cevap anı” ajanı, bu 5 ajan ile 2 arama tarayıcısından oluşuyor.
“AI isteği” toplamı neyi kapsıyor. Aşağıda Markdown ikizlerinin payı hesaplanırken kullanılan 2244 AI isteği, gelen 6 ajanın toplamı: Amazonbot 1140, ClaudeBot 901, Applebot 121, GPTBot 67, PerplexityBot 10, Bytespider 5. Googlebot ve bingbot bu toplamın dışında. Tablonun “arama dizini” diye etiketlediği Amazonbot ve Applebot ise içinde ve 2244 isteğin 1261 tanesi onlardan geliyor. Veri dosyası ikizleri hangi ajanın istediğini kaydetmiyor; bu yüzden %35 ajan bazında ayrıştırılamıyor.
OpenAI'ın cevap anı ajanları hiç gelmedi. Perplexity'ninki geldi.
İşletenler farklı işler için farklı ajanlar yayımlıyor: biri eğitim için sayfa topluyor, diğeri canlı bir soruya cevap verirken sayfa çekiyor. Bu pencerede OAI-SearchBot, ChatGPT-User, Claude-User, Perplexity-User, Claude-SearchBot, DuckAssistBot, MistralAI-User sıfır istek yaptı — OpenAI'ın iki cevap anı ajanı da bunların içinde. PerplexityBot geldi, 10 kez.
Dürüst hâli "asistanlar hiç çekmiyor" değil — biri çekiyor, günde bir istek mertebesinde. Bulgu daha dar: bu alan adı için, bu pencerede, kendini OpenAI ajanı olarak tanıtan hiçbir istemci cevap verirken bu siteyi çekmedi. Bunu önce "ChatGPT sayfalarımızı göremiyor" diye okuduk. Bir sonraki bölüm bu okumanın neden yanlış olduğunu anlatıyor.
Akla gelen ilk itiraz, onları engellemiş olmamız. Engellemedik: OAI-SearchBot, ChatGPT-User, Claude-User, Perplexity-User, Claude-SearchBot, DuckAssistBot, MistralAI-User hepsi robots.txt'imizde adıyla ve Allow: / ile yazılı, eğitim tarayıcılarının yanında. Sıfır onların davranışı, bizim ayarımız değil — kendi sıfırınızı bulgu saymadan önce kendi robots dosyanıza bakın.
Sıfır çekim — ve ChatGPT yine de bize bağlantı verdi
21 Eylül 2026'da ChatGPT'ye, hafızası kapalı geçici bir sohbette, "free tool to check my iOS app's keyword ranking in the App Store" diye sorduk. Ücretsiz sıra kontrol aracımızı beş aracın ikincisi olarak saydı ve doğrudan /tools/rank-check'e bağlantı verdi; sonuna utm_source=chatgpt.com eklenmişti. Kendi ziyaret günlüğümüz iki haftadır chatgpt.com'dan gelenleri kaydediyordu — bunlardan ikisi hesap açtı.
Yani erişim günlüğündeki sıfır da atıf da aynı anda doğru. Cevap, kendini OpenAI ajanı olarak tanıtan canlı bir istekle değil, ChatGPT'nin zaten elinde olan bir arama dizininden kuruldu. Site sahibi için ders pratik: günlüğünüzdeki sıfır, ChatGPT'ye görünmez olduğunuz anlamına gelmiyor; bir atıf da sayfanızı bugün okuduğu anlamına gelmiyor.
Hangi dizin? OpenAI'ın yardım sayfası ChatGPT aramasının "bazen başka arama sağlayıcılarıyla ortaklık kurduğunu" söylüyor ve bunlar için Microsoft'un gizlilik bildirimine yönlendiriyor — yani Bing. bingbot bu pencerede buradan 435 kez sayfa istedi ve hepsi normal sunuldu — ama aynı gün Bing'de ücretsiz araçlar karşılaştırmamızın tam başlığını aradığımızda bu alan adından tek sonuç çıkmadı. Atfı hangi dizinin ürettiğini bilemiyoruz; taramanın ve dizine almanın ayrı adımlar olduğunu, yeni bir sitenin genellikle ikincisinde eksik kaldığını biliyoruz.
Tarayıcı trafiğinin üçte biri düz metin ikizlere gidiyor
Buradaki her sayfanın bir de .md.txt adresinde Markdown ikizi var; yanında llms.txt ve llms-full.txt. Aynı pencerede tarayıcılar bu ikizleri 788 kez istedi; toplam 2244 AI isteğinin 35'i. HTML içerik sayfaları 1083 istek aldı.
Bu katmanı kullanılacağı varsayımıyla kurmuştuk ve iki yönde de kanıtımız yoktu. Yoğun kullanılıyor — HTML'den çok değil ama aynı büyüklük mertebesinde, üstelik yayımlaması neredeyse bedava olan bir katmandan. Bu kanıta göre süs değil.
Bu ölçüm neyi yapmayı önerir, neyi önermez
Yapmaya değer
Sayfalarınızın temiz bir düz metin kopyasını yayımlayın, kendi tanımınızı gerçeğe uygun tutun ve uygulamanızı anlatan sayfaların bir eğitim taramasının bulacağı sayfalar olmasına bakın — kendi pazarlama metniniz değil, üçüncü tarafın yazdıkları. Sonra bir ay sonra yeniden ölçün; değişime güvenmek yerine.
Asistanların ödünç aldığı arama dizinlerine girin. Siteyi Google Search Console'un yanında Bing Webmaster Tools'ta da doğrulayın ve sitemap'i ikisine de verin — taranmak dizine alınmak demek değil ve dizinde olmayan bir sayfa bir cevap için çekilemez. Sonra kendi sayfa başlıklarınızı orada tırnak içinde arayın; bundan ucuz kontrol yok.
Yapmaya değmez
Gerçekleşmeyen bir cevap anı çekimini kovalamak için sayfaları her hafta yeniden yazmak. "ChatGPT için optimize ediyoruz" diyen ama ölçtüğü motorun alan adınızı hiç isteyip istemediğini söylemeyen bir araç almak. Ve tek bir okumayı — bizimkini ya da sizinkini — eğilim saymak.
Sık sorulanlar
Birisi uygulamamı sorduğunda ChatGPT siteme uğruyor mu?
Bazen; varsaymak yerine bakabilirsiniz. OpenAI eğitim ve cevap anı taraması için ayrı ajanlar belgeliyor; cevap anı ajanları geldiklerinde erişim günlüğünüzde adlarıyla görünüyor. Bizim ölçtüğümüz pencerede hiç gelmediler — ve ChatGPT yine de sayfalarımıza bağlantı verdi, çünkü cevabı canlı bir ziyaretten değil elindeki bir arama dizininden kurdu.
robots.txt'te AI tarayıcılarını engellemek iyi fikir mi?
Asistan cevaplarında anılmak istiyorsanız eğitim tarayıcılarını engellemek buna doğrudan karşı çalışır — ürününüzün modelin bildiği bir şeye dönüşme yolu onlar. Başka sebeplerle engellemek makul bir tercih olabilir ama bu bir takas, bedava bir tedbir değil.
llms.txt ve sayfaların Markdown kopyaları gerçekten okunuyor mu?
Bu alan adında yoğun biçimde: ölçülen pencerede 2244 AI tarayıcı isteğinin 788'i düz metin ikizlere gitti, HTML sayfalarına 1083. Bu bir kural değil, tek sitenin kanıtı — ama yayımlamanın maliyeti sıfıra yakın.
AI cevaplarına numarayla girilebilir mi?
İşe yarar biçimde hayır. Asistanın cevabı, hakkınızda birçok kaynakta yazılanlardan kuruluyor; "en iyisiyiz" diyen bir sayfa o yazılanlara dönüşmüyor. Değiştiren şey, zaman içinde kendi alan adınız dışındaki yerlerde doğru anlatılmak.
Bunu kendi uygulamanda gör
Mağaza linkini yapıştır, kelimelerini gir. Sıra, önündeki uygulamalar ve talep sinyali her gün ölçülür.
Ücretsiz plan: 1 uygulama, 2 vitrinin her birinde 10 kelime, 14 gün geçmiş; kart yok, süre sınırı yok. Pro aylık 29 $.
Ücretsiz başla →
