Web Sitenizi Yanıt Motorları İçin Nasıl Optimize Edebilirsiniz?

Bu rehberdeki ipuçlarının hiçbiri, yapay zekâ tarayıcıları sayfalarınızı okuyamıyorsa işe yaramaz. Engellenen sayfalar alıntılanamaz ve bu çoğu zaman kazara olur.

Yaklaşık 140 milyon web sitesini analiz ettik ve GPTBot’un artık en çok engellenen yapay zekâ botu olduğunu (sitelerin %5,89’unda) gördük; ClaudeBot da hemen arkasından geliyor.

Cloudflare varsayılan olarak yapay zekâ platformlarını engeller; bu yüzden CDN’nizin sizi sessizce kapsam dışında bırakmadığından emin olun.

“Yapay zekâ tarayıcılarına izin vermek” tek bir karar değil; çünkü her platform, farklı işler yapan birkaç bot çalıştırır.

Yalnızca OpenAI üç tane işletiyor:

• GPTBot, eğitim için içerik toplar
• OAI-SearchBot, ChatGPT’nin çektiği arama indeksini oluşturur
• ChatGPT-User, biri sohbetin ortasında bir sayfayı sorduğunda sayfayı canlı olarak getirir

Bunların her birinin ödünleri farklı. GPTBot’u engellemek, içeriğinizin bir sonraki modelin eğitim verilerine girmesini önler; yayıncıların genelde tarttığı karar da budur. OAI-SearchBot’u engellemek ise ChatGPT’nin arama yaptığı dizinden sizi çıkarır; bugün size alıntı ve yönlendirme trafiği kaybettiren şey de budur. Pek çok site, yalnızca ilkini amaçlarken, yanlışlıkla ikincisini engeller.

Nerede durduğunuzu en hızlı görmenin yolu, Yapay Zekâ Tarayıcı Erişim Denetleyicisi gibi bir araç kullanmaktır; bu araç robots.txt dosyanızı okur ve hangi tarayıcıların geçişine izin verildiğini söyler.

Hangi botların gerçekten geldiğini (hangilerine izin verildiğini değil) görmek için Ahrefs’in Bot Analytics aracına göz atın. Cloudflare üzerinden sunucu tarafı verileri kullanarak, özel bir yapay zekâ filtresi de dahil olmak üzere 12 bot kategorisindeki ziyaretleri izler; dolayısıyla sitenize herhangi bir JavaScript eklemeden çalışır.

Yapay zekâ tarayıcıları genellikle ham HTML’yi okur ve çoğu zaman JavaScript’i bir tarayıcının yaptığı gibi render etmez.

Bu da yalnızca istemci taraflı JS yüklendikten sonra görünen her şeyin onlar için görünmez olabileceği anlamına gelir.

Risksiz tarafta kalın ve sayfanızın yapay zekâ görünürlüğü şansını en üst düzeye çıkarmak için sunucu tarafı render’a bağlı kalın.

Yavaş yüklenen sayfalar, geleneksel aramadaki performansınızı olumsuz etkileyebilir; ama görünen o ki yanıt motorlarında bunun cezası daha da ağır. Sayfa hızı, modelin bağlam penceresine girip giremeyeceğinizi belirlemeye de yardımcı oluyor gibi görünüyor.¹

Site Audit içinde sayfa hızınızı (time-to-first-byte olarak bilinir) kontrol edin:

llms.txt, kök alan adınızda (ör. website.com/llms.txt) yer alan bir Markdown dosyası için önerilen bir standarttır ve LLM’lere en iyi içeriğinizin nerede olduğunu söyler: dokümantasyon, politikalar, ürün taksonomileri. Temelde dil modelleri için robots.txt gibidir.

Ama pratikte, hiçbir büyük LLM sağlayıcısı bunu okuyacağına dair söz vermedi. Ne OpenAI ne Anthropic ne de Google.

Bir web sitesinin llms.txt eklediğinde gerçekte ne olduğunu kontrol ettik. Ahrefs Web Analytics kullanan 137.000 alan adı genelinde, %28’i bir llms.txt dosyası yayımlıyor. Geçerli olan yaklaşık 38.000 dosyanın %97’si ise ölçtüğümüz ay boyunca bunun için sıfır istek aldı.

Getirilen az sayıdaki dosyanın içinde isteklerin %96’sı botlardan geldi. Link önizleme botu olan Slackbot, llms.txt’yi PerplexityBot’tan daha sık çekti. Basitçe söylemek gerekirse, en önemli yapay zekâ arama motorlarının bunu kullandığı pek görünmüyor.

Google bu konuda açıkça belirtti. üretken yapay zekâ özellikleri için optimizasyon rehberinde, site sahiplerine llms.txt gibi makine tarafından okunabilir dosyaların üretken yapay zekâ aramalarında görünmek için gerekli olmadığını söyleyen, kelimenin tam anlamıyla “mythbusting” başlıklı bir bölüm var. John Mueller daha da ileri gidip bunu eski anahtar kelimeler meta etiketiyle kıyasladı:

Peki siz de bir tane oluşturmalı mısınız? Geliştirici dokümantasyonu yayımlıyorsanız, maliyeti yaklaşık on dakikadır ve makul bir kullanım senaryosu vardır. Mueller bunu, dokümanları ayrıştıran yapay zekâ kodlama araçları için “geçici bir koltuk değneği, belki birkaç belirteç tasarrufu için” diye tanımladı. Diğer herkes içinse, ölçülmüş bir getirisi olmayan bir efor; ayrıca içeriğinizi rakiplerin topluca kazımasına biraz daha elverişli hâle getirmek gibi küçük bir dezavantajı da var.

Yapay zekâ asistanları web sitenize link uydurur ve bunu sık sık yapar. ChatGPT, Perplexity, Copilot, Gemini, Claude ve Mistral tarafından alıntılanan 16 milyon URL’nin HTTP durumunu kontrol ettik ve yapay zekâ asistanlarının ziyaretçileri Google Search’e kıyasla 2,87 kat daha sık 404 sayfalarına yönlendirdiğini gördük.

ChatGPT, açık ara en kötü örnek. Tıklanan URL’lerinin %1,01’i 404 döndürüyor; Google’da bu oran %0,15.

Perplexity (%0,87) ve Gemini (%0,86), alıntılanan URL’ler için Google’ın kendi %0,84 oranıyla neredeyse birebir aynı seviyede. Bu mantıklı; ikisi de Google dizininden çekim yaptığı için, kendi linklerini uydurmak yerine Google’ın bozuk bağlantılarını miras alıyorlar.

Uydurulan URL’ler, mevcut kalıplarınızdan yola çıkarak çıkarımla oluşturulur. Sitemiz için yaygın bir halüsinasyon URL’si ahrefs.com/keywords idi; çünkü sürekli anahtar kelimeler hakkında yazıyoruz ve model, böyle bir sayfanın mutlaka var olması gerektiğini varsaydı. Ama yok.

Bu, AEO’da gerçekten nadir bulunan ücretsiz kazanımlardan biri. Gerçek niyeti olan biri ürününüz hakkında sordu, sitenize yönlendirildi ve çıkmaza girdi. Üç farklı türle karşılaşacaksınız:

• Uydurulmuş URL’ler. Bir modelin URL yapınızdan uydurduğu sayfalar.
• Güncelliğini yitirmiş URL’ler. Bir zamanlar var olup eğitim verilerinden veya diğer eski veri kaynaklarından hatırlanan sayfalar.
• Yanlış yazılmış veya farklı varyanttaki URL’ler. Gerçek sayfalara çok yakın, ama hatalı eşleşmeler.

Bu nedenle, halüsinasyon URL’leri yalnızca iki tıklamayla bulmanıza yardımcı olacak bir filtreyi Web Analytics’e ekledik. Aylık 1 milyon etkinliğe kadar ücretsiz, basit bir Google Analytics alternatifi arıyorsanız, göz atın:

Halüsinasyon sonucu uydurulan bir URL tekrar tekrar isteniyorsa, model size ziyaretçilerinizin sizde olmasını beklediği sayfanın hangisi olduğunu söylüyordur.

Bu rehberdeki her taktik nihayetinde tek bir şeye bağlı: Yapay zekâ sistemlerinin markanızı ayrı bir varlık olarak tanıyıp tanımadığına.

54 milyar varlık ve aralarındaki ilişkiye dair 1,6 trilyondan fazla olgudan oluşan bir veritabanı olan Google’ın Knowledge Graph’ı, artık yalnızca Knowledge Panels’ın arkasındaki motor değil.

Artık AI Overviews, AI Mode ve Gemini için temel altyapı konumunda.

Markanız, siteniz genelinde, yapılandırılmış verilerde ve otoriter üçüncü taraf kaynaklarda tutarlı sinyallerle bir varlık olarak net biçimde oluşturulmadıysa, yalnızca mavi linklerde değil, yapay zekâ yanıtlarında da görünmez kalma riskiniz var.

Şema, çoğu zaman yapay zekâ görünürlüğünde hızlı bir kazanım gibi pazarlanır ve yüzeydeki korelasyon ikna edici görünür: Yapay zekânın alıntıladığı sayfaların JSON-LD’ye sahip olma olasılığı neredeyse üç kat daha fazladır.

Ama korelasyon, nedensellik değildir. JSON-LD ekleyen 1.885 sayfayı izledik, 4.000 kontrolle karşılaştırdık ve AI Mode veya ChatGPT’de anlamlı bir artış bulamadık; ayrıca şemaya bağlayamadığımız küçük bir AI Overview düşüşü gördük.

Peki şema işe yaramaz mı? Hayır, ama rolü yavaş ve dolaylıdır; hızlı sonuç veren bir taktik değildir.

Google’ın Knowledge Graph API’sini veya ücretsiz bir aracı kullanarak Google’ın sizi zaten tanıyıp tanımadığını; size hangi varlık türünü atadığını ve özelliklerin doğru olup olmadığını kontrol edebilirsiniz.

Örneğin, Carl Hendy’nin Knowledge Graph Tool’u kişiler, şirketler, ürünler, yerler ve diğer varlık türleri için sonuçları gösterir.

Buradan hareketle, otoriter yayınlarda markanızdan bahsedilmesini sağlamaya çalışın; bilgilerinizin her yerde tutarlı kalmasına dikkat edin: sitenizde, profillerinizde ve üçüncü taraf listelemelerinde aynı ad, açıklama ve kategori.

Sonra, doğal olduğu yerlerde şema ekleyin; varlığınızı ve ilişkilerini tanımlayan türlere öncelik verin:

• Wikipedia’nıza, Wikidata’nıza ve sosyal profillerinize bağlantı veren Organization ve sameAs şeması

• Sitenizdeki yazarlar için Kişi şeması

• Sunduklarınız için Ürün şeması

Size şu son düşünceyi bırakayım: Etkilemeye çalıştığınız “okuyucuların” giderek daha büyük bir kısmı, aslında hedef kitleniz adına gezinen ve satın alan yapay zekâ temsilcileri.

Hatta Haziran 2026’da Cloudflare CEO’su Matthew Prince, agentic (bot/tarayıcı/temsilci) trafiğinin internet tarihinde ilk kez %50 eşiğini aştığını açıkladı.^{2, 3}

Uç bir durum ya da yenilik olmaktan çok uzak; “ajan tabanlı yapay zekâ” aramaları üç yılda 84 kat arttı, çünkü bir ajan çalıştırmanın maliyeti dolar seviyesinden sentlere düştü.

Yapay zekâ temsilcileri için web sitenizi sırf bunun uğruna yeniden inşa etmeniz henüz gerekmiyor. Ancak içeriklerinizi sadece insanlar için üretip robotları dert etmeme yönündeki eski tavsiye, eskisi kadar geçerli olmayabilir.

Bu bölüm, insanların güvendiği yapay zekâyı etkilemekle ilgili; ajanlar arası pazarlama da tam olarak budur—ama bir adım daha ileri taşınmış hâli.