Teknik GEO: AI Crawler Erişimi İçin Kontrol Listesi
GEO tavsiyelerinin çoğu itibarla ilgilidir: atıf almak, anılma kazanmak, derlemelerde çıkmak. Bu rehber ise işin tesisat tarafıyla, yani teknik altyapıyla ilgili. Bir AI crawler sayfanızı çekemiyorsa, içeriğinizi ayrıştıramıyorsa ya da markanızın ne olduğunu çözemiyorsa, o itibar emeğinin hiçbiri karşılık bulmaz. Bu, disiplinin geliştirici tarafı: AI motorlarının sizi görüp göremeyeceğine karar veren teknik kontrol listesi. Yeri geldikçe kendi kurulumumuzu örnek olarak kullanıyoruz, çünkü teknik bir rehber, anlattığını kendi sitesinde de uyguladığını gösterebilmeli.
AI crawler'lar sitenizi görebiliyor mu?
İşe buradan başlayın, çünkü geri kalan her şey buna bağlı. AI crawler'ların çoğu JavaScript çalıştırmaz. Ana içeriğiniz (cevap, fiyat, karşılaştırma) yalnızca bir istemci tarafı çatı render ettikten sonra beliriyorsa, o içerik crawler için hiç var olmamış demektir: ham HTML'i çeker, boş bir kabuk görür ve çeker gider.
Çözüm, önemli içeriğinizin, bir insan tarayıcının kurduğu hidratlanmış görünümde değil, sunucu tarafında render edilmiş HTML'de bulunmasını sağlamak. Botların gördüğü gibi test edin, tarayıcınızın gördüğü gibi değil; crawler simülatörümüz bir URL'yi belirli bir AI botu olarak çeker, böylece tam olarak ne aldığını görürsünüz. Daha derin mekanik JavaScript render ve AI crawler'lar yazısında.
GPTBot, ClaudeBot, PerplexityBot ve arkadaşları için robots.txt kuralları
Sayfalarınız render olduktan sonra, sıradaki soru doğru botları içeri alıp almadığınız. AI ekosistemi büyüyen bir user-agent listesi kullanıyor. Hepsi de aynı işi yapmıyor: GPTBot (OpenAI eğitim), OAI-SearchBot (ChatGPT arama indeksi), ChatGPT-User (sohbet sırasında canlı çekim), ClaudeBot, PerplexityBot ve Google-Extended (Gemini/AI eğitim) başta olmak üzere.
En sık yapılan, en pahalıya patlayan hata, içeriği "korumak" için AI botu gibi görünen her şeyi topluca engellemek ve bu arada cevaplarda görünüp görünmeyeceğinize karar veren crawler'ların da önünü kesmek. Oysa eğitim botlarına ve cevap botlarına ne yapacağınız iki ayrı karardır: görünürlüğünüzü sağlayan botlara izin verip yalnızca model eğitimi için veri toplayanlar hakkında ayrıca karar verebilirsiniz. Hangi ajanın ne yaptığı ve kuralların nasıl yazılacağı AI crawler'lar için robots.txt yazısında.
llms.txt yayınlamalı mısınız?
llms.txt önerilen bir standart: AI modellerini en önemli içeriğinize yönlendiren düz-metin bir dosya. Hoş bir fikir; ama şu ana kadar hiçbir büyük model sağlayıcısının bu dosyayı kullandığına dair doğrulanmış bir kanıt yok. Bu yüzden onu bir strateji değil, maliyeti düşük bir "belki işe yarar" adımı olarak görün. Eklemesi beş dakika sürer ve zararı yoktur; yalnız tek başına görünürlüğünüzü değiştirmesini beklemeyin. Konunun dürüst ve eksiksiz değerlendirmesi llms.txt nedir yazısında.
AI motorlarının gerçekten kullandığı şema işaretlemesi
Yapılandırılmış veri, makinelerin sayfalarınızı tahmin yürütmeden ayrıştırmasına yardım eder. En çok işe yarayan tipler en gösterişsiz olanlar: kim olduğunuzu belirlemek için Organization ve WebSite, içerik için Article, soru-cevap blokları için FAQPage, satış yapıyorsanız da fiyat ile stok bilgili Product. Şema tesisattır, sihir değil; tek başına sizi önerilen marka yapmaz ama yokluğu sitenizin anlaşılmasını zorlaştırır. Hangi tiplerin gerçekten işe yaradığı ve görünen sayfayla çelişen işaretlemeden nasıl kaçınılacağı AI araması için şema işaretlemesi yazısında.
Wikipedia ve Wikidata ile varlık netliği
Modellerin adınızı kategorinize güvenle bağlaması gerekir. Net bir varlık olarak var olan bir marka (tutarlı tanım, ideal olarak bir Wikidata ögesi ve yerinde olduğunda bir Wikipedia varlığı) modelin sabitleyemediği bir markadan çok daha kolay anılır. Bu, teknik işlerin en yavaş sonuç vereni ama en kalıcısı. Wikidata ögelerinin nasıl çalıştığı, Wikipedia'nın ne zaman gerçekçi olduğu dahil yaklaşım Wikipedia ve Wikidata varlık stratejisi yazısında.
Beş dakikalık teknik GEO denetimi
Toparlarsak, hızlı bir kontrol turu:
- Önemli bir sayfayı AI botu olarak çekin ve ana içeriğinizin yalnızca JavaScript'te değil, ham HTML'de olduğunu doğrulayın.
- robots.txt'i kontrol edin: cevapları besleyen crawler'lar (OAI-SearchBot, ChatGPT-User, ClaudeBot, PerplexityBot) izinli mi?
- İlgili yerlerde görünen sayfayla eşleşen geçerli Organization, Article ve FAQPage şeması olduğunu doğrulayın.
- Her yerde tutarlı, tek cümlelik bir marka tanımını doğrulayın ve bir Wikidata ögesi olup olmadığına bakın.
- İsterseniz bir llms.txt ekleyin: beş dakika, düşük risk.
Bunların çoğu için kendi sitemiz örnek. rankzupAI'nin robots.txt'i alan adına göre farklı davranır: pazarlama sitesi AI crawler'larına bilinçli olarak izin verir çünkü orada asıl mesele görünürlük; uygulamanın alt alan adı ise müşteri verisini cevapların dışında tutmak için her şeyi engeller. Sitemap dile göre bölünmüş, karşılıklı hreflang ile ve hem bir llms.txt hem tam-metin bir llms-full.txt yayınlıyoruz. Küçük, denetlenebilir bir kurulum: bu kontrol listesinin önerdiğinin ta kendisi.
Teknik katman olmazsa olmaz: size kendi başına öneri kazandırmaz ama ihmal edilirse sizi kimse fark etmeden önerilerin dışında bırakır. Tesisat sağlamken görünürlüğünüzü asıl ilerleten şey, generative engine optimization tam olarak nedir yazısında anlattığımız itibar işidir. Yukarıdaki ilk iki kontrolü ücretsiz GEO denetimimizle otomatik çalıştırabilirsiniz.
Bu listenin arkasındaki kavram için: AI aranabilirliği nedir?, bütün bu görevlerin bir araya gelince oluşturduğu özellik.
Erişimi düzeltmek işin yarısı. Başlamadan önce ölçüm sıklığını belirle ki düzeltmenin gerçekten bir şeyi oynatıp oynatmadığını görebilesin.
Bu listedeki bir madde kendi rehberini gerektirecek kadar derin: sayfayı getirilebilir parçalara nasıl böldüğün. Chunk optimizasyonu bunu anlatıyor.