Tarama bütçesi (crawl budget), bir arama motorunun belirli bir sürede sitenizde tarayacağı sayfa sayısıdır. Küçük siteler için nadiren sorun olsa da, binlerce sayfası olan siteler için görünürlüğü doğrudan etkileyen kritik bir konudur.
Neden önemli?
Arama motoru botları sonsuz kaynağa sahip değildir. Sitenizde değersiz, tekrarlı veya erişilemez sayfalarda zaman harcarlarsa, gerçekten önemli sayfalarınıza daha az ulaşırlar. Sonuç: önemli içerikleriniz geç indekslenir veya hiç indekslenmez. Aynı mantık yapay zekâ tarayıcıları için de geçerlidir.
Tarama bütçesini boşa harcayan şeyler
- Tekrarlı (duplicate) içerik: Aynı içeriğin birçok URL’de olması.
- Sonsuz URL’ler: Filtreler ve parametrelerle üreyen sayısız kombinasyon.
- Yumuşak 404’ler ve zincirli yönlendirmeler.
- Düşük değerli sayfalar: Kimsenin aramadığı, ince içerikli sayfalar.
- Yavaş sunucu: Bot yavaş yanıt alırsa daha az sayfa tarar.
Nasıl optimize edilir?
- Gereksiz sayfaları engelleyin.
robots.txtvenoindexile değersiz sayfaları tarama dışına alın. - Tekrarı giderin. Canonical etiketleriyle asıl sürümü belirtin.
- Site mimarisini sadeleştirin. Önemli sayfalara az tıklamada ulaşılsın.
- Sunucu hızını artırın. Hızlı yanıt, daha fazla taranan sayfa demektir.
- Sitemap’i güncel tutun. Botlara hangi sayfaların önemli olduğunu net bildirin.
Yapay zekâ ile ilişkisi
Yapay zekâ tarayıcıları da içeriğinize ulaşmak için erişim ve verimlilik ister. Tarama bütçesi sağlıklı bir site, hem Google hem yapay zekâ görünürlüğü için daha iyi bir zemindir. Bu, teknik SEO çalışmasının bir parçasıdır.
Özet
Tarama bütçesi, özellikle büyük sitelerde önemli sayfalarınızın taranıp taranmadığını belirler. Tekrarı gidermek, değersiz sayfaları engellemek ve mimariyi sadeleştirmek, bütçeyi doğru yere yönlendirir. Teknik bir ön inceleme için analizle başlayabilirsiniz.