WordPress'te SEO Taraması Bütçesi Sorunu Nasıl Düzeltilir

Tarama bütçesi, Google'ın web sitenizdeki kaç sayfayı tarayacağına dair belirlediği sınırdır.

Gönderileriniz ve sayfalarınız dışında WordPress, arama motorlarının tarayabileceği ve dizine ekleyebileceği birkaç ek URL oluşturur. Bu, Google'ın önemli içeriğiniz yerine gereksiz sayfalara tarama bütçesini harcayabileceği anlamına gelir.

Bu makalede, Google'ın önce önemli içeriğinizi bulması için WordPress'te tarama bütçenizi nasıl optimize edeceğinizi göstereceğiz.

Hızlı Cevap: WordPress'te Tarama Bütçesi Nasıl Düzeltilir

Gereksiz URL'leri SEO eklentinizin tarama temizleme ayarları veya robots.txt ile engellemek, tarama bütçenizin boşa harcanmamasını sağlar.

Çoğu küçük web sitesi tarama bütçesini asla bitiremeyebilir. Ancak WordPress, yayınladığınızdan çok daha fazla URL oluşturur. Google bu URL'lerde tarama bütçesini boşa harcayabilir ve önemli sayfalarınız hızlı veya sık taranmayabilir.

İhtiyacınız olan düzeltmeye doğrudan atlamak için aşağıdaki hızlı bağlantıları kullanın:

Tarama Bütçesi Nedir ve Nasıl Kontrol Edilir?

Tarama bütçesi, Google gibi bir arama motorunun belirli bir zaman diliminde web sitenizdeki kaç sayfayı tarayacağıdır. İki ana faktör vardır:

• Tarama Kapasitesi: Google'ın sunucunuzu çökertmeden veya yavaşlatmadan yapabileceği istek sayısı. Sunucunuz hızlı ve güvenilirse, kapasiteniz yüksektir.
• Tarama Talebi: Google'ın sitenizi ne kadar popüler, genel kalitesi ve ne sıklıkla yeni içerik yayınladığınıza bağlı olarak ne kadar taramak istediği.

Düşük değerli sayfalar veya yavaş sunucular tarama bütçenizi tükettiğinde, Google daha az tarama yapar ve yeni içeriğinizin indekslenmesi daha uzun sürer.

Google Search Console'daki Tarama İstatistikleri raporunuzu incelemek için bir an ayırmaya değer. Googlebot'un web sitenizi ne zaman ve ne sıklıkla ziyaret ettiğini size söyler. Açmak için Google Search Console'u açmanız ve Ayarlar » Tarama istatistikleri » Raporu Aç bölümüne gitmeniz yeterlidir.

Raporu açtığınızda, Google tarama isteklerini dört şekilde ayırır. Her biri şunları gösterir:

• Yanıta göre. Sunucunuzun her isteğe ‘Tamam (200)’, ‘Bulunamadı (404)’, yönlendirmeler ve sunucu hataları (5XX) dahil nasıl yanıt verdiği.
• Dosya türüne göre. Googlebot'un HTML sayfaları, resimleri, CSS ve JavaScript arasında ne indirdiği.
• Amaca göre. ‘Keşif’, Google'ın bir URL'yi ilk kez taradığı anlamına gelirken, ‘Yenileme’, zaten bildiği sayfaları yeniden taradığı anlamına gelir.
• Googlebot türüne göre. Hangi tarayıcının isteği yaptığını gösterir. Yüksek bir ‘Akıllı Telefon’ payı normaldir, çünkü Google çoğunlukla sitenizin mobil sürümünü tarar.

Bu raporlardaki herhangi bir satıra tıklayarak belirli URL'leri ve bireysel tarama istatistiklerini görüntüleyin. Bu veriler ayrıca sitenizin tam olarak hangi düzeltmelere ihtiyacı olduğunu da gösterecektir:

• ‘Bulunamadı (404)’ veya ‘Sunucu hatası (5XX)’ yanıtlarının büyük bir kısmı, istekleri tüketen ölü URL'ler anlamına gelir. Yönlendirme zincirlerinizi temizleyerek ve bozuk bağlantıları düzelterek bunu çözebilirsiniz.
• Büyük bir ‘Yayın’ sayısı, Google'ın içeriğiniz yerine beslemelere istek harcadığı anlamına gelir. Bu gereksiz URL'leri engelleyerek bu israfı kolayca durdurabilirsiniz.
• Yeni içerik yayınlamadığınızda bile ‘Keşif’ tarama istatistiğiniz yüksek kalıyorsa, Google muhtemelen sıralama ve filtreleme sayfaları gibi otomatik oluşturulan URL'lerde zamanını boşa harcıyordur. Bunu aynı robots.txt engelleme kurallarını uygulayarak durdurabilirsiniz.
• Yavaş ortalama yanıt süreleri veya tekrarlanan sunucu hataları tüm bütçenizi sınırlar. Bu, sunucunuzu hızlandırmanın zamanının geldiğinin açık bir işaretidir.

Son olarak, Sayfa İndeksleme raporunuzdaki ‘Keşfedildi – şu anda indekslenmiyor’ metriğini kontrol edin. Google bunu sunucunuzun çökmesini önlemek için bir taramayı geciktirdiğinde kullanır. Buradaki yüksek bir sayı, sitenizin taramasının sınırlandırıldığının doğrudan bir göstergesidir.

Tarama Boşa Harcayan URL'leri robots.txt veya SEO Eklentinizle Engelleyin

Boşa harcanan tarama bütçesinin çoğu, yazdığınız makalelerden değil, WordPress ve eklentilerinizin otomatik olarak oluşturduğu URL'lerden gelir.

Bu gereksiz URL'ler beslemeleri, yorum yanıtlama bağlantılarını, dahili arama sonuçlarını, kampanyalarınızdan ve reklamlarınızdan gelen izleme parametrelerini ve WooCommerce filtre parametrelerini içerir.

URL'leri engellemeye başlamadan önce iki şeyi aklınızda bulundurun:

• Asla CSS veya JS'yi engellemeyin. Google'ın sayfalarınızı düzgün görüntülemesi için bu dosyaları yüklemesi gerekir.
• Noindex yapmak istediğiniz bir URL'yi engellemeyin. Noindex etiketi, Google'dan bir sayfayı arama sonuçlarından çıkarmasını ister. Ancak, Google bu etiketi görmek için WordPress sayfasını taramalıdır, bu nedenle robots.txt'de URL'yi engellemek, Google'ın onu asla okumayacağı anlamına gelir.

robots.txt Kurallarınızı Elle Yazın

Bir robots.txt dosyası, web sitenizin kök dizininde bulunan düz metin bir dosyadır. Arama motoru botlarına hangi URL'leri ziyaret etmemeleri gerektiğini söyler.

robots.txt dosyanızı barındırma hesabınız aracılığıyla manuel olarak düzenleyebilirsiniz. Ancak, SEO eklentinizdeki yerleşik düzenleyiciyi kullanmak çok daha kolaydır.

Örneğin, All in One SEO'da bunu All in One SEO » Araçlar » Robots.txt Düzenleyici altında bulacaksınız.

Yoast SEO ve Rank Math gibi diğer popüler eklentiler benzer robots.txt düzenleyicileri sunar.

Dahili arama için /?s=, yorum yanıtlama bağlantıları için gönderi URL'lerine eklenen ?replytocom= ve RSS beslemeleri için /feed/ gibi taramak istemediğiniz URL desenlerini belirleyerek başlayın.

RSS beslemelerinizi engellemeden önce, bir podcast, otomatik bir e-posta bülteni veya besleme okuyucuları için onlara ihtiyacınız olmadığından emin olun. Kullanılmadıklarını bildiğinizde, her biri için bir Disallow kuralı ekleyin.

User-agent: *
Disallow: /*?s=
Disallow: /*?replytocom=
Disallow: /*/feed/

Kurallarınızı kaydettikten sonra, devam etmeden önce Google Search Console'un robots.txt raporuyla doğrulayın.

Yeni Disallow kurallarınızın orada sözdizimi hatası bildirilmeden göründüğünü onaylayın.

SEO Eklentinizde Tarama Temizleme Ayarlayın

robots.txt kurallarını elle yazmak istemiyorsanız, SEO eklentinizin tarama temizleme ayarları aynı işi basit geçişlerle yapabilir.

AIOSEO kullanıyorsanız, bunu All in One SEO » Arama Görünümü » Gelişmiş altında bulacaksınız. Ardından 'Tarama Temizleme'yi açın. Tarama Temizleme aracı, gereksiz RSS beslemelerini (WordPress'in yorumlar, yazarlar ve ekler için otomatik olarak oluşturduğu beslemeler gibi) devre dışı bırakmanıza, istenmeyen botları engellemenize ve dahili arama URL'lerinin taranmasını durdurmanıza olanak tanır.

Ana site beslemenizi açık bıraktığınızdan emin olun. Bu nedenle AIOSEO bunu 'devre dışı bırakılması önerilmez' olarak işaretler.

Yoast SEO, Yoast SEO » Ayarlar » Gelişmiş » Tarama Optimizasyonu altında aynı işlevselliğe, kendi besleme kaldırma ve URL parametresi temizleme seçenekleriyle sahiptir.

Bu seçenekleri açtıktan sonra, yeni kuralların gerçekten aktif olduğunu doğrulamak için robots.txt dosyanızı kontrol edin.

İzleme Parametreleri Nasıl Ele Alınır

E-posta kampanyaları, reklamlar ve pazarlama araçları, ziyaretçilerin nereden geldiğini görmek için URL'lerinize izleme parametreleri (utm_source, fbclid veya gclid gibi) ekler.

AIOSEO’nun Sorgu Argümanı İzleme (Query Arg Monitoring) özelliği, Googlebot’un aslında hangi sorgu argümanlarını (URL’deki soru işaretinden sonra gelen ek değerler) taradığını gösterir. Bunu AIOSEO’daki aynı ‘Gelişmiş’ ekranın en altında bulabilirsiniz.

Çoğu zaman izleme bağlantılarını engellemeniz veya yeniden yönlendirmeniz gerekmez.

AIOSEO, bu bağlantıları yeniden yönlendirmeler aracılığıyla yeniden yazan ‘UTM Parametrelerini Optimize Et’ geçişi sunsa da, izleme verilerini yanlışlıkla bozmamak için bunu kapalı bırakmanızı şiddetle tavsiye ederiz.

Ancak, monitörünüzde hiçbir işe yaramayan sorgu argümanları fark ederseniz, bunları bu bölümdeki engelleme listesine güvenle ekleyebilirsiniz. Gelişmiş kullanıcılar ayrıca birden çok benzer URL’yi aynı anda engellemek için Regex (düzenli ifadeler) kullanabilir.

WooCommerce Filtre ve Alışveriş Sepeti URL'lerini Temizleyin

WooCommerce mağazaları yukarıdakilerin üzerine kendi tarama süresini boşa harcayan parametreler ekler, özellikle orderby=, filter_, min_price= ve max_price= ve add-to-cart=.

Arama değeri olmayanları aynı robots.txt yaklaşımını kullanarak engelleyebilir veya yukarıdaki bölümden Sorgu Argümanı İzleme’ye sorgu argümanları olarak ekleyebilirsiniz.

add-to-cart=’ı engellemek güvenlidir çünkü benzersiz içerik sunmak yerine bir eylemi tetikler.

Sıralama ve fiyat aralığı filtreleri için de aynısını yapın, ancak bir istisna ile – kendi başına arama trafiği kazanan bir filtre, örneğin tek bir popüler boyut veya renk gibi.

İnce İçeriği Dizin Dışına Çıkarın – Etiket, Tarih ve Yazar Arşivleri

İndekslemeyi kaldırma (Deindexing), bir sayfayı Google’ın arama sonuçlarından çıkarmak anlamına gelir. Arama motorlarının, insanlar aradığında o sayfayı göstermemesini istemek için bir noindex etiketi ekleyerek bunu yaparsınız.

WordPress, yazılarınızı etiket, tarih ve yazara göre gruplayan arşiv sayfalarını otomatik olarak oluşturur. Bu arşivler çoğunlukla sitenizde zaten bulunan içeriği tekrarlar, bu yüzden SEO uzmanları onlara ‘zayıf’ sayfalar der.

Genellikle noindex yapmak için güvenli olan dört arşiv türü şunlardır:

• Yazar arşivleri, eğer sitenizin tek bir yazarı varsa
• Gerçek açılış sayfaları gibi çalışmayan etiket arşivleri
• Tarih arşivleri, nadiren kendi başlarına herhangi bir arama değeri taşır
• Ek (Attachment) sayfaları, eski WordPress siteleri her yüklenen resim için oluşturur (WordPress 6.4, Kasım 2023’ten itibaren yeni kurulumlar için bunları yapmayı durdurdu)

Her arşiv türünü SEO eklentinizin arşiv ayarlarından noindex olarak ayarlayabilirsiniz. Çoğu WordPress SEO eklentisi bu ayarı ücretsiz sürümlerinde içerir.

AIOSEO’da bunu All in One SEO » Arama Görünümü » Arşivler altında bulabilirsiniz.

Kaydetmeden önce, önemli bir sayfayı veya tüm bir yazı türünü yanlışlıkla noindex yapmadığınızdan emin olun.

XML Site Haritanızı Temiz Tutun

XML site haritanız, Google’a hangi URL’leri önemli ve güncel kabul ettiğinizi söyler. Site haritanızı dağınıklıktan uzak tutarak, arama motorlarının sayfalara ayrılmış arşivler üzerinde zaman kaybetmek yerine en değerli içeriğinize odaklanmasını sağlarsınız.

Varsayılan olarak WordPress siteniz için bir XML site haritası oluşturur. Daha fazla kontrol için, bir SEO eklentisiyle özel bir site haritası oluşturmanızı öneririz.

Özel bir site haritası, son değiştirilme tarihlerini ekler ve bunları noindex olarak ayarladığınız sayfaları kaldırır. AIOSEO, Yoast SEO ve Rank Math, ücretsiz sürümlerinde bir site haritası oluşturmanıza olanak tanır.

Tarama Hatalarını ve Yönlendirme Zincirlerini Düzeltin

Ölü ve yönlendirilmiş URL'ler, Google yalnızca bir URL'yi getirerek ölü olduğunu öğrendiği için yine de tarama isteklerinizi tüketir. Tipik bir WordPress sitesinde, bu boşa harcanan tarama istekleri genellikle üç ana nedenden kaynaklanır:

• Yönlendirme zincirleri. Bu, A URL'sinin B'ye, B'nin de C'ye yönlendirmesiyle olur. Bunu düzeltmek için, orijinal URL'yi tek bir 301 (kalıcı) yönlendirmeyle doğrudan son hedefe yönlendirerek zinciri daraltın.
• Yumuşak 404 hataları. Bu, bir sayfa kaldırıldığında ancak sunucunuz hala normal bir "200 Tamam" başarı kodu döndürdüğünde oluşur. Sunucu içeriğin gittiğini açıkça belirtmediği için Google URL'yi taramaya devam edecektir. Silinen sayfaların uygun bir 404 (Bulunamadı) veya 410 (Gitti) durum kodu döndürmesini sağlayarak bunu düzeltebilirsiniz.
• Eski dahili bağlantılar. Google, bozuk bir sayfaya veya yönlendirmeye giden bir dahili bağlantıyı her takip ettiğinde, tarama bütçenizi tüketir. Dahili bağlantılarınızı düzenli olarak denetlemeli ve bunları kaldırmalı veya canlı, nihai URL'yi doğrudan işaret edecek şekilde güncellemelisiniz.

Ayrıca WordPress'te yönlendirme oluşturma kılavuzumuzu da okuyabilirsiniz; bu kılavuz tüm süreci adım adım açıklar.

Tarama Hızınızı Artırmak İçin Sunucunuzu Hızlandırın

Hızlı bir sunucu, Google'ı daha fazla sayfayı taramaya teşvik ederken, zorlanan bir sunucu geri çekilmeye zorlar. Yanıt sürelerinizi iyileştirmek için iki şeye ihtiyacınız var: sağlam WordPress barındırma ve aktif bir önbelleğe alma kurulumu.

Ancak, sunucu hataları sayfa hızınızdan daha fazla tarama bütçenize zarar verebilir. Googlebot sık sık zaman aşımlarına uğrarsa, taramayı büyük ölçüde azaltır ve iyileşmesi yavaş olur.

Google Search Console'un Tarama İstatistikleri raporunda yanıt sürelerini ve sunucu hatalarını izleyebilirsiniz. Hatalar genellikle dolu bir barındırma planı veya hatalı bir eklenti tarafından oluşturulur.

Hata günlükleri ve barındırma sınırlarıyla ilgili yardım için 500 dahili sunucu hatalarını düzeltme kılavuzumuza bakın.

Sunucu Kaynaklarınızı Boşa Harcayan Yapay Zeka Tarayıcılarını Engelleyin

GPTBot, ClaudeBot ve PerplexityBot gibi yapay zeka tarayıcıları Google tarama bütçenizi kullanmaz. Ancak, aynı sunucuya erişirler ve agresif kazıma, sitenizi yavaşlatarak Google tarama hızınızı düşürebilir.

Bu sorunu çözmenin en hızlı yolu, çoğu SEO eklentisinde bulunan tarama temizliğidir. AIOSEO'nun Tarama Temizliği, istenmeyen yapay zeka botlarını WordPress düzeyinde durduran bot engelleme ayarları içerir.

Daha güçlü koruma için Cloudflare'ın ücretsiz AI Crawl Control özelliği, Tarayıcılar sekmesinden tek tek tarayıcıları engellemenize olanak tanır. Tarayıcıları barındırma sunucunuza ulaşmadan engeller.

Ancak, engelleme listenizi yapılandırırken dikkatli olun. Bu 'botların' çoğu sitenize trafik çeken yapay zeka arama yardımcıları olabilir, bu nedenle onları rastgele engellemek genel görünürlüğünüze zarar verecektir.

WordPress Tarama Bütçesi Hakkında Sıkça Sorulan Sorular

Tarama bütçesi hakkında en sık aldığımız sorular şunlardır.

Taramayı bütçesini ayarlayabilir veya artırabilir misiniz?

Sabit bir sayı belirleyemezsiniz. Daha hızlı, daha güvenilir bir sunucuyla tarama kapasitenizi artırabilir ve Google'ın yeniden ziyaret etmek istediği güncel, yinelenmeyen içeriklerle tarama talebini artırabilirsiniz.

Google'ın Search Console'da yinelenen olarak görünen /feed/ URL'lerini taramasını nasıl durdurabilirim?

AIOSEO'nun Taramayı Temizleme özelliğini kullanarak gereksiz akışları devre dışı bırakın veya robots.txt dosyanıza akış URL'leriniz için bir Engelleme kuralı ekleyin. Bu içerik zaten sitenizde başka bir yerde indekslenmiş olduğundan, akışları engellemek organik trafik açısından size hiçbir maliyet getirmez.

noindex etiketi tarama bütçesinden tasarruf sağlar mı?

Doğrudan değil, çünkü Google etiketi görmek için sayfayı yine de taramalıdır. Bunun yerine, robots.txt dosyası aracılığıyla Google'ın taramasını durdurun.

Yardımcı bağlantılara sahip özel bir 404 sayfası tarama bütçemi iyileştirir mi?

Hayır, ancak kullanıcı deneyimini iyileştirir. Taramayı bütçesinin boşa harcanmadığından emin olmak için, artık mevcut olmayan bir sayfa için sunucunuzun doğru 404 veya 410 durum kodunu gönderdiğinden emin olun.

Umarız bu makale, tarama bütçenizi boşa harcayan şeyleri bulmanıza ve düzeltmenize yardımcı olmuştur. Değişikliklere birkaç hafta verin, ardından iyileşmeyi görmek için Tarama İstatistiklerini tekrar kontrol edin.

Ayrıca nihai WordPress SEO kılavuzumuzu veya arama motorlarının bir WordPress sitesini taramasını nasıl durduracağınızı okumak isteyebilirsiniz.

Bu makaleyi beğendiyseniz, lütfen WordPress video eğitimleri için YouTube Kanalımıza abone olun. Bizi ayrıca Twitter ve Facebook'ta da bulabilirsiniz.