Jak naprawić problem budżetu indeksowania w WordPress

Budżet indeksowania to limit, który Google ustala dla liczby stron, które zaindeksuje w Twojej witrynie.

Oprócz Twoich postów i stron, WordPress generuje kilka dodatkowych adresów URL, które wyszukiwarki mogą indeksować i indeksować. Oznacza to, że Google może wydawać Twój budżet indeksowania na niepotrzebne strony zamiast na Twoje ważne treści.

W tym artykule pokażemy Ci, jak zoptymalizować budżet indeksowania w WordPress, aby Google najpierw znalazł Twoje ważne treści.

Szybka odpowiedź: Jak naprawić budżet indeksowania w WordPress

Blokowanie niepotrzebnych adresów URL za pomocą ustawień czyszczenia indeksowania wtyczki SEO lub robots.txt zapewnia, że Twój budżet indeksowania nie zostanie zmarnowany.

Większość małych witryn może nigdy nie wyczerpać budżetu indeksowania. Jednak WordPress tworzy znacznie więcej adresów URL niż publikujesz. Google może ostatecznie marnować budżet indeksowania na te adresy URL, a Twoje ważne strony mogą nie być indeksowane szybko ani często.

Użyj poniższych szybkich linków, aby przejść bezpośrednio do potrzebnej poprawki:

Czym jest budżet indeksowania i jak go sprawdzić?

Budżet indeksowania to liczba stron, które wyszukiwarka taka jak Google zaindeksuje w Twojej witrynie w określonym czasie. Istnieją dwa główne czynniki:

• Budżet robotów indeksujących: Ile żądań może wysłać Google, nie powodując awarii ani spowolnienia serwera. Jeśli Twój serwer jest szybki i niezawodny, Twój budżet jest wysoki.
• Zapotrzebowanie na indeksowanie: Jak bardzo Google chce indeksować Twoją witrynę, biorąc pod uwagę jej popularność, ogólną jakość i częstotliwość publikowania nowych treści.

Gdy niskowartościowe strony lub wolne serwery pochłaniają Twój budżet robotów indeksujących, Google indeksuje mniej, a indeksowanie nowych treści zajmuje więcej czasu.

Warto poświęcić chwilę na przejrzenie raportu statystyk indeksowania w Google Search Console. Pokazuje on, kiedy i jak często Googlebot odwiedza Twoją witrynę. Wystarczy otworzyć Google Search Console i przejść do Ustawienia » Statystyki indeksowania » Otwórz raport, aby go wyświetlić.

Po wejściu do raportu Google dzieli żądania indeksowania na cztery sposoby. Oto, co pokazuje każdy z nich:

• Według odpowiedzi. Jak Twój serwer odpowiadał na każde żądanie, w tym „OK (200)”, „Nie znaleziono (404)”, przekierowania i błędy serwera (5XX).
• Według typu pliku. Co Googlebot pobrał: strony HTML, obrazy, CSS i JavaScript.
• Według celu. „Odkrycie” oznacza, że Google indeksuje adres URL po raz pierwszy, podczas gdy „Odświeżenie” oznacza ponowne indeksowanie znanych już stron.
• Według typu Googlebota. Pokazuje, który robot wysłał żądanie. Duży udział „Smartfon” jest normalny, ponieważ Google głównie indeksuje wersję mobilną Twojej witryny.

Kliknij dowolny wiersz w tych raportach, aby wyświetlić konkretne adresy URL i ich indywidualne statystyki indeksowania. Te dane pokażą Ci również dokładnie, jakie poprawki są potrzebne w Twojej witrynie:

• Duża część odpowiedzi „Nie znaleziono (404)” lub „Błąd serwera (5XX)” oznacza, że martwe adresy URL zużywają żądania. Możesz to rozwiązać, czyszcząc łańcuchy przekierowań i naprawiając niedziałające linki.
• Duża liczba „Syndykacja” oznacza, że Google zużywa żądania na kanały informacyjne zamiast na Twoje treści. Możesz łatwo zapobiec tej stracie, blokując te niepotrzebne adresy URL.
• Jeśli statystyka indeksowania „Odkrycie” pozostaje wysoka, nawet gdy nie publikujesz nowych treści, Google prawdopodobnie marnuje czas na automatycznie generowane adresy URL, takie jak strony sortowania i filtrowania. Możesz to zatrzymać, stosując te same reguły blokowania robots.txt.
• Wolne średnie czasy odpowiedzi lub powtarzające się błędy serwera ograniczają cały Twój budżet. Jest to wyraźny znak, że czas przyspieszyć działanie serwera.

Na koniec sprawdź wskaźnik „Odkryte – obecnie nieindeksowane” w raporcie indeksowania stron. Google używa tego, gdy opóźnia indeksowanie, aby uniknąć awarii serwera. Wysoka liczba tutaj jest bezpośrednim wskaźnikiem, że indeksowanie Twojej witryny jest ograniczone.

Blokuj adresy URL marnujące indeksowanie za pomocą robots.txt lub wtyczki SEO

Większość zmarnowanego budżetu robotów indeksujących pochodzi z adresów URL, które WordPress i wtyczki generują automatycznie, a nie z artykułów, które piszesz.

Te niepotrzebne adresy URL obejmują kanały informacyjne, linki do odpowiedzi na komentarze, wewnętrzne wyniki wyszukiwania, parametry śledzenia z kampanii i reklam oraz parametry filtrowania WooCommerce.

Zanim zaczniesz blokować adresy URL, pamiętaj o dwóch rzeczach:

• Nigdy nie blokuj plików CSS ani JS. Google musi załadować te pliki, aby poprawnie wyświetlać Twoje strony.
• Nie blokuj adresu URL, który zamierzasz wykluczyć z indeksowania. Tag noindex prosi Google o nieumieszczanie strony w wynikach wyszukiwania. Jednak Google musi zaindeksować stronę WordPress, aby zobaczyć ten tag, więc zablokowanie adresu URL w robots.txt oznacza, że Google nigdy go nie odczyta.

Napisz zasady robots.txt ręcznie

Plik robots.txt to zwykły plik tekstowy znajdujący się w głównym katalogu Twojej witryny. Informuje on boty wyszukiwarek, których adresów URL nie powinny odwiedzać.

Możesz ręcznie edytować plik robots.txt za pośrednictwem swojego konta hostingowego. Jednak użycie wbudowanego edytora w Twoim wtyczce SEO jest znacznie łatwiejsze.

Na przykład, w All in One SEO znajdziesz go w sekcji All in One SEO » Narzędzia » Edytor Robots.txt.

Inne popularne wtyczki, takie jak Yoast SEO i Rank Math, oferują podobne edytory robots.txt.

Zacznij od zidentyfikowania wzorców adresów URL, których nie chcesz indeksować, takich jak /?s= dla wyszukiwania wewnętrznego, ?replytocom= dodawane do adresów URL postów dla linków odpowiedzi na komentarze i /feed/ dla kanałów RSS.

Zanim zablokujesz swoje kanały RSS, upewnij się, że nie potrzebujesz ich do podcastu, zautomatyzowanego biuletynu e-mail lub czytników kanałów. Gdy już wiesz, że nie są używane, dodaj regułę Disallow dla każdego z nich.

User-agent: *
Disallow: /*?s=
Disallow: /*?replytocom=
Disallow: /*/feed/

Po zapisaniu reguł zweryfikuj je za pomocą raportu robots.txt w Google Search Console, zanim przejdziesz dalej.

Potwierdź, że Twoje nowe reguły Disallow pojawiają się tam bez błędów składni.

Skonfiguruj czyszczenie indeksowania w swojej wtyczce SEO

Jeśli wolisz nie pisać reguł robots.txt ręcznie, ustawienia czyszczenia indeksowania w Twojej wtyczce SEO mogą wykonać tę samą pracę za pomocą prostych przełączników.

Jeśli używasz AIOSEO, znajdziesz je w sekcji All in One SEO » Wygląd strony » Zaawansowane. Następnie włącz „Czyszczenie indeksowania”. Narzędzie Czyszczenie indeksowania pozwala wyłączyć niepotrzebne kanały RSS (takie jak te, które WordPress automatycznie generuje dla komentarzy, autorów i załączników), blokować niechciane boty i zatrzymywać indeksowanie wewnętrznych adresów URL wyszukiwania.

Upewnij się, że pozostawisz swój główny kanał strony włączony. Dlatego AIOSEO oznacza go jako „nie zaleca się wyłączania”.

Yoast SEO ma tę samą funkcjonalność w sekcji Yoast SEO » Ustawienia » Zaawansowane » Optymalizacja indeksowania, z własnymi opcjami usuwania kanałów i czyszczenia parametrów URL.

Po włączeniu tych opcji sprawdź swój plik robots.txt, aby potwierdzić, że nowe reguły są faktycznie aktywne.

Jak obsługiwać parametry śledzenia

Kampanie e-mailowe, reklamy i narzędzia marketingowe często dodają parametry śledzenia do Twoich adresów URL (takie jak utm_source, fbclid lub gclid), aby zobaczyć, skąd pochodzą odwiedzający.

Monitorowanie argumentów zapytania AIOSEO pokazuje, które z tych argumentów zapytania (dodatkowe wartości po znaku zapytania w adresie URL) Googlebot faktycznie indeksuje. Znajdziesz je na dole tego samego ekranu „Zaawansowane” w AIOSEO.

Przez większość czasu nie musisz blokować ani przekierowywać linków śledzących.

Chociaż AIOSEO oferuje przełącznik „Optymalizuj parametry UTM”, który przepisuje te linki za pomocą przekierowań, zdecydowanie zalecamy pozostawienie go wyłączonego, aby nie uszkodzić przypadkowo danych śledzenia.

Jednak jeśli zauważysz w swoim monitorze argumenty zapytania, które nie mają absolutnie żadnego celu, możesz je bezpiecznie dodać do listy zablokowanych w tej sekcji. Zaawansowani użytkownicy mogą również używać wyrażeń regularnych (Regex) do blokowania wielu podobnych adresów URL jednocześnie.

Oczyść adresy URL filtrów i koszyka WooCommerce

Sklepy WooCommerce dodają własne, marnujące zasoby indeksowania parametry ponad wszystko powyższe, głównie orderby=, filter_, min_price= i max_price=, oraz add-to-cart=.

Możesz zablokować te bez wartości wyszukiwania, używając tego samego podejścia robots.txt, lub dodać je jako argumenty zapytania w Monitorowaniu Argumentów Zapytania z powyższej sekcji.

Blokowanie add-to-cart= jest bezpieczne, ponieważ wyzwala akcję, a nie serwuje unikalnych treści.

Zrób to samo dla filtrów sortowania i zakresu cen, z jednym wyjątkiem – filtr, który sam w sobie generuje ruch z wyszukiwarek, jak pojedynczy popularny rozmiar lub kolor.

Usuń z indeksu cienkie treści – archiwa tagów, dat i autorów

Deindeksowanie oznacza usunięcie strony z wyników wyszukiwania Google. Robisz to, dodając tag noindex, który prosi wyszukiwarki o niepokazywanie tej strony, gdy ludzie szukają.

WordPress automatycznie tworzy strony archiwum, które grupują Twoje wpisy według tagów, dat i autorów. Te archiwa w większości powtarzają treści, które już istnieją na Twojej stronie, dlatego eksperci SEO nazywają je stronami „cienistymi”.

Oto cztery typy archiwów, które zazwyczaj można bezpiecznie oznaczyć jako noindex:

• Archiwa autorów, jeśli Twoja strona ma jednego autora
• Archiwa tagów, które nie działają jako prawdziwe strony docelowe
• Archiwa dat, które rzadko mają jakąkolwiek wartość wyszukiwania same w sobie
• Strony załączników, które starsze strony WordPress tworzą dla każdego przesłanego obrazu (WordPress 6.4 przestał je tworzyć dla nowych instalacji w listopadzie 2023 r.)

Możesz ustawić każdy z typów archiwów na noindex w ustawieniach archiwów Twojego wtyczki SEO. Większość wtyczek SEO WordPress zawiera to ustawienie w swoich darmowych wersjach.

W AIOSEO znajdziesz je w sekcji All in One SEO » Wygląd wyszukiwania » Archiwa.

Zanim zapiszesz, sprawdź dwukrotnie, czy przypadkowo nie oznaczyłeś jako noindex ważnej strony lub całego typu wpisu.

Utrzymuj czystą mapę witryny XML

Mapa witryny XML informuje Google, które adresy URL uważasz za ważne i aktualne. Utrzymując mapę witryny w czystości, zapewniasz wyszukiwarkom skupienie się na Twoich najcenniejszych treściach, zamiast marnowania czasu na archiwa z podziałem na strony.

Domyślnie WordPress tworzy mapę witryny XML dla Twojej strony. Aby uzyskać większą kontrolę, zalecamy wygenerowanie niestandardowej mapy witryny za pomocą wtyczki SEO.

Niestandardowa mapa witryny dodaje daty ostatniej modyfikacji i usuwa z niej strony, które ustawiłeś na noindex. AIOSEO, Yoast SEO i Rank Math umożliwiają tworzenie mapy witryny w swoich darmowych wersjach.

Napraw błędy indeksowania i łańcuchy przekierowań

Nieaktywne i przekierowane adresy URL nadal kosztują Cię żądania indeksowania, ponieważ Google dowiaduje się o nieaktywności adresu URL dopiero po jego pobraniu. W typowej witrynie WordPress te zmarnowane żądania indeksowania zazwyczaj pochodzą od trzech głównych przyczyn:

• Łańcuchy przekierowań. Dzieje się tak, gdy adres URL A przekierowuje do B, który następnie przekierowuje do C. Aby to naprawić, skróć łańcuch, kierując oryginalny adres URL bezpośrednio do ostatecznego miejsca docelowego za pomocą pojedynczego przekierowania 301 (stałego).
• Błędy typu Soft 404. Występują, gdy strona jest usunięta, ale serwer nadal zwraca normalny kod powodzenia „200 OK”. Google będzie nadal indeksować adres URL, ponieważ serwer nie poinformował wyraźnie, że treść zniknęła. Możesz to naprawić, zapewniając, że usunięte strony zwracają prawidłowy kod statusu 404 (Nie znaleziono) lub 410 (Usunięto).
• Nieaktualne linki wewnętrzne. Za każdym razem, gdy Google podąża za linkiem wewnętrznym prowadzącym do niedziałającej strony lub przekierowania, zużywa to Twój budżet indeksowania. Powinieneś regularnie audytować swoje linki wewnętrzne i albo je usuwać, albo aktualizować, aby wskazywały bezpośrednio na aktywny, ostateczny adres URL.

Możesz również przeczytać nasz poradnik na temat tworzenia przekierowania w WordPress, który przeprowadzi Cię przez cały proces.

Przyspiesz swój serwer, aby zwiększyć wskaźnik indeksowania

Szybki serwer zachęca Google do indeksowania większej liczby stron, podczas gdy problematyczny serwer zmusza go do wycofania się. Aby poprawić czas odpowiedzi, potrzebujesz dwóch rzeczy: solidnego hostingu WordPress i aktywnej konfiguracji buforowania.

Jednak błędy serwera mogą zaszkodzić Twojemu budżetowi indeksowania nawet bardziej niż szybkość strony. Jeśli Googlebot często napotyka przekroczenia limitu czasu, drastycznie ogranicza indeksowanie i powoli się regeneruje.

Możesz monitorować czasy odpowiedzi i błędy serwera w raporcie Statystyki indeksowania w Google Search Console. Błędy są zazwyczaj spowodowane przekroczeniem limitu planu hostingowego lub wadliwą wtyczką.

Zobacz nasz poradnik dotyczący naprawiania błędów wewnętrznych serwera 500, aby uzyskać pomoc w zakresie logów błędów i limitów hostingu.

Blokuj roboty AI, które marnują zasoby Twojego serwera

Boty AI, takie jak GPTBot, ClaudeBot i PerplexityBot, nie korzystają z Twojego budżetu indeksowania Google. Jednak uderzają w ten sam serwer, a agresywne skrobanie może spowolnić Twoją witrynę na tyle, że obniży to Twoje tempo indeksowania przez Google.

Najszybszym rozwiązaniem tego problemu jest funkcja czyszczenia indeksowania, która jest dostępna w większości wtyczek SEO. Crawl Cleanup w AIOSEO zawiera ustawienia blokowania botów, które zatrzymują niechciane boty AI na poziomie WordPress.

Dla silniejszej ochrony, darmowa funkcja AI Crawl Control w Cloudflare pozwala blokować poszczególne boty z zakładki Crawlers. Blokuje ona boty, zanim dotrą one do Twojego serwera hostingowego.

Jednak zachowaj ostrożność podczas konfigurowania listy blokowanych. Wiele z tych „botów” może być asystentami wyszukiwania AI, które generują ruch na Twojej stronie, więc blokowanie ich bezkrytycznie zaszkodzi Twojej ogólnej widoczności.

Najczęściej zadawane pytania dotyczące budżetu indeksowania WordPress

Oto pytania, które najczęściej otrzymujemy na temat budżetu indeksowania.

Czy możesz ustawić lub zwiększyć swój budżet na indeksowanie?

Nie ma ustalonej liczby, którą można ustawić. Możesz zwiększyć swoją zdolność indeksowania dzięki szybszemu, bardziej niezawodnemu serwerowi, a możesz zwiększyć popyt na indeksowanie dzięki świeżej, niepowtarzalnej treści, którą Google faktycznie chce ponownie odwiedzić.

Jak mogę powstrzymać Google przed indeksowaniem adresów URL /feed/, które pojawiają się jako duplikaty w Konsoli wyszukiwania?

Wyłącz zbędne kanały informacyjne za pomocą funkcji Crawl Cleanup w AIOSEO lub dodaj regułę Disallow dla adresów URL kanałów informacyjnych do pliku robots.txt. Ta treść jest już zaindeksowana gdzie indziej na Twojej stronie, więc blokowanie kanałów informacyjnych nic Cię nie kosztuje pod względem ruchu organicznego.

Czy tag noindex oszczędza budżet na indeksowanie?

Nie bezpośrednio, ponieważ Google musi jeszcze zaindeksować stronę, aby zobaczyć tag. Zamiast tego zablokuj Google przed indeksowaniem za pomocą pliku robots.txt.

Czy niestandardowa strona 404 z pomocnymi linkami poprawi mój budżet na indeksowanie?

Nie, poprawia jednak doświadczenie użytkownika. Aby upewnić się, że budżet na indeksowanie nie jest marnowany, upewnij się, że Twój serwer wysyła prawidłowy kod statusu 404 lub 410 dla strony, która już nie istnieje.

Mamy nadzieję, że ten artykuł pomógł Ci znaleźć i naprawić to, co marnuje Twój budżet indeksowania. Daj zmianom kilka tygodni, a następnie ponownie sprawdź Statystyki indeksowania, aby zobaczyć poprawę.

Możesz również przeczytać nasz ostateczny przewodnik po WordPress SEO lub jak zatrzymać wyszukiwarki przed indeksowaniem witryny WordPress.

Jeśli podobał Ci się ten artykuł, zasubskrybuj nasz kanał YouTube po samouczki wideo WordPress. Możesz nas również znaleźć na Twitterze i Facebooku.