W skrócie
Cytuj to hasło
Zaznacz przypis i skopiuj: Crawl budget. W: Słownik pojęć e-commerce, Pro1.pl. https://pro1.pl/slownik/crawl-budget (sprawdzono 13 września 2026).
Crawl budget (budżet indeksowania) to liczba adresów, które Googlebot chce i może pobrać z witryny w danym czasie; problem głównie bardzo dużych sklepów.
Na tej stronie (3)
Dwie rzeczy ograniczają Googlebota: limit, jaki serwer znosi bez spowolnienia, i popyt, czyli to, jak ważne i jak często zmieniane są strony; z nich wynika liczba adresów pobieranych z witryny w danym czasie. Według dokumentacji Google to problem witryn bardzo dużych (ponad milion adresów) albo średnich (od około 10 tysięcy adresów) z treścią zmieniającą się codziennie.
Zanim to zrozumiesz
- Googlebot: Googlebot to robot Google, który pobiera strony, renderuje je jak przeglądarka i przekazuje treść do indeksu, głównie w wersji mobilnej.
- Canonical: Canonical (adres kanoniczny) to znacznik wskazujący Google preferowany adres spośród stron o tej samej lub bardzo podobnej treści, jako wskazówka.
Jak się tego używa
W audytach technicznych sklepów, gdzie nawigacja fasetowa, sortowanie, parametry, warianty i wyszukiwarka wewnętrzna generują miliony kombinacji adresów; do diagnozy służą statystyki indeksowania w Search Console i logi serwera, a do sterowania robots.txt, canonical, noindex i linkowanie wewnętrzne.
Dlaczego warto to znać
Gdy robot spędza czas na kopiach stron filtrów, nowe produkty i zmiany cen trafiają do indeksu z opóźnieniem, a część produktów w ogóle nie jest indeksowana; małego sklepu problem nie dotyczy.
Na co uważać
Blokowanie w robots.txt oszczędza budżet, ale zablokowane adresy mogą zostać w indeksie bez treści; noindex wymaga, by robot stronę pobrał. Wolny serwer obniża limit indeksowania. Budżet indeksowania nie jest czynnikiem rankingowym.
Zobacz też
Googlebot
Googlebot to robot Google, który pobiera strony, renderuje je jak przeglądarka i przekazuje treść do indeksu, głównie w wersji mobilnej.
Indeksowanie
Indeksowanie to etap, na którym wyszukiwarka zapisuje pobraną stronę w indeksie i dopuszcza ją do wyników; to coś innego niż pobranie i pozycja.
Robots.txt
Robots.txt to plik w katalogu głównym domeny, w którym właściciel wskazuje robotom, których adresów nie pobierać; nie decyduje o obecności w wynikach.
Noindex
Noindex to polecenie w metatagu robots lub nagłówku serwera, że strona nie ma pojawiać się w wynikach; działa dopiero po pobraniu strony przez robota.
Canonical
Canonical (adres kanoniczny) to znacznik wskazujący Google preferowany adres spośród stron o tej samej lub bardzo podobnej treści, jako wskazówka.
Źródła
- Crawl Budget Management, Google for Developers, odczyt