Crawl budget to określenie ilości czasu i zasobów, jakie wyszukiwarka internetowa alokuje dla przeglądania i indeksowania strony internetowej. Crawl budget jest ważnym aspektem dla SEO, ponieważ wpływa na to, jak często i w jakim zakresie wyszukiwarka będzie przeglądać i indeksować strony internetowe.
Crawl budget może być określony na kilka sposobów, w tym:
Aby zwiększyć crawl budget dla swojej strony internetowej, istnieją różne strategie SEO, takie jak zoptymalizowanie struktury URL, usunięcie błędów HTTP, zoptymalizowanie czasu ładowania strony oraz umieszczenie treści na jednej stronie zamiast na wielu. Wszystkie te strategie mają na celu ułatwienie przeglądania i indeksowania strony internetowej przez wyszukiwarki.