Регистрация

Становись частью нашего сообщества!

Есть аккаунт?

Войти

Crawl Budget

Также: Бюджет краулинга, crawl rate, краулинговый бюджет
Коротко

Лимит страниц, которые Google готов обойти на сайте за период. Важен для больших сайтов с тысячами URL.

Что это

Crawl Budget - количество страниц вашего сайта, которые Googlebot готов скачать за период. Зависит от:

  • Авторитета домена.
  • Скорости отдачи сервера.
  • Количества ошибок и редиректов.
  • Свежести и качества контента.

Для маленького сайта (до 1000 URL) crawl budget не проблема. Для большого (100k+) может стать узким горлышком - не все страницы попадут в индекс.

Как улучшить: ускорить сервер, убрать редирект-цепочки, исключить мусорные URL через robots.txt.