Термин

Googlebot: поисковый робот Google и проверка запросов

Googlebot — общее название основных поисковых роботов Google, которые обходят страницы для Google Search.

Что означает термин#

В логах встречаются разные варианты User-Agent, включая мобильный и настольный. Строку User-Agent может отправить любой клиент, поэтому одного совпадения имени недостаточно для доказательства принадлежности запроса Google. Обход также не равен индексации.

Практический пример#

В журнале сервера найден запрос с именем Googlebot и кодом 200. Это подтверждает зарегистрированный сервером обмен, но без проверки источника не доказывает визит настоящего робота. Даже подтверждённый визит не сообщает, какой канонический адрес выбрал поиск.

Как проверить#

Проверьте источник по официальным диапазонам IP или процедуре обратного и прямого DNS. Затем сопоставьте время, адрес, статус и правила доступа. Не выдавайте запрос curl с подменённым User-Agent за тест настоящего Googlebot. Состояние индексирования проверяйте отдельно средствами Search Console.

Источники#

Проверены 23 октября 2026 г.. Официальные рекомендации отделены от наших примеров и результатов проверки.

Продолжить разбор