Теперь оптимизаторы будут знать наверняка, кто заходил на их сайт.
Этот способ стал альтернативой обратному DNS-запросу по адресу источника для проверки визитов сайта. Полный перечень ip-адресов Googlebot доступен в справочных материалах Google, но пока только в англоязычной версии.
Проверка посещений будет полезна для выявления фальшивых ботов, сканирующих ваш сайт. Такие боты могут негативно сказаться на работе: сайт начнет медленнее загружаться, возникнут проблемы с ранжированием и индексацией, что впоследствии может привести к отключению сайта.
Перечень адресов обновляется ежедневно, поэтому разработчики рекомендуют проверять файл ежедневно.
Источник
