Сотрудник Google Джон Мюллер объяснил в Twitter, что при нормальной работе сайта проблем с индексацией быть не должно.
Если владельцу сайта приходится постоянно обращаться к инструменту для отправки запросов на сканирование, то это может указывать на возможные недочеты в работе ресурса. Вместо с того, чтобы регулярно использовать этот инструмент, лучше попробовать разобраться и решить те вопросы, которые приводят к проблемам с индексацией.
В целом же для естественного роста сайта Мюллер рекомендует не вмешиваться в его сканирование и индексацию, а оставить это на откуп поисковых систем. Конечно, при условии, что у сайта нет проблем, которые могут влиять на эти процессы.
For normal sites ; natural growth, I’d just let the site get crawled ; indexed on its own. Having to use this tool often is usually a sign that something else on the site is questionable. If that’s the case, it’s better to improve what’s questionable.
— ? John ? (@JohnMu) 28 октября 2021 г.
Напомним, что ранее в этом месяце Microsoft и Яндекс представили API для быстрой индексации контента IndexNow. Эта инициатива вызвала смешанные реакции в отрасли.