HTTP-статусы 4ХХ означают, что контент сайта недоступен для поискового робота и, соответственно, через некоторое время пропадет из поисковой выдачи. Причиной может быть некорректный синтаксис, необходимость ввода пароля, запрет доступа к странице или ее удаление с сайта.
При появлении таких ошибок нужно как можно скорее определить причину проблемы и выбрать соответствующий способ ее решения, чтобы важные страницы не исчезли из поисковой выдачи, а робот продолжил их индексирование.
Как узнать о проблеме и посмотреть примеры страниц с кодами статусов 4XX?
В Яндекс Вебмастере есть специальное уведомление, благодаря которому вебмастер сможет вовремя узнать о росте количества страниц с кодами 4ХХ и посмотреть их список на сервисе. Если ранее была оформлена подписка на уведомления от Вебмастера, то оповещение поступит на указанный почтовый адрес.
По данным Яндекса, около 50 000 сайтов уже получили от Вебмастера подобные оповещения, благодаря чему вебмастера смогут быстро устранить возможную проблему с индексацией страниц.
В любом случае, посмотреть сообщение об ошибке можно в Вебмастере. Для этого нужно:
1. Перейти в Вебмастер в раздел Диагностика.
2. Найти алерт «Некоторые страницы сайта отвечают HTTP-кодом 4ХХ».
3. Нажать на ссылку «Посмотреть примеры страниц» — откроется список список с такими кодами.
Если такого уведомления нет, то Вебмастер не диагностировал на сайте проблем с ошибками 4ХХ.
Команда Вебмастера рекомендует подписаться на получение оповещений из Диагностики и указать тип Рекомендации — тогда при возникновении проблем на сайте, система сразу же будет присылать соответствующие уведомления. Если с сайта действительно недавно было удалено достаточно большое количество страниц, можно просто пропустить это сообщение. Но если такое произошло неожиданно и без видимых причин, то оповещение поможет вовремя заметить ошибку или техническую проблему.
Подробнее об HTTP-статусах можно прочесть в Справке.
Ранее, в начале августа, Яндекс Вебмастер начал уведомлять о наличии на сайте страниц со статусами 5XX.