Одна из причин некорректной индексации сайта – неправильный ответ веб-сервера в ответ на запрос робота Яндекса. При запросе страниц сайта роботы Яндекса представляются не так, как браузеры пользователей, поэтому проверяя ответ через браузер можно не заметить ошибку.
Теперь пользователи Яндекс.Вебмастера могут проверить, как веб-сервер их сайта отвечает роботу Яндекса на запрос конкретной страницы. Для этого появился новый инструмент «Проверка ответа сервера». Инструмент доступен для сайтов, подтвержденных в сервисе Яндекс.Вебмастер.
Команда Яндекс.Вебмастера