Исключенные страницы
Страницы сайта могут пропадать из результатов поиска Яндекса. Это может происходить по нескольким причинам:
- Ошибка при загрузке или обработке страницы роботом — если ответ сервера содержал HTTP-статус 3XX, 4XX или 5XX. Выявить ошибку поможет инструмент Проверка ответа сервера.
- Индексирование страницы запрещено в файле robots.txt или с помощью мета-тега со значением noindex.
- Страница перенаправляет робота на другие страницы.
- Страница дублирует содержание другой страницы.
- Страница не является канонической.
Список исключенных из поиска страниц можно увидеть в разделе Страницы в поиске Яндекс.Вебмастера.
Если вы хотите, чтобы исключенная страница появилась в поисковой выдаче, устраните причину ее удаления. Затем воспользуйтесь инструментом Перееобход страниц. В этом случае страницы появятся в результатах поиска в течение 1-2 недель.
Вопросы и ответы про исключенные из поиска страницы
В списке «Исключенные страницы» показываются страницы, которых уже нет на сайте. Как их удалить?
В разделе Страницы в поиске, в списке Исключенные страницы, отображаются страницы, к которым робот обращался, но не проиндексировал (это могут быть уже несуществующие страницы, если ранее они были известны роботу).
Страница удаляется из списка исключенных, если
- она недоступна для робота в течение некоторого времени;
- на нее не ссылаются другие страницы сайта и внешние источники.
Наличие и количество исключенных страниц в сервисе не должно влиять на положение сайта в результатах поиска.
Страницы, которые отображаются как исключенные, в браузере открываются нормально. Что это значит?
Это может происходить по нескольким причинам:
- Заголовки, которые запрашивает робот у сервера, отличаются от заголовков, запрашиваемых браузером. Поэтому исключенные страницы могут открываться в браузере корректно.
- Если страница исключена из поиска из-за ошибки при ее загрузке, она исчезнет из списка исключенных только в том случае, если при новом обращении робота станет доступна. Проверьте ответ сервера по интересеющему вас URL. Если ответ содержит HTTP-статус 200 OK, дождитесь нового посещения робота.