Ответ
Страницы с 404-тым кодом действительно могут обходиться поисковыми роботами еще несколько раз после первого обнаружения.
Чтобы удалить страницу полностью из индекса рекомендуется настроить 410 код ответа. Он указывает поисковым роботам, что страница навсегда удалена. А 404 ответ может восприниматься как временная ошибка, поэтому робот возвращается проверить состояние страницы.
Также 404-тая страница может быть в sitemap, и это может достаточным основанием для робота продолжать сканировать страницу.
Что касается второго вопроса:
В отчет «Статистика обхода» будут все страницы сайта которые обошел робот, при условии, что на момент обхода они были доступны. Подробнее: https://yandex.ru/support/webmaster/service/site-indexing.html
А в отчете «Страницы в поиске» находятся страницы сайта, которые участвуют в поиске Яндекса. При этом там отображается как информация о добавленных (новых) страницах, так и данные о страницах, которые были из поиска исключены. Подробнее: https://yandex.ru/support/webmaster/service/searchable.html
Если возникнут сложности с обнаружением источников 404-тых страниц, то напишите нам и мы поможем.
Хотите получить ответ на свой вопрос? Задайте его нам через телеграм-бота!↓
Еще по теме:
- Битые ссылки 404: как они влияют на ранжирование сайта, как найти их и исправить Какие санкции от ПС могут быть, если на сайт ведёт много битых ссылок? Настроили так, что все, кто переходит по такой ссылке, попадают на заглушку...
- Как быть при росте ссылок на 404 страницы? В последнее время на проект появилось много ссылок на 404 страницы. В консоли виден рост 404 страниц в индексе. Подскажите, как действовать в такой ситуации?...
- Как правильнее восстановить удаленный раздел на сайте с новыми URL? Подскажите, как правильнее: удалили раздел. Код 404. Восстанавливаем раздел, даем роботу погулять на нем, потом 301 редирект ставим на переименованный? Или сразу ставим редирект, контент...
- Восстанавливать удаленные страницы или создавать новые? На сайте ранее было удалено множество страниц и по этим URL отдавалась 404 ошибка длительное время. Сейчас есть желание вернуть страницы с этим контентом (доработав...
- Какой вариант вывода 404 ошибки будет правильным? Как лучше сделать вывод 404 ошибки: редиректом на страницу ошибки (error/404/) или по адресу несуществующей страницы показывать 404? Есть отличия между этими вариантами? И какие?...
o.titarenko@siteclinic.ru
Оцените мою статью:
(Пока оценок нет)Есть вопросы?
Задайте их прямо сейчас, и мы ответим в течение 8 рабочих часов.
Отзывы клиентов:
"Отчеты и консультации всегда исчерпывающие и действенные"
"Наблюдаем стремительный и уверенный рост трафика"
Пилицын Василий Сергеевич
Seatscan.ru"Изменения положительно отразились на позициях сайта"
Павел Любимов
Jazztour.ru
