Ответ
С аналогичной проблемой мы столкнулись в августе прошлого года, необходимо было удалить 7 000 низкокачественных страниц (скриншоты домов, которые доступны на отдельных страницах).
Настроив 404 сервера для ненужных страниц ничего не вышло, так как робот повторно заходил на такие страницы, с целью перепроверки ответа сервера. Мы настроили 410 ответ сервера — удалено навсегда, но это также не дало результата, так как алгоритм заточен так, что робот повторно перепроверяет несколько раз страницы с HTTP-статусом с кодом 404, 403 или 410.
Если Ваш сайт продвигается только в Яндексе, тогда можете воспользоваться инструментом “Удаление страниц из поиска” в Яндекс.Вебмастере:
Таким образом можно удалить до 500 страниц за день, при этом можете не переживать: если среди данных url окажется страница с другим ответом сервера (то есть не 404, 403 или 410), тогда удаления не будет.
Если у Вас сайт продвигается в двух поисковых системах, то ручное удаление Вам не поможет. Можете воспользоваться следующим вариантом: закрытие каталога в robots.txt. Этим же вариантом воспользовались мы и таким образом исключили все ненужные страницы меньше чем за две недели.
Ускорить индексацию новых url можно:
- Улучшив скорость сайта. К тому же, сейчас это важный фактор в Google, который добавил новый отчет в консоли.
- Для того чтобы ускорить переезд сайта необходимо со старого сайта отправить два файла Sitemap со старыми и новыми URL. Это поможет поисковым роботам обнаружить переадресацию и ускорит перенос сайта.
Хотите получить ответ на свой вопрос? Задайте его нам через телеграм-бота!↓
Еще по теме:
- Как и когда нужно удалять thin контент с сайта? В последнее время встречаю кейсы вида: удалил thin контент и трафик пошёл вверх. Что думаете по этому поводу? Как удалять: просто 404 или 301 сливаем...
- Как правильно удалять бесполезные страницы из индекса? У меня на сайте собралось несколько тысяч бесполезных страниц, планирую их почистить, удалить из индекса поисковиков. Страницы эти не дубли, просто автосгенерированный хлам, без полезного...
- Как раз и навсегда удалить страницу из выдачи в Google? Как раз и навсегда удалить страницу из ПС в Google? 404 отдает, но более месяца страница в ПС. Ответ Такая ситуация может возникнуть, если на...
- Важна ли уникальность текстового блока на страницах категорий товара в ИМ? При анализе конкурентов обратил внимание, что на всех страницах листинга почти дословная копипаста одного и того же абзаца текста. И так делает не один конкурент....
- Как удалить спамные страницы с изменённым контентом после взлома сайта? Сайт был взломан, сейчас его полечили, все вирусы убрали. Но в выдаче весь спам остался. Как максимально быстро убрать весь мусор из выдачи? 1. Как...
Есть вопросы?
Задайте их прямо сейчас, и мы ответим в течение 8 рабочих часов.
Отзывы клиентов:
"Мы увидели рост по целому пулу запросов"
Деревянко П.Н.
Expertology.ru"Помогли усилить позиции и убрать не точности в структуре магазина"
Вадим Соломенцев
Sportique.ru"Прекрасно проработанный аудит"
Денис
Eвроавто.рф