Ответ
С аналогичной проблемой мы столкнулись в августе прошлого года, необходимо было удалить 7 000 низкокачественных страниц (скриншоты домов, которые доступны на отдельных страницах).
Настроив 404 сервера для ненужных страниц ничего не вышло, так как робот повторно заходил на такие страницы, с целью перепроверки ответа сервера. Мы настроили 410 ответ сервера — удалено навсегда, но это также не дало результата, так как алгоритм заточен так, что робот повторно перепроверяет несколько раз страницы с HTTP-статусом с кодом 404, 403 или 410.
Если Ваш сайт продвигается только в Яндексе, тогда можете воспользоваться инструментом “Удаление страниц из поиска” в Яндекс.Вебмастере:
Таким образом можно удалить до 500 страниц за день, при этом можете не переживать: если среди данных url окажется страница с другим ответом сервера (то есть не 404, 403 или 410), тогда удаления не будет.
Если у Вас сайт продвигается в двух поисковых системах, то ручное удаление Вам не поможет. Можете воспользоваться следующим вариантом: закрытие каталога в robots.txt. Этим же вариантом воспользовались мы и таким образом исключили все ненужные страницы меньше чем за две недели.
Ускорить индексацию новых url можно:
- Улучшив скорость сайта. К тому же, сейчас это важный фактор в Google, который добавил новый отчет в консоли.
- Для того чтобы ускорить переезд сайта необходимо со старого сайта отправить два файла Sitemap со старыми и новыми URL. Это поможет поисковым роботам обнаружить переадресацию и ускорит перенос сайта.
Хотите получить ответ на свой вопрос? Задайте его нам через телеграм-бота!↓
Еще по теме:
- Как правильно удалить старые страницы сайта без трафика? Есть крупный сайт услуг с 300 тыс. страниц. Сайт хорошо ранжируется, быстро индексируется. Но на сайте много страниц без трафика – совсем старые статьи, новости...
- Как повлияет удаление 4 тыс. страниц с неуникальным контентом? Есть сайт с 4 тыс. статьями неуникального контента. Решили все статьи удалить и сделать 40 оптимизированных страниц. Как посмотрят поисковики на резкое падение числа страниц...
- Как удалить страницу из индекса Яндекса навсегда? Заказчик тасовал товары между категориями без редиректов. Теперь в Вебмастере висит предупреждение, что страницы имеют одинаковый title: страница с новым адресом и ссылка на 404....
- Как правильно удалять бесполезные страницы из индекса? У меня на сайте собралось несколько тысяч бесполезных страниц, планирую их почистить, удалить из индекса поисковиков. Страницы эти не дубли, просто автосгенерированный хлам, без полезного...
- Как ускорить удаление битых ссылок из индекса при массовой смене URLов на сайте? Сделали новый сайт интернет-магазину, на сайте десятки тысяч страниц. Позиций и трафика не было, поэтому терять нечего. У товаров сменились URLы и теперь в поиске...
Есть вопросы?
Задайте их прямо сейчас, и мы ответим в течение 8 рабочих часов.
Отзывы клиентов:
"Наконец сайт тронулся с места"
Илья Приходько
Patent-rus.ru"Мы увидели рост по целому пулу запросов"
Деревянко П.Н.
Expertology.ru"Рекомендации индивидуальны, с примерами наших страниц и разделов"
София Хаушильдт
Babyplan.ru