Ответ
Ответ сервера 404, не дает 100% удаление из выдачи не желаемых страниц. Робот через определенное время все равно вернется на данную страницу с целью проверки смены ответа сервера для данной странице.
Если таких страниц не много, то не проблема, если более 50% на сайте (или «несколько тысяч бесполезных страниц»), то это негативно влияет на следующие параметры:
- Усложняет переобход важных страниц, учитывая, что робот много времени тратит на мусорные ссылки.
- Ухудшаются позиции, из-за того, что ухудшается качество сайта из-за преобладания количества низкокачественных страниц над качественными.
Также, перед тем как удалять, необходимо выяснить насколько важны эти страницы для сайта, а именно:
- Если на такие страницы ведут внешние ссылки, то стоит настроить 301 редирект, так как отключение такого количества страниц, на которые ссылаются, может негативно ударить по ссылочному профилю.
- Необходимо выяснить, как эти страницы участвуют во внутренней перелинковки. Удаление такого количества страниц может ударить по внутреннему весу страниц и привести к ухудшению позиций.
- Необходимо выяснить имеют ли данные страницы семантические запросы необходимые для сайта. Удалив такие страницы, мы ухудшим кластер сайта и можем также просесть,так как поисковый робот посчитает наш сайт менее подходящим, чем наши конкуренты.
Поэтому стоит настроить 410 ответ сервера для мусорных страниц, что отменяет повторный возврат бота на удаленную страницу. Но настроить статус ответа сервера, это только 50 % работы, необходимо, чтобы робот обошел их.
Мы проводили эксперимент, настроив для таких страниц ответ сервера 410, и ждали, пока робот их обойдет. На обход таких страниц тратилась значительная часть краулингового бюджета, поэтому мы вручную отправили на переобход мусорные страницы и через длительный промежуток времени, закрыли папку в robots.
Если постепенно удалять страницы, такая процедура затянется, а постоянное уменьшение объема сайта может негативно отразиться на ранжировании.
Еще по теме:
- Важна ли уникальность текстового блока на страницах категорий товара в ИМ? При анализе конкурентов обратил внимание, что на всех страницах листинга почти дословная копипаста одного и того же абзаца текста. И так делает не один конкурент....
- Как скажется на SEO удаление уникальных страниц товаров в карточке интернет-магазина? Подскажите, пожалуйста, как скажется на seo удаление уникальных страниц торговых предложений в карточке интернет-магазина? Были разные URL для разных характеристик (цветов, размеров), а останется только...
- Как можно удалить из индекса Яндекса несколько тысяч страниц? Чем можно быстро выкинуть из поиска Яндекса несколько тысяч страниц (все 404, висят уже 3 месяца — поиск сам не выкидывает) + загнать бота, чтобы...
- Как раз и навсегда удалить страницу из выдачи в Google? Как раз и навсегда удалить страницу из ПС в Google? 404 отдает, но более месяца страница в ПС. Ответ Такая ситуация может возникнуть, если на...
- Как и когда нужно удалять thin контент с сайта? В последнее время встречаю кейсы вида: удалил thin контент и трафик пошёл вверх. Что думаете по этому поводу? Как удалять: просто 404 или 301 сливаем...
e.zavgorodnij@siteclinic.ru
Оцените мою статью:
(Пока оценок нет)Есть вопросы?
Задайте их прямо сейчас, и мы ответим в течение 8 рабочих часов.
Отзывы клиентов:
"Получили +15-20 к ВЧ-запросам в Яндексе"
Денис Нарижный
Komputernaya.ru"Работы на 100%. Очень рекомендую"
Емельянов Данил Юрьевич
Tortoliano.ru"Сайт вышел из-под фильтра, переспам был ликвидирован"
Вячеслав Мусякаев
Vprognoze.ru