Как скрыть поддомены от индексации поисковых систем и можно ли их как-то удалить из базы Google?

Google активно обходил и обходит страницы поддоменов разработчиков. Мы сразу этого не заметили, сейчас эти поддомены закрыли, но роботы успели обойти большое количество таких страниц.
Как удалить их из базы Google или роботы сами перестанут обходить данные страницы после закрытия поддоменов в robots.txt?

Ответ

Наилучшим вариантом скрыть поддомены от поисковых систем – заблокировать к ним доступ при помощи пароля. Даже если вы просто закроете эти поддомены в файле robots, Google все равно может ходить по этим страницам, но не оповещать вас об этом.

Если технические страницы на поддомене уже проиндексированы, просто закройте их от индексации в файле robots. Важно для каждого поддомена сделать свой отдельный файл robots, ведь поддомен расценивается поисковой системой как отдельный сайт.

Обязательно убедитесь, что на тестовый поддомен нет никаких ссылок!

Если после индексации поддомена вы не заметили никаких негативных моментов – можете не обращать внимания на их наличие в индексе, со временем они просто пропадут оттуда. Но это не быстрый процесс, удаляться из индекса они могут достаточно долго.

Если же вы заметили просадки по трафику или по позициям – воспользуйтесь инструментом «Удаление» в Google Search Console и удалите из выдачи дубли тех страниц на поддоменах, которые просели у вас в выдаче на основном сайте.

Хотите получить ответ на свой вопрос? Задайте его нам через телеграм-бота!↓

Задать свой вопрос

Подписаться на рассылку

Еще по теме:

Как правильно удалять бесполезные страницы из индекса?

У меня на сайте собралось несколько тысяч бесполезных страниц, планирую их почистить, удалить из индекса поисковиков. Страницы эти не дубли, просто автосгенерированный хлам, без полезного...

Что делать с внутренними ссылками на страницы, закрытые от индексации?

В интернет-магазине есть много категорий, закрытых noindex nofollow, но на них идет много внутренних ссылок, в том числе и с главного меню. То же самое...

Как правильно запретить индексацию текста в модальных окнах?

Как правильней и безопасней запретить индексировать поисковикам текст в модальных окнах? Ответ Чтобы скрыть содержимое модальных окон от поисковых систем, можно поместить это содержимое в...

Какой код ответа ставить на страницы сайта, если стоит заглушка на доступ из других стран?

Стоит заглушка на сайте, что контент в стране недоступен для всех стран, кроме страны регистрации сайта (по требованию правообладателей). Какой код ответа лучше ставить на...

Какие есть способы закрытия ссылки от поисковиков?

Какие сейчас есть способы закрытия ссылки от поисковиков? Есть ли смысл закрывать через AJAX И JS? Ответ AJAX И JS на сегодня действительно реальный и...

Никита Д.

nikita.d@siteclinic.ru

Оцените мою статью: