Как закрыть от индексации страницы фильтрации с частью # в адресе?

Ответ

Обычно символ # в url используется для указания хеш-ссылок внутри страницы и не индексируются поисковыми системами, как отдельные страницы. Это связано с тем, что символ # обычно указывает на определенное место на уже существующей странице, а не на новую страницу. Поэтому по умолчанию все, что находится после # в url, игнорируется поисковыми системами при индексации.

Если у вас таким образом обозначаются страницы фильтров, которые вы хотите закрыть от индексации, то можно использовать такие методы:

• Использование мета-тега robots: добавьте в html-код страниц < meta name="robots" content="noindex" >. Этот тег скажет поисковым системам не индексировать страницу;
• Использование заголовка X-Robots-Tag: если фильтрация страниц происходит на сервере, можно настроить сервер так, чтобы он добавлял http-заголовок X-Robots-Tag: noindex для определённых url. Это также предотвратит индексацию этих страниц;
• Использования файла robots.txt: вы можете указать рекомендации для поисковых систем для запрета индексировать определенные пути и url в файле robots.txt. Если вы хотите закрыть от индексации все url с частью # вы можете добавить следующую строку: Disallow: /*#.

Еще по теме:

• Могли ли проиндексированные некачественные страницы фильтров привести к падению позиций?
В robots.txt случайно убрали запрет на индексацию страниц фильтров до 3 уровня. В результате в поиск попало огромное количество новых страниц, частотность у которых в...
• Как продвигать страницы фильтров, чтобы они не соперничали с основными страницами листингов?
Часто слышу, что страницы фильтров каннибализируют запросы основного листинга. Из-за этого долгое время не решаюсь на продвижение таких страниц. Подскажите, как подготовить страницы фильтров к...
• Могут ли просесть позиции сайта, если проиндексировались некачественные страницы фильтров?
В индекс попало множество страниц с различными вариациями фильтров. У большинства из них частотность равна нулю. Но удивительным образом они быстро поднялись в ТОП. Некоторые...
• Какие фильтры нужно добавлять в ИМ и нужно ли открывать страницы фильтров к индексации?
Какие значения фильтров стоит добавлять на страницу каталога? Учитываются ли ключевые слова, которые используются как значение фильтрации при анализе страницы роботом? Стоит ли добавлять "популярные...
• Почему Google ранжирует не страницы категорий, а страницы фильтров?
Какие могут быть причины не ранжирования в Гугл определенного типа страниц? Структура URL плоская. Страницы полностью оптимизированы, индексируются, но Гугл упорно ранжирует все что угодно...

---

Наталия С.

nataliia.s@siteclinic.ru

Оцените мою статью: 

(Пока оценок нет)