Ответ
Страницы с GET-параметрами в URL нежелательно оставлять открытыми для поисковых роботов, так как они приводят к дублированию страниц, а еще напрасно расходуют краулинговый бюджет.
Директива Clean-param в Robots.txt не только решает данную проблему, но и передает основному URL накопленные на страницах с GET параметрами показатели. Однако, эта директива работает только для роботов Яндекса.
Синтаксис директивы следующий:
Clean-param: p0[&p1&p2&..&pn] [path]
p — динамические параметры. Если их несколько, перечисляем через амперсанд, например, sid&sort
path — префикс, указывающий путь применения директивы. Например, если прописать /catalog/oboi/, то директива будет применяться только для данного раздела. Если ничего не прописать – для всего сайта.
https://mysite.com/shop/all/good1?partner_fid=1
https://mysite.com/shop/all/good1?partner_fid=2
Директива будет следующая:
Clean-param: partner_fid / shop
Подробнее о данной директиве можно прочитать в Яндекс Справке.
Для Google есть следующие варианты решения проблемы:
- Запретить сканирование URL с GET параметрами вручную с помощью инструмента «Параметры URL» в Search Console (можно найти в разделе «Прежние инструменты»). Подробнее в Справке Search Console.
- Использовать мета-тег <meta name= «robots» content= «noindex, nofollow» /> на данных страницах.
Параллельно нужно указать в атрибуте Canonical страниц с GET параметрами ссылку на основную версию страницы.
Хотите получить ответ на свой вопрос? Задайте его нам через телеграм-бота!↓
Еще по теме:
- Возникнут ли проблемы с индексацией, если около года сайт не обновлялся и как исправить ситуацию? Могут ли быть у старого сайта проблемы с индексацией, если им не занимались примерно год? На сайте не проводились никакие работы в течении одного года,...
- Как загнать сайт в индекс в целевом регионе? Как загнать сайт в индекс именно в целевом регионе? Часть страниц моего сайта не в индексе в целевом регионе (к примеру, для Google.ca с регионом...
- Как автоматизировать проверку индексации страниц? Какими сервисами можно быстро узнать, какие области на сайте открыты для индекса, а какие нет? Или только через код смотреть вручную можно? Ответ Если речь...
- Стоит ли индексировать страницы с отзывами, если у каждого отзыва новая страница с ЧПУ-ссылкой? Подскажите, стоит ли индексировать страницы с отзывами? У меня каждый отзыв можно открыть в новой странице с уникальной ЧПУ-ссылкой. Ответ Нет, такие страницы индексировать не...
- Стоит ли закрывать страницы пагинации от индексации? Что делать, если количество страниц пагинации в каталоге в некоторых категориях более 1000? Есть ли какой-то лимит? Стоит ли оставлять как есть или как оптимизировать...
Есть вопросы?
Задайте их прямо сейчас, и мы ответим в течение 8 рабочих часов.
Отзывы клиентов:
"Ощутимый рост позиций после второго апа"
Абрамов Дмитрий Сергеевич
Dvermezhkom-service.ru"Прекрасно проработанный аудит"
Денис
Eвроавто.рф"Работы на 100%. Очень рекомендую"
Емельянов Данил Юрьевич
Tortoliano.ru


