Как найти технические и смысловые дубли страниц?

Ответ

Технические дубли образовываются вследствие неправильной работы cms сайта, когда помимо продвигаемой страницы становится доступна такая же страница по другому Url, но с точно таким же контентом – это классический технический дубль.

Смысловые дубли – это частичные дубли страниц, когда контент двух разных страниц достаточно сильно похож и ключевые слова пересекаются.

Результат наличия дублей на сайте – неспособность поискового алгоритма правильно оценить контент сайта, каннибализация запросов и как следствие – ухудшение позиций сайта.

Чтобы найти дубли на сайте можно:

1️⃣ Воспользоваться специальными программами (например seo frog, netpeak spider), которые сканируют все страницы вашего сайта. Затем вы фильтруете все страницы от А до Я по заголовку h1 или мета тегу title и смотрите, на каких страницах в этих полях одинаковые или очень похожие значения. При чем эти же сервисы в большинстве автоматически сразу и подсветят вам все дубли.

2️⃣ Искать дубли в индексе поисковых систем. Для этого вам нужно скопировать заголовок h1, title или кусок текста со страницы и поискать этот фрагмент в кавычках, дополнительно добавляя к запросу адрес вашего сайта в формате site:site.com. Так вы получите все страницы в индексе поисковой системы. Смотрите, есть ли там одинаковые страницы и устраняете их.

3️⃣ Очень часто дубли страниц попадают в отчеты GSC, как «Просканированы, но не проиндексированы». Это поможет также обнаружить дубли тех страниц, что не индексируются, как раз из-за того, что это дубли.

Как избавляться от страниц дублей? Если это технический дубль, нужно просто устранить причину его появления в коде cms и все страницы подобного типа пропадут с сайта. Не забудьте также проверить все внутренние ссылки сайта, и удалить те, что ведут на страницы дубли. Также вы можете добавить маску url страниц дублей в файл роботс, запретив их индексацию.

Если это контентный дубль – перепишите часть контента сайта, который дублируется, удалите каннибализируемые ключевые слова или закройте страницу от индексации.

Еще по теме:

• Как заставить ПС забыть про проиндексированные технические дубли страниц?
На сайте были идентичные страницы (технические дубли). И все эти страницы были проиндексированы. Позиции сайта были где-то на 30+ местах. Скажите, как заставить забыть ПС...
• Как найти источник дублей и что с ними делать?
В Google Search Console появились ссылки с непонятными символами в конце URL - ?NA, ?MA, ?ND, ?SD и т.д. Как найти источник этих страниц и...
• Как решить проблему дублирования страницы фильтра и страницы категории?
Была создана фильтр страница категории со своими ЧПУ, title и т. д. Но Google считает ее полной копией категории. Как лечить? Ответ В зависимости от...
• Стоит ли дублировать уникальный контент с сайта на сторонних площадках?
Как лучше поступить, если хочется писать информационные статьи на сайт и так же раскидывать их по внешним ресурсам типа дзена, vc и пр.? Я тут...
• Как правильно поступать с синонимами в поиске/тегах на сайте, чтобы не допускать смысловые дубли?
Вопрос по синонимам в поиске/тегах на сайте. Такие страницы имеют практически одинаковый контент. Как вы поступаете с такими запросами? 1️⃣ Выбрать основной термин и редиректить...