Как улучшить индексацию ИМ и влияет ли вложенность URL на обход страниц роботом?

Ответ

Как таковая вложенность и количество слешей в URL не влияют на индексирование страниц. Гораздо более важный показатель – Click Distance. Это показатель количества кликов, за которые можно попасть с главной страницы на целевую. Другими словами, если на главной странице есть ссылка на site.com/catalog/category/product, то данная страница будет проиндексирована быстрее, чем страница с URL site.com/product, на которую пользователь и робот попадает через несколько кликов.

Для интернет-магазина Ваша структура URL корректна и логична. Проблемы со скоростью индексации могут быть из-за:

• Низкого краулингового бюджета сайта. Одна из самых распространенных проблем крупных интернет-магазинов – необходимость ожидать переиндексацию отдельных страниц в течении месяца.
• Недостаточной перелинковки. Возможно, внутренние подкатегории попросту не перелинкованы должным образом и робот не может дойти до них.
• Скорости загрузки и работы серверов. Если показатели низкие, Google-бот может снизить количество страниц, которые он обходит.

Для увеличения скорости индексирования страниц уделите внимание оптимизации краулингового бюджета. Для этого:

• грамотно настройте Sitemap, используйте last-modified во избежание повторного сканирования неизмененных страниц;
• правильно настройте robots.txt, чтобы мусорные страницы не сканировались;
• оптимизируйте скорость загрузки сайта;
• проработайте внутреннюю перелинковку, добавьте на страницы:
  • быстрые теги;
  • блоки с похожими товарами и сопутствующими товарами;
  • активные ссылки в фильтре и т.д.;
  • микроразметку BreadCrumbs.
• избегайте цепочек редиректов и тупиковых страниц;
• оптимизируйте фильтры.

В первую очередь выделите только приоритетные категории и сообщите об этом роботу. Это можно сделать путем ручной отправки страниц на переобход. Как это сделать массово в Google рассказывали в статье: «Как индексировать 200 URL Google каждый день через Indexing API» .

Еще по теме:

• Как уменьшить потерю трафика после смены урлов товаров в ключевых категориях?
Из-за технической ошибки (при импорте файла с товарами на сайт) изменились урлы у товаров в ключевых категориях. Редиректы на новые адреса настроились на сайте автоматически....
• Надо ли закрывать от индексации трастовые страницы (Payment, Delivery, Terms of Use, Cookie, Privacy Policy)?
Как думаете, трастовые страницы (например, Payment & Delivery, terms, cookie и privacy policy, др.) нужно делать индексируемыми или лучше закрыть в meta name="robots" content="noindex, follow"?...
• Как влияет внутренняя перелинковка на индексацию страниц?
Могут ли страницы сайта не индексироваться из-за слабой перелинковки и помогут ли с этим стандартные сквозные блоки линковки? Ответ Грамотная перелинковка позволяет быстрее привести поискового...
• Почему Google не индексирует региональные поддомены и как решить проблему?
Есть сайт с региональными языковыми поддоменами. С индексацией главного сайта проблем нет, но вот страницы поддоменов Google никак не хочет индексировать. Практически все "Просканировано, но...
• Какое влияние на продвижение сайта оказывают закрытые от индексации страницы и нужна ли уникализация контента на них?
Есть сайт интернет-магазина. Размещенные на нем товары требуют определенных пояснений. Например, продаем диваны с разными вариантами обивки. Хотим объяснить, что такое эко кожа и другие...

---

Siteclinic

d.siteclinic@gmail.com

Оцените мою статью: 

(1 оценок, среднее: 5,00 из 5)