По каким причинам Google не хочет индексировать страницы сайта и что делать в таком случае?

Ответ

Если у вас уже корректно настроены карта сайта sitemap.xml, внутренняя перелинковка и есть первичные внешние ссылки, но Google упорно не индексирует страницы (кроме главной), то для начала посмотрите отчеты “Покрытие” и “Страницы в индексе” и вы увидите, какие url обнаружены, но не проиндексированы, и возможные причины этого.

Самые распространенные причины:

• ошибка сервера (5xx)
• ошибка переадресации
• доступ к URL заблокирован в файле robots.txt
• страница содержит директиву noindex
• ошибка (404)
• страница просканирована, но пока не проиндексирована (страницы низкого качества)
• обнаружена, не проиндексирована
• страница является копией

Далее в зависимости от выявленных проблем, вы будете лучше понимать, что стоит предпринять в вашей ситуации. Среди стандартных мер рекомендуем следующее:

1. Проверьте robots.txt на наличие случайных блокировок индексации (Disallow).
2. Убедитесь, что meta robots на страницах установлен правильно (нет ли noindex или nofollow).
3. Регулярно обновляйте контент сайта. Если вы делаете новые публикации и обновляете уже существующие, это стимулирует робота заходить чаще. Также отзывы на товары или услуги расценивается Google, как новый контент. Уникальность контента 70% не критически низко, но желательно повысить. Чем выше уникальность и глубина материала, тем охотнее Google индексирует.
4. Несколько качественных ссылок с тематических ресурсов могут сильно ускорить индексацию, особенно если эти сайты сами хорошо индексируются.
5. Добавьте сайт в тематические каталоги с хорошей репутацией.
6. Социальные сети (Facebook, Twitter, LinkedIn, Instagramm и пр.) помогают привлечь роботов и пользователя на ваш сайт. Делайте анонсы новых статей, используйте ссылки на сайт.
7. Проверьте адаптивность под мобильные устройства, проблемы в mobile-first индексации часто тормозят общий процесс.

А иногда, для нового сайта, самым действенным способом является просто ожидание. “Песочница” может продолжаться и 3-4 месяца.

Еще по теме:

• Помогают ли социальные сети в индексировании контента?
Помогают ли социальные сети - Фейсбук или Твиттер в индексировании контента? Если разместить ссылку на страницу в соц. сети проиндексируется ли она быстрее? Ответ Социальные...
• Эффективность HTML карты сайта для индексации страниц
Насколько эффективны HTML карты сайта? Помогают ли они индексировать страницы и насколько подробны они должны быть? Ответ Наличие html карты сайта эффективны для ресурсов со...
• Влияет ли количество контента на странице на частоту сканирования и индексирование этой страницы?
Влияет ли количество товаров на странице категории на частоту сканирования и индексирование этой страницы? Тот же вопрос и про количество текста на инфо странице. Ответ...
• Почему при сканировании сайта находятся страницы с 503-й ошибкой, хотя на самом деле имеют код ответа 200?
Краулеры (SiteAnalyzer и ScreamingFrog) при сканировании сайта находят страницы с 503 ошибкой. Сами страницы прекрасно открываются, и в вебмастере и в онлайн сервисах отдают код...
• Как обеспечить индексацию текста под кнопкой «Читать далее»?
В очередной раз сталкиваюсь с проблемой индексации текстов, что спрятаны под кнопкой "читать далее". Находил множество примеров, где текст под кнопкой уникален и не проиндексирован...

---

Юлия К.

doctor@siteclinic.ru

Оцените мою статью: 

(Пока оценок нет)