По каким причинам Google не хочет индексировать страницы сайта и что делать в таком случае?

Ответ

Если у вас уже корректно настроены карта сайта sitemap.xml, внутренняя перелинковка и есть первичные внешние ссылки, но Google упорно не индексирует страницы (кроме главной), то для начала посмотрите отчеты “Покрытие” и “Страницы в индексе” и вы увидите, какие url обнаружены, но не проиндексированы, и возможные причины этого.

Самые распространенные причины:

• ошибка сервера (5xx)
• ошибка переадресации
• доступ к URL заблокирован в файле robots.txt
• страница содержит директиву noindex
• ошибка (404)
• страница просканирована, но пока не проиндексирована (страницы низкого качества)
• обнаружена, не проиндексирована
• страница является копией

Далее в зависимости от выявленных проблем, вы будете лучше понимать, что стоит предпринять в вашей ситуации. Среди стандартных мер рекомендуем следующее:

1. Проверьте robots.txt на наличие случайных блокировок индексации (Disallow).
2. Убедитесь, что meta robots на страницах установлен правильно (нет ли noindex или nofollow).
3. Регулярно обновляйте контент сайта. Если вы делаете новые публикации и обновляете уже существующие, это стимулирует робота заходить чаще. Также отзывы на товары или услуги расценивается Google, как новый контент. Уникальность контента 70% не критически низко, но желательно повысить. Чем выше уникальность и глубина материала, тем охотнее Google индексирует.
4. Несколько качественных ссылок с тематических ресурсов могут сильно ускорить индексацию, особенно если эти сайты сами хорошо индексируются.
5. Добавьте сайт в тематические каталоги с хорошей репутацией.
6. Социальные сети (Facebook, Twitter, LinkedIn, Instagramm и пр.) помогают привлечь роботов и пользователя на ваш сайт. Делайте анонсы новых статей, используйте ссылки на сайт.
7. Проверьте адаптивность под мобильные устройства, проблемы в mobile-first индексации часто тормозят общий процесс.

А иногда, для нового сайта, самым действенным способом является просто ожидание. “Песочница” может продолжаться и 3-4 месяца.

Еще по теме:

• Как обеспечить индексацию покупных ссылок
Как ускорить индексацию внешних ссылок? Страницы доноров не попадают в индекс, как ускорить чтобы бот прошел по ним (интересует больше Google). В популярных соц. сетях...
• Индексирование сайтов на AJAX: как помочь ботам поисковых систем
Видят ли поисковики контент сайтов на AJAX? Если нет, то что конкретно нужно сделать, чтобы видели? Тематика различного онлайн тестирования с билетами и вопросами. Ответ...
• Какие причины попадания страниц старого сайта в индекс после переезда на другой домен?
Когда-то у сайта был переезд с одного домена на другой, но я обнаружил, что через команду site: показывается много страниц в индексе со старого сайта....
• Почему через оператор site страницу не находит в поиске Google?
По данным Google вебмастера страница есть в индексе, но через оператор site:site.com "название товара" не находит в поиске. Почему такое может быть? Ответ То, что...
• Скрывать ли страницы фильтров от индексации поисковыми системами?
Нужно ли скрывать страницу фильтра /filter в robots.txt? Может ли поисковый краулер сгенерировать все страницы, который может выдать фильтр? Или пока на эти страницы не...

---

Юлия К.

doctor@siteclinic.ru

Оцените мою статью: 

(Пока оценок нет)