По каким причинам Google не хочет индексировать страницы сайта и что делать в таком случае?

Ответ

Если у вас уже корректно настроены карта сайта sitemap.xml, внутренняя перелинковка и есть первичные внешние ссылки, но Google упорно не индексирует страницы (кроме главной), то для начала посмотрите отчеты “Покрытие” и “Страницы в индексе” и вы увидите, какие url обнаружены, но не проиндексированы, и возможные причины этого.

Самые распространенные причины:

• ошибка сервера (5xx)
• ошибка переадресации
• доступ к URL заблокирован в файле robots.txt
• страница содержит директиву noindex
• ошибка (404)
• страница просканирована, но пока не проиндексирована (страницы низкого качества)
• обнаружена, не проиндексирована
• страница является копией

Далее в зависимости от выявленных проблем, вы будете лучше понимать, что стоит предпринять в вашей ситуации. Среди стандартных мер рекомендуем следующее:

1. Проверьте robots.txt на наличие случайных блокировок индексации (Disallow).
2. Убедитесь, что meta robots на страницах установлен правильно (нет ли noindex или nofollow).
3. Регулярно обновляйте контент сайта. Если вы делаете новые публикации и обновляете уже существующие, это стимулирует робота заходить чаще. Также отзывы на товары или услуги расценивается Google, как новый контент. Уникальность контента 70% не критически низко, но желательно повысить. Чем выше уникальность и глубина материала, тем охотнее Google индексирует.
4. Несколько качественных ссылок с тематических ресурсов могут сильно ускорить индексацию, особенно если эти сайты сами хорошо индексируются.
5. Добавьте сайт в тематические каталоги с хорошей репутацией.
6. Социальные сети (Facebook, Twitter, LinkedIn, Instagramm и пр.) помогают привлечь роботов и пользователя на ваш сайт. Делайте анонсы новых статей, используйте ссылки на сайт.
7. Проверьте адаптивность под мобильные устройства, проблемы в mobile-first индексации часто тормозят общий процесс.

А иногда, для нового сайта, самым действенным способом является просто ожидание. “Песочница” может продолжаться и 3-4 месяца.

Еще по теме:

• Как можно ускорить индексацию или переиндексацию страниц в Google?
Раньше я вручную отправлял каждую ссылку на переиндексацию после того как обновил контент. Как сейчас быть (Вопрос про Google, в связи с отключением инструмента для...
• Как удалить из индекса Google ненужные страницы?
Как можно удалить из индекса ненужные там страницы? Речь про Google, попали в индекс страницы пагинации и страницы сортировки. Ответ В первую очередь про страницы...
• Какие страницы для сайтов интернет-магазинов лучше отправлять на индексацию через Google Indexing API?
Подскажите, какие страницы для сайтов интернет-магазинов лучше отправлять через Google Indexing API на индексацию: главная + рубрика или карточки в зависимости от % заполненности? Что...
• Как удалить появляющиеся в индексе страницы, которых нет на сайте?
После смены тематики интернет-магазина (с одного вида продукта на другой) из индекса длительное время не исчезают страницы, которых нет на сайте. Эти страницы отдают 404....
• Как проверить маршрут поискового робота по сайту и увеличить частоту индексации страниц?
Очень странно попадают страницы в индекс сайта - то днями ждать нужно, то сразу после создания. Как проверить маршрут робота по сайту? Хочу узнать причину...

---

Юлия К.

doctor@siteclinic.ru

Оцените мою статью: 

(Пока оценок нет)