Как проверить: просканировал ли Google страницу?

Ответ

URL может иметь один из следующих статусов: страница просканирована и добавлена в индекс; страница просканирована, но не в индексе; страница не просканирована и не в индексе.

Статус страницы можно узнать в инструменте Google Search Console. В разделе «Индексирование — Страницы» вы можете увидеть, какие страницы были проиндексированы Google, а какие нет, а также причины по которым они не в индексе. Исключенные страницы группируются по ошибкам, которые были обнаружены при сканировании страницы, которые мешают ей попасть в поиск.

Определить знает ли Google о существовании страницы, но еще ее не проиндексировал или он вообще еще не был на этой странице можно с помощью специальных отчетов.

Отчет “Страница просканирована, но пока не проиндексирована” означает, что Google просканировал страницу, но решил не индексировать ее. Google не дает внятного объяснения, почему такой статус возникает, но есть несколько вероятных причин. Среди них:

• время на индексацию – боту необходимо время, чтобы добавить страницу в индекс;
• низкое качество страничек – бот мог посчитать страницу малоценной для пользователя, с минимальным количеством полезной информации;
• деиндексация – страница была изначально в индексе, но затем по какой-то причине ее закрыли от индексации роботом;
• дублирование контента.

Отчет “Обнаружена, не проиндексирована” означает, что страничка в принципе не была просканирована. То есть Google знает о ее существовании, но не сканировал. В этом случае нужно искать причину такого статуса. Часто этот статус возникает из-за проблем с краулинговым бюджетом и большой нагрузки на сервер сайта при сканировании. Также, если на такую страницу не ведут никакие ссылки, то Google отдаст предпочтение в сканировании страницам с большим ссылочным весом.

Чтобы устранить такие ошибки и ускорить индексацию сайта, необходимо заниматься внутренней и внешней оптимизацией сайта и приоритетных страниц, а также работать над увеличением краулингового бюджета. О том, как это сделать, читайте здесь.

Еще по теме:

• Как сделать анализ индексации крупного информационного сайта?
Как сделать анализ индексации информационного сайта на (350к страниц). Сайт старый, есть статьи от 2010 года, а также страницы с припиской .html. Какой алгоритм проведения...
• Как избежать проблем с индексацией из-за большой вложенности страниц?
На сайте есть общая категория для всех услуг, например, site.сom/services/. В категории есть подразделы (подкатегории), например, site.com/services/service-category1/ , site.com/services/service-category2/ и так далее. В самих подкатегориях...
• Как замедлить скорость сканирования Googlebot? Как избежать проблем при переносе сайта на другой сервер?
Подскажите, пожалуйста, есть ли какой-то метод вынудить google бота cканировать медленнее? Сrawl-rate в консоли я поставил маленький совсем, в robots лишнее закрыто. Бот все равно...
• Как удалить из индекса Google ненужные страницы?
Как можно удалить из индекса ненужные там страницы? Речь про Google, попали в индекс страницы пагинации и страницы сортировки. Ответ В первую очередь про страницы...
• Нужно ли индексировать js, css файлы и изображения?
У товарища сайт стоматологической клиники. Он зачем-то закрыл от индексации js, css и все изображения. Я считаю, что это критическая ошибка, т.к. бот не сможет...

---

Siteclinic

d.siteclinic@gmail.com

Оцените мою статью: 

(Пока оценок нет)