Ответ
Единственный способ наиболее достоверно узнать сколько страниц сайта в индексе, это Google Search Console. В панели управления вебмастера Google выбираем вкладку «Индексирование», затем — «Страницы». В этом отчете отображается количество и список проиндексированных страниц. Кроме того, тут же показываются и страницы, которые не в индексе по разным причинам:
- Страницы с 404 или 3** кодом сервера: если страница битая или удалена, то поисковый робот со временем выкинет ее из индекса. Тоже самое касается страниц с переадресаций (301 редирект).
- Ошибка сервера (5** код ответа): Если при загрузке страницы возникает ошибка на стороне сервера, то робот просто не сможет просканировать и обработать страницу, так как она не загружается.
- Страницы заблокированы от индексации в robots.txt или noindex.
- Малоценные страницы: сюда относятся смысловые и технические дубли, страницы с get-параметрами, страницы с каноникалом.
- Страницы-сироты: если на страницу не ведут внутренние ссылки и она не добавлена в сайтмап, то бот ее не сможет найти и добавить.
Так как ваш сайт достаточно большой, выгрузить весь список страниц не в индексе с Консоли не получится.
Для этого рекомендуем воспользоваться вспомогательными средствами:
- Проверить индексацию с помощью программ. Такие сервисы, как Screaming Frog Seo или Xenu Links Sleuth автоматически сканируют сайт и показывают страницы, которые не попали в индекс по тем или иным причинам. Чтобы не выгружать весь сайт сразу (что может занять несколько дней), можно разбить сканирование на несколько частей: сначала статьи 2010 года, потом страницы с припиской .html и т.д..
- Специальные онлайн сервисы. Существует большое количество бесплатных онлайн-сервисов для контроля индексации сайта. Кроме того, можно проверить индексацию через Ahrefs и Serpstat.
Хотите получить ответ на свой вопрос? Задайте его нам через телеграм-бота!↓
Еще по теме:
- Ранжируется ли переведенный контент в Яндексе? Есть мнение, что поисковые системы рассматривают даже качественный машинный перевод публикаций с другого сайта как дубли. Но есть и другое мнение от авторитетного агентства —...
- Как индексировать платные статьи на сайте? Есть нужда сделать платный раздел с контентом на сайте. Клиент оплачивает и получает доступ к статье. Но как такие статьи индексировать? Что отдавать роботу, а...
- Микроразметка для блоговых статей: какой тип и когда использовать? Какого типа микроразметку можно использовать для блоговых статей? Поможет ли микроразметка получать расширенные сниппеты или "нулевую" позицию? Как можно еще доработать статьи, чтобы получить более...
- SEO-лайфхаки: как вывести статью в ТОП выдачи Как правильно в текущих реалиях писать статьи, какими сервисами и техниками пользоваться для быстрого попадания статьи в ТОП поисковых систем? Ответ По сути однозначного ответа...
- Как можно локализовать информационный сайт? Если информационный сайт на английском языке. Трафик у него сначала был строго с США, но потом резко начал расти регион Индии. Понимаем, что для информационника...
anastasiia.y@siteclinic.ru
Оцените мою статью:
(Пока оценок нет)Есть вопросы?
Задайте их прямо сейчас, и мы ответим в течение 8 рабочих часов.
Отзывы клиентов:
"Получили +15-20 к ВЧ-запросам в Яндексе"
Денис Нарижный
Komputernaya.ru"Отчеты и консультации всегда исчерпывающие и действенные"
"Здесь можно реанимировать сайт даже со страшным диагнозом"
Денис Кушнир
Aden-stroy.ru